Нов инструмент за програмиране, който превръща чертежи и ръкопис в код

Изследователи от университета Корнел са създали интерфейс, който позволява на потребителите да пишат на ръка и да рисуват в компютърен код – предизвикателство за традиционното кодиране, което обикновено разчита на писане.

стояща писалка потребителски интерфейсНаречен Notate, той позволява на потребителите на цифрови преносими компютри да отварят своите чертожни дъски и да пишат на ръка в рамките на традиционните цифрови редове компютърен код.

задвижван от a модел на дълбоко обучениеИнтерфейсът свързва ръкописен и текстов програмен контекст: нотацията в ръкописна диаграма може да се отнася до текстов код и обратно. Например Notate разпознава ръкописни програмни символи, като например “n”, и след това ги свързва с техните машинописни еквиваленти.

Система като тази би била чудесна за него Наука за данни„По-конкретно с чертане на диаграми и диаграми, които след това се преплитат с текстов код“, каза Иън Араухо, водещ автор на статията и докторант в областта на информационните науки.

„Нашата работа показва, че настоящата програмна инфраструктура наистина ни задържа. Хората са готови за този вид функция, но разработчиците на интерфейси за писане на код трябва да вземат под внимание това и да поддържат изображения и графични интерфейси в кода.“

Араухо също каза, че работата илюстрира нов път напред чрез въвеждане на базирано на писалка кодиране, базирано на изкуствен интелект във време, когато таблетите за рисуване стават все по-широко използвани.

„Инструменти като Notate са важни, защото ни отварят нови начини да мислим за това какво е програмиране и как различни инструменти и практики за представяне могат да променят тази перспектива“, каза Тапан Парих, доцент по информационни науки и съавтор на статията .

Информация за инструмента е публикувана в Действия 35-ият годишен симпозиум на ACM за софтуер и технологии за потребителски интерфейс.