Разработчик собрал блокнот для рукописных заметок, в котором Claude отвечает прямо на странице – как Лорд Волдеморт в дневнике

Программист выложил демонстрацию приложения, где рукописная заметка превращается в диалог.

Пользователь пишет стилусом на странице, а нейросеть Claude отвечает тут же, рядом, тем же почерком. Первая ассоциация у большинства оказалась одинаковой – дневник Тома из "Гарри Поттера".

Сценарий работы выглядит так – создаётся заметка, тема разбирается через письмо от руки, модель включается в разбор и дописывает свои мысли на той же странице. Приложение поддерживает PDF и электронные книги, так что можно читать, отмечать фрагменты и получать комментарий к выделенному месту. При запросе нейросеть устраивает опрос по материалу.

Больше всего обсуждали техническую сторону, так как первая версия объяснения оказалась неверной. Один из комментаторов предположил, что приложение делает скриншот области рисования, накладывает числовую сетку и просит модель "рисовать" по координатам, что превратило бы его в пожирателя токенов.

Разработчик поправил – штрихи хранятся как векторы, отправляются только изменившиеся чернила, а модель вообще ничего не рисует.

Нейросеть решает, что сказать и в каком месте страницы этому место, а отрисовкой занимается само приложение. Отсюда и одинаковый почерк во всех ответах. С кэшированием запросов один обмен репликами обходится в центы.

Собран блокнот на планшете Daylight DC-1, гаджете с необычным экраном. Другой разработчик предложил ещё более дешёвый подход, при котором текст с холста распознаётся встроенной моделью компьютерного зрения прямо на планшете, а нейросети отправляется только результат распознавания.

Разработчик отметил, что отказался от reMarkable, назвав её слишком закрытой для выпуска готового продукта: нет ни SDK, ни магазина приложений, интерфейс проприетарный, а доработки через SSH ломаются при обновлении системы. Хотя владельцы reMarkable добавили, что root доступен из коробки, магазин reManager существует, а интерфейс написан на Qt.

DC-1 работает на Android, так что приложение ставится обычным способом, и запустить его можно на любом планшете с этой системой и стилусом. Версия для iPad находится в разработке, а в комментариях выстроилась очередь из желающих получить сборки для Kindle Scribe, Boox и Supernote.

Приложение называется penombra, набор ранних тестировщиков уже открыт. Скептики в треде напомнили, что смысл рукописных конспектов состоит в самостоятельном письме, и делегирование части страницы нейросети этот эффект подрывает.

Больше статей на Shazoo
Тэги:

Об авторе

Эксперт по Fallout
Главный редактор
Более 16 лет в индустрии освещения видеоигр, кино, сериалов, науки и техники. Особенно разбираюсь в серии Fallout, ценитель The Elder Scrolls. Поклонник Arcanum и Fallout Tactics. Больше всего играю в Civilization, Old World и градостроители. Изучаю ИИ и загадки космоса.