В iPadOS 14 з'явилося розпізнавання рукописного введення. Як це працює

Система розпізнавання рукописного введення в Newton MesscePad на початку 90-х була гордістю і ганьбою Apple Computer. Перші її версії викликали сміх і відбили полювання зв'язуватися з «персональними цифровими асистентами» у багатьох. Рукописне введення незабаром полагодили, але це вже не було смішно, і про це майже ніхто не дізнався. 22 червня 2020 року, через 22 роки після того, як проект Apple Newton був закритий назавжди, він повернувся під іншим ім'ям. Тепер його звуть Scribble, тобто «мазня» або «каракулі», це технологія для iPadOS. Вже зараз, в його ранньому чорновому варіанті, Scribble підходить на роль повноцінного способу введення тексту. З недопрацюваннями і застереженнями - але це тільки перша бета-версія. У клавіатур з трекпадами і тач-інтерфейсом в iPadOS ось-ось з'явиться гідний конкурент.

Проект Apple Newton був ліквідований Стівом Джобсом в 1998 році разом з великим числом проектів, одночасно зі скороченням майже половини співробітників компанії. Проект Apple Newton був закритий зовсім не через безперспективність і не через провально низькі продажі. І не через те, що від Newton «смердело Джоном Скаллі», як одного разу висловився Стів Джобс. Компанія була на межі банкрутства, щоб вижити їй довелося позбавлятися навіть від цікавих і багатообіцяючих напрямків. А ставлення Джобса до Newton не було однозначно негативним.

У наші дні обстановка сприятлива, з 1993 року, коли Apple оголосила «персональний цифровий асистент з рукописним вводом», можливості штучного інтелекту зросли на порядок порядків. І протягом декількох років, в умовах найсуворішої секретності, в Apple працювали над його воскресінням в iPadOS.

Що таке Apple Scribble

Ця технологія працює навіть у програмах, створених до її появи. Рукописний текст, навіть введений жахливим почерком, з першого моменту розпізнається безпомилково. Apple Newton потрібен був час, щоб звикнути до індивідуальних особливостей господаря - навіть у пізніх його інкарнаціях. Але навіть не це головне: підтримка Scribble вбудована у всі елементи, що редагуються, і навіть не тільки в стандартні.

Всі такі елементи, навіть від сторонніх розробників, в iPadOS 14 починають реагувати на дотик кінчика електронного олівця найбільш естетвенним чином. За винятком екранних елементів, створених позамежно творчими особистостями без застосування UITextInput. Бета-версія від Apple працює краще і природніше ніж технології аналогічного призначення від її друго-ворога з незапам'ятних часів, Microsoft.

Як працює розпізнавання тексту в iPadOS 14

Scribble починає працювати відразу, з першого дотику олівця до екрану всередині редагованого елемента інтерфейсу. Елемент включається сам, для цього не потрібно ні активувати його, ні включати якийсь хитрий режим. Це звучить лякаюче - але на практиці, як не дивно, ця його особливість працює саме так, як вона повинна.

Коли ми що-небудь пишемо (або малюємо) «фізичною» ручкою або олівцем, ми нічого і ніде не перемикаємо і не активуємо. З тією лише відмінністю, що стерти введене за допомогою Scribble набагато простіше. Це не єдині таланти Scribble. Перетворення недбало позначених геометричних фігур на акуратні багатокутники - це фантастика. Є у Scribble і недоліки, але їх на диво небагато, і є всі підстави сподіватися, що до моменту офіційного виходу iPadOS 14 їх виправлять.

Apple, яка досі з маніакальною трепетністю ставилася до цілісності своїх інтерфейсів, грубо порушує свої власні принципи. Очевидно, що клавіатури з трекпадом і Scribble це настільки різні світи і напрямки розвитку, що більш несумісні один з одним способи введення тексту неможливо навіть уявити. Але це тільки на перший погляд. Насправді, починаючи з iPadOS 13.4, iPad - пристрій, який може бути використано і майже як комп'ютер (настільний), і як планшет.

При підключеній до iPad клавіатурі з трекпадом, тач-інтерфейс і Scribble доступні, і можна уявити собі ситуації, в яких вони можуть бути корисні. Можливо, сумісність Scribble з клавіатурно-трекпадним режимом варто було б штучно обмежити. Поки в цьому місці (як мені здалося) з цим не все добре. Це здалося не тільки мені, і на адресу Apple вже відправлено тлумачний розгорнутий опис виявленої проблеми.

Новий Apple Pencil

Я не знаю, коли це станеться, але судячи зі стрімкого зростання числа патентів на тему Apple Pencil, цей момент вже близький. Мабуть, варто розібратися з найцікавішими з них детальніше - якось іншим разом.

Але про одну здатність Apple Pencil майбутнього (сподіваюся, найближчого) промовчати просто немає сил. Уявіть собі ситуацію: у навколишньому вас і ваш iPad «матеріальному світі» знаходиться об'єкт, колір якого ви хотіли б скопіювати в нематеріальний світ всередині iPad. Новий яблучний стилус коли-небудь навчиться копіювати колір реальних предметів простим дотиком.

Патентну заявку Apple, в якій описуються фізичні та конструктивні принципи такої дії, минулого тижня опублікувало американське управління з патентів і товарних знаків. Заявка була подана на початку 2019 року.