Что такое рукописный текст
Рукописный текст
РУКОПИСНЫЙ ТЕКСТ — то же, что Рукописный оригинал.
Смотреть что такое «Рукописный текст» в других словарях:
дистанционно передаваемый рукописный текст — — [Л.Г.Суменко. Англо русский словарь по информационным технологиям. М.: ГП ЦНИИС, 2003.] Тематики информационные технологии в целом EN telescript … Справочник технического переводчика
РУКОПИСНЫЙ — РУКОПИСНЫЙ, рукописная, рукописное. 1. прил. к рукопись. Рукописный отдел музея. 2. Написанный от руки, в отличие от печатного. Рукописный текст. Рукописные заметки. Толковый словарь Ушакова. Д.Н. Ушаков. 1935 1940 … Толковый словарь Ушакова
рукописный шрифт — Шрифт, имитирующий рукописный текст. В таком шрифте каждая буква как бы переходит в следующую, однако без реального соединения. [http://www.morepc.ru/dict/] Тематики информационные технологии в целом EN cursivecursive type … Справочник технического переводчика
Рукописный оригинал — (РУКОПИСНЫЙ ТЕКСТ) авторский или издательский оригинал, выполненный от руки … Реклама и полиграфия
текст — сущ., м., употр. часто Морфология: (нет) чего? текста, чему? тексту, (вижу) что? текст, чем? текстом, о чём? о тексте; мн. что? тексты, (нет) чего? текстов, чему? текстам, (вижу) что? тексты, чем? текстами, о чём? о текстах Текст это совокупность … Толковый словарь Дмитриева
текст — а; м. [лат. textum связь, соединение] 1. Слова, предложения в определённой связи и последовательности, образующие какое л. высказывание, сочинение, литературное произведение, документ и т.п., напечатанные, написанные или запечатлённые в памяти.… … Энциклопедический словарь
РУКОПИСНЫЙ — (handwritten). Для целей Кодекса это слово означает текст, собственноручно написанный каким либо лицом. См … Термины ботанической номенклатуры
текст — а; м. (лат. textum связь, соединение) см. тж. текстовый, текстовой 1) а) Слова, предложения в определённой связи и последовательности, образующие какое л. высказывание, сочинение, литературное произведение, документ и т.п., напечатанные,… … Словарь многих выражений
Рукописный шрифт — Проверить информацию. Необходимо проверить точность фактов и достоверность сведений, изложенных в этой статье. На странице обсуждения должны быть пояснения. Рукописный шрифт (скрипт) шрифт, вы … Википедия
Текст (кегль) — У этого термина существуют и другие значения, см. текст (значения). Шрифт кегля текст Текст, двойной корпус Текст (двойной корпус; от лат. textus ткань, соединение) типографский шрифт, кегль которого равен 20 пунктам … Википедия
Как в прописи
Для чего используется распознавание рукописного текста и как оно работает
Первые системы автоматического распознавания печатного текста появились достаточно давно — примерно тогда же, когда возникла необходимость оцифровывать все то, что было написано человечеством на бумаге. Почти сразу же выяснилось, что методы, применяемые для строго выверенных шрифтов вроде Times New Roman, совершенно не подходят для текста рукописного. Вот почему задача распознавания текстов, написанных от руки, до сих пор не решена окончательно. Как сегодня распознают рукописи, улучшились ли методы распознавания за последние несколько лет и нужно ли вообще автоматическое распознавание рукописного текста? Обо всем этом мы поговорили с участниками Global Innovation Forum 2019, прошедшего в Ереване в октябре этого года, — основателем компании ABBYY Давидом Яном и исследователем компании DeepMind Алексом Грейвзом.
Простая и сложная оптика
Практически все известные и нужные человеку тексты сегодня существуют в цифровом виде: так к ним проще получить доступ и использовать для каких-то задач помимо чтения (например, для быстрого поиска информации). Учитывая гигантский объем книг и периодических изданий, накопленных со времен изобретения книгопечатания, с этой задачей можно было справиться только с помощью автоматических методов.
Поэтому ближе к концу XX века появились и стали активно развиваться технологии оптического распознавания символов (англ. optical character recognition, сокращенно — OCR). Самый простой и до сих пор применяемый метод — матричное сопоставление: каждая буква в исходном изображении разбивается на пиксельные матрицы, а затем сопоставляется с матрицами, имеющимися у компьютера. При совпадении матриц буква считается распознанной.
Чтобы такой метод распознавания работал, для каждого языка достаточно иметь сравнительно небольшое количество данных — образцов написания букв, по которым и делаются попиксельные матрицы. Так, если у системы оптического распознавания есть матрицы всех 33 букв русского алфавита с учетом возможных регистров, а также всех знаков препинания, то она сможет распознать любой русскоязычный текст.
Все, однако, не так просто. Этот метод контекстно-зависим и не может сделать шаг в сторону от имеющейся у него матрицы: если пиксели в букве на исходном изображении расположены чуть иначе, то система в лучшем случае распознает ее с ошибкой (например, вместо п в тексте внезапно появится л), а в худшем — не распознает совсем.
Грубо говоря, программа, которая умеет распознавать текст, набранный шрифтом Times New Roman, не распознает текст, набранный Arial, и наоборот.
Разумеется, технологии распознавания текста, основанные исключительно на матричном сопоставлении, сейчас достаточно универсальны и могут работать со всеми известными типографам шрифтами и всеми языками (поэтому они до сих пор широко используются).
Проблема возникает тогда, когда программе приходится иметь дело со шрифтами, для которых достоверной пиксельной матрицы нет или ее очень трудно создать, — речь идет, в первую очередь, о текстах, написанных человеком от руки.
В случае с рукописным текстом (или другими редкими или нетипичными шрифтами) вариант с обычным сопоставлением пиксельных матриц может вовсе не работать. В таком случае используется немного другой способ — распознавание отдельных образов (впрочем, оно тоже оптическое).
Каждая буква, несмотря на то, что пишется разными людьми по-разному, все же состоит из одинаковых частей: в прописной р — длинная палочка, а в в — две фигуры, похожие на капельки. В случае с распознаванием отдельных образов также используется попиксельное сравнение, но вариантов того, как могут выглядеть буквы, у системы гораздо больше — просто потому, что там используются отдельные их части.
В таком случае каждый отдельный знак — это уже вектор характерных для буквы графических признаков, а задача сводится к тому, чтобы найти их в исходном тексте: например, с помощью метода k-ближайших соседей, используемого для решения задач классификации и кластеризации.
Работа подобных алгоритмов требует большого количества размеченных данных, но сегодня эта предварительная работа во многих случаях уже проделана. Например, в датасете MNIST содержится около 70 тысяч изображений написанных от руки цифр, и точность распознавания у обученных на нем алгоритмов очень высока — для сверточных нейросетей она составляет более 99 процентов.
Мысль на кончике пера
При автоматическом распознавании текста может возникнуть и другая сложность: между распознаванием рукописного текста прямо в процессе написания (своего рода режим «онлайн») и распознаванием уже готового текста («офлайн») есть большая разница.
В первом случае на помощь приходят дополнительные данные — фиксируемый процесс письма: благодаря тому, что у компьютера есть данные о ведении пера (то есть о том, как выводятся буквы на экране), он может распознать их сразу же.
Например, рукописное о выводится, начиная почти с самой верхней точки буквы, а похожая петля у рукописного а начинается с другого места, и даже в том случае, если в слове «поинтереснее» первые две гласные расположить очень близко друг к другу так, что ои сольются и будут напоминать рукописное а с лишней палочкой, проблемы не возникнет: система, следившая за процессом написания, отметила, с какой точки перо начало выводить первую букву.
Кроме того, во время письма случаются паузы — это тоже вспомогательная и весьма полезная информация. Так, если мы возьмем слово «дышишь», — известный пример того, насколько неразборчивым может быть русский рукописный текст даже для человека, — то компьютеру легче будет прочитать его, ориентируясь на микропаузы, возникающие между написанием отдельных букв.
Хорошим материалом для сравнения двух методов распознавания почерков могут послужить врачебные рецепты, которые, как известно, практически нечитаемы. Наблюдая за тем, как врач выводит каждую отдельную букву, мы скорее поймем, что он пишет, чем глядя на уже готовые каракули.
С «офлайн»-распознаванием, таким образом, все непросто — оно имеет дело с уже написанным текстом, без какой-либо информации о том, как именно его писали. В целом, программу для распознавания таких текстов обучают примерно так же, как и в случае с «онлайн»-распознаванием, но приходится учитывать, что доступная информация, необходимая для правильного узнавания букв, здесь очень ограничена.
Алекс Грейвз, исследователь из компании DeepMind, для решения этой задачи использует мультипространственные рекуррентные нейросети со слоем долгой краткосрочной памяти. Его алгоритм на вход также берет попиксельные данные из написанного текста, но при этом в ходе обучения не опирается на какой-то конкретный алфавит, что сильно облегчает задачу по сбору данных.
Другими словами, такая система не просто универсальна для любого шрифта (из-за чего может справиться с рукописным текстом), но также годится для любого языка, а, например, рукописную арабскую вязь распознает с точностью выше 91 процента.
Повседневное и исследовательское
Методы автоматического распознавания рукописного текста, таким образом, уже существуют — они не всегда работают идеально, но все же сегодня дают куда более надежный результат, чем те, что были предложены, например, 30 лет назад.
Возникает, однако, вопрос, нужны ли они вообще — по крайней мере, обычному человеку в его повседневной жизни.
«Алгоритм для распознавания рукописного текста, который я разработал, использовался для автоматической сортировки писем канадской почтой. Не знаю, так ли это до сих пор, но методы, которые применялись для создания подобных алгоритмов, подходили и для решения другой задачи — распознавания устной речи», — говорит Алекс Грейвз.
Алгоритмы для распознавания рукописного текста, разумеется, необходимы и сейчас. Хотя бы для того, например, чтобы разбирать те же врачебные рецепты. Но у программ OCR есть задачи и другого рода — исследовательские.
В распоряжении человечества имеется множество разнообразных рукописей — как сравнительно новых, так и древних, написанных на малопонятных и малознакомых языках. Их затруднительно оцифровать даже с помощью оператора-человека — ведь зачастую надо не просто распознать каждый отдельный символ или слово, необходимо восстановить смысл текста, некогда очевидный для современников.
Трудности часто возникают уже на уровне грамматики — ведь автор или переписчик вполне мог писать с ошибками, и они сами по себе представляют для историков языка интерес, поскольку позволяют «услышать» давно замолкшую живую речь. Подключение словаря или даже корпуса для языка распознавания не всегда дает результат, так как словарь ошибок не фиксирует, а корпус может не знать именно этой ошибки.
Впрочем, умное распознавание рукописного текста способно значительно помочь в работе и с такими текстами.
Например, в случае, если качество оцифрованного материала не очень хорошее, классическое сопоставление матриц с опорой на словарь, ограниченный возможными для языка (или чуть уже — для этого текста) словами, позволяет исключить из распознаваемого текста заведомо неверные варианты и даже заменить их верными.
А если такую систему на большом корпусе текстов обучить еще и грамматике распознаваемого языка (или, например, использовать n-граммы, чтобы ограничить варианты слов, которые в тексте могут идти друг за другом), то она и вовсе сможет работать практически без ошибок.
Чтение исчезнувшего текста
Однако в рукописях встречаются трудности и совершенно другого рода. Например, какие-то куски текста могут быть попросту утеряны.
«Если взять текст и замазать все черной краской, такой текст никто никогда не распознает. Но если взять текст и провести черные полосы так, чтобы не были видны лишь какие-то куски, человек это прочитает — наверное, в 98 процентах случаев», — рассуждает Давид Ян. «Откуда вы возьмете отсутствующую информацию? — продолжает он. — Из головы. То есть вы дополните отсутствующую информацию знаниями, которые у вас уже были. Так же и машина. Раз человек прочитает, то и машина рано или поздно прочтет».
Обычно компьютеру для выполнения этой задачи данных хватает — в том случае, если они есть у обучившего его человека. Так, недавно исследователи из DeepMind представили алгоритм PYTHIA, способный восстанавливать все возможные варианты утерянных древнегреческих надписей на античных памятниках.
При этом PYTHIA опирается на большой объем ранее собранных данных, например на оцифрованный корпус древнегреческих текстов, по которому можно делать поиск.
Сначала на основании данных этого корпуса происходит распознавание текста, сохранившегося на памятнике, а затем решается основная задача PYTHIA — дешифровка всех возможных вариантов утраченных фрагментов на основе составленного из текстов словаря.
Получается, что любая задача, связанная с распознаванием рукописного текста, — узкая или более масштабная, связанная с необходимостью восстановить утраченные фрагменты, — все равно сводится к тому, чтобы собрать и разметить максимально большое количество данных.
Это довольно сложно и по-прежнему требует долгого и кропотливого человеческого труда, поэтому многие задачи, требующие чтения и анализа старинных рукописей, до сих пор — даже с учетом быстрого развития технологий — решаются исследователями вручную.
Давид Ян, в свою очередь, уверен, что в будущем эта задача так или иначе будет автоматизирована: «Если кому-то надо восстанавливать древние надписи, кто-то будет их восстанавливать — или люди, или машина. Что-то мне подсказывает, что машина именно вот в таких вещах будет лучше, чем люди: она будет подходить к задаче точнее и гораздо внимательнее относиться к деталям, чем это делает человек».
Немного о рукописных шрифтах
— У вас же такие славные письменные принадлежности, и сколько у вас карандашей, сколько перьев, какая плотная, славная бумага… И какой славный у вас кабинет!
Ф.М. Достоевский, «Идиот»
Сначала пользовались рукописными шрифтами. Ими пользовались умелые переписчики-каллиграфы, в силу трудоемкости изготовления рукописей превращавшие каждую в произведение искусства.
С изобретением книгопечатания искусство каллиграфии ушло в прошлое. Стало не нужным выводить каждую рукописную загогулину, требовалось располагать стандартные заранее заготовленные литеры в определенной последовательности. Этим занимались профессиональные типографы. Читатели получали готовый стандартизированный продукт, а сами продолжали писать письма или сочинять рукописи вручную, в силу того что не существовало пригодных для индивидуальной работы типографий.
Положение сдвинулось с мертвой точки с изобретением пишущих машинок. О счастье: механизированное письмо стало доступно каждому! От конторских работников начали требовать вместо красивого почерка умения печатать на пишущей машинке – впрочем, рукопись можно было сдать в машинописное бюро, где опытные машинистки превращали любую, написанную самым корявым почерком деловую бумагу в удобочитаемый документ. С распространением пишущих машинок индивидуальность почерка, вместе с тем малейшее разнообразие в буквенных начертаниях канули в прошлое: если при типографском наборе можно было заменить одну наборную кассу на другую, то менять шрифт на пишущей машинке было нельзя – технически неоправданно.
Новый виток технического прогресса в области машинописной техники – изобретение компьютеров – возвратил индивидуальности почерка былое величие. Шрифты оставались стандартными, но теперь их выбирали по собственному вкусу и усмотрению.
Желаемая механизация с сохранением индивидуальных особенностей? Безусловно так. Но давайте сравним всем нам знакомые компьютерные шрифты с рукописными: частично с познавательной целью, частично – с целью предаться ностальгии об ушедшем в прошлое великом и незабвенном искусстве каллиграфии.
«Мама мыла раму» — это все помнят, возьмем что-нибудь столь же незамысловатое, при этом возрастное.
Это из прописей 1837 года. Пушкин обучаться по ним не успевал, но вряд ли образчики его времени представляли собой что-то принципиально иное. Школьные прописи – чуточку больше в них витиеватости или чуточку меньше – и есть школьные прописи: своей рукой вывести правильную закорючку затруднительно, но в конце концов их однообразие приедается.
Что это за наука, в самом деле, в которой главное – соблюсти правильный наклон?
Как наставлял главного героя известного романа В. Каверина «Два капитанов» нелюбимый отчим: палочки должны быть попендикулярны.
Также необходимо соблюдать однообразный отступ слов друг от друга.
Плюс гармоничная толщина линий, достигаемая наклоном пера и силой давления на бумагу.
И разумеется, общая, приятная глазу плавность начертаний.
Для соблюдения правил требовалось правильно держать в пальцах перо – главное производственное орудие каллиграфа…
…и сохранять правильную осанку.
Для обучения чистописанию – как для обучения любому другому ремеслу – необходимы были годы упорного труда: в школах, бизнес-колледжах, на курсах каллиграфии, весьма распространенных в начале прошлого века.
Но если человек овладевал этим искусством, — о! он превращался в гуру, которому доступны любые профессиональные изящества. В первую очередь почерки – говоря компьютерным языком, шрифты. Тут, благодаря индивидуальности мастера, предела совершенствованию не было. Вглядитесь в эти образчики буквенных начертаний, от относительно простых до самых замысловатых, и оцените их нестареющую красоту.
От таких почерков до живописи – один шаг. Отчего бы человеку, овладевшему столь замысловатыми начертаниями, не проявить себя в смежной области? И проявляли.
Живописали каллиграфы в близком им стиле: каллиграфического рисунка, зачастую с прикладными целями либо просто для удовольствия.
Естественно, так рисовали не учащиеся девочки, а люди в возрасте, умудренные достигнутым опытом – как и полагается мастерам своего дела.
На этом, собственно, можно было бы и закончить, но хочется привести небольшой отрывок из романа «Идиот», откуда позаимствован эпиграф к настоящему посту.
«— Ого! — вскричал генерал, смотря на образчик каллиграфии, представленный князем: — да ведь это пропись! Да и пропись-то редкая! Посмотри-ка, Ганя, каков талант!
На толстом веленевом листе князь написал средневековым русским шрифтом фразу:
“Смиренный игумен Пафнутий руку приложил”.
— Вот это, — разъяснял князь с чрезвычайным удовольствием и одушевлением, — это собственная подпись игумена Пафнутия со снимка четырнадцатого столетия. Они превосходно подписывались, все эти наши старые игумены и митрополиты, и с каким иногда вкусом, с каким старанием! Неужели у вас нет хоть Погодинского издания, генерал? Потом я вот тут написал другим шрифтом: это круглый, крупный французский шрифт, прошлого столетия, иные буквы даже иначе писались, шрифт площадной, шрифт публичных писцов, заимствованный с их образчиков (у меня был один), — согласитесь сами, что он не без достоинств. Взгляните на эти круглые д, а. Я перевел французский характер в русские буквы, что очень трудно, а вышло удачно. Вот и еще прекрасный и оригинальный шрифт, вот эта фраза: “усердие всё превозмогает”. Это шрифт русский писарский или, если хотите, военно-писарский. Так пишется казенная бумага к важному лицу, тоже круглый шрифт, славный, черный шрифт, черно написано, но с замечательным вкусом. Каллиграф не допустил бы этих росчерков или, лучше сказать, этих попыток расчеркнуться, вот этих недоконченных полухвостиков, — замечаете, — а в целом, посмотрите, оно составляет ведь характер, и, право, вся тут военно-писарская душа проглянула: разгуляться бы и хотелось, и талант просится, да воротник военный туго на крючек стянут, дисциплина и в почерке вышла, прелесть! Это недавно меня один образчик такой поразил, случайно нашел, да еще где? в Швейцарии! Ну, вот, это простой, обыкновенный и чистейший английский шрифт: дальше уж изящество не может идти, тут всё прелесть, бисер, жемчуг; это закончено; но вот и вариация, и опять французская, я ее у одного французского путешествующего комми заимствовал: тот же английский шрифт, но черная; линия капельку почернее и потолще, чем в английском, ан — пропорция света и нарушена; и заметьте тоже: овал изменен, капельку круглее и вдобавок позволен росчерк, а росчерк это наиопаснейшая вещь! Росчерк требует необыкновенного вкуса; но если только он удался, если только найдена пропорция, то эдакой шрифт ни с чем не сравним, так даже, что можно влюбиться в него.
— Ого! да в какие вы тонкости заходите, — смеялся генерал, — да вы, батюшка, не просто каллиграф, вы артист, а?».
Теперь вы понимаете, каким замысловатым искусством владел князь Мышкин? Разве возможна столь глубокая индивидуализация при пользовании компьютерными шрифтами?