Для перевода с картинки, среди которых есть и Яндекс.Переводчик под Андроид ().
В чем суть
Вы загружаете картинку или фото на сайт, а Яндекс распознает на ней текст и переводит его.
Например, можно сфотографировать меню, вывеску, график с подписями. Переводчик не очень требователен к качеству фото, подойдет снимок, сделанный под углом, или растянутый.
Заметила, что фотография, сделанная камерой телефона Samsung распознается гораздо хуже, чем фото с нормальной камеры или айфона. Дело в качестве оптики и разрешении снимка. С Samsung удается распознать только крупные буквы.
С каких языков распознаются картинки
С английского, русского, испанского, итальянского, немецкого, польского, португальского, турецкого, украинского, французского, китайского, норвежского, шведского, датского и чешского – всего с 15 языков.
На какие языки переводятся картинки
Практически на любые, сейчас в проекте 94 языка.
Перевод картинок доступен и в мобильной версии онлайн, а также есть приложения под iOS и Android.
Как пользоваться – общий алгоритм
Нюансы использования или как улучшить качество перевода
Обратите внимание на опцию «Слова», «Линии» и «Блоки». Это немаловажная настройка, влияющая на качество перевода. Она появляется после того, как вы загрузили картинку.
- «Слова» – то, что написано на картинке, воспринимается как отдельные слова. И переводится пословно.
- «Линии» – текст переводится построчно.
- «Блоки» – текст переводится как единое целое.
На моей картинке строка, так что я выбираю «Линии». А по умолчанию все перевелось бы по отдельному слову, что было бы неправильно. Ведь я перевожу предложение «Минздав устал предупреждать» целиком, а не пословно.
А если бы я переводила график, где к оси X и Y приписаны непонятные слова, то выбирала бы опцию «Слова».
А сфотографированный абзац из книги, конечно, следовало бы переводить как блок.
Сравните, как переводится надпись на картинке при выборе опции «Слова» и «Линии»:
Альтернативы переводчику
Основной конкурент Яндекс.Переводчика – Google Переводчик. Но он хуже распознает русский язык. И для того, чтобы им воспользоваться, надо выполнить хитрые действия:
- Загрузить картинку на drive.google.com и щелкнуть файл правой кнопкой мыши.
- Выбрать «Открыть с помощью» -> «Google Документы».
Это стадия распознавания, которая преобразует картинку в текст.
С мобильного же устройства все гораздо проще: есть , поддерживающих перевод с камеры, среди них переводчики от того же Яндекс, Abbyy, Google и Майкрософт.
Как работает перевод с картинки от Яндекс.Переводчика
Работа делится два этапа: распознавание изображений и перевод текста. И большую помощь оказывает нейронная сеть – самообучающаяся система. Чем больше картинок она распознает и переводит, тем лучше знает, как правильно делать.
Раньше для перевода текста использовались жесткие алгоритмы, которые сопоставляли исходное слово переводу в соответствии со словарем и правилами грамматики. Результат был ужасный.
Дальше в игру вступил статистический перевод – когда в переводе участвовал огромный массив уже готовых парных текстов оригинал-перевод. Алгоритм искал по нему вычислял наиболее вероятный результат перевода какой-либо фразы или слова. И весь текст собирался из таких вероятностных кусочков. Яндекс использовал статистическую систему с момента запуска.
Теперь же участвует нейронная сеть, которая способна самообучаться и хорошо справляется с обработкой естественных данных. А текст и картинки – естественные данные. Нейронная сеть переводит предложения целиком, не дробя их на отдельные фразы и слова.
Поскольку в некоторых случаях лучше работает статистический перевод, а в некоторых – нейронная сеть, используется и то, и другое. Это гибридная система перевода, которая используется сейчас.
Качество существенно улучшилось. Встречаются, конечно, ляпы, но все же это шаг вперед по сравнению с тем, что было 10 лет назад.
Пользователи сталкиваются с необходимостью перевода текста с фото онлайн. Ситуации могут быть разными: на фотографии есть текст, который необходимо извлечь из изображения и перевести на другой язык, есть изображение документа на иностранном языке, нужно перевести текст с картинки и т. п.
Можно воспользоваться программами для распознавания текста, которые с помощью технологии OCR (Optical Character Recognition) извлекают текст из изображений. Затем, извлеченный их фото текст, можно перевести с помощью переводчика. Если исходное изображение хорошего качества, то в большинстве случаев подойдут бесплатные онлайн сервисы для распознавания текста.
В этом случае, вся операция проходит в два этапа: сначала происходит распознавание текста в программе или на онлайн сервисе, а затем осуществляется перевод текста, с помощью переводчика онлайн или приложения, установленного на компьютере. Можно, конечно, скопировать текст из фото вручную, но это не всегда оправданно.
Есть ли способ совместить две технологии в одном месте: сразу распознать и перевести тест с фотографии онлайн? В отличие от мобильных приложений, выбора для пользователей настольных компьютеров практически нет. Но, все же я нашел два варианта, как перевести текст с изображения онлайн в одном месте, без помощи программ и других сервисов.
Переводчик с фотографии онлайн распознает текст на изображении, а затем переведет его на нужный язык.
При переводе с изображений онлайн, обратите внимание на некоторые моменты:
- качество распознавания текста зависит от качества исходной картинки
- для того, чтобы сервис без проблем открыл картинку, изображение должно быть сохранено в распространенном формате (JPEG, PNG, GIF, BMP и т. п.)
- если есть возможность, проверьте извлеченный текст, для устранения ошибок распознавания
- текст переводится с помощью машинного перевода, поэтому перевод может быть не идеальным
Мы будем использовать Яндекс Переводчик и онлайн сервис Free Online OCR, на котором присутствует функциональная возможность для перевода для извлеченного из фотошрафии текста. Вы можете использовать эти сервисы для перевода с английского на русский язык, или использовать другие языковые пары поддерживаемых языков.
Яндекс Переводчик для перевода с картинок
В Яндекс.Переводчик интегрирована технология оптического распознавания символов OCR, с помощью которой из фотографий извлекается текст. Затем, используя технологии Яндекс Переводчика, происходит перевод извлеченного текста на выбранный язык.
Последовательно пройдите следующие шаги:
- Войдите в Яндекс Переводчик во вкладку «Картинки».
- Выберите язык исходного текста. Для этого кликните по названию языка (по умолчанию отображается английский язык). Если вы не знаете, какой язык на изображении, переводчик запустит автоопределение языка.
- Выберите язык для перевода. По умолчанию, выбран русский язык. Для смены языка кликните по названию языка, выберите другой поддерживаемый язык.
- Выберите файл на компьютере или перетащите картинку в окно онлайн переводчика.
- После того, как Яндекс Переводчик распознает текст с фотографии, нажмите «Открыть в Переводчике».
В окне переводчика откроются два поля: одно с текстом на иностранном языке (в данном случае на английском), другое с переводом на русский язык (или другой поддерживаемый язык).
- Если у фото было плохое качество, имеет смысл проверить качество распознавания. Сравните переводимый текст с оригиналом на картинке, исправьте найденные ошибки.
- В Яндекс Переводчике можно изменить перевод. Для этого включите переключатель «Новая технология перевода». Перевод осуществляют одновременно нейронная сеть и статистическая модель. Алгоритм автоматически выбирает лучший вариант перевода.
- Скопируйте переведенный текст в текстовый редактор. При необходимости, отредактируйте машинный перевод, исправьте ошибки.
Перевод с фотографии онлайн в Free Online OCR
Бесплатный онлайн сервис Free Online OCR предназначен для распознавания символов из файлов поддерживаемых форматов. Сервис подойдет для перевода, так как на нем опционально имеется возможности для перевода распознанного текста.
В отличие от Яндекс Переводчика, на Free Online OCR приемлемое качество распознавания получается только на достаточно простых изображениях, без присутствия на картинке посторонних элементов.
Выполните следующие действия:
- Войдите на .
- В опции «Select your file» нажмите на кнопку «Обзор», выберите файл на компьютере.
- В опции «Recognition language(s) (you can select multiple)» выберите необходимый язык, с которого нужно перевести (можно выбрать несколько языков). Кликните мышью по полю, добавьте из списка нужный язык.
- Нажмите на кнопку «Upload + OCR».
После распознавания, в специальном поле отобразится текст с изображения. Проверьте распознанный текст на наличие ошибок.
Скопируйте текст в текстовый редактор. Если нужно, отредактируйте, исправьте ошибки.
Заключение
С помощью Яндекс Переводчика и онлайн сервиса Free Online OCR можно перевести текст на нужный язык из фотографий или картинок в режиме онлайн. Текст из изображения будет извлечен и переведен на русский или другой поддерживаемый язык.
Технологии превратили фантазии прошлого в реальность. Сегодня людям уже не обязательно учить иностранный язык или разбираться в особенностях его алфавита для того, чтобы переводить информационные таблички и этикетки на иностранном языке. Все, что нужно: это устройство с хорошей камерой и онлайн приложение, которое переведет необходимую вам информацию с картинки или даже напрямую с камеры. Это экономит время, не заставляя пользователей вводить информацию для перевода, особенно когда дело касается больших фрагментов текста на иностранном языке.
Принцип работы переводчика с английского на русский (и обратно) по фото
Многим известны так называемые механизмы оптического распознавания символов (OCR). Это программы, которые способны распознавать машинописный текст с фотографий, картинок, файлов pdf и т.д. Те же самые механизмы используются и в современных переводчиках.
Принцип работы перевода с фотографии прост. Картинка, которую пользователь загружает на сервер, проходят через OCR. Она автоматически определяет область машинописного текста и распознает написанные строки.
После того, как система определит текст, и вы выделите необходимый вам фрагмент, текст будет автоматически переведен как обычный, набранный привычным способом. Следует помнить, что качество перевода зависит от картинки. Если текст на ней едва читаем, он скорее всего не справится со своей задачей.
Перевод текста с фотографии с помощью Google Translator
Google Translator развивается семимильными шагами, добавляя все новые инструменты и возможности. Так, разработчики в свое время добавили возможность ввода рукописного текста, который можно было написать прямо на экране, затем последовала очередь распознавания текста с микрофона и с фотографии.
В 2014 году компания приобрела сервис мгновенного перевода Word Lens. Это несомненно одно из самых передовых приложений, которое позволяет распознавать текст с камеры мобильного телефона, причем мгновенно. Вам не нужно даже делать фотографию того, что вам необходимо перевести. Следует начать с перевода текста по фотографии. Эта функция не доступна в браузере, но отлично работает на мобильных устройствах.
Шаг 1. Загрузите онлайн переводчик от Google на свой телефон через AppStore или Google Play. Установите и запустите его.
Шаг 2. В области над полем для ввода текста настройте языки для перевода, в нашем случае — с английского на русский. И нажмите на значок камеры в левом нижнем углу.
Шаг 3. Приложение запустит камеру вашего телефона. Наведите его на текст, который вам необходимо перевести. Как только весь текст поместится на экране нажмите на красную кнопку, сфотографируйте текст.
Шаг 4. Приложение тут же начнет распознавать текст вашей фотографии.
Шаг 5. Как только фотография будет обработана, выберите нужную вам область, или весь текст сразу.
Шаг 6. Нажмите на синюю кнопку со стрелкой, чтобы приложение перевело весь текст. Как только вы нажмете на нее, система перенесет вас с привычный интерфейс, где в поле исходного текста будет все то, что приложение сумело распознать, а чуть ниже — его перевод.
Фото переводчик текста с фотографии или картинки из галереи
Все, что мы рассмотрели выше касается текстов, переведенных с помощью вашей камеры. Перевести текст с фотографий, уже хранящихся на вашем телефоне, сделанных ранее, или скачанных с просторов интернета также просто. Повторите все то же самое, но вместо того, чтобы сделать фотографию самостоятельно, нажмите на кнопку, указанную стрелкой на скриншоте ниже. Она направит вас в Галерею, где вам будет предложено выбрать фотографию. Найдите ее и откройте.
Далее система распознает и переведет текст так же, как и в предыдущем случае. Поскольку в этот раз в примере текст намного короче, приложение переведет его автоматически. Перейдите к стандартному виду, снова нажав на синюю кнопку.
Мгновенный перевод с камеры
Об этой функции уже немало было сказано выше. Это очень удобно в тех случаях, когда вам быстро нужно узнать, что написано на информационных табличках, если вы путешествуете за рубежом, или состав шампуня в магазине, если он написан на английском.
Чтобы включить мгновенный перевод вам снова придется открыть камеру, после чего вместо красной кнопки для фотографирования или кнопки для доступа к галерее нажмите на символ глаза в правом нижнем углу. Программа автоматически начнет распознавать отдельные слова, переводить и заменять их результатом.
Этот перевод не самый правильный и у вас не получится скопировать его, но на то он и мгновенный, что призван удовлетворять текущие потребности. Эта функция не справится с объемными текстами или если камера мобильного устройства оставляет желать лучшего. Перевод не всегда корректный, поскольку мгновенный перевод работает отдельно с каждым словом. Однако, в случае с информационными табличками и отдельными словами это потрясающее средство справится на ура.
Перевод текста с фотографии с помощью Яндекс Переводчика
Российские разработчики не отстают от зарубежных. С недавних пор и в переводчике от Яндекса появилась функция перевода текста с фотографии. В отличие от Гугл вы можете воспользоваться ею и со своего компьютера. Работает она примерно по тому же принципу.
Шаг 1. Перейдите на сайт переводчика.
Шаг 2. Перейдите в фото переводчик онлайн. Вы увидите ссылку «Картинка» в верхнем горизонтальном меню. Итак, на экране вашего компьютера появится поле для вставки изображения. Нажмите на кнопку «Выберите файл» или перетащите картинку в поле на сайте.
Шаг 3. Как только вы вставите фотографию, сервис начнет автоматическое распознавание текста, после чего вы сможете увидеть перевод, нажав на кнопку «Открыть в переводчике».
Яндекс предлагает три варианта распознавания и перевода текста:
- по словам, когда система определяет каждое слово по отдельности. В этом случае они будут переведены каждое с новой строки;
- по строкам;
- по блокам, как в рассматриваемом примере.
Шаг 4. В вашем браузере откроется новое окно с распознанным исходным текстом и его переводом. Опять же качество перевода во многом зависит от разрешения камеры, с помощью которой была сделана фотография, и даже то, насколько ровно на фотографии расположены строки.
Итак, оба переводчика неплохо справляются со своей главной задачей — перевода информации с фотографии и оба они доступны совершенно бесплатно. Один сервис предназначен исключительно для мобильных устройств, а другой — для компьютеров. Они дополняют друг друга.
Иногда надо перевести незнакомую вывеску на улице прямо на ходу. Или просто перевести текст со сделанной фотографии. Во многих переводчиках появилась возможность распознать текст прямо с картинки и перевести его.
Я сравнила бесплатные мобильные приложения, которые переводят текст прямо с фото.
На первом месте Google Переводчик, так как он требует меньше всего действий – не надо даже делать фото, можно просто навести камеру и увидеть в ней вместо иностранного слова русское. Правда, для этого требуется интернет.
| Переводчик | Качество | Что есть | Адрес |
|---|---|---|---|
| ★★★★★ | Перевод фото и скриншотов. | Android | |
| ★★★★☆ | Перевод фото и скриншотов. | Android | |
| ★★★★☆ | Перевод фото и скриншотов без интернета. | Android | |
| ★★★★☆ | Переводит быстро по одному слову. Не нужен интернет. | Android | |
| ★★★☆☆ | Перевод фото и скриншотов. Только с английского. | Android | |
| ★★☆☆☆ | Перевод фото и скриншотов. | Android |
Google Переводчик
Что такое быстрый перевод камерой проще всего объяснить с помощью картинки:
- Быстрый перевод камерой (смотрите картинку выше).
Поддерживается 37 языков (имеется в виду перевод с фото, а вообще гораздо больше).
Для быстрого перевода с камеры требуется интернет.
Обратите внимание, что качество изображения во многом зависит от вашей камеры, то есть чем лучше камера, тем с большей вероятностью картинка будет распознана. Это так для всех переводчиков. Старайтесь делать фото покрупнее и при хорошем освещении.
Яндекс Переводчик
Характеристики Языки Интернет
Можно сфотографировать текст и перевести его.
Можно загрузить имеющуюся фотографию и перевести ее.
Можно сделать скриншот и перевести.
Все распознанные участки с текстом выделяются сами, вам остается только подтвердить их.
Распознавание и перевод с фотографии поддерживается для 12 языков: английского, испанского, итальянского, немецкого, польского, португальского, русского, турецкого, украинского, французского, китайского и чешского
Нужен. Можно закачать словарь для перевода оффлайн текста, но для распознавания и перевода изображений все равно потребуется интернет.
Щелкните на значок камеры, чтобы сделать фото.
По зеленой кнопке начнется распознавание. Распознанный текст выделен желтым. T – переход к тексту.
Переводчик Microsoft
Характеристики Языки Интернет
Можно сфотографировать текст и перевести его.
Можно загрузить имеющуюся фотографию и перевести ее.
Можно сделать скриншот и перевести.
Переводит речь в режиме реального времени.
- Ресурсоёмкий: поддерживаются только последние версии Android и нестарые модели телефонов.
- Быстрого перевод камерой нет.
Меньше, чем Google.
Не требуется.
Словари ABBYY Lingvo
По умолчанию устанавливается голый переводчик, а словари предлагается докупить. Но если вы полистаете набор словарей, то найдете бесплатные – например базовый набор 11 словарей для 7 языков.
Характеристики Языки Интернет
Есть быстрый перевод камерой, но хуже чем в Google Переводчике: переводится ровно одно слово. После наведения камеры надо установить центр на нужное слово и коснуться экрана. После этого пойдет процесс распознавания.
Можно сфотографировать текст и перевести его. Но переводит почему-то ровно одно слово.
Можно загрузить имеющуюся фотографию и перевести ее.
Можно сделать скриншот и перевести.
- Качество распознавания хорошее.
- Не нужен интернет.
- Переводит по нажатию пальца на слово.
- Переводит только одно слово за раз.
7 языков бесплатно.
Не требует интернета для распознавания и перевода слов.
Нацельте центр на нужное слово и нажмите палец. Слово будет переведено. Обратите внимание, что есть Live-перевод (быстрый с камеры) и Фотоперевод.
Переводчик Translate.Ru
Характеристики Языки Интернет
Можно сфотографировать текст и перевести его.
Можно загрузить имеющуюся фотографию и перевести ее.
Можно сделать скриншот и перевести.
- От вас требуются действия для распознавания: надо выделить участок с текстом с помощью прямоугольника, а иначе Translate даже не будет пытаться его распознать.
- Качество распознавания не очень.
- Быстрого перевода камерой нет.
- Есть только один язык.
