Яндекс Переводчик по фото онлайн
Уже второй год доступна веб-версия Яндекс Переводчика по фото. В этой статье мы расскажем про нее.
Хотя существуют и мобильные приложения для перевода с картинки, среди которых есть и Яндекс.Переводчик под Андроид (скачать здесь).
В чем суть
Вы загружаете картинку или фото на сайт, а Яндекс распознает на ней текст и переводит его.
Например, можно сфотографировать меню, вывеску, график с подписями. Переводчик не очень требователен к качеству фото, подойдет снимок, сделанный под углом, или растянутый.
С каких языков распознаются картинки
С английского, русского, испанского, итальянского, немецкого, польского, португальского, турецкого, украинского, французского, китайского, норвежского, шведского, датского и чешского – всего с 15 языков.
На какие языки переводятся картинки
Практически на любые, сейчас в проекте 94 языка.
Как пользоваться – общий алгоритм
Нюансы использования или как улучшить качество перевода
Обратите внимание на опцию «Слова», «Линии» и «Блоки». Это немаловажная настройка, влияющая на качество перевода. Она появляется после того, как вы загрузили картинку.
На моей картинке строка, так что я выбираю «Линии». А по умолчанию все перевелось бы по отдельному слову, что было бы неправильно. Ведь я перевожу предложение «Минздав устал предупреждать» целиком, а не пословно.
А если бы я переводила график, где к оси X и Y приписаны непонятные слова, то выбирала бы опцию «Слова».
А сфотографированный абзац из книги, конечно, следовало бы переводить как блок.
Сравните, как переводится надпись на картинке при выборе опции «Слова» и «Линии»:
Результат пословного и построчного перевода
Альтернативы переводчику
Основной конкурент Яндекс.Переводчика – Google Переводчик. Но он хуже распознает русский язык. И для того, чтобы им воспользоваться, надо выполнить хитрые действия:
Это стадия распознавания, которая преобразует картинку в текст.
А дальше надо полученный текст перевести онлайн в Google Переводчике. Это если вы с компьютера.
С мобильного же устройства все гораздо проще: есть куча мобильных приложений, поддерживающих перевод с камеры, среди них переводчики от того же Яндекс, Abbyy, Google и Майкрософт.
Как работает перевод с картинки от Яндекс.Переводчика
Работа делится два этапа: распознавание изображений и перевод текста. И большую помощь оказывает нейронная сеть – самообучающаяся система. Чем больше картинок она распознает и переводит, тем лучше знает, как правильно делать.
Раньше для перевода текста использовались жесткие алгоритмы, которые сопоставляли исходное слово переводу в соответствии со словарем и правилами грамматики. Результат был ужасный.
Дальше в игру вступил статистический перевод – когда в переводе участвовал огромный массив уже готовых парных текстов оригинал-перевод. Алгоритм искал по нему вычислял наиболее вероятный результат перевода какой-либо фразы или слова. И весь текст собирался из таких вероятностных кусочков. Яндекс использовал статистическую систему с момента запуска.
Теперь же участвует нейронная сеть, которая способна самообучаться и хорошо справляется с обработкой естественных данных. А текст и картинки – естественные данные. Нейронная сеть переводит предложения целиком, не дробя их на отдельные фразы и слова.
Поскольку в некоторых случаях лучше работает статистический перевод, а в некоторых – нейронная сеть, используется и то, и другое. Это гибридная система перевода, которая используется сейчас.
Качество существенно улучшилось. Встречаются, конечно, ляпы, но все же это шаг вперед по сравнению с тем, что было 10 лет назад.
Переводчик с фото онлайн: для компьютера и смартфона (перевод того, что попало в камеру/объектив телефона)
Доброго дня всем!
Наверное, почти каждый из нас сталкивался с фото, картинками, да и просто видел где-то плакаты на иностранном языке. И почти всегда, хотелось бы быстренько перевести и узнать, что там написано. 😉
Вообще, в этом случае можно пойти тремя путями :
Собственно, эта статья будет как раз о третьем варианте. Отмечу, что в статье рассмотрю переводчики с фото как для ПК, так и для смартфона.
Выбираем переводчик с фото
Онлайн-сервисы (для ПК)
Я ндекс-Переводчик
Отличный сервис перевода с одного языка на другой (поддерживает уже более 95 языков!). Что касается распознавания текста на картинке — то сервис Яндекса отлично справляется с этой задачей (ничуть не уступает прославленной программе Fine Reader).
В своем примере я использовал фотографию страницы книги (на английском). Действия для перевода достаточно просты:
Слева : представлен оригинальный текст, который был на фото, справа — его перевод. Конечно, машинный перевод требует доработки: можно скопировать готовый текст и перенести в Word для дальней проработки.
Отмечу, что качество перевода зависит еще и от тематики текста. А так как я взял художественную литературу — то переводится она не очень хорошо. 😢
Free Online OCR
Поддерживает форматы: JPEG, PNG, GIF, BMP, TIFF, PDF, DjVu
В отличие от Яндекса, этот сервис менее привередлив — он поддерживает даже DjVu формат (а в нем достаточно много английских книг, журналов, статей).
К тому же отмечу, что некоторые фото (где использованы редкие шрифты) — сервис гораздо лучше распознает!
И еще одно: сервис позволяет использовать два варианта перевода: с помощью технологии Google и с помощью Microsoft Translator. Так, что, если есть такие картинки или фото, с которыми не справился Яндекс-переводчик, попробуйте этот сервис!
Как им пользоваться:
Указываем файл и загружаем его на сервер
Через некоторое время (в зависимости от величины загружаемого файла) увидите полученный текст и несколько ссылок сверху: можно выбрать Google переводчик, Bing, просто скачать полученный текст.
Выбор варианта перевода
Выбрав Bing, я получил перевод своего текста (качество не высокое, т.к. произведение художественное).
Перевод на основе технологии Microsoft Translator
Img2Txt
Распознавание текста с изображения
Этот сервис предназначен для получения текста из картинок (jpg, jpeg, png) и PDF-файлов (в том числе многостраничных!).
После подобного распознавания — полученный текст вы можете проверить на ошибки и отправить автоматически в Google-переводчик (соответствующие кнопки см. в меню справа. 👇).
Результаты работы сервиса
Для улучшения процедуры распознавания:
Приложения для смартфона (Android)
Google Lens (магический объектив) 👍
Универсальное приложение, которое позволяет переводить любой иностранный текст, попавший в объектив камеры (даже фото делать не нужно!). Кстати, поддерживает оно 103 языка (русский, английский, немецкий, китайский, турецкий и пр.).
Кроме этого, в приложении есть режим «разговора»: всё, что скажет ваш собеседник на иностранном — приложение переведет на ваш родной язык!
Ну и нельзя не отметить, что «Google объектив» позволяет узнать, что за предметы вас окружают: например, навели вы объектив на дерево — а он скажет, что это «береза». 😉 (и найдет похожие картинки).
В общем, рекомендую всем иметь подобную штуку на смартфоне. Точно пригодится!
Google-переводчик
В приложение встроена функция перевода камерой в режиме реального времени: т.е. достаточно навести камеру телефона на английский текст — и вы в окне переводчика увидите текст на русском!
Тем не менее, в арсенале есть и классическая работа: это когда фотографируется картинка на иностранном, а затем обрабатывается и выдается текст на русском (например).
Пользоваться достаточно просто:
Обратите внимание, Гугл переводчик уже до фотографирования пытается в режиме онлайн переводить текст
После чего нажмите на кнопку «Выбрать все» и щелкните по синей стрелке. Далее увидите свой перевод текста. См. скрины ниже. 👇
Выбор всего текста для перевода
В общем и целом, все выполнено очень качественно и удобно. Как правило, почти все телефон носят с собой, а значит всегда можно быстренько перевести плакат или фотку. Рекомендую к ознакомлению!
Microsoft Translator
Как работает приложение Microsoft Translator
Это бесплатный переводчик от Microsoft, позволяющий работать с 70-ю наиболее популярными языками Мира (кстати, даже в режиме оффлайн).
Отмечу, что приложение позволяет переводить фотографии с камеры, картинки и скриншоты из памяти, голос (беседы), текст. Т.е. приложение универсально и годится для перевода любого формата данных!
Хороший помощник в путешествиях и на занятиях по иностранному языку! 😉
Примечание : переводчик также может прочитать фразу (чтобы вы могли правильно ее произнести или выучить).
Минус: плохо распознает рукописный текст и ряд шрифтов.
Яндекс-переводчик
Пример работы с переводчиком
Добротное приложение-переводчик от Яндекс (поддерживается 92 языка, в т.ч. в оффлайн режиме). Сразу бы отметил «всеядность» приложения: оно позволяет переводить даже рукописный текст 👆 (чего многие аналоги не могут!).
Кстати, помимо перевода фото и картинок — есть голосовой ввод и озвучивание переведенных текстов. Весьма удобно, чтобы знать правильное произношение редких слов.
Еще одна полезная фишка: всплывающие подсказки при наборе текста, и авто-определение языка (в большинстве случаев ничего вручную указывать не нужно).
Смело рекомендую к знакомству! 👌
ABBYY Lingvo
Для бесплатного использования доступны несколько языков: русский, английский, немецкий, французский, испанский.
Приложение ABBYY Lingvo (словарик)
Это приложение для смартфона позволяет без доступа к интернету переводить многие предложения, фразы и слова. Всего приложение поддерживает три вида перевода:
В общем-то, хороший помощник для путешествия, учебы и работы. Можно быстро перевести небольшой текст, открытку, газетную статью, переписку с коллегой/другом и пр.
Яндекс Переводчик по фото онлайн
Компания Яндекс разработала сервис, который способен распознавать текст и переводить его на фотографиях онлайн. Пока только эта возможность есть для 12 языков, но разработчики обещают большее число поддерживаемых языков в будущем. А переводить с изображения благодаря Яндекс переводчику можно на 46 языков. Сегодня сервис распознает русский, английский, португальский, чешский, итальянский, польский, украинский, китайский, турецкий, немецкий, французский, испанский языки на изображениях. Как говорят разработчики, такой способ перевода будет уместен, когда пользователь хочет перевести заметку в журнале с его любимым актером или шоумэном. 
Как пользоваться Яндекс переводчиком по фото
Теперь, когда текст будет распознан сервисом Яндекс.Переводчик, нужно нажать на ссылку «Открыть в переводчике». Перед вами откроется новая страница с окном, поделенным на две части, где в первой будет язык, который был представлен на картинке. А во второй его части будет перевод на язык, который вы указали, на который должен был быть совершен перевод.
Что делать, если качество перевода не приемлемо?
Если вы получили переведенный текст, где качество не приемлемо, вы не можете разобрать текст, необходимо проверить еще одним способом или Гугл переводчиком. Для этого разработчики данного приложения предоставляют дополнительные настройки для изменения процесса перевода. Для пользователей существует специальная опция «Новая технология перевода». Если она не активирована, исправьте это.
Следующий перевод будет совершен двумя способами, при помощи улучшенной технологии, которая использует для перевода нейронную сеть и при помощи статической модели. Далее вы можете самостоятельно выбрать лучший вариант или предоставить это сделать программе.
Как Яндекс.Переводчик распознает текст на картинках?
В основе такого поиска лежит технология оптического опознавания символов. Яндекс.Переводчик распознает текст при помощи двух технологий: распознавание картинок и модуль определения текста. Нейронная сеть самостоятельно обучается определять текст при помощи миллионов просмотренных текстов на изображениях. Такое самообучение позволяет добиться высокого качества переведенных текстов. С каждой новой работой алгоритм выполняет все более качественную работу, ведь он определяет и запоминает только линии текста, в которых уверен на 100%.
Далее работа модуля распознавания заключается в разделении линий и определение из них сформированных символов. Каждый символ определяется тщательно, алгоритм определяет их на основе уже изученных. К примеру, в русском языке есть буква «О» большая, «о» маленькая и цифра «0» ноль. Они очень похожи между собой. Поэтому далее эстафету принимает языковая модель, она принимает окончательное решение, какой символ в каких ситуациях использовать. Такая модель опирается на языковые словари, она запоминает не только соответствие символов с ними (словарями), но и учитывает контекст применения, то есть соседство символов в определенных употреблениях.
Таким образом, если из подобранных вероятных символов образуется знакомое алгоритму слово, то он способен принять решение, что составлено слово верно и снова из этого слова учитывает имеющиеся символы. Так мы получаем результат в Яндекс.Переводчик при переводе картинки в режиме онлайн.