В приложении Яндекса на Android и iOS появилась умная камера — да-да, новая

Наверное, многие из нас переводили тексты с помощью камеры в переводчике Яндекса и искали что-то по картинкам (например, именно с помощью такого поиска в Яндексе мне удалось найти части коллекционного сервиза — ни Avito, ни ручной поиск не справились). Но Яндекс пошёл дальше, развил функциональность и выкатил новый релиз — с непередаваемыми нотками коммерции. 

zn4fptgcebjkxo2tjxg6gumpwgi.jpeg
Камера реализована на стыке технологий перевода, поиска и компьютерного зрения — теперь она может делать несколько важных и нужных вещей:

  • распознавать и искать предметы в поиске;
  • распознавать предметы и ставить метку цены и ссылку на магазин, где товар можно купить;
  • переводить тексты (а главное, вывески, этикетки, чеки, объявления и т.д.);
  • сканировать документы и имитировать типы скана (просто фото, цветной скан, чёрно-белый скан).

Ну что, как всегда, новую фичу нужно протестировать.

Проверяем поиск товаров и их цены. Возьмём что местное. Всё отлично: цена адекватная, ссылка на очевидный Яндекс.Маркет. Но вот что мне непонятно уже сейчас: эта бутылка точно есть в Яндекс.Лавке (и там куплена) — почему приложение не даёт ссылку на Лавку, в которой гораздо логичнее купить бутылку минералки, чем на Маркете?

22eb6ba0e8594f42f998034f60ca249f.png

Проверим на парфюме без коробочки. Итак, флакон с чёткой надписью камера распознала и цену нашла, а вот старый Shalimar с нечёткой надписью, но очень характерной уникальной формой флакона камера смогла найти только по поиску, без сделанного фото (то есть в режиме наведения) парфюм она не обработала. Ну и опять удивление: почему выбран не топовый сетевой магазин, а какая-то не внушающая особого доверия площадка?
7d2c4d2923b8d6f2c8a7b47b2eaf0ad7.png

Ещё интересное наблюдение: проверим схожие товары, например, творог 200 грамм, 9% и 12%. Камера в обоих случаях распознаёт товар, но не угадывает, ни вес, ни жирность (точнее, в первом случае угадывает жирность, во втором — вес). И опять же, ссылка на не самый популярный магазин (интересно, со временем будут подкидывать похожие товары из своих и партнёрских маркетов?).
5bcb13e3d5708678aa6d528871305288.png

Растения наведением камера не распознаёт, только по фото:
5fda896f528a0ec7239835f94660c596.png

Сканер документов аккуратный, отображает и цветной, и чёрно-белый формат (кстати, иногда просят именно ч/б скан, а не фото и приходилось креативить в фотошопе).
793ae24642563acf4bd4e33853917013.png

Ну и напоследок перевод — он стал гораздо приятнее и удобнее, чем был у Яндекса раньше: больше нет дурацких жёлтых рамок и блоков. Однако сам перевод и работа с некоторыми фактурами упаковки — такое себе. Пока искала пример для перевода, камера при наведении перевела клавиатуру — так и оставим.
aaa36cf0a9d82ebcd5b467788b9dc22c.png

Что можно сказать об умной камере от Яндекса? Хороший, удобный инструмент, кейсов использования и коммерческих вариантов работы с ней — море. Вот мелочь, а хочется, чтобы Яндекс довёл идею до конца, потому что именно из таких приятных мелочей складываются пользовательские впечатления.

P.S.:, а вот по городам и достопримечательностям будет ходить явно хорошо.

Строчка рекламы: CRM для малого и среднего бизнеса живёт здесь.

Наш полезный Дзен с уклоном в управление персоналом.

© Habrahabr.ru