Сколько калорий у вас на тарелке, что за марка машины и как решить уравнение – «Яндекс» обещает определять это по фото
В приложении «Яндекса» обновилась «Умная камера». Раньше она только определяла товары на фото, а теперь должна облегчать жизнь школьникам и зожникам. Но есть сомнения.
Волшебная камера
Мы рассказывали об этой функции, когда она только появилась. Недавно функционал камеры значительно расширился: теперь по фото можно определить калорийность еды и проверить стоимость машины соседа.
Должна определять калорийность блюд
Приложение должно определять калорийность блюд. Вот что оно делает в реальности.
Во-первых, определяет, что за продукт находится на фото, и показывает его калорийность на 100 гр – определить вес продукта камера, естественно, не может.
Функция работает шустро: камера определяет, что перед ней, за секунды. Правда, не всегда корректно. Например, может спутать апельсин с мандарином.
Думаем, по фотографии и человек спутает два фрукта.
Калорийность каждого блюда в отдельности определить нельзя. «Камера» распознает, что за блюдо перед ней (у нас тут торт «Захер»), но калорийность сообщаться отказывается – просто ссылается на сайты с рецептами, каждый из которых сообщает свою калорийность. А вот КБЖУ клубники показало сходу.
Калорийность полноценного обеда в приложении тоже не рассчитать. Оно просто сообщает: «Кажется, фотография похожа на завтрак». При этом на фотографии появляются белые точки. По клику на них открывается информация о конкретном блюде со ссылками на сайты, где указана примерная калорийность этих блюд.
С ходу определять модель машины
Вот что «Яндекс.Камера» делает действительно хорошо, так это определяет модель автомобиля, даже если он находится далеко от пользователя. Приложение сразу же показывает характеристики машины и добавляет характеристики от себя: «проста в управлении»,«экономична» и так далее.
Решать уравнения
Еще приложение поможет решать уравнения – так заявляет разработчик.
По факту, когда фотографируешь пример, встроенный поиск просто предлагает сайты для решения уравнения и обучающие видео. При этом есть сложности с распознаванием почерка:
Реакция в интернете
Новую функцию «Яндекса» пользователи уже назвали «шазамом для еды».
Может ли «Яндекс.Камера» составить конкуренцию программам, которые подсчитывают калорийность блюд и реально выполняют домашку за школьников? Нет. Сделает ли она жизнь пользователей чуть легче? Скорее всего, да. Сделает ли она жизнь веселее? Определенно.
В Google и «Яндексе», соцсетях, рассылках, на видеоплатформах, у блогеров
Умная камера «Алисы» умеет сканировать документы и читать вслух тексты с фото
«Яндекс» обновил умную камеру «Алисы» и теперь голосовой помощник сможет сканировать документы и читать вслух тексты с фото.
«В умной камере голосового помощника „Алисы“ появились новые возможности. Теперь „Алиса“ умеет сканировать документы, читать вслух текст на фото и лучше распознает одежду. Камера доступна в мобильных приложениях с Алисой: Яндексе, Браузере и Лончере», — говорится в сообщении.
Как отмечается, «Алиса» сможет помочь, если пользователю будет нужна цифровая копия документа, то есть с помощью приложения с голосовым помощником можно будет отсканировать любые документы. Также «Алису» можно попросить прочитать с фотографии текст, например, если инструкция написана мелким шрифтом.
Кроме того, «Алиса» поможет найти понравившуюся одежду. Если сфотографировать человека, камера определит, что на нем надето, и найдет похожие вещи на «Яндекс. Маркете» — причем для каждого предмета одежды в отдельности.
«Как и раньше, „Алиса“ умеет распознавать на картинке объекты и товары. Например, она сможет определить по фото породу собаки или модель кофеварки», — добавили в пресс-службе.
Голосовой помощник «Яндекса» «Алиса» был запущен осенью 2017 года. Благодаря запрограммированным навыкам система имитирует живой диалог, распознавая естественную речь и отвечая на вопросы пользователя
В приложении Яндекса на Android и iOS появилась умная камера — да-да, новая
Наверное, многие из нас переводили тексты с помощью камеры в переводчике Яндекса и искали что-то по картинкам (например, именно с помощью такого поиска в Яндексе мне удалось найти части коллекционного сервиза — ни Avito, ни ручной поиск не справились). Но Яндекс пошёл дальше, развил функциональность и выкатил новый релиз — с непередаваемыми нотками коммерции.
Камера реализована на стыке технологий перевода, поиска и компьютерного зрения — теперь она может делать несколько важных и нужных вещей:
- распознавать и искать предметы в поиске;
- распознавать предметы и ставить метку цены и ссылку на магазин, где товар можно купить;
- переводить тексты (а главное, вывески, этикетки, чеки, объявления и т.д.);
- сканировать документы и имитировать типы скана (просто фото, цветной скан, чёрно-белый скан).
Проверяем поиск товаров и их цены. Возьмём что-то местное. Всё отлично: цена адекватная (очевидно, за упаковку 6 шт.), ссылка на очевидный Яндекс.Маркет. Но вот что мне непонятно уже сейчас: эта бутылка точно есть в Яндекс.Лавке (и там куплена) — почему приложение не даёт ссылку на Лавку, в которой гораздо логичнее купить бутылку минералки, чем на Маркете?
Проверим на парфюме без коробочки. Итак, флакон с чёткой надписью камера распознала и цену нашла, а вот старый Shalimar с нечёткой надписью, но очень характерной уникальной формой флакона камера смогла найти только по поиску, без сделанного фото (то есть в режиме наведения) парфюм она не обработала. Ну и опять удивление: почему выбран не топовый сетевой магазин, а какая-то не внушающая особого доверия площадка?
Ещё интересное наблюдение: проверим схожие товары, например, творог 200 грамм, 9% и 12%. Камера в обоих случаях распознаёт товар, но не угадывает, ни вес, ни жирность (точнее, в первом случае угадывает жирность, во втором — вес). И опять же, ссылка на не самый популярный магазин (интересно, со временем будут подкидывать похожие товары из своих и партнёрских маркетов?).
Растения наведением камера не распознаёт, только по фото:
Сканер документов аккуратный, отображает и цветной, и чёрно-белый формат (кстати, иногда просят именно ч/б скан, а не фото и приходилось креативить в фотошопе).
Ну и напоследок перевод — он стал гораздо приятнее и удобнее, чем был у Яндекса раньше: больше нет дурацких жёлтых рамок и блоков. Однако сам перевод и работа с некоторыми фактурами упаковки — такое себе. Пока искала пример для перевода, камера при наведении перевела клавиатуру — так и оставим.
Что можно сказать об умной камере от Яндекса? Хороший, удобный инструмент, кейсов использования и коммерческих вариантов работы с ней — море. Вот мелочь, а хочется, чтобы Яндекс довёл идею до конца, потому что именно из таких приятных мелочей складываются пользовательские впечатления.