Как по камере найти предмет

Многие знают о голосовом помощнике Алиса. Яндекс разработали голосовой помощник со штучным интеллектом и усовершенствуют его с каждым днем. Вот сегодня пойдет речь о том, как Алиса научилась распознавать вещи, достаточно только навести вашу камеру на вещь, и она вам подскажет как эта вещь называется.

Для того чтобы испытать эту функцию на вашем смартфоне должен быть установлен Яндекс браузер, в котором находится голосовой помощник Алиса.

Для того чтобы начать общаться с голосовым помощником вам нужно зайти в Яндекс, после чего в нижней части экрана будет фиолетовый значок.

При нажатии на него активируется голосовой помощник Алиса, после чего нужно сказать: «Распознай изображение». Если у вас разрешен доступ к камере, то она включается автоматически, если же доступа нет, то нужно дать Яндекс браузеру доступ.

Когда доступ к камере уже есть все что вам остается навести камеру на предмет, который Вас интересует и нажать на фиолетовую кнопку.

Помощник анализирует, ищет похожий объект и выдает результаты.

Так же есть возможность загрузить любую фотку с вашей галереи, для этого так же нужно дать приложению доступ к вашей галереи. Чтобы сделать это нужно нажать на кнопку справа от фиолетовой, после чего у Вас запросят разрешение.

После всей этой процедуры можем загружать любое фото из галереи.

Алиса тут же начнет искать похожие результаты.

Помимо этого, Алиса способна еще на многое другое. Например, поиграть в такие игры как: угадай животное, угадай число, загадки, угадай песню, слова, города, управлять временем на вашем смартфоне: поставить будильник или таймер. А также: узнать новости, считать деньги, рассказать о пробках, сказать тост, вызвать такси и т.д.

Если хотите быть в курсе всех изменений и событий, то обязательно ставьте лайки, делитесь материалами и подписывайтесь на канал. Наша задача – доносить к вам только полезную и актуальную информацию.

Умная камера, встроенная в мобильное приложение «Яндекс — с Алисой», умеет не только фотографировать: она может рассказать много полезного об объекте перед ней. Камера легко распознает, что перед ней — животное, мебель или, например, туристическая достопримечательность. Это возможно благодаря нейронным сетям: в приложении объединены технологии компьютерного зрения, машинного перевода и поиска.

Как установить умную камеру «Яндекс»

Камера доступна в приложении Яндекс для iOS и Android. Нужно скачать и установить на телефон приложение «Яндекс – с Алисой». Важно дать приложению все разрешения, которые оно будет запрашивать иначе умная камера работать не будет. Включить «умную камеру» можно несколькими способами:

• Обратиться к Алисе с голосовой командой:

• Тапнуть по иконке камеры внутри поисковой строки (выделили иконку красной рамкой):

• Тапнуть по иконке фотоаппарата (внизу, после всех запросов). Но предварительно нужно нажать на поисковую строку.

Важно!Чтобы пользоваться всеми функциями умной камеры, необходимо дать приложению «Яндекс — с Алисой» все требуемые доступы и разрешения. Кроме того, нужен постоянный доступ в интернет.

Что есть в умной камере: режимы работы

Умная камера умеет выполнять множество задач.

1. Поиск по фото

Это новый способ искать информацию в интернете. Больше не нужно диктовать запрос голосом или набирать его на клавиатуре. Достаточно навести камеру на объект (будь то растение, название которого вам было бы интересно узнать, памятник на площади, приглянувшийся вам в интернете свитер или даже сумка посетительницы в кафе за соседним с вами столиком), и умная камера сама предоставит все данные о нем и найдет в магазине понравившуюся или похожую вещь.

С этой же функцией можно узнавать пищевую ценность продуктов и количество жиров, белков и углеводов, наличие сахара и ГМО, содержание микроэлементов. Правда, камера показывает калорийность на 100 гр — то есть определить вес продукта и рассчитать общую калорийность она пока не может.

Что еще важно — хорошо определяется калорийность моно-продукта, например, того же банана, а вот суммировать калорийность составных блюд, например, плова или торта, камера не может. Но может показать страницы с рецептами, где приведены общие расчеты калорийности.

С камером можно также узнать марку автомобиля, год ее выпуска, характеристики и даже минимальную рыночную цену. Кстати, приложение иногда добавляет характеристики от себя: «экономичность», «хорошая проходимость» и так далее.

2. Поиск товаров

Этот режим автоматически находит понравившейся или похожий предмет в магазинах. Откройте умную камеру в режиме поиска товара и сфотографируйте объект, например, парфюмерную воду.

Появится маркер фиолетового цвета — он обозначает объект, который был идентифицирован камерой. Тапните по этому маркеру, чтобы увидеть дополнительную информацию. В случае с парфюмом, например, камера отображает цену и магазины, где можно купить. Кстати, возможности камеры стоит учитывать предпринимателям при настройке рекламы в «Яндекс.Директ» — при грамотном подходе ваши ресурсы смогут отображаться у пользователей приложения.

3. Распознавание текста

Сфотографируйте документ или страницу любого бумажного носителя, например, страницу из книги, и вы сразу получите электронный документ (его можно сохранить или отредактировать прямо в приложении). Распознанный текст выделяется белым.

Можно найти конкретное слово на странице (для этого есть одноименная кнопка), расшарить текст или скопировать его.

4. Перевод

Эта функция позволяет переводить любые иностранные слова с любого источника: с упаковки товара, из книги, меню ресторана, на постере или вывеске — достаточно сфотографировать непонятное предложение или название на иностранном языке.

Откройте умную камеру в режиме перевода и установите нужный язык в верхней части экрана:

Теперь можно фотографировать любой носитель с иностранными словами. Камера сохранит оригинальную ориентацию текста, и вы увидите поверх него перевод на русском языке:

Если вы хотите скопировать переведенный текст, тапните по иконке иероглифа (выделили его красной рамкой). А нажав на выделенную красным иконку с символом буквы , вы сможете открыть вариант перевода в «Яндекс.Переводчике»:

5. Сканер

Откройте камеру, активируйте режим сканера и сфотографируйте текст на листе бумаге. Умная камера автоматически настроит контраст и яркость таким образом, чтобы результат не отличался от сканирования на профессиональном сканере.

Доступно несколько режимов сканирования:

• «Черно-белое» — полутонов не будет, вы получите максимально четкое изображение.
• «Оригинал» — это оригинальная фотография документа, без изменения яркости и контрастности.
• «Скан» — в этом режиме автоматически возрастает контрастность, текст станет более читаемым.

После сканирования сохраненный файл можно отправить по почте или через мессенджеры.

6. Сканер QR-кода

Установите камеру в режим поиска, наведите искатель на Qr-код на товаре. Появится ссылка. Скопируйте ее или сразу откройте в приложении «Яндекс – с Алисой».

Этим же способом можно отсканировать любой чек из магазина (главное, чтобы в нем содержался QR-код).

Кстати, эта функция дает возможность получить вознаграждение, если сканируете чеки по товарам, которые участвуют в акции кэшбека от сервиса edadeal.ru. Вот, например, список магазинов, которые возвращают кэшбек по чеку.

7. Сканер бонусных карт

Вы можете отсканировать любую бонусную карту, если на ее задней стороне имеется QR или штрих-код.

Сканируйте бонусную карту умной камерой в режиме «Карты»:

Теперь нужно указать магазин, который выдал вам эту бонусную карту:

Внимание! Если умная камера не сканирует вашу бонусную карту, ее можно добавить самостоятельно. Для этого тапните по своей аватарке, затем выберите раздел «Бонусные карты» → «Добавить карту»:

Так можно занести в телефон все свои бонусные карты и больше не носить с собой в кошельке пластиковые карточки. Показать карту при оплате на кассе вы можете тремя способами:

1. Нажав на значок «Бонусные карты» на главном экране.
2. Попросив Алису открыть бонусные карты.
3. Кликнув по аватарке в приложении «Яндекс — с Алисой» (далее нужно открыть раздел «Бонусные карты»).

8. Решение уравнений

Эта функция идеальна для школьников (и родителей, которые забыли программу). Выбрав эту функцию в меню, сфотографируйте непонятное уравнение умной камерой. Уравнение может быть как из книги, так и написано от руки. Но обратите внимание, что с рукописным текстом камера может неверно считать данные:

Если такое произошло и распознавание букв и цифр в уравнениях было некорректно (как в нашем случае), можно откорректировать данные на клавиатуре в этом блоке:

После считывания данных умная камера выдаст ссылки на справочные материалы или даже пошаговый алгоритм для решения задачи:

9. Поэзия

Наведите камеру на любой объект, тапните на иконку «Поэзия», и приложение предложит вам вариант стихотворения, которое включает в себя слово, обозначающее предмет в объективе камеры. Забавная функция для постов в соцсетях.

Вывод

Умная камера — это удобный новый способ поиска информации. Даже не нужно формулировать запрос — достаточно навести камеру на объект и узнать о нем все. А если объекта нет перед глазами, можно загрузить фото из галереи.

Несмотря на то, что задействованные нейросети постоянно учатся, ошибки еще возможны. Поэтому проверять информацию все же пока стоит (особенно это касается рукописных текстов). Для корректировки данных можно использовать клавиатуру.

Может ли «Яндекс.Камера» составить конкуренцию программам -переводчикам, или калькуляторам калорийности блюд? Пока еще нет. Но приложение точно сделает вашу жизнь удобнее. И чем чаще вы будете ее использовать, тем лучше будет результат.
Единственная плата за прогресс — разрешение (которое вы даете!) на сбор информации о вас. Не забудьте дать приложению «Яндекс — с Алисой» все требуемые доступы и обеспечьте постоянный доступ в интернет, иначе поиск по картинкам работать не будет.

Читайте также:

«Поиск по товарам» от Яндекса: маленькие магазины заметят. Возможно

Ищи, уточняй: поисковые операторы «Яндекса» и Google

Новый поиск «Яндекса»: ты от меня никуда не уйдешь!

Умную камеру в приложении Яндекса можно назвать функциональной. Но с ее помощью нельзя просто сделать красивый кадр и отправить другу, прежде всего она предназначена для оказания помощи пользователям, когда под рукой нет нужной техники или приложения.

Установить ее очень просто.

1. Качаем приложение Яндекс с Алисой из AppStore или Google Play.
2. Открываем его и открываем камеру – ее иконка расположена справа от адресной строки.
3. Камеру можно открыть как тапом по иконке, так и голосовой командой «Алиса, включи камеру».
4. Далее нужно дать приложению все разрешения (в основном это разрешение использовать камеру, микрофон, доступ к контактам, приложение «Телефон»).

Важно помнить, что функции камеры без доступа к интернету работать не будут.

Функциональность режимов умной камеры Яндекс

В камере от Яндекса есть 8 режимов:

• Сканер документов и текста
• Переводчик
• Поиск в интернете
• Поиск по товарам
• Поиск текста
• Решение уравнений
• Поэзия (составление стихов)
• Сканер бонусных карт

Мы протестировали каждую функцию и готовы поделиться своими впечатлениями.

Сканер документов

Работает сканер очень просто: наводим камеру на документ и фотографируем. Отличие от обычных фотографий документов в том, что изображение документа выглядит, как настоящий скан. Яндекс осветляет исходный документ, выстраивает контраст и выдает изображение, как после сканирования.

Вот так выглядит оригинал:

А вот так выглядит отсканированная версия. Как по мне, очень хорошо, несмотря на то, что в оригинале сверху текст размыт и плохо читаем.

Переводчик

Режим для перевода текста в реальном времени. Чтобы активировать данную функцию, необходимо скачать языковой пакет. Выбор языков очень большой!

Важный момент: с экрана монитора переводить не рекомендую. Отсветы/засветы могут «съесть» букву, и перевод будет не полным. Особенно это актуально в переводе с китайского/японского/корейского. Автор пытался перевести японский рекламный буклет по автомобилю, и каждый раз при наведении камеры перевод был разным. Поэтому лучше использовать режим, наведя камеру на книгу или текстовый документ.

После перевода текст можно либо скопировать в буфер, либо выполнить его поиск в Яндекс.Поиске.

Режим особо не отличается от подобного в Google Translate.

Поиск в интернете

Неплохой поиск по фото. Можно найти товары, текст, сайты, похожие фотографии, а также более полную информацию об объекте на изображении. Можно найти стакан из IKEA, например:

Либо можно найти информацию о хаски:

Поиск по товарам

С помощью этого режима у вас появится возможность найти похожий товар в интернете. Плюс в том, что Яндекс выдает список ссылок, где можно купить товар. Причем среди этого списка есть различные интернет-магазины, а не только Яндекс.Маркет.

Увлажнитель воздуха нашелся мгновенно.

На этом фото точка поставлена неправильно, но товар найден верный. Можно сразу посмотреть доступные предложения на рынке.

Кстати, о том, насколько важен поиск по товарам на вашем сайте, рассказывали в этой статье.

Поиск текста

Поиск текста на фотографии. Сканирует на тройку, может захватить не весь текст. Если что-то небольшое, то проще самостоятельно перепечатать в поиск.

На этом фото найден не весь текст:

А на этом фото посмотрите сколько невидимых символов увидела камера, понятно, что на обложке такого нет:

Решение уравнений

Решили вспомнить школьную программу и проверить, как Яндекс с ней справится. Чтобы не оплошать, взялза основу пример уравнения с решением 🙂

Камера не распознает текст вокруг уравнения и понимает только непосредственно задачу. Плюс в том, что решение выдается развернутое.

Вот так выглядит задача:

А вот так выглядит решение:

Важно! Если вы пользуетесь решением уравнений с помощью камеры Яндекса, обязательно перепроверяйте ответ.

Поэзия

Самый творческий режим, с которым можно развлекаться часами.

Просто наводим камеру на объект и получаем стихотворение с его упоминанием

Карты

Режим для сканирования клубных карт.

Берем любую карту, наводим камеру на сторону, где есть штрихкод, приложение автоматически переведет вас в сервис Яндекса с клубными картами. Здесь необходимо будет ввести данные карты, дать ей имя, цвет, а в дальнейшем использовать ее на кассах магазинов.

Интерфейс добавления карты:

Достоинства и недостатки умной камеры Яндекса

К достоинствам камеры можно причислить:

1. Скорость работы
2. Качество работы сканера
3. Экономия времени
4. Помощь в поиске нужного объекта

А из недостатков можно выделить:

1. Невозможно установить камеру отдельно от остальных сервисов Яндекса
2. Не всегда точное определение текста на фото
3. Порой странный перевод с экрана монитора.

В заключении

Благодаря умной камере от Яндекса можно действительно упростить себе жизнь: оперативно отсканировать документы или найти по фото нужный предмет в интернет-магазине (особенно это может помочь найти понравившуюся вещь).

Рассчитывать во всем на нее не стоит, ведь это прежде всего искусственный интеллект, а он может ошибаться, но с каждым днем становится все лучше.

Увы, умная камера Яндекса пока не сможет помочь вам в продвижении бизнеса, зато с этим справится команда экспертов 1PS.RU – обращайтесь!

Главное уметь верно пользоваться этой возможностью. Тогда ни дин звучащий трек или висящая на стене картина не останется для вас без названия, а любое блюдо в ресторане подарит не только вкусовые ощущения, но и расскажет историю его создания.

Словом, у нас для вас 8 приложений, которые стоит установить на смартфон, чтобы сделать его универсальным инструментом и помощником на каждый день. Большинство приложений окажутся доступными и для Android, и для iOS.

Такие новости мы постоянно публикуем в Telegram. Подписывайтесь на канал, чтобы ничего не пропустить 😉

Google Lens — может определить почти всё

Это одно из самых популярных приложений, так как на многие устройства с Android предустанавливается из коробки. Google позволяет с помощью камеры смартфона узнать, что за предмет вы видите. Растения, гаджеты, логотипы, произведения искусства, животные — она может опознать очень многое с помощью технологии искусственного зрения.

Кроме того, если что-то можно купить, то приложение снабдит вас ссылкой на интернет-магазин. Удобная штука в общем.

Установить Google Lens из Play Store.

Pinterest: искусство, дизайн и декор

Приложение весьма похоже на предыдущее, но в большей степени заточено на поиск и определение предметов декора, искусства и дизайна. Аналогично Google Lens может выдавать ссылки на места, где продаются те вещи, что вас заинтересовали. Но для исследования окружающего мира и природы подходит слабо. В этом случае лучше обратиться к программе №1.

Кстати, тоже бесплатное.

Установить Pinterest из Play Store.

Такие новости мы постоянно публикуем в Telegram. Подписывайтесь на канал, чтобы ничего не пропустить 😉

Snapchat: авто, растения, животные, музыка

Путь Shazam к опознаниям начался, когда приложение запартнёрилось с Shazam для определения любых воспроизводимых музыкальных треков. Теперь же Snapchat используя технологии дополненной реальности опознавать в том числе предметы вокруг пользователя.

Очень многие используют Snapchat как одно из самых популярных на смартфоне социальных приложений, потому интеграция таких возможностей оказалась полезной и удобной. Растения, животные, автомобили, предметы домашнего быта — всё это подвластно. Ещё и фильтры и макси использовать можно.

Установить Snapchat из Play Store.

Amazon Shopping: шоппинг на платформе и сравнение цен

С помощью этого приложения также можно распознавать предметы или считать штрих-код. Как понятно из названия, здесь акцент идёт на то, чтобы найти отсканированный вами продукт на торговой площадке и приобрести его, либо сравнить цены от различных поставщиков.

Хотя в большей степени окажется актуальным для тех, кто проживает в США, в ряде случаев и жители России найдут приложение полезным.

Скачать Aamzon Shopping из Play Store.

Image Recognition and Searcher: распознаём изображения

 

Приложение будет востребовано теми, кто распознаёт изображения, испытывая потребность узнать, где оно ещё встречается. Например, в магазинах или на сайтах в сети. Загружаем изображение из памяти смартфона или свежесделанное фото, чтобы найти похожие.

За сервис попросят денег, клиент пока что существует лишь для Apple.

Данные подтягиваются из Google, Bing и Яндекса, используя их алгоритмы поиска по картинке.

TapTapSee: распознаём со звуком

Приложение разработано для тех, у кого есть нарушения зрения.

Просто фотографируем объект, сработает автофокус, фото будет распознано, а результат будет зачитан голосом. Кроме того, приложение тоже умеет считывать QR- и прочие востребованные сегодня коды.

Установить TaptapSee из Google Play.

PictureThis: для любителей ботаники

Приложение для тех, кто любит природу, растения или просто проводить время между грядок. Хотите узнать, что за сорняк мешает расти вашим огурцам? Или же что за цветок произрастает на соседской территории.

Использовать программу также просто, как и все, что были выше. Делаем фото, а далее ждём результат от приложения. О растении, которое попало в кар, будет выведена полная справка. Не только название, но и информация о потенциальных вредителях, условиях для хорошего роста, подсказки по подкормке (возможны даже напоминания) и поливу и т.д. Кроме того, сможете получить комментарии экспертов, если процесс опознания в автоматизированном режиме затруднился.

.

Vivino: выпьем вина?

Это приложение станет вашем проводником в мир хорошего алкоголя. Если любите вино, то поможет расширить кругозор в этом вопросе, подскажет что приобрести. Всё что нужно — просто сфотографировать этикетку.

Узнаете, насколько популярно вино, которое вам приглянулось, какие в нём ингредиенты, что ждать от вкуса, его реальный возраст и т.д. Кроме того, будут доступны комментарии и рейтинги других пользователей, которых по всему миру более 30 миллионов.

Скачать Vivino из Google Play.

Такие приложения могут сделать мир вокруг нас более интересным. Теперь легко можно опознать, что за монетка лежит перед вами, что за камень у вас в руке, какое растение или животное вас заинтересовало.

В этом Telegram-канале по цене ниже рынка продают свои гаджеты популярные блогеры.

Источник: Makeuseof.

Если вам интересны новости мира ИТ так же сильно, как нам, подписывайтесь на Telegram-канал. Там все материалы появляются максимально оперативно. Или, может быть, удобнее “Вконтакте”?

Читайте нас где удобно

Ещё на эту тему было

• 6 удачных Android-смартфонов от 12 до 43 тысяч рублей
• 9 складных смартфонов должны выйти уже в ближайшее время
• Названы самые мощные в мире смартфоны. Март 2023
• 10 лучших фильмов ужасов о школьниках и студентах
• Рекордсмены YouTube: 10 самых просматриваемых роликов с музыкой за последние 10 лет
• 10 самых удачных китайских смартфонов по мнению пользователей
• 7 недорогих часов Casio, стоимостью менее 100 долларов
• ТОП-10 самых мощных китайских смартфонов января
• Эксперты назвали лучшие смартфоны 2022 в разных ценовых категориях и задачах
• 10 лучших сайтов для скачивания бесплатных шрифтов

Для тех, кто долистал

Ай-ти шуточка бонусом. Инновации, которые мы хотим: камеры, “железо”, продуманные интерфейсы и ПО. Инновации, которые мы получаем: Pro, Pro+, Pro Max, Ultra, Ultimate, CE, RT, SE.

Камера также позволяет переводить текст и сканировать документы.

В «умной» камере от «Яндекса» объединены технологии компьютерного зрения, машинного перевода и поиска, рассказали vc.ru в компании.

Камера может в реальном времени распознавать и искать предметы, которые попали в объектив, переводить текст и сканировать документы.

Если навести камеру на предмет, например, на рюкзак, она сможет его распознать, а также предложить, где купить такой же или похожий рюкзак.

По такому же принципу можно узнать название растения, породу собаки или название памятника.

Также камера может переводить надписи с иностранных языков — текст появится поверх изображения.

В приложении также есть сканер: он позволяет сделать цифровую копию любого документа, например, паспорта или диплома.

Камера доступна в приложении «Яндекса» для iOS и Android — её можно включить, нажав на иконку камеры в поисковой строке.