Технологии не перестают удивлять. С каждым годом появляется что-то новое, интересное и полезное для людей. Одно из таких новшеств — это компьютерное зрение. Область развивается уже в течение нескольких лет, но в последние годы стала доступна любому желающему.
Компьютерное зрение представляет собой распознавание с помощью искусственного интеллекта предметов, которые замечены в объективе камеры устройства. Затем с распознанными данными программное обеспечение выполняет разнообразные операции. Компьютерное зрение доступно любому человеку вместе с приложением Яндекс. Рассмотрим в этой статье включение умной камеры в Яндекс Старт на Айфонах и устройствах под управлением Андроид.
Как включить умную камеру
Чтобы включить умную камеру, понадобится приложение Яндекс. Его можно скачать как на Android, так и на iOs. На разных операционных системах приложение от чего-то называется по-разному: Яндекс Старт на Андроид и Яндекс с Алисой на iOs. Но на самом деле — это одно и то же приложение и у них одинаковый интерфейс. Поэтому включение умной камеры на Андроиде и Айфоне — это одинаковый процесс.
Android Camera API. Умная камера Яндекса
Установите приложение Яндекса на своё устройство. При первом запуске оно затребует необходимые разрешения — выдайте все. Это необходимо для нормальной работы, в том числе и умной камеры.
Теперь откройте приложение. Чтобы запустить умную камеру, тапните в адресной строке на кнопку с иконкой камеры. И перед вам откроется умная камера, готовая к работе. Наведите объектив на любой предмет, чтобы оценить её работу. Внизу интерфейса камеры имеются опции для переключения режимов работы.
Их мы рассмотрим далее в статье.
Что умеет умная камера?
Функционал умной камеры как на Андроиде, так и на Айфоне одинаковый. Всего имеется 7 режимов работы:
-
Режим, который открывается по умолчанию — это «Поиск». Когда он включен, объектив камеры определяет найденные предметы и показывает их названия. Чтобы найти изображения предметов, похожих на те, что попали в объектив, сделайте фото через умную камеру. В результате вы увидите в поисковике результаты поиска с нужными картинками.
Режим «Перевод» позволяет переводить надписи, которые попали в объектив камеры. Поддерживаются все языки, которые есть в Яндекс переводчике, а это более 200 языков. Каждый язык нужно загрузить отдельно перед переводом. Наведите объектив камеры на надпись, выберите с какого и на какой язык нужно перевести, при необходимости скачайте нужный язык и дождитесь, пока умная камера распознает текст и выполнит перевод. Также из камеры можно всё перенести в Яндекс переводчик, если понадобится.
Распаковка новой Яндекс.Станции Макс и своя экосистема умного дома…
Следующий режим «Товары». Работает он так же как и «Поиск», но только ищет не в поиске по картинкам, а в интернет-магазинах. Если вы хотите купить то, что видите, но не знаете, как это правильно называется и где это можно найти, то включите этот режим в умной камере и наведите объектив на потенциальный товар. Сфотографируйте и дождитесь, пока приложение подберёт для вас товары в самых удобных интернет-магазинах.
Режим «Текст» — это распознавание текста. Подойдёт в тех случаях, когда вы видите текст, и он вам нужен, например, в каком-либо текстовом редакторе. Чтобы не писать его в редакторе вручную, наведите умную камеру на текст и дождитесь распознавания и обработки. Затем скопируйте полученный текст и вставьте в нужный вам редактор.
Альтернативы умной камеры
Умная камера Яндекса — это далеко не уникальное приложение, как могло бы показаться. За пару лет раньше него появился ещё Google объектив, который имеет все те же и даже немного больше функций. Google Объективтакже доступен для Android и iOs.
Кроме того, в прошивках некоторых смартфонов прямо в камере имеется приложение с искусственным интеллектом, которое также выполняет все те же функции, что и умная камера Яндекса. Например, такая опция имеется в EMUI смартфонов Huawei и Honor, и некоторых других смартфонах. Поэтому проверьте свою камеру, возможно у вас уже нет необходимости в дополнительных приложениях. Это есть как в недорогих, так и во флагманских моделях.
Источник: rusadmin.biz
Как работает поиск с умной камерой «Яндекса» — полный гайд
Обнаружить место продаж товаров из журнала, перевести иностранные слова на этикетке, отсканировать документы, рассчитать калорийность продуктов… — 9 функций, которые сделают жизнь проще!
Дата публикации: 22 февраля 2023
Время чтения: 8 минут
Сергей Ломакин Редакция «Текстерры»
Оглавление:
Оглавление:
Умная камера, встроенная в мобильное приложение «Яндекс — с Алисой», умеет не только фотографировать: она может рассказать много полезного об объекте перед ней. Камера легко распознает, что перед ней — животное, мебель или, например, туристическая достопримечательность. Это возможно благодаря нейронным сетям: в приложении объединены технологии компьютерного зрения, машинного перевода и поиска.
Как установить умную камеру «Яндекс»
Камера доступна в приложении Яндекс для iOS и Android. Нужно скачать и установить на телефон приложение «Яндекс — с Алисой». Важно дать приложению все разрешения, которые оно будет запрашивать иначе умная камера работать не будет. Включить «умную камеру» можно несколькими способами:
- Обратиться к Алисе с голосовой командой:
- Тапнуть по иконке камеры внутри поисковой строки (выделили иконку красной рамкой):
- Тапнуть по иконке фотоаппарата (внизу, после всех запросов). Но предварительно нужно нажать на поисковую строку.
Важно!Чтобы пользоваться всеми функциями умной камеры, необходимо дать приложению «Яндекс — с Алисой» все требуемые доступы и разрешения. Кроме того, нужен постоянный доступ в интернет.
Продвинем ваш бизнес
В Google и «Яндексе», соцсетях, рассылках, на видеоплатформах, у блогеров
Что есть в умной камере: режимы работы
Умная камера умеет выполнять множество задач.
1. Поиск по фото
Это новый способ искать информацию в интернете. Больше не нужно диктовать запрос голосом или набирать его на клавиатуре. Достаточно навести камеру на объект (будь то растение, название которого вам было бы интересно узнать, памятник на площади, приглянувшийся вам в интернете свитер или даже сумка посетительницы в кафе за соседним с вами столиком), и умная камера сама предоставит все данные о нем и найдет в магазине понравившуюся или похожую вещь.
Что еще важно — хорошо определяется калорийность моно-продукта, например, того же банана, а вот суммировать калорийность составных блюд, например, плова или торта, камера не может. Но может показать страницы с рецептами, где приведены общие расчеты калорийности.
С камером можно также узнать марку автомобиля, год ее выпуска, характеристики и даже минимальную рыночную цену. Кстати, приложение иногда добавляет характеристики от себя: «экономичность», «хорошая проходимость» и так далее.
2. Поиск товаров
Этот режим автоматически находит понравившейся или похожий предмет в магазинах. Откройте умную камеру в режиме поиска товара и сфотографируйте объект, например, парфюмерную воду.
Появится маркер фиолетового цвета — он обозначает объект, который был идентифицирован камерой. Тапните по этому маркеру, чтобы увидеть дополнительную информацию. В случае с парфюмом, например, камера отображает цену и магазины, где можно купить. Кстати, возможности камеры стоит учитывать предпринимателям при настройке рекламы в «Яндекс.Директ» — при грамотном подходе ваши ресурсы смогут отображаться у пользователей приложения.
3. Распознавание текста
Сфотографируйте документ или страницу любого бумажного носителя, например, страницу из книги, и вы сразу получите электронный документ (его можно сохранить или отредактировать прямо в приложении). Распознанный текст выделяется белым.
Можно найти конкретное слово на странице (для этого есть одноименная кнопка), расшарить текст или скопировать его.
4. Перевод
Эта функция позволяет переводить любые иностранные слова с любого источника: с упаковки товара, из книги, меню ресторана, на постере или вывеске — достаточно сфотографировать непонятное предложение или название на иностранном языке.
Откройте умную камеру в режиме перевода и установите нужный язык в верхней части экрана:
Теперь можно фотографировать любой носитель с иностранными словами. Камера сохранит оригинальную ориентацию текста, и вы увидите поверх него перевод на русском языке:
Если вы хотите скопировать переведенный текст, тапните по иконке иероглифа (выделили его красной рамкой). А нажав на выделенную красным иконку с символом буквы , вы сможете открыть вариант перевода в «Яндекс.Переводчике»:
5. Сканер
Откройте камеру, активируйте режим сканера и сфотографируйте текст на листе бумаге. Умная камера автоматически настроит контраст и яркость таким образом, чтобы результат не отличался от сканирования на профессиональном сканере.
Доступно несколько режимов сканирования:
- «Черно-белое» — полутонов не будет, вы получите максимально четкое изображение.
- «Оригинал» — это оригинальная фотография документа, без изменения яркости и контрастности.
- «Скан» — в этом режиме автоматически возрастает контрастность, текст станет более читаемым.
После сканирования сохраненный файл можно отправить по почте или через мессенджеры.
6. Сканер QR-кода
Установите камеру в режим поиска, наведите искатель на Qr-код на товаре. Появится ссылка. Скопируйте ее или сразу откройте в приложении «Яндекс – с Алисой».
Этим же способом можно отсканировать любой чек из магазина (главное, чтобы в нем содержался QR-код).
Кстати, эта функция дает возможность получить вознаграждение, если сканируете чеки по товарам, которые участвуют в акции кэшбека от сервиса edadeal.ru. Вот, например, список магазинов, которые возвращают кэшбек по чеку.
7. Сканер бонусных карт
Вы можете отсканировать любую бонусную карту, если на ее задней стороне имеется QR или штрих-код.
Сканируйте бонусную карту умной камерой в режиме «Карты»:
Теперь нужно указать магазин, который выдал вам эту бонусную карту:
Внимание! Если умная камера не сканирует вашу бонусную карту, ее можно добавить самостоятельно. Для этого тапните по своей аватарке, затем выберите раздел «Бонусные карты» → «Добавить карту»:
Так можно занести в телефон все свои бонусные карты и больше не носить с собой в кошельке пластиковые карточки. Показать карту при оплате на кассе вы можете тремя способами:
- Нажав на значок «Бонусные карты» на главном экране.
- Попросив Алису открыть бонусные карты.
- Кликнув по аватарке в приложении «Яндекс — с Алисой» (далее нужно открыть раздел «Бонусные карты»).
8. Решение уравнений
Эта функция идеальна для школьников (и родителей, которые забыли программу). Выбрав эту функцию в меню, сфотографируйте непонятное уравнение умной камерой. Уравнение может быть как из книги, так и написано от руки. Но обратите внимание, что с рукописным текстом камера может неверно считать данные:
Если такое произошло и распознавание букв и цифр в уравнениях было некорректно (как в нашем случае), можно откорректировать данные на клавиатуре в этом блоке:
После считывания данных умная камера выдаст ссылки на справочные материалы или даже пошаговый алгоритм для решения задачи:
9. Поэзия
Наведите камеру на любой объект, тапните на иконку «Поэзия», и приложение предложит вам вариант стихотворения, которое включает в себя слово, обозначающее предмет в объективе камеры. Забавная функция для постов в соцсетях.
Вывод
Умная камера — это удобный новый способ поиска информации. Даже не нужно формулировать запрос — достаточно навести камеру на объект и узнать о нем все. А если объекта нет перед глазами, можно загрузить фото из галереи.
Несмотря на то, что задействованные нейросети постоянно учатся, ошибки еще возможны. Поэтому проверять информацию все же пока стоит (особенно это касается рукописных текстов). Для корректировки данных можно использовать клавиатуру.
Может ли «Яндекс.Камера» составить конкуренцию программам -переводчикам, или калькуляторам калорийности блюд? Пока еще нет. Но приложение точно сделает вашу жизнь удобнее. И чем чаще вы будете ее использовать, тем лучше будет результат.
Единственная плата за прогресс — разрешение (которое вы даете!) на сбор информации о вас. Не забудьте дать приложению «Яндекс — с Алисой» все требуемые доступы и обеспечьте постоянный доступ в интернет, иначе поиск по картинкам работать не будет.
Источник: texterra.ru