Умная камера «Яндекса» находит поэзию в окружающих предметах
Разработчики компании расширили функциональность фирменного мобильного приложения. Новый алгоритм умной камеры «Яндекса» получил возможность ассоциативного поиска стихов по изображению. Подходящие строчки к предмету или человеку в кадре ИИ выбирает из работ как классиков, так и современных поэтов.
Обновление приурочено ко Дню русского языка. С помощью камеры в приложении «Яндекс» можно найти поэтические описания предметов, животных или людей. Стоит навести на них объектив, как смартфон найдёт строки с их упоминанием. Чтобы «увидеть поэзию вокруг», достаточно включить соответствующий режим в приложении. При этом гаджет будет оперировать творчеством поэтов разных эпох и направлений, от Жуковского и Фета до Гребенщикова и Дельфина. Понравившейся цитатой можно поделиться — или перейти к полной версии произведения.
Для распознавания окружающих объектов камера использует компьютерное зрение. Фирменный алгоритм ищет подходящие стихи в поиске «Яндекса», задействуя нейронные сети. Специально обученный искусственный интеллект умеет определять смысловую близость картинки и текста. Умная камера «Яндекса» помогает и в бытовых делах. Она способна сканировать документы, переводить текст и распознавать предметы — например, подсказывать названия незнакомых растений или магазинов, где можно купить понравившийся рюкзак.
Обновлённая умная камера уже доступна в новой версии приложения «Яндекс» для iOS и Android.
Умная камера Яндекса научилась цитировать поэзию
Нейросеть найдёт стихотворение к любому изображению.
Ко Дню русского языка Яндекс запустил в мобильном приложении функцию, позволяющую автоматически подбирать стихи к фотографиям. Пользователи наводят камеру смартфона на любой предмет, а нейросеть находит стихотворения, в которых упомянут изображённый объект.
База не ограничивается классической поэзией: приложение выдаёт не только Пушкина и Есенина, но и тексты Гребенщикова и Дельфина. Как объясняют разработчики, распознавание объекта и подбор стихов происходят при помощи компьютерного зрения и нейросетевого алгоритма. Чтобы включить функцию, нужно нажать на иконку камеры в строке поиска, а затем выбрать раздел «Поэзия».
Умная камера появилась в апреле 2021 года. Она доступна в приложении «Яндекс» для iOS и Android.
Журналистка. Пишет про дизайн во всех его проявлениях. В свободное от работы время ведёт Telegram-канал о кино «Нарушевич смотрит».
ОБЛОЖКА: Ilya Platonov / Shutterstock
Умная камера Яндекса научилась распознавать еду, машины и уравнения
Интернет, 29 сентября 2021 года. Яндекс объявил о масштабном обновлении умной камеры. Теперь с её помощью можно узнать, сколько белков, жиров и углеводов в чипсах, что за необычный автомобиль припаркован у дома или как решить квадратное уравнение — для этого достаточно навести на них камеру или сфотографировать. В основе новых возможностей лежат поисковые технологии и компьютерное зрение.
«Визуальный поиск — это принципиально иной способ искать информацию. Вам даже не нужно формулировать вопрос, вы просто наводите камеру на объект и узнаёте о нём всё. Мы верим, что за визуальным поиском будущее, и смотрим, как люди реагируют на умную камеру, что им нравится, а что нет. Это помогает нам понять, куда двигаться дальше, чтобы камера становилась более удобной, функциональной и полезной для пользователей», — рассказывает Елена Бондарь, руководитель умной камеры Яндекса.
Поиск продуктов
Умная камера улучшила поиск по продуктам питания. Теперь она не только находит их в интернете, но и даёт подробное описание. Стоит навести камеру на пакетик сока или плавленый сырок, и она покажет их состав: количество жиров, белков и углеводов; наличие сахара и ГМО; содержание микроэлементов. А также — сколько в продукте калорий и как долго нужно плыть или бежать, чтобы их израсходовать.
Поиск автомобилей
Если навести камеру на автомобиль, она покажет его описание: марку, модель и технические характеристики. Человек сможет понять, что за машина перед ним, какая у неё мощность, скорость и расход топлива. Технические характеристики снабжены коротким и ёмким пояснением: например, «разгоняется как спринтер» или «вместительная, как сундук».
Решение задач
Умная камера подскажет порядок действий для решения линейных и квадратных уравнений. Для этого достаточно перейти в режим «Решения» и сфотографировать задание. Кроме того, камера поможет найти обучающие видео, которые подробно объясняют решение задач такого типа.
Новые функции
Пользоваться камерой стало удобнее. Если интерес вызвало что-то мелкое, теперь можно приблизить изображение с помощью зума. Появилась возможность сфокусировать камеру на интересующем объекте. А если его нет перед глазами, можно загрузить фото из галереи. Кроме того, появилась фронтальная камера. Она позволяет показать камере самого себя — например, чтобы она нашла стихотворение (поиск стихов по изображению работает в режиме «Поэзия»).
Умная камера была запущена весной этого года. Она умеет также сканировать документы, переводить текст и распознавать предметы. Например, она подскажет название цветка, породу собаки или магазин, где можно купить понравившуюся вещь. Камера доступна в приложении Яндекс для iOS и Android. Чтобы её включить, нужно нажать на иконку камеры в поисковой строке.
