Google запровадить "поруч зі мною" і "дослідження сцени" в технології мультипошуку

Минулого місяця ми бачили, як Google запустив функція мультипошуку в Lens, яка в першу чергу призначена для допомоги користувачам у здійсненні покупок і пошуку певних товарів на ринку за допомогою одночасного використання зображень і слів. Тепер Google має більші амбіції щодо технології, представляючи більш розширені функції, доступні всім. У середу старший віце-президент Google Прабхакар Рагаван виявлено майбутні функції в технології мультипошуку Google – «поруч зі мною» та «дослідження сцени».

Функція «поруч зі мною», яку планується випустити в усьому світі пізніше цього року спочатку англійською, а потім і іншими мовами, працюватиме так само, як базовий багаторазовий пошук, у якому користувачам знадобиться суміш зображень і слів у введених пошукових запитах. Однак замість того, щоб зосереджувати слова на зовнішньому вигляді зображення, ця нова функція виділить місце пошуку за допомогою фрази «поруч зі мною». Це покаже вам найближчі компанії, які пропонують продукт, який ви шукаєте.

«Наприклад, скажімо, що ви бачите в Інтернеті різнокольорове блюдо, яке б хотіли спробувати, але ви не знаєте, що в ньому міститься чи як воно називається», — пояснює Рагхаван. «Коли ви використовуєте мультипошук, щоб знайти його поблизу, Google сканує мільйони зображень та оглядів, опублікованих на веб-сторінках, а також від нашої спільноти учасників Карт, щоб знайти результати про найближчі місця, де пропонують страву, щоб ви могли насолоджуватися нею самостійно».

З іншого боку, функція «дослідження сцени» має більш перспективні можливості, дозволяючи користувачам отримувати інформацію про декілька об’єктів у кадрі камери. За словами Рагхавана, це дозволить вам панорамувати камеру мультипошуку і негайно отримувати інформацію про предмети, зняті на сцені.

«Уявіть, що ви намагаєтеся вибрати ідеальний батончик для свого друга, який трохи поціновує шоколад», — пояснює Рагхаван. «Ви знаєте, що вони люблять чорний шоколад, але не люблять горіхи, і ви хочете отримати для них щось якісне. Завдяки дослідженню сцени ви зможете відсканувати всю полицю за допомогою камери свого телефону та побачити корисні відомості, накладені перед вами. Дослідження сцени — це потужний прорив у здатності наших пристроїв розуміти світ так, як ми — тож ви можете легко знаходити те, що шукаєте, — і ми з нетерпінням чекаємо, щоб у майбутньому використовувати його для мультипошуку».

Завдяки цим новим функціям, які можуть покращити можливість багаторазового пошуку Google Lens, Google може ще більше покращити призначення технології розпізнавання зображень і зробити її більш практичною для повсякденного використання. Наразі Рагхаван зазначає, що користувачі Google Lens здійснюють пошук понад 8 мільярдів разів на місяць. Але з приходом нових удосконалень цифри можуть різко зрости, оскільки технологія отримає більше визнання з боку громадськості.