Bing oznamuje nová vylepšení ve vyhledávání obrázků založená na umělé inteligenci

Vyhledávač Bing společnosti Microsoft oznámil nová vylepšení svého vyhledávače Bing založená na umělé inteligenci, zejména sekci vyhledávání obrázků. Vylepšení umožňují víceúrovňové shody, lepší porozumění uživatelským dotazům, obrázkům a webovým stránkám a také vztahům mezi nimi.

Microsoft, trochu jako Google, nyní začlenil technologii BERT/Transformer využívající 1) předem vyškolené znalosti k lepší interpretaci textových informací – zejména pro výše uvedené těžké případy; 2) mechanismus pozornosti pro vložení obrázku a webové stránky s vědomím toho druhého, takže vložený dokument je dobrým shrnutím hlavních oblastí obrázku a klíčových bodů na webové stránce.

Společnost Microsoft také extrahuje vybranou sadu atributů objektů z dokumentů dotazu i kandidátů a použije tyto atributy pro porovnávání.

To společnosti Microsoft umožňuje porovnat dotaz {obrázky plavání starších mužů} s podobnými atributy z obsahu obrázku a jeho okolního textu. Nyní lze dotaz a dokument považovat za „přesnou shodu“, protože sdílejí stejné atributy. To je užitečné pro přesnější vyhledávání, kdy uživatelé hledají položky s více specifickými vlastnostmi, např. {blondýn s knírkem}, {taneční oblečení pro dívky s růží})

Microsoft také automaticky generuje metadata pro dokumenty, včetně obrázků, která se pak snadněji přiřazují k vyhledávání. Jeden z nejužitečnějších typů metadat se nazývá „BRQ“ – nejlepší reprezentativní dotaz. BRQ jsou obvykle dobrým shrnutím hlavních témat webové stránky a hlavního obsahu obrázků. Proces generování BRQ pro obrázky Bing také silně závisí na mnoha moderních technikách hlubokého učení.

Microsoft říká, že tyto techniky měly skutečný dopad na užitečnost a přesnost jejich vyhledávače, což dokládá odpověď Bingu na dotaz {autosedačka pro Chevy impala 96} v průběhu let.

Microsoft říká, že Bing Image Search nyní nabízí hlubší sémantické porozumění uživatelským dotazům. Milovníci hlubokého učení dokážou přečíst všechny podrobnosti v Microsoft zde.