Google började på torsdagen rulla ut en ny sökfunktion som låter användare söka information med både text och bilder samtidigt. Den nya multisökningsfunktionen är en del av Googles pågående ansträngningar att använda AI för att “skapa informationsupplevelser som verkligen är konversationsbaserade, multimodala och personliga”, som Googles vd Sundar Pichai sa nyligen.
Multisökningsfunktionen är inbäddad i Google Lens, bildigenkänningsverktyget som är tillgängligt via Google-appen. För närvarande är funktionen tillgänglig i betaversion för amerikanska användare som söker med text på engelska. Den är också inriktad på shoppingsökningar.
En användare kan till exempel ta en skärmdump av en orange klänning och lägga till “grönt” i sin fråga för att försöka hitta samma klänning i den färgen. Det är också användbart för icke-kommersiella sökningar; en användare kan ta en bild av en rosmarinplanta och lägga till frågan “skötselinstruktioner” för att ta reda på hur man tar hand om sin nya planta.
För att använda funktionen öppnar du Google-appen, trycker på objektivkameraikonen och söker sedan efter en skärmdump eller tar en ny bild. Sedan sveper du uppåt och trycker på knappen “+ Lägg till i din sökning” för att lägga till text.
I sitt blogginlägg på torsdag sa Google att det också undersöker hur funktionen kan förbättras med MUM (Multitask Unified Model), Googles senaste AI-modell. Teknikjätten delade nyligen om hur den använder MUM och andra AI-modeller för att mer effektivt leverera information om krishjälp till människor som söker hjälp.
Tillbaka i februari, under Googles Q4-konferenssamtal, redogjorde Pichai för Googles investeringar i AI-modeller som möjliggör multimodal sökning.
“Under 2022 kommer vi att fortsätta fokusera på att utveckla våra kunskaps- och informationsprodukter, inklusive Sök, Maps och YouTube, för att vara ännu mer användbara,” sa han. “Investeringar i AI kommer att vara nyckeln, och vi kommer att fortsätta att göra förbättringar av konversationsgränssnitt som assistenten.”
Han tillade, “Från MAMMA till Pathways till BERT och mer, dessa djupa AI-investeringar hjälper oss att leda i sökkvalitet.”
