Enten det er Siri, Cortana eller Google Assistant, har AI-assistenter vært tilstede på smarttelefoner en stund nå. Og med den raske utviklingen av kunstig intelligens-teknologier på alle domener, vil disse assistentene bare bli bedre med tiden.
Det første eksemplet vi har på dette er Googles Gemini, som har erstattet Google Assistant på Android-smarttelefoner som standard AI-assistent. Mens tidligere Gemini var ganske begrenset i hva den kunne gjøre sammenlignet med Google Assistant, annonserte Google nylig store oppdateringer til den som vil gjøre chatboten utrolig kraftig og mer nyttig.
Dette gjelder spesielt for Gemini Nano, som ble annonsert på Pixel 8-telefoner og Samsung Galaxy S24 tilbake i januar. Her er hvordan Google planlegger å oppdatere denne modellen slik at den blir enda bedre.
Geminis kontekstbevissthet får en stor forbedring
Som andre chatbots kan Gemini vanligvis forstå konteksten du samhandler med den, selv om dette ikke alltid er tilfelle. Det er grunnen til at en av de viktigste endringene som kommer til det er en betydelig forbedring i dens kontekstuelle bevissthetsevner.
Gemini kan nå enkelt forstå hva som skjer på skjermen din og til og med applikasjonen du kan bruke til enhver tid. Ifølge Google vil brukere kunne hente opp Gemini-overlegget og bruke AI mens de bruker en annen app samtidig. Du kan for eksempel generere bilder med Gemini og dra og slippe dem direkte til Google Messages, Gmail eller en annen app.
Et annet eksempel er at når du ser på en YouTube-video, kan du bruke Geminis «Spør denne videoen»-funksjonen for å få informasjon fra den videoen. Dette ligner på Gemini Advanceds «Spør denne PDF-funksjonen» som kan hjelpe deg å få informasjon raskt fra en PDF-fil uten å måtte lese den fullstendig.
Til slutt er det dynamiske forslag som Gemini vil tilby ved å sjekke skjermen din. Dette kan til og med skje uten at du trenger å skrive noe siden Gemini automatisk vil forstå konteksten til det du jobber med.
Hvis du for eksempel har en samtale i Google Messages om å ta en kaffe, kan Gemini automatisk anbefale de beste kaffebarene i nærheten av deg i Google Maps.
Brukere vil snart kunne få tilgang til Gemini fra overleggspanelet som vil være til stede selv mens de gir resultater, slik at du ikke trenger å åpne det i fullskjermmodus hver gang.
Gemini Nano for å få fulle multimodale muligheter
Til nå stolte Gemini på tekst- eller stemmebaserte innganger for å forstå en brukers spørsmål og gi relevante svar. Nå oppgraderer Google sine evner og kaller det Gemini Nano med Multimodality. Dette er fordi den oppdaterte modellen også kan bruke bilder, talespråk og lyder for å forstå hva en bruker ønsker.
Dette er en enorm, men veldig velkommen oppgradering og vil drastisk endre hva smarttelefoner med AI-assistenter kan gjøre. Du vil kunne bruke Pixel-smarttelefonen din til å få informasjon fra omgivelsene dine gjennom kameraet og mikrofonen i stedet for bare å stole på tekst.
Circle to Search har blitt oppdatert for å hjelpe studenter
Tilbake i januar kunngjorde Google en ny funksjon for utvalgte Android-smarttelefoner – Circle To Search, som lar deg bruke en enkel gest for å søke etter informasjon uten å forlate appen du bruker. Dette fungerer med multisøk, slik at du kan bruke både bilder og tekst til å stille Google et spørsmål om hva som helst på skjermen.
Siden lanseringen ble Circle To Launch oppdatert med funksjoner som fullskjermoversettelse, men på sin I/O-utviklerkonferanse kunngjorde Google nok en oppdatering. Den kan nå hjelpe elevene med leksene ved å hjelpe dem med å løse matematikk- og fysikkoppgaver enkelt.
Elevene trenger bare å sette en ring rundt problemet de vil ha hjelp med, og Gemini vil gi dem trinnene de må følge for å få svaret.
Google kunngjorde også at Circle To Search snart til og med vil kunne hjelpe til med å løse komplekse problemer som involverer grafer, diagrammer, formler og mer. Google utvider også funksjonen til flere Pixel- og Samsung-smarttelefoner.
Talkback vil gi bedre beskrivelser
Talkback er en Android-funksjon utviklet for å hjelpe personer med synshemninger ved å forklare hva som vises på smarttelefonskjermene deres. Med Gemini Nano som får multimodale muligheter, blir Talkback også mye bedre til å beskrive objekter og elementer.
Det som er mest imponerende med dette er at dette fungerer selv når enheten din er offline. Den oppdaterte Gemini Nano-modellen kan tilby beskrivelser som vil være svært lik det et menneske ville gi, noe som gjør den mye mer nyttig sammenlignet med hvordan Talkback fungerer akkurat nå.
Gemini kan nå varsle deg om svindelanrop
Ettersom svindelbeskyttelsen har blitt mer robust med årene, har svindelsamtaler også blitt mer sofistikerte. Så til tross for disse beskyttelsene, klarer mange fortsatt ikke å skille svindelanrop fra ekte. Det er derfor Google tester en ny funksjon som lar Gemini Nano gi sanntidsvarsler for svindelbeskyttelse.
Den vil kunne oppdage mønstre i samtaler som vanligvis er tilstede i svindelsamtaler og varsle deg umiddelbart. Hvis du for eksempel blir oppringt fra noen som hevder å være en bankrepresentant som ber deg om å overføre penger eller noe på samme måte, får du et varsel. Og siden dette er beskyttelse på enheten, vil personvernet ditt ikke bli kompromittert.
Gemini Nano ble introdusert med Pixel 8-telefonserien og Samsung Galaxy S24 tidligere i år. Den oppdaterte modellen forventes å komme på Pixel-telefoner senere i år, mens funksjoner som svindelvarsler vil komme til alle Android-enheter.
Med disse oppdateringene gjør Google Gemini kraftigere og bedre til å være en virtuell assistent som kan hjelpe deg når du trenger det. Imidlertid vil de fleste av disse funksjonene være begrenset til flaggskiptelefoner, i det minste for nå, så vi må kanskje vente en stund for å se dem på andre enheter.
Legg att eit svar