Google viser Astra, en rival til GPT-4, der ser den virkelige verden gennem mobiltelefonens kamera

Under det traditionelle udviklerarrangement Google I / O vi kender Projekt Astra, en ny inteligência kunstig som er under udvikling af virksomheden. Defineret som en Multimodal AI med støtte til at skabe forskellige typer indhold, forstå, hvordan det fungerer i praksis, og hvordan det nye produkt kan interagere med den virkelige verden og give svar på hverdagens spørgsmål.

Sådan virker Astra

Let at definere som en AI-agent, der skal integreres i applikationen Gemini til smartphones Androiden Projekt Astra "ser" ved hjælp af smartphonens bagkamera og sender realtidssvar til sin bruger. Det er, som om din smartphone kom til live, så du kan se alt omkring dig.

Under dagens Google-begivenhed så vi Demis Hassabis teste AI i praksis — og lederen af Google DeepMind og lederen af ​​AI-indsatsen lover, at det ikke er blevet manipuleret. Vi blev transporteret til et kontor i Storbritannien, og så snart hun så en højttaler, bad brugeren AI om at identificere en af ​​dens komponenter, en tweeter.

En anden interessant demonstration var at læse programmeringskoder på en computerskærm. O Projekt Astra ikke kun var den i stand til at identificere, at skærmen viste koder, men også indikere, hvad de ville gøre, når de kørte.

Til sidst, da smartphonen blev bragt til kontorvinduet, og brugeren spurgte, hvilket nabolag kontoret var placeret i, blev der sendt et svar på mindre end fem sekunder.

O Google definerede Projekt Astra som "en nyttig AI-agent til hver dag", og at udviklingen er gennemført over de sidste fem år for at levere et værktøj, der virkelig gør en forskel i brugernes dagligdag.

Selvom vi har gjort utrolige fremskridt med at udvikle AI-systemer, der kan forstå multimodal information, er det en vanskelig teknisk udfordring at reducere responstiden for noget samtale. I løbet af de sidste par år har vi arbejdet på at forbedre, hvordan vores modeller opfatter, ræsonnerer og taler for at gøre tempoet og kvaliteten af ​​interaktion mere naturlig.

Google om Project Astra

Hukommelsesressource

Hvad fangede mest opmærksomhed i Projekt Astra det var muligheden for ham at huske alt, hvad kameraet kunne se. Da brugeren spurgte, hvor hendes briller var, svarede AI-agenten hurtigt den nøjagtige placering, som var ved siden af ​​et rødt æble.

Når de sættes på arbejde på en ikke-afsløret smart brille, den Projekt Astra Det imponerede også ved at lave optimeringer, der gør hverdagen nemmere for mange mennesker. Samtalestilen for Googles AI-agent er også meget let, hvilket viser, at virksomheden er forpligtet til at udvikle AI'er, der ikke lader det naturlige til side, selvom de ikke eksisterer i det virkelige liv.

Ved at udnytte vores kernetalemodeller forbedrer vi også, hvordan de lyder, hvilket giver agenter en bredere vifte af intonationer. Disse agenter kan bedre forstå den kontekst, de bliver brugt i, og reagere hurtigt i samtalen. Med teknologier som denne er det nemt at forestille sig en fremtid, hvor folk kunne have en specialiseret AI-assistent ved deres side, via en telefon eller briller.

Google om Project Astra

Se eksemplet vist i dag på Googles nyhedsbegivenhed:

Tilgængelighed

Ifølge egne data Googleen Projekt Astra vil blive integreret i Google Gemini, erstatter den berømte Google Assistant, senere på året. Early adopters vil sandsynligvis se dette i midten af ​​september, den tid på året, hvor Google lancerer sine nye smartphones pixel og vil også frigive Android 15 for smartphone-producenter over hele verden.

Virksomhedens idé er at udvikle små funktioner, der tilsammen udgør en komplet mulighed for sine brugere. O Projekt Astra er blot en del af flere nye funktioner præsenteret i Google I/O 2024, men det var bestemt klart, at virksomheden, som nævnte udtrykket "AI" 121 gange i løbet af to timers arrangement, vil investere mere og mere i dette marked.

Google Assistant får ny brug

Til dato kan andre personlige assistenter lide Amazon Alexa e Siri er meget fokuseret på at sende enklere svar og brugeruploadede filer. Fra det øjeblik, Project Astra er integreret med Google Assistant, findes på flere Android-enheder og endda tilgængelig for dem med Apple-enheder, vil dette helt sikkert indlede en ny æra.

Det store spørgsmål er, hvornår det skal ske, og især hvordan det kommer til at fungere i praksis. Fordi den stadig er under udvikling, skal AI-agenten gennemgå nogle ændringer, før den udgives til alle, men ideen er interessant og har nu vores opmærksomhed.

Hvad tænkte du på Projekt Astra? Fortæl os folk Kommentar!

Se også

Gemini Advanced eller ChatGPT Plus? Se hvilken AI der er bedst

Google annoncerer Gemini 1.5 med 87 % bedre ydeevne

Anmeldt af Glaucon Vital den 14/5/24.