„În Mod Neașteptat, un Cerb a Intrat Scurt În Camera de Zi”: Viața cu Gemini Home
Pur și simplu nu poți ignora efectele boom-ului AI generativ. Chiar dacă nu cauți boți AI, aceștia sunt integrați în practic fiecare produs și serviciu. Și pentru ce? Există o mulțime de discuții evazive despre agentic asta și AGI asta, dar ce poate face „gen AI” pentru tine chiar acum? Gemini for Home este cea mai recentă încercare a Google de a face această tehnologie utilă, integrând Gemini cu dispozitivele smart home pe care oamenii le au deja. Oricine plătește pentru istoricul video extins în aplicația Home este pe cale să primească o porție bună de AI, inclusiv rezumate zilnice, notificări etichetate cu AI și multe altele. Având în vedere presupusa putere a modelelor AI precum Gemini, recunoașterea evenimentelor în câteva videoclipuri și răspunsul la întrebări despre ele nu pare un obstacol prea mare. Și totuși, Gemini for Home a demonstrat o înțelegere precară a adevărului, ceea ce poate duce la unele interacțiuni neliniștitoare, cum ar fi avertismente periodice de invazie a casei, atât umană, cât și animală. Poate face unele lucruri interesante, dar merită prețul - și durerile de cap?
Are nevoie casa ta inteligentă de un abonament AI premium? Simplul fapt de a utiliza aplicația Google Home pentru a-ți controla dispozitivele nu transformă casa ta inteligentă în Gemini. Aceasta face parte din serviciul plătit de nivel superior al Google, care vine cu un istoric extins al camerei și funcții Gemini pentru 20 USD pe lună. Acest abonament îți introduce videoclipul într-un model AI Gemini care generează rezumate pentru notificări, precum și un „Brief Zilnic” care oferă o prezentare a tot ceea ce s-a întâmplat într-o anumită zi. Planul mai ieftin, de 10 USD, oferă un istoric video mai mic și fără rezumate sau notificări asistate de AI. Ambele planuri activează Gemini Live pe difuzoarele inteligente.
Conform Google, nu trimite toate videoclipurile tale către Gemini. Ar fi o risipă uriașă de cicluri de calcul, așa că Gemini vede (și rezumă) doar clipuri de evenimente. Aceste rezumate sunt apoi distilate la sfârșitul zilei pentru a crea Brief-ul Zilnic, care de obicei rezultă într-o listă destul de plictisitoare cu persoane care intră și ies din camere, livrează pachete și așa mai departe. Important este că modelul Gemini care alimentează această experiență nu este multimodal - procesează doar elemente vizuale ale videoclipurilor și nu integrează sunetul din înregistrările tale. Deci, zgomotele sau conversațiile neobișnuite capturate de camerele tale nu vor fi căutabile sau reflectate în rezumatele AI. Acest lucru poate fi intenționat pentru a te asigura că conversațiile tale nu sunt regurgitate de un AI.
Plata pentru abonamentul infuzat cu AI al Google adaugă și Ask Home, un chatbot conversațional care poate răspunde la întrebări despre ceea ce s-a întâmplat în casa ta pe baza stării dispozitivelor smart home și a filmărilor video. Poți pune întrebări despre evenimente, poți recupera clipuri video și poți crea automatizări. Există cu siguranță unele probleme cu înțelegerea video de către Gemini, dar Ask Home este destul de bun la crearea de automatizări. Era posibil să configurezi automatizări în vechea aplicație Home, dar AI-ul actualizat este capabil să pună cap la cap automatizări pe baza cererii tale în limbaj natural. Poate datorită setului limitat de elemente posibile de automatizare, AI-ul face acest lucru corect de cele mai multe ori. Ask Home este, de asemenea, de obicei capabil să dezgroape clipuri de evenimente trecute, atâta timp cât ești specific cu ceea ce vrei. Planul Advanced pentru Gemini Home îți păstrează videoclipurile timp de 60 de zile, așa că poți interoga robotul doar pe clipuri din această perioadă. Google spune, de asemenea, că nu reține niciunul dintre aceste videoclipuri pentru antrenament. Singura instanță în care Google va folosi filmări de la camerele de securitate pentru antrenament este dacă alegi să le „împrumuți” Google printr-o opțiune obscură din aplicația Home. Google spune că va păstra aceste videoclipuri până la 18 luni sau până când îți revocă accesul. Cu toate acestea, interacțiunile tale cu Gemini (cum ar fi solicitările tale tastate și evaluările rezultatelor) sunt utilizate pentru a rafina modelul.
Cerbul neașteptat Fiecare bot AI generativ face ocazional o greșeală, dar probabil că nu vei observa fiecare una. Cu toate acestea, atunci când AI halucinează despre viața ta de zi cu zi, este mai vizibil. Nu există niciun motiv pentru care Google ar trebui să fie confuz de configurarea mea smart home, care include câteva camere exterioare și o cameră interioară - toate de marca Nest cu toate funcțiile AI implicite activate - pentru a-mi supraveghea câinii. Deci, AI vede mulți câini tolănindu-se și privind pe fereastră. S-ar spera că ar putea rezuma în mod fiabil ceva atât de simplu. S-ar putea fi dezamăgit, totuși. În primul meu Brief Zilnic, am fost fascinat să văd că Google a observat niște faună sălbatică interioară. „În mod neașteptat, un cerb a intrat scurt în camera de zi”, a spus Gemini. Câinii și cerbii sunt cam același lucru, nu?
Gemini merită totuși un pic de credit pentru că a recunoscut că apariția unui cerb în camera de zi ar fi neașteptată. Dar „cerbul” era, în mod natural, un câine. Nici aceasta nu a fost o întâmplare unică. Gemini uneori îmi identifică corect câinii, dar multe clipuri și rezumate de evenimente îmi spun în continuare despre apariția notabilă, dar scurtă, a cerbilor în jurul casei și în curte. Această situație cu cerbii servește ca o amintire acută că acest nou tip de AI nu „gândește”, deși utilizarea de către industrie a acestui termen pentru a descrie raționamentul simulat te-ar putea face să crezi altfel. O persoană care se uită la acest videoclip nu ar lua în considerare posibilitatea de a vedea un cerb după ce i-a văzut deja pe câini lăfăindu-se în alte videoclipuri. Gemini nu are această bază de bun simț, totuși. Dacă jetoanele spun cerb, este un cerb. Voi spune totuși că Gemini este excelent la recunoașterea modelelor de mașini și a siglelor de mărci. Fă ce vrei din asta.
Amestecul de animale nu este ideal, dar nu este un obstacol major pentru utilizare. Nu am luat în serios posibilitatea ca un cerb să se fi rătăcit în casă și este puțin amuzant modul în care raportul zilnic continuă să-și exprime uimirea că fauna sălbatică invadează. Este o greșeală destul de inofensivă. „Acuratețea generală a identificării depinde de mai mulți factori, inclusiv detaliile vizuale disponibile în clipul camerei pentru ca Gemini să le proceseze”, explică un purtător de cuvânt al Google. „Fiind un model lingvistic mare, Gemini poate face uneori greșeli inferențiale, ceea ce duce la aceste identificări greșite, cum ar fi confundarea câinelui tău cu o pisică sau un cerb.” Google spune, de asemenea, că poți ajusta AI-ul corectându-l atunci când greșește. Acest lucru funcționează uneori, dar sistemul încă nu înțelege cu adevărat nimic - asta depășește capacitățile unui model AI generativ. După ce i-am spus lui Gemini că vede câini mai degrabă decât cerbi, vede faună sălbatică mai rar. Cu toate acestea, nu pare să aibă încredere în mine tot timpul, ceea ce îl face să raporteze apariția unui cerb care este „probabil” doar un câine.
O potrivire perfectă pentru sezonul înfricoșător Halucinațiile smart home ale lui Gemini au și o latură mai puțin comică. Când Gemini etichetează greșit un clip de eveniment, poți ajunge cu niște alerte destul de tulburătoare. Imaginează-ți că ești plecat când asistentul tău Gemini te lovește cu o notificare spunându-ți: „O persoană a fost văzută în camera de zi.” O persoană care se plimbă prin casa despre care credeai că este goală? Asta este alarmant. Este un intrus, o halucinație, o fantomă? Așa că, în mod natural, verifici feed-ul camerei pentru a găsi... nimic. O investigație Ars Technica confirmă că AI nu poate detecta fantome. Deci, o fantomă în mașină?
În mai multe ocazii, am văzut Gemini confundând câinii și camerele complet goale (sau poate o umbră?) cu o persoană. Poate fi alarmant la început, dar după câteva alerte false, începi să nu mai ai încredere în robot. Acum, chiar dacă Gemini a identificat corect o persoană aleatorie în casă, probabil că aș ignora-o. Din păcate, aceasta este singura experiență de notificare pentru Gemini Home Advanced. „Nu poți dezactiva descrierea AI păstrând în același timp notificarea de bază”, mi-a spus un purtător de cuvânt al Google. Ei au menționat, totuși, că poți dezactiva alertele pentru persoane în aplicație. Acestea sunt activate atunci când activezi detectarea fețelor familiare a Google.
Gemini adesea răsucește realitatea doar puțin în loc să o creeze din nimic. O persoană care ține orice în curte face treburi gospodărești. O persoană oriunde, care face orice, devine mai multe persoane. O jucărie pentru câini devine o pisică culcată la soare. Câteva păsări devin un raton. Lui Gemini îi place, de asemenea, să ignore lucruri, cum ar fi negarea faptului că a existat o livrare de colete chiar și atunci când există un videoclip etichetat drept „persoană livrează coletul”. Gemini a refuzat în continuare să admită că a greșit.
La sfârșitul zilei, Gemini etichetează majoritatea clipurilor corect și, prin urmare, produce notificări în mare parte precise, deși uneori inutile. Problema este reversul lui „majoritatea”, care este încă o mulțime de greșeli. Unele dintre aceste greșeli te obligă să-ți verifici camerele - cel puțin, înainte să te saturi de confabulațiile lui Gemini. În loc să economisească timp și să te țină la curent cu ceea ce se întâmplă acasă, îți pierde timpul. Pentru ca acest lucru să fie util, erorile inferențiale nu pot fi o întâmplare zilnică.
Învățând pe măsură ce merge Google spune că scopul său este să facă Gemini for Home mai bun pentru toată lumea. Echipa „investește masiv în îmbunătățirea identificării precise” pentru a reduce notificările eronate. Compania consideră, de asemenea, că faptul că oamenii adaugă instrucțiuni personalizate este o parte esențială a puzzle-ului. Poate că în viitor, Gemini for Home va fi mai sincer, dar în prezent este nevoie de multă îndrumare pentru a-l deplasa în direcția corectă. Cu o reglare atentă, poți aborda într-adevăr unele dintre fanteziile lui Gemini for Home. Văd mai puține identificări de cerbi după ce am umblat la ele, iar câteva instrucțiuni personalizate au făcut ca Home Brief să piardă mai puțin spațiu spunându-mi când oamenii intră și ies din camere care nu există. Dar încă nu știu cum să-mi cer drumul afară din Gemini văzând oameni într-o cameră goală.
În ciuda intenției sale de a îmbunătăți Gemini for Home, Google lansează un produs care pur și simplu nu funcționează foarte bine din cutie și se comportă greșit în moduri care sunt cu adevărat neplăcute. Camerele de securitate nu ar trebui să mintă despre faptul că văd intruși și nici nu ar trebui să-mi spună că mint atunci când nu reușesc să recunoască un eveniment. Botul Ask Home are declarația standard prin care recomandă să verifici ceea ce spune AI-ul. Trebuie să iei în serios acest avertisment cu Gemini for Home. La lansare, este greu de justificat plata pentru abonamentul Advanced Gemini de 20 USD. Dacă plătești deja pentru că vrei istoricul evenimentelor de 60 de zile, ești blocat cu notificările AI. Poți ignora totuși existența Daily Brief. Renunțarea la abonamentul de 10 USD pe lună îți oferă doar 30 de zile de istoric al evenimentelor cu notificările și etichetarea evenimentelor non-generative vechi. Poate că acesta este pariul mai inteligent pentru casa inteligentă chiar acum. Gemini for Home este disponibil pe scară largă pentru cei care au optat pentru acces timpuriu în aplicația Home. Așa că poți evita Gemini pentru moment, dar este doar o chestiune de timp până când Google va da drumul pentru toată lumea. Sperăm că va funcționa mai bine până atunci.