Hii inaashiria hatua muhimu katika mageuzi ya akili bandia, ikileta kipande dhahiri cha siku zijazo moja kwa moja kwenye vidole vyetu. Ingawa watumiaji wa mapema walio na vifaa vya Pixel 9 na Samsung Galaxy S25 wamefurahia kipengele hiki kwa muda, tangazo la Google hivi majuzi katika mkutano wake wa I/O linapanua ufikiaji kwa hadhira pana zaidi, inayojumuisha watumiaji wa Android na iOS. Hatua hii inasisimua sana kwa wamiliki wa iPhone, ambao sasa wanaweza kupata uzoefu wa moja ya utendaji bora zaidi wa AI unaopatikana sasa, haswa ikizingatiwa kuwa modi ya kamera ilitolewa kwa watumiaji wengine wa Android mnamo Aprili.
Kufunua Nguvu ya Kuona: Jinsi Modi ya Kamera ya Gemini Inavyofanya Kazi
Katika msingi wake, modi ya kamera ya Gemini Live inakipa AI uwezo wa "kuona," kuiwezesha kutambua na kutambua vitu vilivyowekwa ndani ya uwanja wa maoni wa kamera. Hii si ujanja wa juu juu tu; ni zana yenye nguvu ambayo inaruhusu watumiaji kuingiliana na mazingira yao kwa njia angavu na yenye taarifa zaidi.
Zaidi ya utambuzi rahisi wa kitu, Gemini pia anaweza kujibu maswali kuhusu vitu vilivyotambuliwa, akitoa muktadha na ufahamu unapoombwa. Zaidi ya hayo, watumiaji wanaweza kushiriki skrini zao na Gemini, kuruhusu AI kuchanganua na kutambua vipengele vinavyoonyeshwa kwenye skrini ya simu zao. Ili kuanzisha kipindi cha moja kwa moja na modi ya kamera, watumiaji huwezesha tu mwonekano wa kamera ya moja kwa moja, unaowawezesha kushiriki katika mazungumzo na chatbot kuhusu chochote ambacho kamera inanasa.
Maoni ya Kwanza: Jaribio na Gemini Live
Wakati wa awamu yangu ya kwanza ya majaribio na Gemini Live kwenye Pixel 9 Pro XL, nilivutiwa sana na uwezo wake. Uzoefu mmoja wa kukumbukwa hasa ulihusisha kumwomba Gemini atafute mkasi wangu uliopotea.
AI ilijibu kwa usahihi wa ajabu: "Nimeona tu mkasi wako kwenye meza, karibu kabisa na pakiti ya kijani kibichi ya pistachios. Je, unawaona?"
Kwa mshangao wangu, Gemini alikuwa sahihi kabisa. Mkasi ulikuwa hasa pale ilipoonyesha, licha ya ukweli kwamba nilikuwa nimepita tu kamera mbele yao kwa muda mfupi wakati wa kipindi cha dak 15 cha moja kwa moja ambapo mimi kimsingi nilikuwa nikiipa AI chatbot ziara ya nyumba yangu.
Nikiwa nimevutiwa na mafanikio haya ya awali, nilitafuta kwa hamu kuchunguza zaidi modi ya kamera. Katika jaribio lingine, lililoenea zaidi, niliamilisha kipengele hiki na kuanza kutembea kupitia nyumba yangu, nikimhimiza Gemini kutambua vitu alivyoviona. Ilitambua kwa usahihi vitu mbalimbali, ikiwa ni pamoja na matunda, ChapStick, na vitu vingine vya kila siku. Hata hivyo, ugunduzi upya wa mkasi wangu ulibaki kuwa onyesho la kushangaza zaidi la uwezo wake.
Ukweli kwamba Gemini alitambua mkasi bila kuombwa hapo awali ulikuwa wa kuvutia sana. AI ilikuwa imewatambua kimyakimya wakati fulani wakati wa kipindi na ikakumbuka kwa usahihi eneo lao kwa usahihi wa ajabu. Uzoefu huu kweli ulihisi kama mtazamo wa siku zijazo, na kunihimiza kufanya uchunguzi zaidi katika uwezo wake.
Kuchota Msukumo: Maono ya Google ya Live Video AI
Majaribio yangu na kipengele cha kamera ya Gemini Live yalionyesha onyesho lililoonyeshwa na Google msimu wa joto uliopita, ambalo lilionyesha mtazamo wa kwanza wa uwezo huu wa video wa AI wa moja kwa moja. Onyesho hilo lilimshirikisha Gemini akimkumbusha mtumiaji mahali alipokuwa ameacha miwani yake, jambo ambalo lilionekana kuwa nzuri sana kuwa kweli. Hata hivyo, kama nilivyogundua, kiwango hiki cha usahihi kilikuwa kinafikiwa hakika.
Gemini Live ana uwezo wa kutambua zaidi ya vitu vya nyumbani tu. Google inadai kwamba inaweza kuwasaidia watumiaji katika kuvinjari vituo vya treni vilivyojaa watu au kutambua vichungi katika pastries. Inaweza pia kutoa ufahamu wa kina katika kazi ya sanaa, kama asili yake na ikiwa ni kipande cha toleo ndogo.
Utendaji huu unazidi ule wa Google Lens ya kawaida. Unaweza kuwa na mazungumzo na AI, ambayo yana mazungumzo zaidi kuliko Msaidizi wa Google.
Google pia imetoa video ya YouTube inayoonyesha kipengele hiki, na sasa ina ukurasa wake kwenye Duka la Google.
Ili kuanza, washa Gemini, washa kamera, na uanze kuzungumza.
Gemini Live inajengwa juu ya Mradi wa Astra wa Google, ambao uliwasilishwa hapo awali mwaka jana na labda ndio kipengele kikubwa zaidi cha kampuni "tuko katika siku zijazo", hatua ya majaribio inayofuata kwa uwezo wa AI generativa, zaidi ya kuandika tu au hata kusema maongozi kwenye chatbot kama ChatGPT, Claude, au Gemini.
Kampuni za AI zinaendelea kuboresha uwezo wa zana za AI, kutoka kwa uundaji wa video hadi nguvu ya kimsingi ya usindikaji. Akili ya Kuona ya Apple, ambayo mtengenezaji wa iPhone alitoa katika beta mwaka jana, inalinganishwa na Gemini Live.
Gemini Live ina uwezo wa kuleta mageuzi jinsi tunavyoungana na mazingira kwa kuunganisha mazingira yetu ya kidijitali na fizikia tunaposhikilia tu kamera mbele ya kitu chochote.
Kuweka Gemini Live kwenye Jaribio: Matukio ya Ulimwengu Halisi
Mara ya kwanza niliitumia, Gemini alitambua kwa usahihi mkusanyiko maalum sana wa michezo wa sungura алиуеифла в чаоко. Wakati wa pili, nilimuonyesha rafiki yangu kwenye nyumba ya sanaa. Mara moja alitambua kobe kwenye msalaba (usiniulize) na akatambua na kutafsiri kanji karibu nayo, akitupa sisi sote baridi na kutuacha tukiwa tumeogopwa kidogo. Kwa njia nzuri, naamini.
Nilianza kufikiria jinsi ningeweza kujaribu utendaji. Nilipojaribu kuirekodi skrini ikifanya kazi, mara kwa mara ilishindwa. Je, ikiwa ningetoka kwenye njia ya kawaida? Mimi ni shabiki mkuu wa aina ya kutisha (filamu, mfululizo wa televisheni, na michezo ya video) na ninamiliki wingi wa vitu vya kukusanya, mapambo, na vitu vingine. Ingeendeshwa vipi na vitu visivyoeleweka zaidi, kama vile vitu vyangu vya kukusanya vya kutisha?
Kwanza, lazima niseme kwamba Gemini anaweza kuwa wa ajabu sana na anayekasirisha sana katika raundi moja ya maswali. Nilikuwa na takriban vitu 11 ambavyo nilitaka Gemini atambue, na kadiri kikao cha moja kwa moja kilipokuwa kikiendelea, ndivyo kilizidi kuwa mbaya, kwa hivyo ilinibidi nipunguze vipindi kwa kitu kimoja au viwili. Kwa maoni yangu, Gemini alijaribu kutumia taarifa za muktadha kutoka kwa vitu vilivyotambuliwa hapo awali ili kukisia vitu vipya, ambayo ina maana kwa kiasi fulani, lakini hatimaye haikunifaidi mimi wala yeye.
Wakati mwingine, Gemini alikuwa sahihi kabisa, akitoa majibu sahihi kwa urahisi na bila kuchanganyikiwa, ingawa hii ilitokea mara nyingi na vitu vya hivi karibuni au maarufu zaidi. Nilishangaa, kwa mfano, ilipogundua mara moja kwamba moja ya vitu vyangu vya majaribio haikuwa tu kutoka kwa Destiny 2, lakini pia toleo ndogo kutoka kwa hafla ya msimu kutoka mwaka uliopita.
Gemini mara nyingi angekuwa mbali kabisa, akinahitaji mimi kutoa vidokezo zaidi ili kukaribia jibu sahihi. Wakati mwingine, ilionekana kana kwamba Gemini alikuwa akitumia muktadha kutoka kwa vipindi vyangu vya awali vya moja kwa moja kutoa majibu, akitambua vitu vingi kama vinavyotoka Silent Hill wakati hazikuwa. Nina kabati la maonyesho lililowekwa wakfu kwa safu ya mchezo, kwa hivyo ninaweza kuelewa ni kwa nini angetaka kuzamia katika eneo hilo haraka.
Kufunua Kutokamilika: Mende na Tabia za Kipekee katika Mfumo
Gemini inaweza kuwa na hitilafu kabisa wakati mwingine. Mara kwa mara, Gemini alitambulisha vibaya moja ya vitu kama mhusika wa kubuni kutoka kwa mchezo ambao haujatolewa wa Silent Hill: f, akichanganya wazi sehemu za vyeo tofauti katika kitu ambacho hakijawahi kuwepo. Wakati Gemini alitoa jibu lisilo sahihi, na nililisahihisha na kumpa kidokezo cha karibu zaidi kwenye jibu—au kumpa jibu tu—kisha akalirudia jibu lisilo sahihi kana kwamba lilikuwa mkao mpya, lilikuwa ndilo mdudu mwingine thabiti niliokumbana nalo. Hilo lilipotokea, ningefunga kipindi na kuanza kipya, ambacho hakikuwa na manufaa kila wakati.
Mbinu moja niliyogundua ilikuwa kwamba majadiliano fulani yalikuwa na ufanisi zaidi kuliko mengine. Ikiwa ningepitia orodha yangu ya mazungumzo ya Gemini, nikabonyeza gumzo la zamani ambalo lilikuwa na kitu fulani sahihi, na kisha nikaenda moja kwa moja tena kutoka kwa gumzo hilo, ingeweza kutambua vitu bila matatizo yoyote. Ingawa hii si ya kutarajiwa kila wakati, ilikuwa ya kuvutia kutambua kwamba mazungumzo fulani yalifanya kazi vizuri kuliko mengine, hata wakati wa kutumia lugha sawa.
Google hakujibu maswali yangu kwa maelezo ya ziada kuhusu jinsi Gemini Live inavyofanya kazi.
Nilitaka Gemini ajibu kwa mafanikio maswali yangu yenye changamoto, wakati mwingine maalum sana, kwa hivyo nilitoa vidokezo vingi ili kumsaidia kufanya hivyo. Misukumo ilithibitisha kuwa muhimu, lakini si kila wakati.
Teknolojia ya Kubadilisha: Athari Inayoweza Kutokea ya Gemini Live
Gemini Live inawakilisha mabadiliko makubwa katika jinsi tunavyoingiliana na mazingira yetu, ikiunganisha bila mshono ulimwengu wa kidijitali na kimwili kupitia lenzi ya kamera zetu. Ingawa teknolojia bado iko katika hatua zake za mwanzo, matumizi yake yanayoweza kutokea ni makubwa na ya kubadilisha.
Fikiria kutumia Gemini Live kwa:
- Vinjari mazingira usiyoyafahamu: Elekeza tu kamera yako kwenye ishara za barabarani au alama za alama, na Gemini atakupa maelekezo na taarifa za wakati halisi.
- Jifunze kuhusu mabaki ya kihistoria: Unapotembelea jumba la makumbusho, tumia Gemini kutambua na kutoa muktadha kwa kazi ya sanaa na vitu vya kihistoria.
- Pika mapishi changamano: Mwombe Gemini akuongoze kupitia kila hatua ya mapishi, akitambua viambato na kupendekeza mbinu mbadala.
- Tambua matatizo rahisi ya kaya: Elekeza kamera yako kwenye kifaa kinachofanya kazi vibaya, na Gemini atakupa vidokezo vya utatuzi na suluhu zinazowezekana.
Hivi ni baadhi tu ya mifano ya njia nyingi ambazo Gemini Live anaweza kuboresha maisha yetu ya kila siku. Teknolojia inavyoendelea kubadilika na kuboreka, uwezo wake wa kuleta mapinduzi jinsi tunavyoingiliana na ulimwengu unaotuzunguka hauna kikomo kabisa.
Muunganisho wa Gemini Live katika vifaa vya iOS huongeza zaidi ufikiaji wake na upatikanaji, na kuleta nguvu ya maono yanayoendeshwa na AI kwa hadhira pana zaidi. Teknolojia ya AI inavyoendelea kusonga mbele kwa kasi ya kielelezo, vipengele kama Gemini Live vinatoa mtazamo wa siku zijazo ambapo vifaa vyetu si tu zana za mawasiliano na burudani bali pia wenzetu wenye akili ambao wanaweza kutusaidia kuvinjari, kuelewa, na kuingiliana na ulimwengu unaotuzunguka kwa njia mpya na za maana.