Google'ın Ev için Gemini uygulamalı uygulaması: Her şeyi izleyen yapay zeka

Bu hafta sonu evimi Google'ın yeni uygulaması için bir test laboratuvarına dönüştürdüm Ev Yapay Zekası için Gemini ve ailemi 72 saat gözetim altında tutarak her hareketimizi izledi, yorumladı ve anlattı. Amacım mı? Her şeyi gören bir yapay zekanın gerçekten yararlı mı yoksa sadece ürkütücü mü olduğunu öğrenmek için.

Mutfaktaki bir rafta bulunan Nest kamerasından gelen bir bildirimde "R bir kutudaki eşyaların açılması" yazıyordu. "Jenni pasta kesiyor / B mutfağa giriyor, lavaboda bulaşıkları yıkıyor / Jenni buzdolabından bir içecek alıyor" diye devam etti. Bazen uyarılar şaka başlangıcı gibi geliyordu: "Odaya bir köpek, bir insan ve iki kedi giriyor / Verandada iki tavuk yürüyor."

Ama bunlar şaka değildi. Bunlar çoğunlukla evimin içinde ve çevresinde olup bitenlerle ilgili doğru açıklamalardı; buraya birkaç tane yerleştirmiştim. Ev için Gemini tarafından desteklenen Google Nest kameraları. Bu, Google Home uygulamasında kameralardan gelen görüntüleri yorumlayan ve bunlarla birleştirilen yeni bir yapay zeka katmanıdır. Nest'in yüz tanıma özelliği - Kimin veya neyin mevcut olduğu, ne yaptıkları ve hatta bazen ne giydikleri de dahil olmak üzere olayların yazılı bir tanımını sunar.

Örneğin, artık "verandada hayvan tespit edildi" uyarısı yerine bunun iki tavuk veya bir köpek olduğunu söyleyen daha açıklayıcı versiyonlar alıyorum. Bunlardan biri benim açımdan acil eylem gerektiriyor (kocam tavukların dışarıdaki kanepemize kaka yapmasından hoşlanmıyor). Diğerini görmezden gelebilirim. Gece 1'de Nest Doorbell'den gelen ve ön kapıda içeri girmeye çalışanın oğlum olduğunu belirten uyarı gibi uyarılar, sadece "kişi tespit edildi" diyen uyarılardan daha az kaygı uyandırıyor.

Güvenlik kameralarından gelen sürekli bildirim yağmurunu iyileştirmek için yapay zekanın kullanılması, her üreticinin yaptığı büyük bir yükseltmedir. Yüzük ile Arlo ile Wyze kovalıyor. Peki evimizi gözetmesi konusunda yapay zekaya gerçekten ne kadar güvenebiliriz?

İkizler benim evimdeki yabancıları veya yaban hayatını halüsinasyon görmezken diğerleri bildirdiGoogle Home uygulamasındaki Ev Özetleri adı verilen günlük özetler, gerçeklerden çok kurguya yöneliyordu. Evdeki Gemini AI'nın sorunlu hale geldiği yer burasıdır.

Ailemi evimizin içinde kaydetmiyorum. Güvenliği dış mekan kameralarına bırakıyorum ve evdeyken tüm iç mekan kameralarını kapatacak şekilde ayarlıyorum. Ancak Gemini'ye mümkün olduğu kadar çok bilgi vermek istedim, bu yüzden evimi kayıt için ayarlanmış kameralarla doldurdum.

Yeniyi yükledim Nest Kapı Zili 2K, Nest Cam İç Mekan 2KVe Nest Cam Dış Mekan 2K (tümü kablolu), daha önceki bazı modellerle birlikte İkizler burcuyla uyumlu. Bu, evimin içindeki ve dışındaki ana trafik yollarının yanı sıra arka bahçemin geniş bir bölümünün gözetimini sağladı.

Gemini'nin açıklamaları ve şu anda erken erişimde olan Ev Özeti aylık 20 ABD Doları veya yıllık 200 ABD Doları gerektirir. Google Home Premium Gelişmiş 7/24 video kaydını da içeren abonelik. Gemini AI, muhtemelen işleme için bir görsel dil modeli kullandığından, sesi değil yalnızca videoyu analiz ediyor. Bu aynı zamanda Google Home uygulamasındaki, Ring tarafından da sunulan, kayıtlı videoyu aramanıza olanak tanıyan Ask Home adlı bir özelliği de destekler.

Ne zaman Ring'in video arama sürümünü test ettimAçık havadaki kedimi takip etmek için bunu faydalı buldum. Google'ın sürümü daha iyi çünkü isteklerimin içeriğini anlıyordu. Her ikisinden de tavukların verandamda en son ne zaman bulunduğunu göstermelerini istediğimde Gemini en son görülenleri ortaya çıkarırken Ring bana üç gün öncesine ait en iyi eşleşmeyi gösterdi.

Ancak başıboş hayvanları bulmanın ötesinde, evimdeki eylemlerin bu ayrıntılı anlatımında bir değer bulmakta zorlandım. Ve evet, tüyler ürpertici hissettiriyor.

Gerçek zamanlı uyarılar çoğunlukla doğru ve anlaşılırdı. Yalnızca iki büyük hata fark ettim: Köpeğimi arka bahçedeki bir tilkiyle karıştırdı ve kapımın önünde alınmayı bekleyen bir paket varken, kapıya yaklaşan herkes paketi teslim eden biri haline geldi.

Ancak İkizler burcunun bazı seçici yorumları var gibi görünüyor. Elimde bir bıçak tuttuğumu söylemesini sağlamaya çalıştım, hatta onu tehditkar bir şekilde kameraya doğru salladım. Ancak açıklamalarda sadece doğramak veya oymak gibi kelimeler kullanılıyor, bıçaktan bahsedilmiyor. Ve bu büyük bir bıçaktı!

Kocam pompalı tüfekle evden çıktığında, ihbarda onun bir bahçe aleti taşıdığı yazıyordu. Bunun kasıtlı olup olmadığı belli değil (Google'a ulaştım), ancak silahların tanımlanmaması, güvenlik odaklı bir sistem için önemli bir gözetim gibi görünüyor. Verandamda silahlı veya evimde bıçak kullanan birinin olup olmadığını bilmek istiyorum.

Ancak günlük Home Briefs'te işler tuhaflaştı. Her gece saat 8:30 civarında, Google Home uygulaması o günkü olaylara ilişkin yorumlarını yeni bir Etkinlik Sekmesinde sunuyor. En çok ilgilendiğiniz şeylere odaklanmak için bunu özelleştirebilirsiniz; Benim için bu, sokağa çıkma yasağından sonra eve dönen hayvanlar ve gençler.

Özetlerin yaklaşık yüzde 80'i doğruydu, birkaç tane daha az kafa karışıklığı vardı - pizza fırınının ben onu alırken teslim edildiği yazıyordu. Ancak benim asıl sorunum özetlerdeki sert editoryal yazımdı. Gemini, olayların gerçek zamanlı doğru tanımlarını aldı ve bunları tamamen yanlış olan bildirim niteliğindeki cümlelerle dolu bir anlatıya dönüştürdü.

Örneğin, Cadılar Bayramı'nda özette "Jenni ve R'nin şeker mi şaka mı yapanlarla etkileşime girdiği ve festival atmosferinin tadını çıkardığı görüldü" yazıyordu. Ben şeker dağıtırken kızım R evde değildi. Başka bir özet, kocam ve benim başkalarıyla birlikte kanepede dinlenerek nasıl keyifli bir akşam geçirdiğimizi ayrıntılarıyla anlatıyordu. Evde yalnızdık.

Ev Özeti ilginç bir kavramdır. Gün boyunca uyarılarla sürekli dikkatinizin dağılması yerine gün sonu özeti almak, bildirim yorgunluğunu azaltmaya yardımcı olabilir. Ancak bu gerçek zamanlı bildirimleri kapatabileceğim anlamına gelmiyor. Sabah 6'da arabama giren kişiyi ya da kümesime bir tilkinin girdiğini öğrenmek için neşeli bir akşam geçirmek istemiyorum.

Google Home'un acil uyarıları daha az önemli uyarılara göre önceliklendirmenin bir yoluna ihtiyacı var. Otomatik yanıtları tetiklemek için verandadaki tavuklar gibi belirli olayları kullanabilmem için bunları akıllı evime de entegre etmesi gerekiyor.

Ancak Ev Özeti'nin yaptığı gibi bir şeyler uydurmak, ev güvenliği için kullanılan bir sistem için affedilemez. Google Home, Gemini'nin hata yapabileceğini belirtiyor ve Ev Özeti altında kısa klipler sunuyor, böylece çalışmasını kontrol edebilirsiniz, örneğin kocamla benim oturma odasında yalnız oturduğumuzu görebilirsiniz. Ancak İkizler burcu olup biteni açıklayabilse de, neyin önemli olduğunu yorumlamaya yönelik bu girişimler çok yetersiz kalır.

Dış mekan kameraları için yapay zeka açıklamalarını faydalı bulmama rağmen Gemini'nin "zekası" beni evin içinde kamera çalıştırmaya ikna etmedi. Eğer yapay zekanın ailemin hayatını anlatmasına izin verirsem, bunun çok daha kullanışlı ve çok daha doğru olması gerekecek.