İnsan eklemleri robotun eklemlerine eşlenir; her açı eklem sınırına kırpılır ve denge bekçisinden geçer. Aşağıdan bir hareket seç.
Her yeni hareket algıyı kullanmak zorunda: kamera yolu ve engeli değerlendirir, denge sensörü her an bekçilik yapar, servo yükü takılmayı söyler.
Kameradan kol, el ve baş hareketini okur, robotun eklemlerine eşler ve tekrarlar. Robot Studio'nun kamera ile canlı modunda sahnedeki robot el işaretlerine tepki verir ve yüz ifadeni aynalar; fiziksel robotta “beni izle” üzerinde çalışıyoruz.
Kamera açıkken robot ortamı kimse konuşmadan tarar; kapalı bir sözlükteki nesne türlerini (fincan, kitap…) tanır ve “ne görüyorsun?” sorusuna bağlam kurar. Sahneyi tamamen robotun içinde anlayan kip hazır, kurulumu bekliyor.
Tanımadığı birini görünce “Merhaba! Adın ne?” diye sorar; onay alınca adı yüze bağlar ve sonraki karşılaşmada adıyla selamlar.
Mikrofon robotta dinlenir; söz bitince yazıya çevrilir ve ses saklanmaz. “Sus”, “uykuya geç” gibi sözleri robotun kendisi uygular. Konuşanı sesinden tanıma üzerinde çalışıyoruz.
Olayları zamanıyla birlikte deftere yazar: kim geldi, ne zaman tanıştınız, ne konuştunuz. Konuşma defteri robotun içinde 30 gün tutulur.
“Yürü” denince kafasını yola çevirir; yakındaki bir insandan ya da tanınan bir nesneden dönerek uzaklaşacak şekilde kodlandı. Sahada ölçüm sürüyor.
Yüz izleri, kişi hafızası ve konuşma defteri robotun içinde kalır. “Beni unut” o kişiye ait kaydı, anıları ve konuşma satırlarını siler; kimse başkasının kaydını sildiremez.
Her yürüyüş bir ders: robot kendi denge ölçümünden bir maliyet çıkarır, güvenli sınırlar içinde tek bir ayarı dener ve iki kez doğrular. Öğrendiklerini kendi ders dosyasında tutar.
Denge ve düşme refleksleri, izin kapıları ve sınır sözleri sunucuya sorulmadan robotun kendi üzerinde çalışır. Kendi başına gezmek için “Dolaşabilir miyim?” diye izin ister.
Her konuşma turunda robot kendi beden durumunu, yanındakileri, son olayları ve bildiği becerileri gönderir. Cevap söz, duygu, hareket ve öğrenilecek bilgiyi birlikte taşır ve robotta yeniden doğrulanır.
Algıdan sisteme altı modül. Her özelliğin yanında bugünkü durumunu yazıyoruz.
Kamera açıkken yüzleri kimse konuşmadan tarar ve bulduğu yüze bakar; “bana bakma” denince bakışını çevirir ama görmeyi bırakmaz.
Boştayken çevreye insan ölçeğinde bakar ve gördüğü yüzlerin yönünü hatırlar. Ekran gözlerde gözler önce hedefe sıçrar, kafa sonra yetişir.
Yüzü görünmeyen birinin sesine döner; yüz görününce takip devralır.
Yapay zekâ kartıyla görme saniyede 2 kareden 10 kareye çıktı; işlemci yükü üçte birine indi.
Blendy OS özellikleri atölyedeki prototip robotlarda deneniyor; bir kısmı yalnız kodda ya da simülasyonda. Mağazadan alınan bir robotun bugün bunların hepsini yaptığı söylenemez. Sınırları da yazıyoruz: kamera yaklaşık 0,8 m'den yakın zemini göremez, televizyon gürültüsünde kulak konuşmayı ayırt edemez ve internetsiz sohbet yok.