Eğitimde Yapay Zekâ

Action Verbs Challenge

Teachable Machine ile vücut duruşlarını tanıyan bir makine öğrenmesi modeli eğittim ve onu İngilizce bir hareket oyununa dönüştürdüm. Ekranda rastgele bir İngilizce komut çıkar ve sesli okunur. Oyuncu hareketi yapınca model duruşu tanır ve puan verir. 60 saniyede ne kadar çok hareket yaparsan o kadar puan alırsın.

Başlata bas, kameraya izin ver ve dizlerinden başına kadar görünecek şekilde geri çekil.

Süre60

Puan0

KomutReady?Oyunu başlatınca komutlar burada çıkacak.

Oyunu başlat Pas geç

Komutları sesli söyle

Model hazırlanıyor…

Oyundaki hareketler

Nasıl yaptım?

1. Teachable Machine'de bir Pose Project açtım. Bu proje kameradaki insanın eklem noktalarını (omuz, dirsek, bilek, diz…) bulup duruşu sınıflandırıyor.
2. Her İngilizce komut için bir sınıf oluşturdum. Telefonla her hareketin kısa bir videosunu çektim ve videolardan 505 kare çıkarıp örnek olarak yükledim. Videolar sırasında hafifçe yer değiştirdim ki model tek bir pozu ezberlemesin.
3. Hiçbir hareket yapılmadığında yanlış puan vermemesi için bir de "Stand still" (normal duruş) sınıfı ekledim.
4. Modeli eğittim. Oyunda kamera görüntüsü aynalandığı ve farklı uzaklıklardan oynanabileceği için örneklerin aynalanmış ve küçültülmüş kopyalarını da ekledim (toplam 2.020 örnek). Eğitimde kullanılmayan karelerle test ettiğimde model 140 karenin 136'sını doğru bildi.
5. Modeli bu sitede barındırıp üzerine süre, puan, rastgele komut ve sesli okuma ekleyerek bir oyun yaptım.

Derste nasıl kullanılır?

1. Öğretmen hareketleri önce TPR ile kendisi göstererek öğretir: "Touch your head!"
2. Öğrenciler sırayla tahtanın önüne gelip 60 saniyelik oyunu oynar, sınıf puanları tahtaya yazar.
3. Oyuncu komutu okuyup anlamak zorunda olduğu için hem dinleme hem okuma çalışılır. Sesli okuma kapatılarak oyun sadece okumaya da çevrilebilir.

Sınırlar: Model tek bir kişinin (benim) videolarıyla eğitildiği için başka kişilerde, farklı odalarda ve kamera açılarında daha az doğru çalışabilir. Oyuncunun baştan ayağa kadrajda görünmesi gerekir; en iyi sonuç yatay tutulan bir kamerayla ve 2-3 metre uzaktan alınır. Aynı anda kamerada tek kişi olmalıdır. Oyun kameraya izin verilmiş bir tarayıcıda (Chrome, Safari) çalışır; WhatsApp veya Instagram içinden açılan tarayıcılarda kamera çalışmayabilir.