Massachusetts Teknoloji Enstitüsünde (MIT) geliştirilen DenseAV, multimedya arama, dil öğrenme ve robot bilimindeki potansiyel uygulamalarla yalnızca konuşan insanların videolarını izleyerek dilin anlamını ayrıştırmayı ve anlamayı öğreniyor.
Bu yeni algoritma hayvanlar arasındaki iletişimi çözebilir
Elektrik mühendisliği ve bilgisayar bilimleri alanında doktora öğrencisi olan Mark Hamilton, bu projeyi MIT’nin Bilgisayar Bilimi ve Yapay Zeka Laboratuvarı’ndaki meslektaşlarıyla birlikte yönetiyor. İnsan dili ediniminden başlayarak hayvan iletişimini çözmek için makinelerden yararlanmayı amaçlıyorlar.
Bu yeni algoritmanın ilham kaynağı ise bir film. Bir sahnesinde penguen yere düşüyor ve kalkmaya çalışırken inliyor. Hamilton, bu iniltinin bir kelimeyi ima ediyor gibi göründüğünü gözlemleyerek ses ve videonun bir algoritmaya dil öğretmek için birlikte kullanılabileceği fikrini düşünüyor.
Bu fikir, görsel içeriği sesten tahmin ederek dili öğrenmek için tasarlanmış bir model olan DenseAV’ın ortaya çıkmasına yol açtı. Örneğin, “pastayı 350’de pişir” ifadesini duymak modelin bir pasta veya fırın görseli beklemesine neden olacaktır.
Ancak milyonlarca video arasında ses-görüntü eşleşmesini mümkün kılmak için DenseAV’ın insanların tartıştığı bağlamı öğrenmesi gerekiyor. Araştırma ekibi, DenseAV’ı bu eşleştirme görevi konusunda eğittikten sonra modelin sesleri işlerken hangi piksellere odaklandığını inceledi.
“Köpek” kelimesi söylendiğinde algoritma, video akışında köpek görsellerini aradı ve bu da kelimenin anlamını anladığını gösterdi. Benzer şekilde bir köpeğin havlamasını duyduğunda videodaki köpekleri aradı.
Ekip, DenseAV’ın “köpek” kelimesi ile köpek havlaması sesi arasında ayrım yapıp yapamayacağını merak ediyordu. DenseAV’a çift beyinli bir yaklaşım uygulayarak, bir tarafın doğal olarak “köpek” kelimesi gibi dile odaklandığını, diğer tarafın ise havlama gibi seslere odaklandığını keşfettiler.
Ekip, önceden eğitilmiş dil modellerini kullanmadan dilin özünü sıfırdan yeniden keşfetmeyi hedeflediğinden, metin girişi olmadan dil öğrenme konusunda zorlu bir görevle karşı karşıya kaldı. Bu yöntem, çocukların çevrelerini gözlemleyerek ve dinleyerek dili nasıl öğrendiklerinden ilham almaktadır.
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-1-xEvMDtkp.png)
Xiaomi’den fütüristik su tabancası
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-2-ufQG2KIh.jpeg)
Efsane Türkiye’ye gelse alırım..
O ışık efektleri sadece yanlarda değil üstte de olmalıydı. Böylece tabancayı kullanan, kafasını yana eğmek zorunda kalıp, fıtık olmaz. Aynısını küçükken ışıklı ayakkabımda yaşamıştım oradan biliyorum. Ayakkabıma yan bakmaktan düz yürüyemiyordum. Hava atmaktan ziyade o havayı yaşamayı tercih ederim. 7 de olsam 70 de olsam kararım değişmeyecek.
![](https://www.donanimhaber.com/images/avatars/1.seri avatarchip.jpg)
Mukemmel bir silah acaba ne kadar hızlı atıyor. [resim] [resim]
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-4-aaqgZx8f.jpg)
Fiyat makul olsa efsane olur gerçekten ya.
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-5-4ugOml3n.jpg)
Vay bee, bu cihaz xiaomi çıktı ben de diyordum kim üretmiş..
hocam 4x daha iyi direk hs attirir
![](https://www.donanimhaber.com/images/avatars/9. seri avatarFlash_Space1.gif)
Über
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-7-gmaQm4pU.gif)
Evet ama 6x scop daha iyi gider buna daha uzaktaki hedefler için. Gerektiğinde 3x’e de çekebilirsin falan :D
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-8-nRJzOsIO.jpg)
Muskun alev tabancası vs bu
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-9-6DKvuLbK.jpg)
İstilacı güvercinlere karşı iyi olur. 5 10 dk da bir sopayı alıp kovalamak yordu artık.
![](https://www.donanimhaber.com/images/avatars/9. seri avatarMatrix_Leo.gif)
Yakında su atan F18 falanda yaparlar :)
Hazneye kezzaplı su doldurup nişan almak yapmayın böyle şeyler yahu…
![](https://www.donanimhaber.com/images/avatars/5. seri avatar/heliceorange.gif)
Xiaomi kendini çok geliştirdi artık her alanda kaliteli işler yapıyorlar.
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-12-F1I2FWNw.png)
fışkırttığı su mermi gibi isabetli gitmeyeceği için gereksiz diye düşünmüş olabilirler.
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-13-yLdIMmUK.jpg)
Lazer nişangah da eklenseymiş tadından yenmezmiş.
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-14-xTVjdiTi.gif)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
![](https://ekamu.net/wp-content/uploads/2024/06/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor-15-cO8CmAIS.jpg)
https://www.youtube.com/embed/WaAaz49H-VU
Kaynak : https://www.donanimhaber.com/bu-algoritma-yalnizca-video-izleyerek-dil-ogrenebiliyor–178479