Sıralı framelerden anlam çıkartma


#1

Başlıkta belirttiğim gibi sıralı framelerden anlam çıkartmam için nasıl bir yol izlemem gerekiyor.Yani object detection gibi tek bir frameden değil de birden fazla frameden tek bir sonuç çıkartmam gerekiyor.Örneğin yürüyen birisinin videosundan 3-4 sn’lik frame alıp inceleyerek yürüdüğünü anlamak gibi.


#2

Çok girişli bir ağ kullanabilirsin
mesela önceden eğitilmiş bir ağ ile görüntüler bir vectöre dönüştürülür
sonra vectörleri bir RNN tipi katmana verebilirsiniz


#3

Teşekkür ederim hocam yakın zamanda tekrar dönüş yapacağım :slight_smile:


#4

LSTM sanirim aradiginiz yanit olmali. Öncelikle kac framede bir anlam çıkaracağınıza karar verin
Örneğin 50 frame de sonuca varmak gibi. Bu sizin step_size olacaktir.
Sonra datayi her 50 frame de 1 sonuç olacak şekilde hazırlayın. Diyelim 1. 50 frame de kosuyor
2. 50 frame de yürüyor gibi. Framelerin içice geçmesinin sorun yaratacağını sanmam. Daha sonra bunu lstm ile egitmenizi tavsiye ederim


#5