Googleın yeni AI modeli Autoflip, videoları herhangi bir ekran boyutuna göre özelleştirebilir

Elbette herhangi birimiz, bir mobil cihazda izlerken video görüntüleme çerçevesinin "pürüzlü" olduğu bir durumla az çok karşılaşmışızdır. Sıkıntı ve rahatsızlık muhtemelen hemen ortaya çıkan duygulardır, ancak yine de bunu kabul etmeniz ve videonun tamamını izlemeniz gerekir çünkü başka hiçbir şey yapamazsınız.

Google'ın yapay zeka araştırma ekibi, görünüşte küçük görünen ancak kullanıcı deneyimi üzerinde büyük etkisi olan bu sorunu çözmek için, videolara otomatik olarak ince ayar yapabilen ve çeşitli şekillerde belirli bir cihaza veya ekran boyutuna uyum sağlayabilen Autoflip adlı açık kaynaklı bir çözümü başarıyla geliştirdi. manzara, kare, portre vb. modlar.

Autoflip temel olarak üç ana aşamada çalışır: Sahne algılama, video içerik analizi ve son olarak ince ayar.

Sahne algılama aşamasında, makine öğrenimi modeli, bir sahneden diğerine kesmeden veya atlamadan önce noktaya çok dikkat edecektir. Bu sayede renklerdeki ve ilgili öğelerdeki değişiklikleri tespit etmek için bir kareyi önceki kareyle karşılaştırabilir.

Yapay zeka modeli, karşılaştırmalı çekimi belirledikten sonra sahnedeki önemli nesneleri belirlemek için video içeriğini analiz etmeye geçecek. Bunu yapmak için Autoflip, yalnızca sahnede görünen insanlar, hayvanlar, araçlar, ağaçlar gibi nesneleri değil, aynı zamanda hareketin yanı sıra hareket durumunu da net bir şekilde tanımlamasına yardımcı olan derin öğrenme sinir ağını kullanacak. nesne.

Son aşamada yapay zeka modeli, tek bir alanda geçen sahneler için sabit modu mu yoksa ilgilenilen nesnelerin sürekli hareket ettiği durumlarda izleme modunu mu kullanması gerektiğini belirliyor. Bu faktöre ve videonun görüntülenmesi gereken hedef boyuta bağlı olarak Otomatik Çevirme, düzgünlüğü sağlamak ve özellikle tüm ilgi çekici içeriği korumak için ekran çerçevesini kırpacaktır.

Google AI araştırmacıları, Autoflip'in videoları insan müdahalesi olmadan birden fazla formata ve ekran boyutuna dönüştürmek için kullanılabileceğini söylüyor. Bir sonraki aşamada ekip, Autoflip'in röportajlar ve çizgi filmlerdeki konuları takip etme yeteneğini geliştirmek istiyor. Bunu yapabilmek için yapay zeka modelinin, ön plandaki ve arka plandaki nesneleri bir çerçeveye daha iyi yerleştirmek için bulanık görüntü ve metin algılama teknikleriyle donatılması gerekiyor.

Autoflip'in koduna BURADAN ulaşabilirsiniz .