Disney Araştırma algoritma otomatik olarak birden fazla kamera tarafından yakalanan görüntüleri düzenler



Kamera paketleme akıllı telefonlar, arkadaşlar ve aileleri toting çoğu insan bu gün, gerçek bir film ekibi olarak açılardan çok sayıda önemli anları yakalamak için hazır hareket. Ama kaynaşmış bir bütün içine görüntüleri düzenleme zaman alıcı bir angarya olabilir. Şimdi Disney Research bir ekip otomatik ile oturup daha az sıkıcı bir şey içine ham görüntüleri saat düzenlemeleri bir algoritma geliştirdi.

Gibi yazılımlarının aksine Magisto , Hunter vurgulayın ve LiveLight editörleri tek kamera ile çekilen saman video buğday sıralamak yardımcı, Disney Research geliştirilen algoritma, farklı kameralar tarafından farklı bakış açıları yakalanan tek bir olayın görüntüleri birleştiriyor. Bu olay, çeşitli kameralar odaklanmış ne dayalı en önemli olanı deducing yapar.

"Her birey olayın farklı bir görünümü olsa da, herkes tipik bakıyor ve bu nedenle, aynı aktiviteyi kayıt - en ilginç aktivite," Yaser Şeyh, bir ortak araştırma Carnegie Mellon Üniversitesi'nde robotik profesörü ve bir parçası diyor Disney Araştırma Pittsburgh'da ekibi. "Her kamera yönünü belirleyen, biz grup bakışları elbirliği, veya 3D eklem dikkatini hesaplayabilirsiniz."

Otomatik veya yarı otomatik olarak birden çok kameradan görüntüleri birleştirerek diğer yaklaşımlar genellikle en istikrarlı ve en iyi aydınlatılmış görüntüleri seçme ve periyodik mevcut kamera açıları arasında geçiş güveniyor. Disney Research geliştirilen algoritma konu (lar) ve çeşitli kameralar arasındaki mekansal ilişkiyi hesaplar çünkü Ama, aynı zamanda kurulan sinematografik kurallara uymak yapabiliyor.

Bu kamera sahnede konuları birbirine bağlayan eksenin bir tarafında kalmak için ihtiyacı olduğunu söyledi, 180 derecelik kural bulunmaktadır. Örneğin, eğer orada bir sahnede iki kişi, eksen onları bağlayan hayali bir çizgi olacaktır. Diğer bu hattın bir taraftan kamera açısını değiştirme atlama veya çizgiyi denilen ve izleyiciyi şaşırtmak olacaktır.

Sistem aynı zamanda ve ya izleyiciye izlenimi vermek perspektifi açısından sadece biraz farklı başka bir çekimden kesimler izleyiciye sarsıcı olabilir, sadece çok kısa bir süre çekim, ve atlama keser, önlemek olacaktır zaman, ya da ürkek bir kamera ileri atlamak.

Sistem birkaç dakika süren bir kaynaşmış bir video araya koymak için gerekli hesaplamaları yürütmek için birkaç saat sürer rağmen, Disney Araştırma ekibi, aynı ham görüntüleri kullanarak profesyonel editörler benzer sonuçlar elde etmek için ortalama en fazla 20 saat sürdü söyledi.

"Ortaya çıkan videolar insan editör elde edebiliriz aynı anlatımı veya teknik karmaşıklığı olmayabilir, ama onlar gerekli eylem yakalamak ve bizim deneylerde, genellikle profesyoneller tarafından üretilen olanlara ruhu içinde benzer," Ariel Shamir, bir ortak diyor Disiplinlerarası Merkezi, Herzliya, İsrail de bilgisayar bilimleri profesörü ve Disney Araştırma Pittsburgh ekibinin bir üyesi.

Algoritma profesyonel editörler yerine olmayabilir, onun yaratıcıları bu görüntüleri büyük miktarda düzenleme onlara yardımcı olabileceğini söylüyorlar.