NVIDIA, açıklamaya göre video oluşturmak için bir sinir ağı tanıttı

NVIDIA Şirketi ilan edildi metne dayalı kısa videolar oluşturan yeni bir VideoLDM AI modeli. Cornell Üniversitesi'ndeki araştırmacılarla işbirliği içinde geliştirilmiştir.

VideoLDM, 2,7 milyarı video üzerinde eğitilmiş olan 4,1 milyara kadar parametreyi hesaba katar. Oluşturulan klipler 24 karede 2048×1280 piksele kadar olabilir ve 4,7 saniyeye kadar süreye sahip olabilir.

Sinir ağı, istekte birkaç kelime içeren basit sahneler ve daha karmaşık bir şey yaratma yeteneğine sahiptir. Birkaç örnek:

• Havai fişek.

• Bir fırtına askeri sahili süpürüyor.

• Bir gezgin, gün batımında sisli bir ormanda tek başına yürür.

Daha fazla örnek var proje web sitesi.

Bu NVIDIA sinir ağı henüz kamu malı değildir. Yapay Görme ve Örüntü Tanıma Konferansı çerçevesinde bir araştırma makalesi olarak sunuldu.

Geliştiriciler, öğrenmede etkileyici ve hızlı ilerleme kaydettiler, ancak sinir ağının olası geleceği hakkında konuşmadılar. Bununla birlikte, yakında tam teşekküllü bir video analogu alacağımızı varsayabiliriz. yolculuk ortası.