Çok Modlu AI Video Oluşturucusu Lumiere ile Tanışın!

Google Araştırma, basit metin girişlerinden gerçekçi, yüksek kaliteli videolar oluşturmak için yapay zeka destekli yeni bir metinden videoya oluşturucuyu tanıttı. Lumiere adı verilen AI video oluşturucusu, tek çekimde animasyonlu video üretebilen yeni bir Uzay-Zaman U-Net mimarisini temel alıyor.

Metinden videoya oluşturucular için belirtelim. Doğal dildeki açıklamaları karşılık gelen video kliplere dönüştürebilen bir yapay zeka uygulamasıdır. Kullanıcıların video düzenleme becerileri olmadan özel ve yaratıcı videolar oluşturmasına olanak tanıyarak son yıllarda popülerlik kazandılar. Ancak mevcut metinden videoya oluşturucuların çoğu, daha yüksek çözünürlüğe, daha iyi kaliteye ve sınırlı çeşitliliğe ihtiyaç duyar. Detaylar haberimizde...

İlginizi Çekebilir: En Popüler Yapay Zeka Araçları Belli Oldu! İşte Detaylar

Lumiere, Yapay Zeka ve Video Oluşturma Alanında Kayda Değer Bir Başarıdır

Öte yandan video oluşturucusu için belirtelim. Metin girişleriyle eşleşen çarpıcı ve çeşitli videolar üretebiliyor. Örneğin, "birlikte kitap okuyan iki rakun" metni verildiğinde Lumiere, gerçekçi ayrıntılar ve hareketlerle tam olarak bunu gösteren bir video oluşturabiliyor. Lumiere ayrıca "gökkuşağının üzerinde uçan tek boynuzlu at" gibi karmaşık ve soyut kavramları da işleyebilir.

Lumiere, adını sinema cihazının ilk mucitlerinden olan Lumiere kardeşlerden almıştır. Bu ad, Google Araştırma ekibinin yapay zekayla video oluşturmanın sınırlarını zorlama isteğini yansıtıyor. Ekip, arXiv ön baskı sunucusunda, çalışmalarının teknik ayrıntılarını ve zorluklarını açıklayan bir makale yayınladı.

Lumiere'nin en önemli özelliklerinden biri, herhangi bir ara adım veya ek giriş gerektirmeden tek bir model geçişinde video oluşturabilmesidir. Bu, video verilerinin mekansal ve zamansal bağımlılıklarını öğrenebilen bir tür sinir ağı olan Uzay-Zaman U-Net mimarisi kullanılarak elde edilir. Space-Time U-Net, ürettiği videoların kalitesini ve çeşitliliğini artırmak için resimler veya videolar gibi harici kaynaklardan alınan stil ve içerik bilgilerini de birleştirebilir.

Lumiere'nin bir diğer özelliği de videodaki nesnelerin rengini, stilini veya hareketini değiştirmek gibi çeşitli video düzenleme ve manipülasyon türlerini destekleyebilmesidir. Örneğin, bir kullanıcı videonun bir bölümünü seçip "elbise rengini kırmızıya değiştir" yazabilir, Lumiere videoyu buna göre değiştirecektir. Lumiere ayrıca nesnelerin çizgi film, eskiz veya sulu boya gibi farklı sanatsal tarzlarda işlendiği stilize videolar da oluşturabilir. Üstelik Lumiere, hareketsiz bir görüntünün akan su veya dalgalanan bayraklar gibi ince hareketlerle canlandırıldığı sinemagrafik çalışmaları da gerçekleştirebiliyor.

Lumiere, yapay zeka ve video oluşturma alanında kayda değer bir başarıdır. Çünkü yapay zekanın doğal dil girdilerinden gerçekçi ve çeşitli videolar oluşturma potansiyelini göstermektedir. Ancak Lumiere, başkalarının haklarını veya mahremiyetini ihlal eden videolar oluşturmak için kullanılabileceği için bazı etik ve yasal kaygıları da gündeme getiriyor. Google için ekleyelim. Lumiere'i halka açık hale getirip getirmeyeceği veya bu sorunları nasıl çözeceğini henüz açıklamadı.