Runway, yapay zeka müzik görsellerinde şarkı sözü devi Musixmatch ile iş birliği yapıyor

Yapay zeka videolarının eğlence sektöründe yayılma hızı artıyor. Yalnız bu hafta şöyle bir haber geldi: 1970’lerin heyecan verici korku filmi Şeytanla Geç Gece AI başlık kartlarını kullanıyor retro grafiklerini oluşturmak (bazı izleyicilerin üzüntüsüne rağmen) ve ayrıca Sabit Video 3D 3D AI varlık oluşturma aracı ve aralarında yeni bir ortaklık AI video girişimi Runway ve reklam ajansı Media.Monksburada ikincisinin ekip üyeleri ve müşterileri, öncekinin metin ve görüntüden videoya yapay zeka yazılımına erişebilecek.

Ancak ortaya çıktı ki tek ortaklık bu değildi Koşu yolu New York City merkezli girişim bugün, başarılı İtalyan müzik teknolojisi girişimiyle birlikte VentureBeat aracılığıyla özel olarak yeni bir ortaklığın duyurusunu yapıyor. Musixmatchcihaza güç veren, şarkıların canlı senkronize edilmiş sözleri Spotify, Apple Music, Amazon Music, Facebook, Instagram, Tidal, Vevo ve daha fazlasında.

Ortaklık, Musixmatch kullanan bir milyondan fazla müzisyen ve sanatçıya, Runway’in en yeni ve en iyi AI video oluşturma modeli olan ve aşağıdaki gibi özelliklerle sürekli olarak yükseltilen Gen-2’ye erişim sağlayacak: Çok Hareketli Fırça Ve bölge seçici.

Runway’in VentureBeat’e e-posta yoluyla sağladığı bir basın bültenine göre buradaki fikir, “yaratıcıların şarkılarını geniş ölçekte ve yaratıcı vizyonlarıyla uyumlu dinamik video içeriği aracılığıyla hayata geçirmelerine olanak sağlamak”.

Başka bir deyişle: Müzisyenler artık Gen-2 ile AI videoları oluşturabilecek ve bu videolar daha sonra Musixmatch platformunu kullanarak şarkılarının sözleriyle senkronize edilebilecek ve potansiyel olarak bir şarkının sözlerini görüntüleyen popüler videolar olan “şarkı sözü videoları”nın oluşturulmasını hızlandırabilecek. Genellikle bir anlatıda sanatçının, grubun veya karakterlerin yer aldığı tam müzik videolarının aksine, ortam görselleri yerine müzikle zamanında.

Halihazırda bazı sanatçılara Musixmatch aracılığıyla şarkı sözü videoları oluşturmaları için 2. Nesil erişim izni verildi; bunlar arasında Runway’in yapay zekası ve Musixmatch’in şarkı sözü senkronizasyon yazılımıyla “Osmosis” şarkıları için aşağıdaki videoyu oluşturan Atlanta trip-hop grubu Earthgang da var:

Müzik cennetinde yapılan bir eşleşme mi?

Runway CEO’su Cristobal Valenzuela basın bülteninde şunları söyledi: “Runway’in modellerini ve yaratıcı deneyimini doğrudan Musixmatch’in benzersiz sanatçı ve müzisyen topluluğunun ellerine sunabildiğimiz için heyecanlıyız”. “Runway’in modelleri ve araçları, bu sanatçıların yaratıcı vizyonlarını video aracılığıyla ifade etme biçimlerini genişletmelerine ve dünya çapındaki dinleyicileri ve izleyicileriyle daha derin bağlantılar kurmalarına yardımcı olacak.”

Musixmach Ürün Şefi Marco Paglia şunları ifade etti: “Yapay zeka ile basitçe ‘farklı düşünmeyi’ ifade eden yeni bir yaratıcılık biçimine tanık oluyoruz.” ünlü Apple sloganı. “Bugün, inanılmaz yetenekli şarkı yazarlarımız ve müzisyenlerimiz, Musixmatch’in şarkı sözlerinden anlam çıkarma konusundaki benzersiz yeteneği ve Runway’in sınıfının en iyisi üretken video modelleriyle desteklenen, video hazırlarken birlikte çalışabilecekleri yeni bir asistana sahipler. Bu, daha fazla müzik yaratıcısının video çekmesine ve bu alanda sürekli yeniliği teşvik etmesine olanak tanıyacak. Eğer bu sadece ilk günse, geleceğin neler getireceğini görmek için sabırsızlanıyorum.”

Tanınmış sanatçılar zaten çeşitli sonuçlar elde etmek için yapay zekayı benimsiyor

Zaten aralarında çok sayıda ünlü sanatçının da bulunduğu A$AP Rocky, Madonna, Ye (eski adıyla Kanye West)ve Jared Leto’nun rock grubu Mars’a 30 saniye hepsi müzik videoları veya konser destek videoları oluşturmak için AI video oluşturma programlarını (bazı durumlarda Runway’in kendisini) kullandı.

Ayrı ama bağlantılı olarak, rapçi Nicki Minaj, daha önce Twitter olarak bilinen sosyal ağ X’teki kullanıcılarla onun üzerinden çekişmeye girdi. albümünü tanıtmak için yapay zeka tarafından oluşturulan hareketsiz görüntülerin kullanımı Pembe Cuma 2.

Açıkçası, müzik sektöründeki bazı yüksek profilli isimler, müziklerine uygun görseller sağlamak için yapay zekayı zaten benimsiyor ve Runway, bu son ortaklıkla bu operasyonu daha da kolaylaştırmak için akıllıca hareket ediyor.

Artan rekabetle karşı karşıya olmasına rağmen Runway’in istikrarlı genişlemesinin bir parçası

Şirket aynı zamanda şu şirketlerle de ortaklık kurdu: Canva gibi diğer yazılım sağlayıcıları Yapay zeka video oluşturma modellerini programlarına dahil ederek araçları daha geniş bir kitleye sunmak.

Runway sınırlı sayıda ücretsiz video üretimine izin verir, ancak bundan sonra ücret alınır aylık 12 dolardan başlayan aylık abonelik ve çeşitli katmanlardan geçerek yükseliyoruz. Başlangıç ​​tarafından finanse ediliyor Googlediğer yatırımcılar arasında.

Runway, varlığının büyük bir bölümünde ve kesinlikle Haziran 2023’te Gen-2’nin piyasaya sürülmesinden sonra, gelişen AI video ve yaratıcı topluluk tarafından AI video oluşturmada altın standart olarak geniş çapta görüldü.

Ancak OpenAI, kendi modeliyle yapılan daha fotogerçekçi, daha akıcı ve daha hızlı hareket eden videoları göstererek geçen ay Runway’in gök gürültüsünü ve muhtemelen tacını çaldı. Soraancak bu modele şu an için yalnızca OpenAI çalışanları ve belirlenen yaratıcı ortaklar erişebilir.

Bu arada, bir diğer rakip AI video oluşturma girişimi olan Pika, sürekli olarak yeni ses oluşturma özellikleri ekliyor: “Dudak senkronizasyonu” özelliği tarafından desteklenmektedir AI ses başlangıcı ElevenLabs Pika tarafından oluşturulan bir videodaki karakterlerin, yüklenen ses veya metinden sese yapay zeka klipleriyle zamanında ağızlarını hareket ettirmesine olanak tanır. Pika ayrıca eklendi kendine ait bir ses efektleri oluşturma modeli bu aydan daha erken.

Hareketsiz görüntüler oluşturmak için yaygın olarak kullanılan açık kaynaklı Stable Diffusion AI modelini birlikte oluşturduğu eski Runway ortağı Stability AI, aynı zamanda açık kaynaklı bir video oluşturma modeli de sunuyor. Kararlı Video Dağıtımı.

Yani Runway şu anda hızla ilerleyen bir alanda tüm bu isyancılara ve rakiplere karşı savunma yapıyor. Ortaklıkları rekabet avantajını korumasına ve muhtemelen video üreten yapay zeka yazılımı için yeni özellikler sunmak üzere daha fazla veri elde etmesine olanak tanıyacak mı? Bizi izlemeye devam edin.