Adobe Deepa Subramaniam: Yapay zeka videosu post prodüksiyonu nasıl değiştirecek?

“Firefly geçen Mart ayında piyasaya çıktı. Sadece bir yıl kadar oldu, ancak temel modellerin nasıl karşılandığını görmek muhteşemdi; bir görüntü modelimiz var, bir vektör modelimiz var, bir tasarım modelimiz var ve üzerinde çalışıyoruz. Subramaniam, Battersea’deki MAX etkinliğinin arifesinde IBC365’e şunları söyledi: “Bu yıl piyasaya sürmeye hazır olduğumuz bir video modeli.” Toplumda heyecan, coşku ve benimsenme [towards Firefly] Harikaydı ve tüm bu gelişmeler halka açık betalar aracılığıyla gerçekleşti.

Firefly modeli, AI görüntü oluşturma işlemini Adobe’nin yaratıcı uygulamalarına entegre eder ve Adobe Photoshop, Lightroom, Illustrator, InDesign ve Adobe Express’te çalışan MAX’ta görünür. Ancak IBC365 okuyucularının en çok ilgisini çekecek şey, Premiere Pro’nun yapay zeka destekli post prodüksiyon yeteneklerini vaat eden yeni bir video modelinin ön izlemesi olacak.

Harika bir video demosunda Adobe, klipleri genişletmek için çerçeveler ekleyen, gelişmiş düzenlemeye, daha uzun çekimlere ve daha yumuşak geçişlere olanak tanıyan Geneative Extend özelliğini gösterdi. Yapay zeka izleme ve maskeleme işlevi, çekimlere nesnelerin eklenmesine veya çıkarılmasına olanak tanıyacak. Adobe, bunun editörlerin istenmeyen unsurları hızlı bir şekilde kaldırmasına, bir oyuncunun gardırobunu değiştirmesine veya masaya tablo veya gerçekçi çiçekler gibi bir dizi kıyafet eklemesine olanak sağlayacağını söylüyor. Bu durum görsel efekt ekipleri için de bir miktar kaygı yaratabilir.

Devamını oku: Renk Gücü Sempozyumu 2024: Vücut Tonları, Açık Kapı Çekimi ve Prizmada Yapay Zeka

AI metinden videoya yazılımı, doğrudan Premiere Pro’da vektör veya referans görüntülerden yepyeni görüntüler oluşturabilecek. Adobe, bu tür kliplerin storyboard’ları görselleştirmek ve oluşturmak veya canlı aksiyon çekimlerini artırmak için B-roll görüntüleri oluşturmak için kullanılabileceğini öne sürüyor.

üçüncü şahıslara gelecek

Yapay zeka videolarını keşfetme konusunda Adobe yalnız değil. Aslında ön izleme, Open AI ve Runway’den üçüncü taraf video oluşturma modellerinin bir B-roll oluşturmak için bir araya getirildiğini gösterirken, Pika Labs’ın üretken bir modelinin, bir videonun sonuna birkaç saniye eklemek için Geneative Extend aracıyla çalıştığı gösterildi. atış.

Peki bu, Firefly’ın içerik oluşturmanın bazı yönlerini ele alırken, video oluşturmanın bazı yönlerini, özellikle de B-roll için gereken ağır yükü üçüncü taraf oynatıcılara bırakacağı anlamına mı geliyor?

Subramaniam, “Bazen bazı modeller biraz daha düşündürücü olabiliyor” diyor. “Yaratıcı enerjinin akmasını sağlamak ve bir şeyler hakkında düşünmek için bu çıktıların hiçbirini üretimde asla kullanmak istemezsiniz. Ve bu, daha fazla model getirerek yaratıcı süreci genişletme fikridir.

“[Firefly models] Harika, ticari olarak güvenli ve topluluk onu seviyor ancak daha fazla model getirirsek yaratıcılık için daha iyi bir dünya olacağına inanıyoruz.

“Üçüncü taraf mekanizmasının istemci uç noktasından nasıl etkinleştirildiği hala anlaşılmaktadır” diye ekliyor. “Bu noktada teknolojinin durumu ve bunu bu ortaklarla bir araştırma yolculuğu olarak keşfetme ve oradan ilerleme konusunda heyecan duyuyoruz.”

Önce güvenlik

Konuşmalarımızda “ticari olarak güvenli” etiketi sıklıkla karşımıza çıkıyor. Şaşırtıcı değil; Ticari yapay zeka modellerinin eğitildiği içerik, sonuçların girdi verileri tarafından nasıl önyargılı ve çarpık olabileceği ve oluşturulan içeriğin gerçek insan çalışması olarak sunulup sunulmadığı konusunda pek çok hararetli tartışma yaşandı.

“Bu kaygılarla ilgili diyalog kurmak istiyoruz. Onları anla. Subramaniam, “Yaklaşımımızı paylaşın” diyor. “Gerçek teknolojiyi halka açık betalar yoluyla açmak ve hazır olduğunu hissedene kadar yayınlamamak konusunda çok açık davrandık. Bir video prototipi üzerinde çalıştığımızı paylaşmak bile bu geri bildirimi almanın başlangıcıydı: Ne yapmalı? görmek ister misin, neden endişeleniyorsun?”

“Konuştuğum çoğu kişi ticari açıdan güvenli modeller istiyor. Modelimizi nasıl kurduğumuz ve eğittiğimizden, modelimizin dağıtımına kadar sunduğumuz şeyler üzerinde tam kontrole sahibiz ve bunu garanti edebiliriz. Bu, bunun önemli bir kısmıdır. Firefly’a olan yaklaşımımızın bir göstergesi.”

“Bu sadece konuşmak değil” diye devam ediyor. “Başından beri mesele bu modeli nasıl kuracağımız, bu iş akışını nasıl başaracağımızla ilgiliydi.

Bu yaklaşımın bir kısmı İçerik kimlik bilgileriDışa aktarma veya indirme sırasında varlıklara uygulanabilen, manipülasyona açık, kurcalanmaya açık meta veriler. Uygulandığı varlıkların kökenleri ve geçmişi hakkında şeffaflığı artırır. Aracılığıyla kullanıma sunuldu İçerik Orijinalliği Girişimi (CAI) Subramaniam, bu yıl Premiere Pro’ya getirileceklerini söylüyor.

“İçerik kimlik bilgilerinin benimsenmesi konusunda çok heyecanlıyım ve Koalisyon “İçerik Orijinalliği Girişimi Hakkında” diyor. “Yapay zeka inovasyonunu sorumlu bir şekilde ileriye taşımak ve başkalarını da aynı şeyi yapmaya teşvik etmek için tüm doğru faktörlere sahibiz.”

Kullanıcı deneyimi ve aktarılabilir beceriler

Subramaniam birkaç ay önce bir konferans vermişti. Televizyon Akademisi Yapay zeka ve televizyon ve eğlence medyasının yaratılması hakkında konuşmak. Şimdi “Bu çok önemli bir konu, özellikle de sendika grevleri ışığında” diyor. “Bu endüstrilerin yapay zekanın ve üretken yapay zekanın gücünü ve bunun sonuçlarını anlamaya başladığını görüyorsunuz. Cesaret verici bulduğum şey, konuştuğum insanların çoğunun sadece bu endişeleri dile getirip geri çevirmemesiydi. ama ‘Bana daha fazlasını anlat’ diyorsun.” Bu teknolojiyi daha bilinçli bir şekilde kullanabilmem için nasıl yardımcı olabilirsiniz ve neyi bilmem gerekiyor ve bunu anlamama yardımcı olabilirsiniz.

Bu, ürün ekibinin şu anda video modeli için planladığı kullanıcı deneyimi (UX) hakkında açıkladığınız bilgilerle bağlantılıdır.

“Premiere kullanan kişinin, kullandıkları modeli ve bu modellerin sonuçlarını anlamasını sağlamamız gerekiyor” diye açıklıyor. “Kullanıcıya rehberlik edebileceğimiz bir yolda ilerlediğimizi görüyorsunuz: ‘Ne yapmaya çalışıyorsunuz?’ Daha fazla düşünmeye mi çalışıyorsunuz? Peki, bunun için doğru modelleri mi oluşturuyorsunuz? üretim, aralarından hangi modelleri seçebileceğinizin farkında olduğunuzdan ve gerçekten yapacağınız bir şeyi yaratmak üzere olduğunuzu anladığınızdan emin olalım. [deploy]. Bu, bizim düşündüğümüz türden bir kullanıcı deneyimi meselesidir.”

Subramaniam’ın işaret ettiği gibi, birçok video düzenleyici de Photoshop kullanıyor ve buradan çıkan sonuç, Premiere’deki yapay zeka kullanıcı deneyiminin diğer Creative Cloud araçlarına benzer olacağı yönünde.

“Müşterilerimize bu uygulamalar aracılığıyla ciddi bir trafik geldiğinin bilincindeyiz” diyor. “Photoshop, ister gerçek video iş akışı olsun ister yalnızca video sunumunuz için oluşturduğunuz durağan görüntüler olsun, video iş akışları için çok güçlü ve önemlidir. Tasarım ekibimiz ve yapay zeka ekibimiz, bu kavramlarda bir miktar süreklilik olması için birlikte çalışır. Firefly.com’da veya Pro veya Adobe Express uygulamalarında olduğundan direksiyonu bir daha asla öğrenmeyeceksiniz.

Vahşi Batı

Subramaniam, ön izleme videosunda oluşturulan tüm içeriğin yalnızca Firefly’ın video modelinden değil, aynı zamanda üçüncü taraf modellerinden de gerçek çıktı olduğunu vurguladı. Özellikle eski yapay zeka modellerinde sıfırdan yapay zeka görüntü içeriği oluşturma deneyiminiz varsa, sonuçların çoğu zaman mükemmel olmadığını fark etmiş olabilirsiniz. Bunun videoya benzeyebileceğini söylediğimde Subramaniam şunu itiraf etti: “Video modelleri kesinlikle yeni ufuk.”

“Görüntü modelleri gerçekten olgunlaştı; artık herkes video ve ses gibi daha zor medyayı düşünüyor” diye ekliyor: “Biz bu son teknoloji araştırmanın bir parçasıyız. Otomatik dublaj ve çok kısa klipleri farklı dillere çevirmek için ses modelimizi kullanma yeteneği ile ilgili bazı şeyleri gizledik. Bunlar çok basit ve çok basit kullanım örnekleridir. İçerik oluşturuldu [for production] Küreselleşme zor olabilecek bir hızda ve ölçekte gerçekleşmelidir. Bu nedenle her zaman araştırmanın ötesine geçiyoruz ancak bunu uygulamalara nasıl uygulayacağımız konusunda net bir şekilde düşünüyoruz.

Subramaniam, henüz ilk günler olmasına ve “metinden videoya dönüştürmenin daha iyi hale gelmesine kadar hala gidilecek uzun bir yol olduğunu” kabul etmesine rağmen, önizlemenin “inanılmaz derecede olumlu” olduğunu söylüyor.

“Profesyonel video editörlerinin kullandığı iş akışını seçtik” dedi. “Örneğin, bir videoyu birkaç kare uzatabileceğiniz Geneative Extend’i ele alalım. [In production]Eğer atışı kaçırırsanız, atışı kaçırmış olursunuz ve bu çok fazla saat ve para gerektirir. [fix in post]. Böylece insanlar şöyle der: “Noel geldi.” Lütfen bunu bize getirin.

Ekleme ve çıkarma da özellikle After Effects’teki dönen fırçaya aşina olmayan kişiler için büyük bir başarıdır; “Bunun zamandan tasarruf sağlayan yönü çok büyük” diye ekliyor.

Tüm uzmanlıkları içeren bir program mı?

Reklamlar ve pazarlama sunumları için hızlı değişim talepleri çok açık, ancak TV veya film dizilerinde çalışan editörlerin tepkisinin ne olacağını merak ettim.

“Heyecan vardı çünkü Adobe, ister sosyal medya için içerik oluşturuyor olun, ister reklam gibi daha uzun bir eser için içerik oluşturuyor olun, profesyonel video editörlerinin klip eklemek, kaldırmak veya uzatmak için günlerinin saatlerini nasıl harcayabileceğini anlıyor Subramaniam da aynı fikirde. “İnsanlardan henüz yayın akışında günlük olarak nasıl kullanıldıkları hakkında bir şey duymadım – sanırım bu yakında – ama aynı zamanda bunu paylaşmamızın nedeni de bu: topluluğu heyecanlandırmak ve böylece onların da projemize katılabilmelerini sağlamak. Beta programını başlattığımızda, onlarla ortaklık kurarak yenilikçiliği geliştirmemize ve teşvik etmemize yardımcı olacak geri bildirimleri alacağız.

After Effects, Firefly için bariz bir sonraki bağlantı noktasıdır.

“Tamamen bunu düşünüyoruz” diye doğruluyor. “Sadece Premiere’i değil, tüm video uygulamalarımızı seviyoruz. Üretken yapay zeka ile ses konusunda yenilik yapmaktan ve bunu diğer uygulamalara taşımaktan biraz bahsettim. Video platformumuz güçlüdür. Üretken yapay zeka ile bunu geliştireceğiz.

Subramaniam, “İnovasyon ve araştırmanın hızı çok hızlı” diye ekliyor. “Bu yıl ticari açıdan güvenli bir video modelini pazara sunarken elde edebileceğimiz kalite düzeyi konusunda çok heyecanlıyız.”

Deepa Subramaniam, önce bilgisayar bilimcisi ve ardından Creative Cloud’un oluşturulmasında önemli bir lider olarak Adobe’de on yıldan fazla zaman geçirdi. Ayrıca Kickstarter’da Ürün ve Tasarımdan Sorumlu Başkan Yardımcısı olarak görev yaptı, Wherewithall’ın kurucu ortağı oldu ve teknoloji startuplarına danışmanlık yaptı ve Hillary for America kampanyasında ürün müdürü olarak görev yaptı.

Devamını oku IBC Hızlandırıcıları 2024: Sekiz final projesi açıklandı