아도비 파이어플라이, AI로 영상 효과음 생성 가능해져

아도비 파이어플라이가 이제 AI 사운드 효과를 비디오에 생성할 수 있게 되었으며, 이는 매우 인상적입니다. 불과 1년 반 전까지만 해도 아도비의 최신 파이어플라이 AI 기술은 텍스트에서 고화질 이미지를 생성하는 것이 주목적이었습니다. 하지만 이후 아도비는 텍스트를 비디오로 변환하는 기술로 방향을 전환했으며, 이번에 새로운 기능들을 추가해 더욱 경쟁력을 높였습니다. 목요일, 아도비는 사용자가 최종 생성물에 더 많은 제어권을 가지고 다양한 옵션으로 비디오를 만들 수 있도록 하는 업그레이드를 발표했습니다. 특히, 비디오 생성에서 중요한 부분 중 하나인 사운드가 미흡했던 점을 보완하기 위해 AI를 통해 사운드를 생성할 수 있는 기능을 도입했습니다. 새로운 '사운드 효과 생성' 베타 기능은 사용자가 생성하고자 하는 사운드의 설명을 텍스트로 입력하여 맞춤형 사운드를 만들 수 있습니다. 더욱 정교한 제어를 원하는 사용자는 자신의 목소리를 녹음하여 캐릭터의 움직임에 맞춘 사운드의 리듬, 타이밍, 강도를 시연할 수도 있습니다. 예를 들어 비디오에서 사자의 포효 소리를 생성하되, 사자가 입을 연다 닫는 움직임에 맞추고 싶다면, 비디오를 보면서 그 움직임에 맞춰 자신이 소리를 내는 클립을 녹음하고 이를 텍스트 프롬프트와 함께 제공하면 됩니다. 이후 여러 옵션 중에서 가장 적합한 것을 선택할 수 있습니다. 이 기능은 다른 텍스트 기반 비디오 생성 모델들보다 사용자가 직접 오디오를 입력할 때 더 많은 제어권을 제공한다는 점에서 돋보입니다. 출시 전에 이 기능의 라이브 데모를 볼 기회가 있었는데, 생성된 사운드가 입력 오디오의 흐름과 텍스트 프롬프트를 잘 반영해 실제 사자의 포효 소리처럼 들렸습니다. 또 다른 베타 기능인 '텍스트를 아바타로 변환'은 스크립트를 가상의 사람이 읽는 모습으로 비디오를 생성할 수 있습니다. 아바타를 선택할 때는 아바타 라이브러리를 살펴보고, 배경과 액센트를 맞출 수 있으며, 파이어플라이는 최종 출력물을 생성합니다. 이 기능의 잠재적인 활용 사례로는 가상 프리젠터를 활용한 교육 비디오 생성, 텍스트 콘텐츠를 소셜 미디어용 비디오 기사로 변환, 또는 자료에 '사람의 느낌'을 더하는 등의 것입니다. 아도비는 또한 사용자의 비디오 생성 경험을 개선하기 위한 실용적이고 간단한 기능들을 공개했습니다. 예를 들어 '비디오 컴포지션 참조' 기능을 통해 참조 비디오를 업로드하고 그 구성을 새로운 생성물에 추가할 수 있습니다. 이는 사용자가 프롬프트를 작성하는 실력이 아무리 좋아져도 상상하는 시각적 이미지를 완벽히 설명하기 어려운 경우에 도움이 됩니다. 데모를 보며, 최종 출력물이 참조 이미지와 잘 일치하는 것을 확인할 수 있었습니다. '스타일 프리셋' 옵션은 사용자가 비디오에 시각적 스타일을 쉽게 적용할 수 있게 해줍니다. 이 스타일에는 점토 애니메이션, 애니메이션, 선 예술, 벡터 아트, 흑백 등이 포함됩니다. '프롬프트 개선' 기능은 파이어플라이 웹의 비디오 생성 모듈에서 원래 프롬프트에 언어를 추가하여 파이어플라이가 의도를 더 잘 이해할 수 있도록 돕습니다. '키프레임 크롭' 기능은 사용자가 첫 번째와 마지막 프레임을 업로드하고, 이미지 크롭 방법을 지정하고, 장면 설명을 추가하면 파이어플라이가 해당 조건에 맞는 비디오를 생성할 수 있게 해줍니다. 아도비는 또한 파이어플라이 비디오 모델의 동작 충실도를 개선했습니다. 이는 생성된 비디오가 더 부드럽고 자연스럽게 움직여 현실적인 물리학을 더 잘 표현할 수 있게 해줍니다. 이 기능은 특히 동물, 인간, 자연 등을 주제로 하는 비디오 생성에 중요합니다. 아도비는 계속해서 다양한 스타일의 모델을 비디오 생성기에 추가하고 있어, 사용자는 한 곳에서 여러 스타일을 시도할 수 있는 기회가 늘어났습니다. 이제 파이어플라이 보드에 Topaz의 이미지 및 비디오 업스케일러와 Moonvalley의 Marey가 추가되었으며, 비디오 생성에는 Luma AI의 Ray 2와 Pika 2.2가 추가되었습니다. 업계 관계자들은 아도비 파이어플라이의 이번 업데이트가 AI 생성 비디오 시장에서 중요한 발전으로 평가하고 있습니다. 아도비는 이미지 생성 분야에서 두각을 나타내고 있으며, 이제 비디오 생성 분야에서도 경쟁력을 갖추고 있습니다. 이러한 새로운 기능들은 창작자들이 더 효율적으로 작업하며, 고도화된 비디오 콘텐츠를 만들어낼 수 있게 할 것으로 기대됩니다. 아도비는 AI 기술을 통해 창의적인 작업을 지원하는 데 앞장서고 있으며, 앞으로도 계속해서 혁신을 추구할 것으로 보입니다.