Pika 为其视频制作者推出生成式 AI 音效
Published on
Pika,是快速发展的视频 AI 领域的领先企业之一,最近为其网络平台添加了一项新功能,允许用户自动为其 AI 生成的视频生成音效。这一新功能将为 AI 视频带来新的维度,这些视频通常是无声的,之前需要用户使用外部编辑软件添加自己的音频文件。有了 Pika 的新功能,用户现在可以直接在应用程序内创建和合并音频文件,使视频创作过程更加流畅高效。
使用 Pika 的 AI 音效增强 AI 视频
Pika just launched sound effects You can prompt for them, or let Pika automatically generate them based on the footage Pretty sick pic.twitter.com/ZVyoEZlmIW
— Nick St. Pierre (@nickfloats) March 9, 2024
传统上,创建 AI 生成的视频需要电影制作人从不同的平台和数据库中分别获取音效、旁白和视觉效果。Pika 正在改变这一点,提供一个集生成式 AI 音效、唇形同步功能和 AI 生成视觉于一体的"一站式"解决方案。
Pika 的 AI 音效如何工作
Pika 的生成式 AI 音效可以通过两种方式获得。首先,通过上下文生成,AI 模型根据提供的文本提示,建议最适合视频片段的音频。其次,用户可以在生成或上传无声片段后,添加特定的 AI 生成音效。通过点击"编辑"和"音效"选项,用户可以描述想要添加的音效类型,AI 模型将为他们生成多个选择。
Pika just dropped Sound Effects.Now you can add sound effects automatically to your video or describe it.Still in beta but it's incredibly easy to do.9 examples (and of course I had to do meme): pic.twitter.com/ov3FdZcrpn
— Min Choi (@minchoi) March 10, 2024
Pika Lab 的可访问性和未来计划
目前,Pika 的生成式 AI 音效功能仅对超级合作者计划的用户或 Pro 订阅用户(每月 58 美元)开放。但是,该公司计划逐步将此功能推广到所有 Pika 平台用户。通过收集早期用户的反馈,Pika 旨在完善和改进该功能,使其更加可访问和有益于更广泛的用户群。
First play with PikaLabs new sound effects. They seem to match the video well and add so much atmosphere.Really cool feature. pic.twitter.com/mTT6ZkCVvB
— TomLikesRobots🤖 (@TomLikesRobots) March 9, 2024
Pika 的生成式 AI 音效介绍使其在 AI 视频领域脱颖而出。虽然其他公司如 ElevenLabs 和 Meta 也提供了基于文本提示生成音效的类似技术,但 Pika 是第一家将这一功能与视频生成 AI 模型相结合的公司。凭借其一体化平台,Pika 旨在消除对单独的摄影师、摄像师、音效设计师和演员的需求,可能会革新 AI 视频的创作方式。
拓展 Pika AI 的产品线?
生成式 AI 音效只是 Pika 计划引入到其网络平台的众多功能之一。最近,Pika 与 ElevenLabs 合作推出了唇形同步功能,允许用户为视频添加 AI 语音和同步动画。这家初创公司已获得 5500 万美元的融资,估值接近 2 亿美元,正在积极与 OpenAI、Adobe、Runwa、Stability AI 和 Haiper 等资金雄厚的玩家竞争创意 AI 领域。
Pika Sound Effects are SO fun! Thanks @pika_labs pic.twitter.com/2jgTvn5ycm
— Retropunk (@RetropunkAI) March 10, 2024
总之,Pika 的新生成式 AI 音效功能通过将声音集成到视频创作过程中,增强了视频创作体验。 Pika 是一个集成了生成式 AI 音效、唇部同步功能和 AI 生成视觉的一体化平台。它旨在为个人创作者和企业提供更高效和沉浸式的视频创作体验。随着 Pika 不断创新和扩展其产品线,它有望颠覆 AI 视频领域,并巩固其行业领导者的地位。
.