国产AI可以拍微电影了!4K、60帧高清画质,自带音效

AIGC动态1个月前发布 QbitAI
432 0 0
国产AI可以拍微电影了!4K、60帧高清画质,自带音效

 

文章摘要


【关 键 词】 AI视频4K画质音效生成微电影多模态

智谱公司推出的新AI技术“清影”标志着国产AI在视频生成领域的一大进步,将视频生成技术带入了有声电影时代。清影具备三大特点:电影级效果,支持4K、60帧高清画质和10秒时长的任意比例视频;模型能力全面提升,CogVideoX模型能够理解复杂提示并保持人物等主体的连贯性;自带音效,引入CogSound模型,自动根据视频内容生成匹配的音效。这些技术使得AI能够制作微电影或短视频,操作简单,只需提供主题,AI即可生成脚本、高清图像和视频片段。

智谱的GLM-4-Voice情感语音模型能够实现类似真人的配音效果,而从无声到有声的AI视频生成技术仅用了9个月,远快于人类电影技术的发展。CogSound模型能够精准理解视频内容并生成相应的音效,无论是自然环境、动物世界、多种乐器还是科幻电影,都能生成匹配的音效。CogVideoX模型在内容连贯性、可控性和训练效率等方面进行了升级,采用专家Transformer模块和因果3D卷积技术,提高了视频生成的细节和连贯性。

智谱的多模态技术矩阵包括文本、图像、视频、音效、音乐生成以及端对端语音和自主代理,预示着短视频制作领域即将迈入AI时代。CogVideoX和CogSound的结合使得视频生成不仅满足视觉要求,还符合真实物理世界的听觉要求,为短视频制作提供了新的可能。智谱即将上线的CogSound和计划发布的CogMusic将进一步丰富视频生成中的音效和音乐元素,使得短视频制作变得更加便捷和高效。

“极客训练营”

原文和模型


【原文链接】 阅读原文 [ 2401字 | 10分钟 ]
【原文作者】 量子位
【摘要模型】 moonshot-v1-32k
【摘要评分】 ★★☆☆☆

© 版权声明
“绘蛙”

相关文章

暂无评论

暂无评论...