星火绘镜是科大讯飞推出的AI短视频创作平台,能够将输入的文本描述自动转换成视频内容(如短剧、预告片、MV),包括生成视频剧本、分镜,最终形成完整的短视频。
VideoTetris是由北京大学与快手AI团队共同推出的视频生成框架,用以实现复杂视频的生成。VideoTetris技术的核心在于其创新的时空组合扩散模型。这一模型能够精确捕捉文本中描述的复杂场景和动态变化,通过操纵去噪网络的注意力图,实现视频内容的精确生成。无论是静态场景的细腻描绘,还是动态过程的流畅展现,VideoTetris都能够游刃有余。
AniPortrait是一款音频驱动的肖像动画合成框架,旨在根据音频和静态人脸图片生成逼真的动态视频。该产品的主要特点包括高度逼真的动画效果、音频驱动的动画合成、面部再现、头部姿势控制等。
DreamAvatar是由美图公司开发的一款AI数字人生成工具,旨在通过人工智能技术帮助用户快速创建逼真、个性化和多样化的数字人形象。
MotionCtrl是一种统一且灵活的视频生成运动控制器,由腾讯、中国香港大学等机构的研究人员推出。它专为AI视频生成设计,能够独立有效地管理视频中的相机运动和物体运动。
适用于视频合成、图像到视频、视频修补、风格化生成等内容创作和视频编辑应用
Vach是一个开源项目,旨在通过流式数字人技术,实现音视频同步对话,并且已经达到了接近商用的效果。它不仅能够进行文本交互,还能通过语音进行交互,这使得它在多种场景下都具有广泛的应用潜力。