新快报讯 2024年12月12日,巨人网络在2024年度中国游戏产业年会上发布了“千影 QianYing”有声游戏生成大模型,其包含游戏视频生成大模型YingGame、视频配音大模型YingSound,实现了有声可交互游戏视频生成的新突破。同时,巨人又启动“千影共创计划”,基于大模型底座技术,对外开放模型技术、模型应用、原创游戏项目等方面的合作共创、应用落地、人才招募,加速布局“游戏+AI”从降本增效向颠覆式创新的快速转化。
据悉,YingGame由巨人网络AI实验室联合清华大学SATLab研发,是首个实现角色多样运动与个性化、具备强物理模拟特性的游戏视频生成大模型,可生成开放世界游戏视频,通过文本、图像或键盘、鼠标操作实现角色动作的交互控制,并自定义游戏角色,同时具备更好的游戏物理仿真特性,无需传统游戏的3D模型制作和引擎渲染环节。结合自研视频配音大模型YingSound,能够根据画面生成与之匹配的复杂音效,实现有声游戏视频。
YingSound是由巨人网络AI实验室、西北工业大学ASLP Lab和浙江大学联合研发的视频配音大模型(Video-to-Audio Model,V2A),拥有超强的时间对齐、视频语义理解能力,无需人工输入提示词,端到端为各类视频生成多种类型的高精细度音效,涵盖真实场景视频、动漫视频与游戏视频等,具备多样化应用场景泛化能力。
巨人网络表示,“千影 QianYing”有声游戏大模型展示了通过文字描述实现游戏创造的一种可行性,目前尚处于技术打磨阶段,AI实验室将持续推进模型能力的升级迭代。
今年初,巨人网络董事长史玉柱提出该公司在“游戏+AI”领域的愿景,希望探索打造一个AI游戏孵化平台,旨在降低游戏开发的门槛,让普通人也能开发游戏。“千影 QianYing”游戏大模型的最新进展,意味着这一愿景迈出了新一步。