近日,,,驰名国际人为智能独立评测机构Artificial Analysis榜单更新,,,由中国jackpot官网人为智能钻研院(TeleAI)和中jackpot官网人为智能科技有限公司创新打造的星辰多模态视频天生大模型TeleVideo 2.0在“Image to Video Leaderboard”(图生视频)排名中位列全球前五、、国内前三。。
星辰大模型是中国jackpot官网CTO、、首席科学家、、中国jackpot官网人为智能钻研院(TeleAI)院长李学龙教授携带科研团队自主研发的全模态、、全尺寸、、全国产大模型系统。。TeleVideo是星辰大模型系统下的多模态视频天生大模型,,,于2024年12月在“TeleAI开发者大会”正式颁布。。
在Artificial Analysis评比中,,,榜单通过对比人类主观偏好,,,从内容一致性、、活动与功夫不变性、、语义合理性以及整体视觉质量等多个维度综合评估模型的视频天生能力。。TeleVideo 2.0之所以能在一众国际当先模型中排名前列,,,得益于TeleAI团队在数据、、算法、、框架等多维方面的技术创新力。。
数据决定模型能力的上限,,,TeleAI科研团队构建了一套严苛的“筛选-洗濯-平衡-适配”数据流水线,,,确保天生的每一帧画面都具备高质量出现。。在内容素材方面,,,TeleVideo 2.0堆集了规??晒鄣氖莩,,,涵盖人物、、动物、、天然、、城市等全场景,,,以及日常生涯、、复杂交互等各类作为,,,风格兼具写实、、卡通等多种阐发大局。。模型不仅能天生真切的物理世界,,,也能驾驭极具设想力的艺术画面。。
传统视频模型常面对画面崩坏、、作为不连贯等难题。。TeleVideo 2.0则选取了一种全新的“全局规划+部门精修”模型架构,,,通过“下一帧率预测”范式,,,预防传统模型因逐帧堆砌导致的误差累积。。这种架构设计能让物体活动轨迹越发丝滑天然,,,人物神志与布景细节始终维持不变统一。。
此外,,,TeleVideo 2.0还提出了一套统一的视频后训练框架,,,从反馈建!!、、信誉分配与训练调度三个层面进行协同设计。。该框架将视频后训练从经验驱动的调参过程转变为可诊断、、可诠释、、可持续演进的系统工程,,,为长功夫、、高分辨率视频天生提供了一条不变且可扩大的强化学习对齐蹊径,,,进一步提升了模型成效。。
壮大的模型离不开高效的算力底座,,,TeleAI选取了自主研发的TeleTron视频天生训练框架,,,为TeleVideo 2.0的训练和迭代提供强劲动力。。TeleTron是国内首个支持长视频(分钟级)和超高分辨率(2K)的视频天生大模型训练框架。。相比主流的DeepSpeed框架,,,TeleTron通过创新的“散布式多模态编码器技术”,,,实现了单元资源处置效能提升3.5倍,,,现已全面开源。。
基于TeleVideo 2.0的壮大能力,,,TeleAI自主研发并面向公家推出了央企首个“全链路AI视频创作平台TeleStudio”,,,具备“文生图-文生视频-图生视频-角色驱动”的全链路创作能力,,,既满足专业创作者对高清视频、、复杂作为天生的高阶需要,,,又通过模板化配置、、流程化指引降低通常用户的操作门槛。。