B站自研AI模型AniSora,二次元也有专属模型了! 官方展示的核心功能包括: - 图片转动画:上传一张图像并输入一句提示,角色就能眨眼、微笑甚至流泪,动画过渡自然,动感十足。 - AI扩图:支持画面智能补全,可将竖屏图像无缝扩展为横屏,丰富镜头构图。 - 帧插值:通过AI智能生成中间帧,提高视频帧率,让动画更流畅。 - 首尾帧过渡生成:只需输入开头和结尾两张图,AniSora就能自动补出中间过渡画面,形成完整动画片段。 - 图层分割器:上传单张图像后,系统可将角色、背景、物体等元素自动分离为独立图层,方便后续编辑。 技术亮点如下: - 专为动画优化:不同于传统追求真实感的视频生成模型,AniSora从架构到训练均围绕动画风格设计,更贴合二次元视觉表现。 - 超大动画数据集:从超百万部动画作品中精选出1000万组高质量文本-视频对,涵盖多种画风与动作类型。 - 精细时空控制:引入时空掩码(spatiotemporal mask)模块,实现对关键帧、局部区域及整体动画节奏的精准控制。 - 全新评测体系:构建948段人工标注的动画Benchmark,用于衡量表情丰富度、角色一致性和动作平滑度等维度,确保生成质量。 - 支持多任务训练:结合图像与视频混合训练策略,提升模型泛化能力,适应不同画风与复杂场景。 未来,官方计划探索强化学习、多模态(语音、骨骼、镜头)控制,进一步提升创作自由度和表现力。 感兴趣的小伙伴可以点击:-CN/video/AniSora GitHub:-anisora 论文:
B站自研AI模型AniSora,二次元也有专属模型了! 官方展示的核心功能包括:
量子位来谈科技
2025-05-19 13:13:54
0
阅读:7