Bunraku:将单幅插画转变为可编辑的Live2D角色
Live2D是动漫角色和虚拟头像主流的二维角色动画格式,以逐层RGBA图层及其网格变形驱动角色动作。尽管广泛应用于虚拟直播、手游和交互角色,创建Live2D模型仍需数周手动分层、填补遮挡、摆放网格和关键帧制作,且此前无端到端生成方法。本研究首次提出从单张插画生成Live2D运行时所需的所有结构信息:有序RGBA图层、每层变形网格及驱动角色动作的关键帧顶点偏移。第一阶段将层分解视为一种基于Live2D器官级分类的分层扩散过程,生成有序RGBA栈及隐层区域补全;第二阶段仅用alpha通道构建与内容匹配的三角网格,并联合预测所有图层关键帧位移场,通过自注意力跨层边界处理顶点,位移被分解为有界方向和对数幅度。联合预测确保生成连贯角色而非单独合理部分,且网络放大112倍效果无显著提升。对50个留出测试角色,非强制式生成阶段二顶点方向余弦中位数达0.828。网格基于alpha通道,衣物层可通过自然语言指令重贴图,网格与动画无损复用。此外,贡献了首个Live2D标准化基准Live2D-Bench及包含8884模型的带层和动画监督的Live2D数据集。
这条 研究论文 信号说明,来自 arXiv cs.CV 的信息已经不只是单点新闻,而是值得放进产品、研究和行业判断里的趋势线索。