阿里通义实验室发布的基于文字提示的2D卡通人物创作工具 – Textoon

Textoon指的是什么

Textoon是由阿里巴巴集团通义实验室开发的一个创新性项目，它开创了依据文本指示创造Live2D风格二维卡通形象的先河。借助高度发达的语言与视觉技术模型的支持，在短短一分钟内即可创造出丰富多样的互动式2D角色。这些生成的角色具备动画效果，并且兼容HTML5展示形式，其应用范围涵盖了电影、游戏、社交平台及广告等多个领域。

Textoon的核心特性

• 内容分析与解释Textoon 借助经过精细调整的大型语言模型(LLM)，具备了从复杂的文字描述中精准提炼出诸如发式、眼睛颜色和服饰种类等具体细节的能力。
• 可调节的外貌创造利用诸如 SDXL 这样的文字转图像技术，Textoon 能够依据用户的输入创造出角色的形象，并保证生成的人物形象与用户的描述相吻合。
• 校对与修正用户能够修改创建的角色，完善其细节或是改进不满意的地方。
• 动画强化Textoon 通过整合ARKit的面部表情数据，极大地增强了角色动画的表现效果。
• 多种语言兼容性支持Textoon 兼容中文和英文的指令词汇，能够满足各类用户对于语言的不同要求。

Textoon的核心技术机制

• 文本分析及目的解读Textoon 利用精细调整后的大型语言模型(LLM)，能够从复杂文字叙述中捕捉到诸如头发样式、发色及眼部色彩和服饰类别等具体细节。其精准的文字分析功能使得该系统可以将用户的描述性输入解析为明确的视觉属性特征。
• 整合 Live2D 技术生成的人物会以Live2D的形式展现出来，这种形式能够实现高效的图像渲染及灵活多变的动作展示。借助Live2D技术中的多层次二维绘制与骨骼绑定机制，人物可以表现出多样化的情感和动作。此外，Textoon还融合了ARKit的功能，显著增强了角色的动画效果。
• 高性能渲染及广泛的兼容性所创建的Live2D模型具备出色的渲染效率，非常适合于HTML5环境中的展示，并且能够在移动设备与网络应用程序上流畅运行。

Textoon的工程位置

• 官方网站项目访问此链接以查看相关内容：https://human3daigc.github.io/Textoon_webpage/
• 关于技术的arXiv学术文章该文献的PDF版本可以在如下链接中找到：https://arxiv.org/pdf/2501.10020，提供了对该研究课题深入探索的内容。

Textoon的使用情境

• 创新设计利用 Textoon，设计师能够迅速创建角色概念模型，并降低制作时间和开支。借助简短的文字说明，使用者即可在极短时间内构建出包含众多细节的二维卡通人物形象，并进一步修改和完善这些设计。
• 制作电子游戏在游戏中制作过程中，开发人员能够利用 Textoon 迅速创建角色模型，这些模型既可用于初步的概念规划，也能直接融入到游戏角色的动态表现之中。
• 动画创作Textoon 可依据详尽的文字叙述创作出高水准的二维卡通人物形象，特别适合应用于动漫领域的角色构思与动态影像生产中。所创建的人物图像既能够直接融入到动画影片的生成过程中，也可以为动画创作者提供灵感和参照。
• 文字创作对文学创作者而言，Textoon 能够把文本叙述中的人物形象具体呈现出来，协助作家更精准地勾勒人物外貌与个性特征，提升作品的视觉表现力。
• 教育培训Textoon 能够协助创建教育视频和交互式学习资源。利用其创造鲜活的二维卡通人物功能，能够向学生们呈现更加具体且吸引人的学习内容，比如打造虚拟导师或是动画演示。