3D中国风捏脸

研究报告节选:

 Nawa：自研赋能元宇宙社交，多项能力居行业前列。Nawa 引擎为 Soul专有的多媒体技术，是一个一个集 AI、渲染与图像处理于一体的集成化SDK。从功能上可以分为 2/3D 两大类，2D 能力包括人像美化、贴纸、镜头特效、风格化滤镜等；3D 能力中主要涵盖 3D Avatar、 3D 贴纸、AR 面具、场景渲染等，其中部分能力已达行业头部水准。 1）美术表现和设计风格独树一帜，融合文化元素，符合国人审美。3D 捏脸延用了平台标志性的 2D「超萌捏脸」，将亚洲人的容貌特征与可爱的特性相结合，风格上融入了中国风元素，契合中国市场。 2）多点位识别生动表情，赋予社交温度。Nawa 共有 56 个基础表情支持嘴形、舌头、眼睛等多点位识别。其中，仅眼部和嘴部的识别都均有 20+ 表情维度变化，并支持识别眼球跟随、吐舌头、鼓腮等生动表情，精确区分大笑、浅笑、悲伤、哭泣等不同情绪程度的复杂表情，更好的传递用户在社交过程中的情感和温度。 3）虚拟形象：丰富的素材和多元化构建。NAWA 对虚拟原型进行了重构，包括结构、布线、UV 等，将捏脸系数提升至 74 个维度，让虚拟形象具备多维度捏脸系数与生动的表情成为可能。 4）3D Avatars 渲染性能增强，整体帧率优化。Nawa 团队自研开发了 CG渲染、动画、场景调节、材质与灯光渲染等相关的 3D 能力。同时，考虑到网络传输和手机端硬件的限制：Nawa 团队选择了轻量级的模型结构，在此基础上进行了大量的加速工作，并通过变形计算和优化方式提升渲染效果。在帧率的优化上，引入表情预测能力，使呈现效果更加平滑。