方声 | SenseMARS，元宇宙时代的AI技术赋能平台

商汤科技作为人工智能行业的领军者，除了被广泛认知的“精英多，技术强”等研发优势外，正在通过不断赋能商业场景，打造AI行业的消费应用级标杆。

商汤科技商务总监，李星冶表示，商汤是一个坚持原创技术，并希望通过工智能引领社会变革的企业。

对于终端的消费者，也许商汤是一个陌生的名字，事实在全球范围内，通过商汤的合作伙伴触达的手机移动使用人群，已超过10亿人。2017年开始，大部分国产手机的背后都有商汤图象技术的支持，如直播的美颜功能，商汤技术覆盖的手机已达3.5亿部。

长期以来，大家对AI的认知，更多停留在强大的分析理解能力上。随着元宇宙时代的到来，AI又将通过哪些产品持续服务用户呢？

新一代人工智能将更多赋能视觉信号的分析和生成，尤其是虚拟人与虚拟场景的内容生成，基于以上场景，商汤将核心做好两件事。

• 一是传统的CV。继续发挥AI的主流作用，基于人物/场景去做分析与理解。

• 二是打造赋能平台—SenseMARS。让技术与更多的场景去做融合，这也是这两年商汤将持续投入人力去重点打造的项目。

SenseMARS，它深度融合了AI和AR/MR技术，通过对三维空间的数字化重建，结合图像、物体识别等AI技术，可以做到理解场景中的人、事、物，进而创造虚实融合的超现实互动。同时，它可以兼容多种系统平台和终端设备，打造沉浸式的虚实融合视觉效果和互动体验。

SenseMARS作为一个底层技术赋能平台，其应用场景有很多。

在娱乐应用方面，如视频、直播领域的美颜、表情互动、手势互动等多种MR特效，都可以通过SenseMARS平台的感知算法，手势识别等技术，实现特效创意。还可以对个人进行3D建模，生成专属的3D Avatar虚拟形象，应用在视频、直播、游戏、在线教育等多种场景。

李星冶分享到，早期的增强现实技术更多地被用于移动互联网，也就是手机应用上，如美颜背景分割等等。元宇宙的时代到来，SenseMARS的能力将出现在更多的场景中，比如电视、激光投影，VR眼镜以及健身镜等等。“越来越多的场景里，我们都会看见SenseMARS底层赋能的影子。”

实现虚拟世界与现实世界的连接，需要依靠虚实结合的基础设施。

商汤的SenseMARS平台，已在多种线下场景得到应用，如智慧场馆、景区、文博馆、游乐场所、大型商超、机场交通枢纽等。同时还打造了虚拟化展示空间，“简单来说就是在线上虚拟的VR空间里融入虚拟人与虚拟物品。这个空间，即可以是基于真实场景三维空间的重建，也可以是构建一个纯虚拟的场景。”“虚实结合”催生了新的商业模式和生活方式。

真正的虚实结合，除了把现实世界投射到虚拟世界中，也要让虚拟世界中的人和物能够认识和理解现实世界，并做出精准的反馈。

李星冶认为，人工智能的核心能力一定是对于世界的理解。目前的虚拟人，可以按照五个级别来做分类，L1到L5级别的区别在「虚拟人的智能化」，其核心是背后的NLP和对于自然语言自然人的交互方式和思维习惯的理解能力。“这对于商汤来说是比较擅长的，包括语料的获取方式，语料的过滤，特征的提取、模型的训练等等，其背后有一个非常强大的算力驱动中心。”

AI技术与数字文创结合，连接数字世界与现实世界，让各式各样新奇、独具特色的文化创意变为现实。

商汤打造的数字猫数字文创平台，基于商汤科技SenseMARS火星混合现实平台的图像识别、高精定位等领先的AI技术能力，可以将实体文创产品与数字文创结合起来，以视频、三维模型等形式将数字文创投射到现实世界。

每一份数字文创除了包含有限量的沉浸式3D数字内容，还配备有一个精美的实物“能量底座”。“能量底座”既可作为精美摆件摆放在书桌案头，同时又是用户进入到文创VR世界的“秘密入口”。

AI技术不断成熟落地，这个过程中，高科技的神秘感不再，AI在 为各行各业赋能的同时，也将迅速完成了自身的技术平权化。

李星冶认为，一些大厂早期需要技术公司的支持，到了中后期，平台有了研究研发能力，势必会开始使用自己的算法。但对于小平台而言，他们的资源力量相对薄弱，会长期依托商汤这类科技公司的技术支持。“一些三维信息的定位重建等，比我们在抖音上看见的美颜会更难，所以，虽然有的技术看起来简单，最底层的通用性较强，不管是从品类上的延展性，还是从技术的深度以及对场景物体的识别理解，还是有提升技术的难度的。”

目前，商汤已经实现了数字人生成能力的标准化，平台化。上传照片即可通过AI算法自动生成3A级别的虚拟人，平台不仅支持多种不同风格的虚拟人还有多种驱动玩法，赋能不同场景需求，同时，可通过虚拟人生成平台进行视频或图片内容制作编辑，平台生成的虚拟人角色可无缝接入数字人多种品台软件中，实现平台角色的快速应用落地。

“商汤现在是全球范围内少数可以通过单张照片就可以生成虚拟人的人工智能企业之一。”在商汤的AI技术下，生成虚拟人是一件简单且快速的事。在高度配合的情况，能以周为单位制作成一个超高精度的虚拟人，包括后续的驱动和交互的能力。不仅如此，驱动虚拟人的成本也大大降低。传统的驱动是基于动捕设备，一套动捕设备的需要几万元甚至到十几万元，而现在千元级的手机就能完成虚拟人的驱动。

市面上大部分厂商的核心并不是AI驱动，而是手工绘制，以“帧”来创建虚拟人，影视公司可以实现逼真的效果，要求较低的可以选择互联网公司。  “商汤则是用AI快速学习人类绘制的过程，我们的核心，不是做的更精细或更有艺术创造力，而是生成更快，更有效率。”李星冶提到。

目前，商汤智慧商业、智慧城市、智慧生活、智能汽车四大业务板块上风生水起，“赋能百业”是商汤在未来10年的重点。通过原创的研发能力，帮助AI技术去服务更多的场景，并通过终端体验，需求的反馈，来倒推技术产品的迭代优化。

商汤，作为AI行业的领军企业，正肩负着AI行业创新，发展的使命与责任。全面推进赋能型平台的打造与应用，在元宇宙时代继续深耕，让人工智能引领人类进步。