能力概览

更新时间：2023/07/06 访问次数：10397

一、平台价值&生态机会

淘宝购物小程序作为淘宝新开放最重要的阵地，承担着提升消费者购物乐趣以及商家经营自由度的重要使命。小程序AR/AI平台通过新技术赋能，带动淘内导购方式升级，同时基于人脸、姿态、手势等识别能力，可以创造出丰富的新奇有趣的互动玩法，真正实现边玩边买。

购物小程序已经打通淘内店铺首页、商品详情页、客服通道、直播、搜索等众多公私域渠道的流转，并在不断加码。优秀的小程序应用在给商家创造增量价值的同时也会获得相应的商业化收益。

另外，小程序插件架构体系也使得淘外优秀算法/引擎服务商可以快捷入淘，为淘内最大的商家群体和服务生态提供技术服务，一起将电商AR/AI生态做大。

淘宝购物小程序已经拥有如下AR/AI能力，并在不断引入与迭代中。

注：AR能力受系统版本、机型的要求较高，调用能力时务必注意适用版本，其他版本请自行做好降级和兼容。

1.人脸识别：支持人脸关键点识别（106点、瞳孔轮廓点）、美颜、人脸动作（眨眼、张嘴、点头、摇头、抬眉等）、人脸表情（平静、吃惊、厌恶、生气、伤心、高兴、恐惧7种情绪）、年龄、性别、颜值等丰富维度，另外能判断人脸遮挡等场景，可以满足丰富的互动玩法；

2.手势识别：支持19种静态手势识别（OK、手掌、抱拳、比心、数字等）、4种动态手势（上下左右滑动），以及支持多个手的检测；

3.人体关键点检测：支持14个人体关键点检测；

4.Marker追踪：支持Marker图跟踪，适合AR互动类玩法；

5.运动追踪（motionTracking）：即时运动跟踪；

6.IMU（orientationTracking）：3自由度相机追踪；

7.WorldTracking：6自由度追踪，支持平面检测；

8.推理引擎（MNN）：

为了便于开发者接入，小程序AR/AI相关的重要能力已经以组件/插件化方式封装，开发者无需深谙艰深算法细节，只需专注于创意玩法体验，如下插件需要重点了解：

1.相机组件（Camera）：提供基础相机功能，组件说明文档：点击查看。

2.AR相机组件（AR Camera）：点击查看。

1.我是商家，有自己的技术团队，想研发给自己店铺使用：点击查看说明文档。

2.我是服务商，想提供小程序代开发、模板化服务：点击查看说明文档。

关于此文档暂时还没有FAQ

有用(0) 我要提问