本帖最后由 cr1292296190 于 2019-9-16 13:17 编辑
日前购得一套AI视觉模组visionseed,我准备先在Ubuntu下试玩visionseed工具来了解这套视觉模组。当然前期准备工作是要做的: (1)提前准备Ubuntu Linux系统,也可以安装Ubuntu虚拟机 (2)提前准备VisionSeed开发者套装,包括蓝色框中的VisionSeed(含摄像头模组)和USB数据线。
(3)在VisionSeed官网(https://visionseed.youtu.qq.com)开发者中心界面下载工具VisionSeed SDK(Linux)和VisionSeed客户端工具(Ubuntu Linux 16.04)。
准备工作完成后,现在开始客户端连接VisionSeed了,在Ubuntu环境下打开VisionSeed SDK,可以看到目录结构如下:
其中scripts/99-tencent-yt.rules为USB权限配置文件,可授予普通用户USB接口权限,需要执行以下命令将该文件复制到文件夹/etc/udev/rules.d/。 sudo cp./scripts/99-tencent-yt.rules /etc/udev/rules.d/ 使用USB数据线将VisionSeed连接到电脑的USB接口,在连接电脑USB端口后VisionSeed会虚拟出一个视频设备和一个串口设备。 在Ubuntu环境下打开后缀为AppImage的客户端,界面如下:
左下方选项框中选择虚拟串口/dev/tty/ACM0,点击连接按钮就连接成功了,当人脸对着VisionSeed模块的Camera可以在左下方看到获取的面部90个配准点信息。
连接完成后迫不及待的点开了数据可视化,在界面下方有FPS/左眼开闭/右眼开闭/嘴巴开闭/方位角/翻滚角/俯仰角等7种数据可视化选项。
先看运行针率,点击FPS->运行后,界面会跳转到显示曲线,下面就是我做的实验,可以看到fps十分的稳定:
再来看看,左眼开闭/右眼开闭/嘴巴开闭可视化的效果,从使用说明中了解到facesfaceShap包含了人脸的90个匹配点,通过这些匹配点我们可以通过算法获取到左眼/右眼/嘴巴开闭的数据。 点击左眼开闭->运行后,可以看到显示曲线,我不断的眨眼可以形成一个类似正弦函数的图像,是不是很有趣。
再看嘴巴开闭的情况:
VisionSeed能够根据检测到的人脸信息计算出头部的空间姿态信息,返回roll,yaw和pitch角度信息,分别表示脸部左右倾斜角度,脸部左右扭头角度和脸部俯仰角度,即翻滚角,方位角和俯仰角。
我运行了一下方位角,看自己“摇头晃脑”的可视化数据也是蛮有趣的:
通过这次的试玩,了解到VisionSeed功能的强大,不仅仅是个集成了摄像头+AI芯片的模块,AI算法才是效果的保证,他内置了腾讯优图的算法,效果过硬,模块内还包括了人脸识别功能,通过附带工具软件管理数据库,能够实时离线识别库中的身份,非常强大,能做出很多有意思的东西。
|