Handsfree.js — 一个通过计算机视觉集成手势，面部表情和各种姿势识别的前端库

Posted 2021-03-30 太空编程

当电视上出现上图这种科技大片的时候，有没有幻想过有一天可以实现上图的这种交互，当我打开Handsfree这个库的介绍页时，看到前端页面竟然能够识别人的手势，面部以及各种肢体动作，简直刷新了我对前端能力的认知。确信这种交互有一天成为可能。

计算机视觉加上AI这几年早已经不是什么新鲜的名词，随着GPU算力的不断提升，使得越来越多（小）的设备上实现人工智能成为可能。

国外的一个开发者制作了一个实现Handsfree各种效果的demo页面（https://handsfree.js.org/），并且制定了开发计划，详细的进度将在作者的twitter上实时公布。看下这个计划：

1. 创建一个易于使用的通过面部，手，眼睛，姿势跟踪，声音和思想控制程序的库。

2. 然后使用该库去创建自定义插件或者组件。

3. 使用以上实现的这样一个仓库去帮助更多的人通过“用户脚本管理器”去实现浏览器插件。

4. 然后培养实现一个围绕Handsfree的使用者和开发者的社区。

5. 最后建立一个关于Handsfree的基金会促进实现更多优秀的创意。

下面看下Handsfree能够实现哪些有趣的功能：

触发交互事件

最近不久作者发布了名为Pincher的插件，可以实现24种以上的捏