千万别在有wifi的房间里摆这种姿势,只因……

QbitAl QbitAl     2023-01-16     428

关键词:

明敏 丰色 发自 凹非寺
量子位 | 公众号 QbitAI

现在,只用WiFi就能“看”到你在房间里干啥了……

(你…干…嘛……啊啊啊啊)

多人追踪也是so easy:

过程中完全不需要拍下图像、不需要摄像头

输入的仅是WiFi一维信号,输出则是三维人体姿态。

两台路由器即可搞定!换算成本都不到500块。

而且还不受环境光线、目标被遮挡的影响,效果接近于基于2D图像进行识别的方法。

啊这,难道说WiFi能“看到”我?更进一步……WiFi能监视我??

OMG,蝙蝠侠剧情要照进现实了??

要知道在《暗黑骑士》里,哥谭市所有人的手机都变成了监控设备,同一空间里所有人的一举一动都能被实时记录。

网友们已经构思恐怖脑洞了:

想象一下,只需一台连接WiFi接收器的电视机,别人就能看到我们全家在干啥了。

有人甚至说,以后可能必须要在身上涂保护层来屏蔽WiFi信号。

搞全身追踪,不要用摄像头了

如上提到的方法,是卡耐基梅隆大学(CMU)机器人研究所的新成果。

研究的本身目的是为了保护隐私,毕竟在很多非公共场所,如养老院、独居老人家中,监控非常有必要,但是使用摄像头又很难保证隐私安全。

使用雷达倒是能解决隐私问题,但价格和具体可操作上就很劝退了。

于是,该团队想到了用现在几乎各家必备的WiFi来进行识别。

所以在设备上,仅需两台再也普通不过的家用路由器(每个至少有3根天线)就可以了。

原理也很简单,就是利用WiFi信号中的信道状态信息(CSI)数据。

这些数据是一堆复杂的十进制序列,可以表示发射信号波和接收信号波之间的比率。

当它们在发射器和接收器之间传输时,一旦接触到人体,就会被修改。

于是,通过解读这些“改变”,就可以检测到人体姿态。

为此,研究人员开发了一个“基于区域”的卷积神经网络分析pipeline,该pipeline可以定位人体的各个部位。

然后再将WiFi信号的相位和振幅映射到24个人体区域里的坐标,实现最终的全身姿态追踪。

具体来说,模型通过三个分量从WiFi信号中生成人体表面的UV坐标。

首先,通过振幅和相位Sanitization步骤对原始CSI信号进行“净化”处理。

然后,将处理过的CSI信号通过双分支编码器-解码器网络转换为2D特征图。

接着,将2D特征馈送到一个叫做DensePose RCNN的架构中。

该架构灵感就来自Facebook已经开源的人体姿势实时识别系统DensePose。DensePose入选了2018年CVPR的Oral环节,主要是把2D图像转换成3D人体模型。

所以这步的目的就是算出2D特征图对应的3D姿态,也就是估计出UV坐标。

最后,在训练主网络之前,作者还将用图像生成的多层次特征图与WiFi信号生成的多水平特征图之间的差异进行了最小化,进一步完善了最终结果。

尽管我们从肉眼看上去,两种方法的最终结果差不多,但在数据方面,基于图像的方法效果还是更好一些。

比如在同样环境布局下,基于WiFi方法的精确度都低于图像方法。

数值越高意味着越好

不同环境布局的情况也是如此。

与此同时,如果遇到数据集中不包含的动作,该方法也无法识别成功。如果人数超过3个,也发生“丢人”情况。

下图中左边两幅是罕见动作失败案例,右边两幅是3人以上识别失败情况。

不过团队认为,如上问题可以通过进一步扩充数据集来解决。

除此之外,该方法对路由器的放置位置要求很高,并且会对其他WiFi网络造成影响。

来自CMU团队,有2位华人作者

论文一作为Jiaqi Geng,他来自卡耐基梅隆大学,去年8月获得了机器人专业硕士学位。

Jiaqi Geng

另一位华人作者是Dong Huang,他现在是卡耐基梅隆大学高级项目科学家。

Dong Huang

他的研究方向一直都是利用深度学习进行信号识别。比如之前已经实现了用WiFi信号实时识别2D人体姿态。

最后一位作者是Fernando De la Torre,他现在卡耐基梅隆大学机器人研究所副教授。

Fernando De la Torre

他的研究方向主要为计算机视觉,涉及领域包括人体姿态识别、AR/VR等。

2014年曾创办过一家开发人脸识别技术的公司FacioMetrics LLC,2年后被Facebook收购。

作者团队表示,目前该方法性能还受限于可用来训练的数据不多,未来,他们计划扩充数据集。

论文地址:
https://arxiv.org/abs/2301.00250

「人工智能」、「智能汽车」微信社群邀你加入!

欢迎关注人工智能、智能汽车的小伙伴们加入交流群,与AI从业者交流、切磋,不错过最新行业发展&技术进展。

PS. 加好友请务必备注您的姓名-公司-职位噢 ~

点这里👇关注我,记得标星哦~

千万别点这些手机使用功能!殊不知你的隐私财产就没了!

...我们看一下,在使用手机的时候应该注意哪些使用功能。千万别点这些手机使用功能!殊不知你的隐私财产就没了!连接不知名WIFI千万别点这些手机使用功能!殊不知你的隐私财产就没了!有的时候我们看到一些不知名的免费... 查看详情

数码科技分享_路由器01————tp-linkac1900无线桥接:没用的路由器千万别扔掉,它还可以当你的wifi放大器

...目录数码科技分享01_路由器无线桥接:没用的路由器千万别扔掉,它还可以当你的WiFi放大器普联TP-LINKAC1900无线桥接:没用的路由器千万别扔掉,它还可以当你的WiFi放大器普联TP-LINKAC19002019年,在淘宝买了一款... 查看详情

北京朝阳一互联网公司被端,警方上门,23人被带走…这种开发千万别干!

劳动者作为普通员工,在很多情况下是很难知晓用人单位的经营行为是否涉嫌违法。为了保住自己的工作,对于管理者的安排言听计从。但是在此还是需要提醒广大职场人,在选择行业以及用人单位时需要具有风险防... 查看详情

北京朝阳一互联网公司被端,警方上门,23人被带走…这种开发千万别干!

“爬虫玩的好,监狱进的早;爬虫爬得欢,监狱要坐穿;数据玩的溜,牢饭吃个够。”这句技术圈内广泛流传的调侃并非是危言耸听,因为近些年来有太多的优秀的爬虫程序员们因此而面临牢狱之灾!... 查看详情

springboot中使用@async的时候,千万别忘了线程池的配置!(代码片段)

上一篇我们介绍了如何使用@Async注解来创建异步任务,我可以用这种方法来实现一些并发操作,以加速任务的执行效率。但是,如果只是如前文那样直接简单的创建来使用,可能还是会碰到一些问题。存在有什... 查看详情

关于推荐系统的全面调研与探讨!千万别错过!

简单定义来说:推荐系统是一个信息过滤系统,根据用户的历史行为,社交关系,兴趣点,来判断用户当前感兴趣的物品和内容。其根据不同的目标定义,也会导致不同的推荐结果,从measure上来考虑,包括用户满意度,预测准... 查看详情

千万别被这三种人纠缠

这样一句话:看一个人的价值,去看他的对手就行了。常与同好争高下,不与傻瓜论短长。其实很简单,就是近朱者赤,近墨者黑。你的交际圈体现了你的水平。和上进的人在一起,你自然也活力满满;和懒惰负能量的人在一起... 查看详情

mathtype开学特惠,千万别错过!

想必大家都还沉浸在春节的氛围里,但是开学时间已经到了,大家要收起爱玩的心,到校园里面好好学习了。为了迎接开学季,MathType中文官网推出开学优惠活动,希望广大师生们不要错过!活动详情:MathType公式编辑器直降190... 查看详情

关于推荐系统的全面调研与探讨!千万别错过!

简单定义来说:推荐系统是一个信息过滤系统,根据用户的历史行为,社交关系,兴趣点,来判断用户当前感兴趣的物品和内容。其根据不同的目标定义,也会导致不同的推荐结果,从measure上来考虑,包括用户满意度,预测准... 查看详情

[转]使用docker容器,这些错误千万别犯

【From】http://www.maiziedu.com/article/23592/ 之前我写了一篇文章(作为ruby程序猿,为什么非得用Docker?),里面详细讲了他的优点,相信大家都有所了解,但是即使它有这么多优点,我们也必须避免在容器中做以下的事,以确保... 查看详情

自己能做的事千万别自己做

  在创业的路上会遇到很多「知道」但又不得不犯的错误,比如明确工作职责。今天卢松松讨论的就是这个话题。  其实在很早以前我就吐槽过,开公司看上去高大上,但实际要处理更多杂事的文章。注册了个公司,往往税... 查看详情

请运维做好日志备份,千万别违法~

      近日,重庆市公安局网安总队成功查处了一起网络运营者在提供网络服务过程中,未依法留存用户登录网络日志的违法行为。这是自今年6月1日《中华人民共和国网络安全法》(下称《网络安全法》)正... 查看详情

java中equals的这些坑,千万别踩。。。(代码片段)

来源:cnblogs.com/juncaoit/p/12422752.html一直以为这个方法是java8的,今天才知道是是1.7的时候,然后翻了一下源码。这篇文章中会总结一下与a.equals(b)的区别,然后对源码做一个小分析。值是null的情况1、a.equals(b),a是nul... 查看详情

新手开公司创业,这些坑千万别掉进去!

1.作为一个创业新手究竟应该怎么开好公司呢?2.你该准备些什么?3.你适合自己开公司当老板吗?4.如果适合,下一步应该做什么?开头之后抛出4个问题,一方面是验证创业想法是否坚固,另一方面是验证自己是否适合创业并且... 查看详情

北京朝阳一互联网公司被端,23人被警方带走…这种开发千万别干!

点击关注公众号,Java干货及时送达上一篇:重磅!SpringBoot2.6正式发布,一大波新特性,看完我彻底躺平了。。来自公众号:51CTO技术栈“爬虫玩的好,监狱进的早;爬虫爬得欢,监狱要坐穿ÿ... 查看详情

养生窍门记住!!!运动后千万别做这9件事

NO.1不要蹲坐休息这是非常普遍的做法,运动结束后感觉累了,就蹲下或坐下认为能省力和休息,其实,这是一个错误的做法。健身运动后若立即蹲坐下来休息,会阻碍下肢血液回流,影响血液循环,加深肌体疲劳。严重时会产... 查看详情

千万别学rust?

我刚入行的时候,用C和C++做开发,内存管理把人折磨得死去活来。后来转到Java阵营,没有指针,自动内存管理,可以可劲地new对象,实在是爽,但是中间隔了一层虚拟机,效率还是有不少损... 查看详情

豆瓣top3的python书,千万别错过

在8月初的TIOBE编程语言排行榜中,Python在众多编程语言中一路飙升,市场份额占比达到了15.42%,创下历史新高。就连TIOBE的CEO都说:“现在很难找到一个没有广泛使用Python的编程领域了。”看起来确实没有什么能... 查看详情