Redian新闻
>
千万别在有WiFi的房间里摆这种姿势,只因…

千万别在有WiFi的房间里摆这种姿势,只因…

公众号新闻

点击下方卡片,关注“CVer”公众号

AI/CV重磅干货,第一时间送达

点击进入—>CV微信技术交流群

明敏 丰色 发自 凹非寺
转载自:量子位(QbitAI)

现在,只用WiFi就能“看”到你在房间里干啥了……

(你…干…嘛……啊啊啊啊)

多人追踪也是so easy:

过程中完全不需要拍下图像、不需要摄像头

输入的仅是WiFi一维信号,输出则是三维人体姿态。

两台路由器即可搞定!换算成本都不到500块。

而且还不受环境光线、目标被遮挡的影响,效果接近于基于2D图像进行识别的方法。

啊这,难道说WiFi能“看到”我?更进一步……WiFi能监视我??

OMG,蝙蝠侠剧情要照进现实了??

要知道在《暗黑骑士》里,哥谭市所有人的手机都变成了监控设备,同一空间里所有人的一举一动都能被实时记录。

网友们已经构思恐怖脑洞了:

想象一下,只需一台连接WiFi接收器的电视机,别人就能看到我们全家在干啥了。

有人甚至说,以后可能必须要在身上涂保护层来屏蔽WiFi信号。

搞全身追踪,不要用摄像头了

如上提到的方法,是卡耐基梅隆大学(CMU)机器人研究所的新成果。

研究的本身目的是为了保护隐私,毕竟在很多非公共场所,如养老院、独居老人家中,监控非常有必要,但是使用摄像头又很难保证隐私安全。

使用雷达倒是能解决隐私问题,但价格和具体可操作上就很劝退了。

于是,该团队想到了用现在几乎各家必备的WiFi来进行识别。

所以在设备上,仅需两台再也普通不过的家用路由器(每个至少有3根天线)就可以了。

原理也很简单,就是利用WiFi信号中的信道状态信息(CSI)数据。

这些数据是一堆复杂的十进制序列,可以表示发射信号波和接收信号波之间的比率。

当它们在发射器和接收器之间传输时,一旦接触到人体,就会被修改。

于是,通过解读这些“改变”,就可以检测到人体姿态。

为此,研究人员开发了一个“基于区域”的卷积神经网络分析pipeline,该pipeline可以定位人体的各个部位。

然后再将WiFi信号的相位和振幅映射到24个人体区域里的坐标,实现最终的全身姿态追踪。

具体来说,模型通过三个分量从WiFi信号中生成人体表面的UV坐标。

首先,通过振幅和相位Sanitization步骤对原始CSI信号进行“净化”处理。

然后,将处理过的CSI信号通过双分支编码器-解码器网络转换为2D特征图。

接着,将2D特征馈送到一个叫做DensePose RCNN的架构中。

该架构灵感就来自Facebook已经开源的人体姿势实时识别系统DensePose。DensePose入选了2018年CVPR的Oral环节,主要是把2D图像转换成3D人体模型。

所以这步的目的就是算出2D特征图对应的3D姿态,也就是估计出UV坐标。

最后,在训练主网络之前,作者还将用图像生成的多层次特征图与WiFi信号生成的多水平特征图之间的差异进行了最小化,进一步完善了最终结果。

尽管我们从肉眼看上去,两种方法的最终结果差不多,但在数据方面,基于图像的方法效果还是更好一些。

比如在同样环境布局下,基于WiFi方法的精确度都低于图像方法。

数值越高意味着越好

不同环境布局的情况也是如此。

与此同时,如果遇到数据集中不包含的动作,该方法也无法识别成功。如果人数超过3个,也发生“丢人”情况。

下图中左边两幅是罕见动作失败案例,右边两幅是3人以上识别失败情况。

不过团队认为,如上问题可以通过进一步扩充数据集来解决。

除此之外,该方法对路由器的放置位置要求很高,并且会对其他WiFi网络造成影响。

来自CMU团队,有2位华人作者

论文一作为Jiaqi Geng,他来自卡耐基梅隆大学,去年8月获得了机器人专业硕士学位。

Jiaqi Geng

另一位华人作者是Dong Huang,他现在是卡耐基梅隆大学高级项目科学家。

Dong Huang

他的研究方向一直都是利用深度学习进行信号识别。比如之前已经实现了用WiFi信号实时识别2D人体姿态。

最后一位作者是Fernando De la Torre,他现在卡耐基梅隆大学机器人研究所副教授。

Fernando De la Torre

他的研究方向主要为计算机视觉,涉及领域包括人体姿态识别、AR/VR等。

2014年曾创办过一家开发人脸识别技术的公司FacioMetrics LLC,2年后被Facebook收购。

作者团队表示,目前该方法性能还受限于可用来训练的数据不多,未来,他们计划扩充数据集。

论文地址:
https://arxiv.org/abs/2301.00250

点击进入—>CV微信技术交流群


CVPR/ECCV 2022论文和代码下载


后台回复:CVPR2022,即可下载CVPR 2022论文和代码开源的论文合集

后台回复:ECCV2022,即可下载ECCV 2022论文和代码开源的论文合集

后台回复:Transformer综述,即可下载最新的3篇Transformer综述PDF


目标检测和Transformer交流群成立


扫描下方二维码,或者添加微信:CVer222,即可添加CVer小助手微信,便可申请加入CVer-目标检测或者Transformer 微信交流群。另外其他垂直方向已涵盖:目标检测、图像分割、目标跟踪、人脸检测&识别、OCR、姿态估计、超分辨率、SLAM、医疗影像、Re-ID、GAN、NAS、深度估计、自动驾驶、强化学习、车道线检测、模型剪枝&压缩、去噪、去雾、去雨、风格迁移、遥感图像、行为识别、视频理解、图像融合、图像检索、论文投稿&交流、PyTorch、TensorFlow和Transformer等。


一定要备注:研究方向+地点+学校/公司+昵称(如目标检测或者Transformer+上海+上交+卡卡),根据格式备注,可更快被通过且邀请进群


▲扫码或加微信号: CVer222,进交流群


CVer学术交流群(知识星球)来了!想要了解最新最快最好的CV/DL/ML论文速递、优质开源项目、学习教程和实战训练等资料,欢迎扫描下方二维码,加入CVer学术交流群,已汇集数千人!


扫码进群

▲点击上方卡片,关注CVer公众号

整理不易,请点赞和在看

微信扫码关注该文公众号作者

戳这里提交新闻线索和高质量文章给我们。
相关阅读
千万别在有WiFi的房间里摆这种姿势,只因……明日直播|如何进入起薪高、机会多、还有WLB的英国名企?揭秘大公司选人标准!孩子肾衰竭,长不高,只因妈妈喜欢这种调料,家长千万注意!千万别在最好的座位上做这事圣何塞1栋月租$1,500的房间,竟租给了2只猫?第一眼还以为在房间里装了个猫屁股灯!千万别在有 WiFi 的房间里摆这种姿势,只因……圣何塞1栋月租$1,500的房间竟租给了2只猫,贫穷再次限制了想象北大校长的忠告火了!孩子14岁前,家长千万别在这件事上偷懒宾州雷德利克里克公园(Ridley creek park),溪水潺潺为什么只有Wharton用群面?AO说怎么准备最好?| 申请建议欧洲15船游+自由行-4-15 天 Viking Grand Europe2022年第一场雪“阳康”者冲向三亚:12万一晚的房间售罄,飞机上坐满了人!另一地多个景区已达最高接待上限留学生居家统一姿势,翘着二郎腿的自觉放一下谢谢持久中的速决——动态清零的正确姿势,也是战疫的必由之路情侣合照姿势,以后肯定用得上!婚姻过的好不好,看家里的房间就知道为什么老家的房子千万别卖?看完你就懂了活久见!“八大道房东开门进入我的房间...”澳华女回国隔天竟被警察找上门!只因忘做这事,悉尼妈妈带娃回国遭警告!罚款、拘留、遣返,华人千万别这样了!上班真累啊!阳康后咳嗽能有多厉害:我咳得像房间里藏了100个汉子哈哈哈用这13个技巧 就能在20分钟内清洁你的房间!无中介费|Brighton近BU/BC的房间1000,包水暖涨姿势,“缺德舅”新年上菊花?而且居然有讲究……孩子房间里这个细节,竟然这么伤娃眼睛,99%的家长都没注意!“阳康”们冲向三亚:12万一晚的房间售罄,飞机上坐满了人!另一地多个景区已达最高接待上限无中介费|Brighton近BU/BC的房间1200,包水暖百万豪车被烧得面目全非,只因…投资公司现在还在这边一下子大手笔的买入整个公寓社区2023纽约百万网红狂欢趴!蹦迪,魔术,热舞..最嗨新年姿势,全在这!(文中有福利)林世钰:房间里的大象,老人的性和爱像死神唇边最后一抹微笑 | 二湘空间视频曝光!澳华超遭teens明抢,店员竟被少女围殴打成重伤!青少年犯罪成“毒瘤”,肆无忌惮只因…【姿势控制·臀腿】课程:21个美腿必备的姿势能力
logo
联系我们隐私协议©2024 redian.news
Redian新闻
Redian.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Redian.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。