文献翻译_基于人体行走相位关联的可穿戴和环境传感器的行人识别

1、基于人体行走相位关联的可穿戴和环境传感器的行人识别Tetsushi Ikeda；Hiroshi Ishiguro；Takahiro Miyashita；Norihiro Hagita.（期刊：J Ambient Intell Human Comput (2014) 5:645654）（翻译整理：郑维珍 清华大学精密仪器系研究生 微信:weizhen1895 可以提供文献翻译、下载或咨询服务，欢迎来信。）摘要：提供个性化和基于位置的服务是在商场等公共区间内很有前景的事情。到目前为止，空间环境中的传感器已经可以监测到人的实时位置了，但是用此类传感器来识别行人还有很大的困难。另一方面，可穿戴设备可以

2、输出它们的个人识别信息，但这类传感器依旧问题重重。在这篇文章里，我们提出了一种利用激光测距器将可穿戴加速器和步迹结果联系起来的方法。我们首先提出了单步和加速度之间的基于信号关联的联系方法。然而，在拥挤的环境中，由于闭塞，有时只有一只脚能被观察到。为了解决这个问题，我们首次提出了一个着眼于循环性步伐行为的相位关联的新的评估函数。针对个人的循迹实验结果证实了这一方法的有效性。关键词： 加速度计 激光测距器 传感器融合 循迹1 背景介绍在诸如大型购物商场等公共空间内提供个性化的和位置基础的服务的信息基础设施有着广泛的应用。这套系统可以提供当前正在商场购物的人员的位置信息。当他们行李较多的时候，使用者

3、可以呼叫一个搬运机器人，而后者可以通过定位系统准确达到位置。为了使个性化的和位置基础的服务成为可能，我们提供了一套可以定位、识别和追踪行人的系统，而行人正是移动信息的携带终端，无论是在怎样的拥挤环境中。许多定位系统已经研究了如何通过安装于环境中的传感器实现行人定位。例如，使用相机和激光测距仪的定位系统可以很精确第追踪行人。但是，仅仅使用环境中的传感器难以区分每个行人或携带专门可穿戴装置的个人。另一方面，在普适计算中，很多种的可穿戴装置都被应用于人体定位。由于使用ID身份标签的定位系统需要在环境中安装读取装置，对大型公共空间来说，这不是一个现实的解决方案。可穿戴惯性传感器也被用于人体定位，但是累

4、积估计误差经常带来很多问题。对于精密的定位系统，整合别的信息资源是很有必要的。为了在环境中任何地方能够把携带专门移动装置的行人定位出来，一个很有前途的方法就是整合探测行人的环境传感器和定位行人的可穿戴传感器。在这篇文章里，我们提出了一种整合环境中的激光测距仪个用于连续精确定位行人的可穿戴传感器。用于使用激光测距仪的定位系统已经被成功应用于大型公共场所（比如火车站）的行人定位，而且激光测距仪的尺寸也变得更小了，所以激光测距仪是非常适合于公共空间的。由于许多手机都携带了有着多种用途的加速度传感器，因此，携带手机的就不再需要穿戴附加的装置。本文接下来的部分组织如下：首先，我们回顾了以前的研究成果；然

5、后，我们讨论了一种整合激光测距仪（LRFs）和加速度计的方法，以及它们如何能够提供一个可信赖的评估；最后，我们讨论了此方案的在实际环境中的可行性，而且展示了实验评估的结果。2 相关研究2.1 通过环境传感器定位行人定位行人已经成为计算机视觉上的一个重要组成部分被广泛研究(Hu等， 2004)。使用相机的一个优点是我们可以获取包括颜色和运动捕获的诸多信息。相机需要面临的一个问题就是忍受环境光照条件的变化，而且在公共场所使用相机拍照来识别行人有时会带来很多隐私上的麻烦。激光测距仪用于公共空间的行人定位吸引了越来越多的关注。随着激光测距仪尺寸越来越小，安装于环境中变得更加容易。由于激光测距仪仅仅观测

6、行人的位置，因此不会加剧个人隐私的纠纷。Cui 等 (2007)通过观测行人的步伐成功追踪了一大批人。Zhao和Shibasaki(2005)也使用行人的一个简单步伐模式追踪了行人。Glas等人(2009)将激光测距仪安装在购物商场，通过探测顾客腰部高度来预测行人的轨迹。总的来说，安装于环境中的传感器能够很好地用于行人的精确定位。但是，当人们处于拥挤环境中时，它难以识别行人。2.2 通过可穿戴传感器定位行人在普适计算下，可穿戴设备被用于定位行人(Hightower和 Borriello， 2001)。被研究过的装置包括IR身份标签(Want等，1992)、超声波身份标签(Harter等，199

7、9)、RFID身份标签(Amemiya等，2004；Ni等，2003)、Wi-Fi(Bahl和Padmanabhan 2000)和UWB (Mizugaki等，2007)。如果装置ID被系统识别，携带专门装置的人就被定位和识别了。然而，基于身份标签的方式为了实现准确定位，需要安装许多读取装置，因而安装读取设备的花费对于大型公共空间而言也是很大的问题。基于Wi-Fi和UWB的方式不能提供足够的分辨率以将人群识别开来。更进一步，如果用户不得不携带额外的装置仅仅为了获得定位服务，这样的花费和不便捷性也是需要考虑的。可穿戴惯性传感器也已经被与探测器整合到一起用于行人定位(Bao和Intille 200

8、4；Foxlin，2005，Hightower和 Borriello，2001)。由于整体漂移还有很多问题，因此连接探测器和其他传感器显得非常重要。最近，多种手机都携带了加速度计，而有的人们在日常生活中也是随身携带。因此，使用加速度传感器来定位行人可以有效使用这类基础设施。2.3 通过传感器的联合定位行人为了从环境中定位和识别行人，整合环境传感器和可穿戴装置的方法也被研究了。Kourogi等人(2006)整合了若干可穿戴惯性传感器，一个GPS模块和一个RFID身份识别系统。Woodman和Harle (2008)也整合了可穿戴惯性传感器和地图信息。Schulz等人(2003)使用LRFs和ID

9、身份识别系统在实验室完成人员定位，他们提出了一种方法，能够使用LRFs实现位置探测和通过环境中的ID身份标签识别行人。Mori等人(2004)使用地面传感器和ID身份标签来识别携带ID的人。这些方法都是在初始定位之后，再用ID身份标签完成行人识别。然而，由于这些整合方法的环境传感器和ID身份标签都是基于位置信息的，因而在拥挤环境中的时候，ID身份标签的空间分辨率不足以区分行人。相反，我们整合了环境中的LRFs和运动人员携带的可穿戴设备。这样的方法基于运动的同步性，而在整合过程中不需要计算精确的位置，因而不需要忍受惯性传感器的漂移问题。之前的研究中(Ikeda等人，2010)，LRFs和可穿戴陀

10、螺仪被整合到绕竖直轴旋转的躯体上。但是很难识别直线行走的行人，尤其是他们的轨迹颇为相似的时候。这种方法的另一个问题就是，一般手机携带陀螺仪的并不多见。在这篇文章里，为了解决这一问题，我们提出了一种提取步行特征的方法。LRFs探测行人的步伐高度，评估行人位置和步频；可穿戴的惯性传感器探测步频。由于，每个人的步频都有所不同，这一方法可以识别直线行走的行人，而它仅仅穿戴设备中使用了一个加速度传感器。3 基于LRFs和可穿戴惯性传感器的行人循迹和识别3.1 环境的和可穿戴的传感器之间的信号联系为了对每个携带可穿戴传感器的行人进行定位，我们着眼于环境的和可穿戴的传感器之间的信号联系。在收集到两种传感器所

11、探测到的运动特征之后，这些信号被用于对比以确定是否来自于同一个人。在这个框架里面，通过可穿戴传感器定位行人的任务，见削减为比较过可穿戴传感器提供的行人信号和环境传感器探测到的全部信号，并从中筛选出信号最相近的人（图1）。设想一下，行人的步伐可以被环境中的LRFs循迹，两只脚的运动都会被估计出来（图2）。与此同时，步伐的时间也被可穿戴的惯性传感器探测到。如果这两种信号是从同一个人那里出来的，我们可以认为它们高度相关，因为它们都产生自同一个步伐节奏。我们发现，来自可穿戴的惯性传感器的加速度信号和通过循迹结果评估出来的双脚的加速度之间有着良好的一致性。本文关注步行的行为表现，而且提出了一种将来自两类

12、传感器的信号整合到一起的方法。图1 通过环境的和可穿戴的传感器共同定位行人。a 算法的概念。b 方案流程图。图2 在购物商场的行人。 白色的标记表示探测到的行人的脚。每个行人的运动都是荣光可穿戴传感器和用于循迹的LRFs共同确定的。3.2 利用LRFs完成行人步伐循迹Zhao和Shibasaki (2005)提出了一种通过LRFs探测步高实现行人循迹的方法。通过探测行人步高，不仅可以定位行人的位置，还可以获得步伐的时间。我们扩充了Glas等人（2009)的系统，运用了粒子滤波算法来实现步伐循迹(图3)。在我们的循迹算法里，我们首先通过分析几百个扫描图像的分析来滤除噪声和运动物体。我们从循迹位置

13、计算出每一步的速度和加速度：当是平均速度，是速度向量，是每一步的加速度，是采样时间。3.3 可穿戴传感器的加速度测量为了从可穿戴传感器的加速度传感器中提取出步频，我们关注了加速度中的垂直分量。垂直分量是从三维加速度向量乘上竖直方向向量得到的：我们通过几秒内平均的来估计：这里的L是采样计算平均值。原始的数值加速度信号和平滑后的在Fig.4a里给出。图3 通过LRFs 完成行人的未定估计。LRFs 的布置位置在A,B和C。a LRFs观测结果。b 每个粒子代表一个行人。c 行人位置估计，每个人表标上独特的数字。3.4 步伐运动和身体加速度的联系Fig. 4b展示了通过平滑循迹方法计算的每一步的速度

14、和加速度。当行人脚步的速度减低，就意味着它最终着陆，此时会发现一个较大的加速度竖直分量。因此，我们当检测到加速度为负值的时候，我们可以认为这是着陆的冲击造成的。注意到，根据LRFs测出的高度，在脚着陆的瞬间，速度并不为0。为了评估两个信号之间联系，我们提出了LRFs探测的最小步伐加速度和加速度传感器测出的加速度的泊松关联函数：对于可穿戴的加速度，携带传感器的行人的轨迹可以通过（4）估计出来。4 基于步行相位的相位关联在拥挤情形下，有时后用于遮挡只有一只脚能被检测到。但是，式（4）知识选取了加速度是较低的，因为一只脚记录的轨迹是如此的。图5展示了一只脚的加速度信号和可穿戴传感器之间的信号联系。一

15、只脚的加速度周期中，由于步伐的相位，加速度会呈现出正值和负值的关系。为了解决这一问题，我们提出了一种基于步行行为相位的评估算法。图4 8秒内LRFs和可穿戴传感器的信号实例。a 可穿戴传感器信号的竖直分量。b 信号关联。c 最小加速度关联。4.1 脚和身体加速度之间的联系为了将步行时加速度的正负值联系起来，我们提出了一种根据该信号权重来调节的方法。图5和图6展示了这种关系。图5 单脚的加速度和可穿戴传感器的加速度之间的联系。图6 基于周期性运动的加速度信号关联。4.2 基于步行相位权重的脚和身体加速度之间的联系1）单步速度平滑处理和提取最小值、最大值。根据瞬时最大值确定一个周期时间。在周期内的

16、所有时间，将最大值处的时间（t）设置为0，下一个最大值处为，中间由线性插值给出。具体公式如下：（6）2）将每个周期分割为M个时间段k（k=1M）。我们在这个实验中使用M=16。在每个时间段k，根据式（4）计算平均加速度。3）根据平均值确定一个函数w。我们这个实验中使用=0.25.通过式（8）的权重函数，我们评估传感器之间的关联性如下：根据式（9）用户的轨迹可以可以从轨迹的最大值中选取处理。图7显示了每个相位阶段的权重函数计算结果。图7 每个相位周期下的权重函数。5 实验5.1 实验设计我们在位于日本Osaka的亚太商业中心的购物商场（图8）开展我们的实验。我们定位人群的区域是20m的圆形区域，

17、其中包括许多餐馆和商店。在这个区域内，我们在20cm的高度上安装了6个LRF阵列。我们调整了之前的系统，使其除了追踪脚步外还具由和可穿戴传感器一起协作完成定位和识别行人的功能。行人在环境中的每一步都会通过一个离子滤波算法实现探测和追踪。通过计算离子的期望，我们可以按照每秒25次的频率计算出位置和速度。这个算法在测量位置处是非常稳定而且可信的。环境中有三个携带可穿戴传感器的行人，可以获得他们的三维加速度向量。在实验中，加速度被采样之后通过蓝牙方式传输到PC机。图11展示了4秒内对行人轨迹的追踪结果。有的情况下行人只有一只脚被探测到。图8 购物商场环境示意图。图9 系统构建。a LRFs在商场中的

18、布置。 b 本实验实验的LRFs的主要性能参数。图10 本实验使用的可穿戴传感器。图11 4秒内步伐循迹的估计。5.2 行人识别的精确性我们通过三个志愿者的四次实验来进行检验。图12展示了当志愿者行走的时候最初20秒内计算的计算关联性。图12 a-c展示了志愿者1,2,3的典型结果。我们在最高处用不同颜色的线标出轨迹，志愿者也被识别出来了。在这个实验里，三个志愿者携带着可穿戴惯性传感器与别的行人一起行走。图8的环境中大约有10个行人。在15次实验里，携带可穿戴惯性传感器的行人被依次从人群中分离开来。表1展示了在目标出现后4,6,8和10秒时的识别精度。虽则目标出现的时间变长，识别精度会上升。图

19、12 可穿戴惯性传感器和环境LRFs提供的及速度之间的联系函数。a 行人1。b 行人2 。c 行人3。6 讨论6.1 时间同步性由于我们的方法是通过对比时间序列来定位行人的，因此调整LRFs和可穿戴传感器的时钟就变得非常重要。在接下来的实验里，可穿戴传感器的与主机时钟保持一致，他们之间是通过蓝牙实现连接的。另一个问题是可穿戴传感器向主机实施传输的时候回出现延迟。在这个实验里，信号会将时间戳一起传输。如果时间戳一倍主机收到，那就可以去除偶然的传输延迟了。6.2 隐私问题如果再公共空间内安装摄像头，呢么侵犯个人隐私的问题就会不可避免地出现。由于LRFs不会探测行人的脸或其他信息，隐私的问题就与我们

20、的方法关系不大了。6.3 可穿戴陀螺仪的整合在这篇文章里，我们聚焦于可穿戴传感器和LRFs之间的联系。通过使用安装了加速度传感器和陀螺仪的可穿戴设备，我们能够粗略地估计行人的位置。即使位置估计存在累计误差，位置信息也会提供区分两个步频非常相近的行人的关键信息。我们已经提出了一种关联算法，它使用的是角速度向量(Ikeda等人， 2010)。下一步，我们想将步调和位置信息整合到一起。6.4 放大性在这个实验里，我们确定出在购物商场的10个人中的三个人，这证明了我们方法的可行性。当两个人同时同步地行走的时候，他们的加速度信号是高度相似的。在这种情况下，还有更多的工作需要做。6.5 加速度姿势的影响实

21、验中，我们将可穿戴的加速度传感器粘贴到行人的腕部。通过计算加速度的竖直分量，这个固定传感器的方法对我们的方法并不有效。然而，不同位置处不同的加速度信号被获取了。我们确信，如果传感器被携带在不同的部位，比如口袋、手里或包里，那会有很大的不同。观察到的加速度信号的形状（图13）使不一样的，但是它们的峰值还是非常清楚而且没有太大区别的。图13不同携带条件下的加速度信号案例。a口袋携带方式。b手里携带。c 包里携带7 结论在这篇文章里，为了评估行人的位置和ID，我们提出了一种结合环境中传感器提供的精确位置信息和可穿戴传感器提供的可靠ID信息的方法。由于行人的脚的循迹结果和行人的躯体振动之间的关联，我们

22、建立了同一行人的参数之间的联系，因而将其联系最大化。在购物商场进行的人员定位实验结果显示了这种方法的精确性。由于激光测距仪（LRF）已经变得普遍，而人们随身携带的手机中也经常嵌有惯性传感器，我们相信这一方法是非常实用的，而且提供了一种在公共空间实现行人定位的基础方法。在以后，我们会根据行人携带手机的方式的变化变更自己的方法。由于可穿戴设备提供了比步频更多的信息，我们也可以将这一方法扩展以探测更多的步行行为信息。致谢本项研究得到了KAKENHI(25330314)的支持和资助。参考文献Mizugaki K et al (2007) Accurate wireless location/commu

23、nication system with 22-cm error using UWB-IR. IEEE radio and wireless symposium, pp 455458Amemiya T, Yamashita J, Hirota K, Hirose M (2004) Virtual leading blocks for the deaf-blind: A real-time way-finder by verbal nonverbalhybrid interface and high-density RFID tag space. In: Proceedings of the I

24、EEE virtual reality conference, pp 165172Bahl P, Padmanabhan VN (2000) RADAR: an in-building RF-baseduser location and tracking system. In: Proceedings of the IEEEINFOCOM 2000, vol 2, pp 775784Bao L, Intille SS (2004) Activity recognition from user-annotated acceleration data. In: Ferscha A, Mattern

25、 F (eds) Proceedings ofthe pervasive 2004, vol LNCS 3001. Springer, Berlin, pp 117Cui J, Zha H, Zhao H, Shibasaki R (2007) Laser-based detection andtracking of multiple people in crowds. Comput Vis Image Underst 106(23):300312Foxlin E (2005) Pedestrian tracking with shoe-mounted inertial sensors. IE

26、EE Comput Graph Appl 25(6):3846Glas DF, Miyashita T, Ishiguro H, Hagita N (2009) Laser-based tracking of human position and orientation using parametric shape modeling. Adv Robotics 23(4):405428Harter A, Hopper A, Steggles P, Ward A, Webster P (1999) The anatomy of a context-aware application. In: P

27、roceedings of the 5th annual ACM/IEEE international conference on mobile computing and networking (Mobicom 99), pp 5968Hightower J, Borriello G (2001) Location systems for ubiquitous computing. Computer 34(8):5766Hu W, Tan T, Wang L, Maybank S (2004) A survey on visual surveillance of object motion

28、and behaviors. IEEE Trans Syst Man Cybern Part C 34(3):334352Ikeda T, Ishiguro H, Glas DF, Shiomi M, Miyashita T, Hagita N (2010) Person identification by integrating wearable sensors and tracking results FROM environmental sensors. In: Proceedings of the IEEE international conference on robotics an

29、d automation (ICRA 10), pp 26372642Kanda T, Glas DF, Shiomi M, Ishiguro H, Hagita N (2008) Who will be the customer? A social robot that anticipates peoples behavior from their trajectories. In: Proceedings of the 10th international conference on ubiquitous computing (Ubi Comp 08), pp 380389Kourogi

30、M, Sakata N, Okuma T, Kurata T (2006) indoor/outdoor pedestrian navigation with an embedded GPS/RFID/self-contained sensor system. In: Proceedings of the 16th international conference on artificial reality and telexistence (ICAT 06), pp 13101321Mori T, Suemasu Y, Noguchi H, Sato T (2004) Multiple people tracking by in