- 智能手机摄像头可以感知病人的脉搏、呼吸频率
- 来源:IEEE电气电子工程师
点击蓝字 关注我们
SUBSCRIBE to US
Illustration: iStockphoto
据一项统计显示,当COVID-19在美国开始时,远程医疗访问量急剧增加 -- 超过4000%。但在这些虚拟预约中,医生能完成的工作是有限的。也就是说,他们不能通过电话检查病人的每一项生命体征。
但正在研发的新技术可以通过为手机配备可靠的软件来测量一个人的关键生物特征,从而改变这种状况。近日,在美国计算机协会(Association for Computing Machinery)召开的一次会议上,研究人员展示了一种机器学习系统,这种系统可以生成一个个性化模型,根据智能手机摄像头拍摄的短视频来测量心率和呼吸频率。
这项技术只需一个18秒的头部和肩部视频片段,算法就可以根据皮肤反射的光强度变化来确定心率或脉搏。呼吸频率或呼吸等可以从人们的头,肩膀和胸部的有节奏的运动收集。
微软研究院(Microsoft Research)首席研究员Daniel McDuff和华盛顿大学(University of Washington)博士生Xin Liu开发了该系统。McDuff说,目前除了极少数在家里有医疗级设备的患者外,其他人没有办法进行远程生命体征采集 -- 比如检测心率和血氧水平的脉搏血氧仪,或者血压袖带。大多数人并不拥有这些设备,因此对于绝大多数虚拟预约来说,患者还必须安排单独的面诊才能获得这些测量值。
基于视频所开发的软件可以在远程医疗预约期间收集生命体征,这将大大简化虚拟医疗流程。这类技术的研究始于2007年左右,当时数码相机变得足够敏感,能够捕捉到皮肤上显示血容量的小像素级变化。在COVID-19大流行的早期,远程医疗访问增加,这一领域出现了新的兴趣浪潮。
全球有几个研究小组一直在开发基于视频的非接触式生命体征传感技术。牛津大学的一个小组正在为医院重症监护室或接受肾透析的病人开发光学远程监测生命体征。莱斯大学的研究人员正在开发一种设备,用于监测车辆驾驶员心脏病发作的情况。
谷歌今年2月宣布,其基于Android的健康跟踪平台Google Fit将使用手机摄像头测量心率和呼吸频率。用户将一根手指放在手机后置摄像头上以获取心率,用户面部的视频可以采集呼吸频率。软件是为了健康的目的,而不是医疗用途或医生访问。这一领域的研究人员面临的挑战是开发出在真实世界环境中始终保持高精度工作的技术,在现实世界中,人脸和灯光会发生变化。McDuff和Liu开发的方法旨在解决这个问题。
在他们的方法中,心率是通过测量皮肤反射的光来确定的。”血容量的变化会影响皮肤反射光线的方式,因此,摄像机捕捉到了光强度的微小变化,可以用来恢复脉冲信号。从中我们可以推断出心率变化,并检测出心律失常等情况。
算法必须考虑诸如肤色、面部毛发、光线和衣服等变量。任何一种人脸识别技术都会出现问题,部分原因是训练机器学习算法的数据集不能代表我们不同的人群。
McDuff的模型面临着一个额外的挑战:“深色皮肤的黑色素含量较高,因此光反射强度会较低,因为更多的光被吸收,”他说,“这会导致信噪比变弱,从而更难检测到脉冲信号。”因此,这是关于有一个代表性的训练设置,还有一个基本的身体挑战,我们需要解决的问题在这里,”McDuff说。
为了应对这一挑战,该团队开发了一个系统,为每个人提供个性化的机器学习算法。“我们提出了一种学习算法来快速学习一个人的生理信号,”他说,“这个系统只需18秒的视频就能提供结果。”
与标准的医疗级设备相比,该方法在估计心率时的平均绝对误差为每分钟1到3次,Liu说。这在许多应用中都是可以接受的。
该系统还没有准备好用于医疗,还需要在临床试验中进行验证。为了提高系统的稳定性,该团队正在采取的一种方法是在计算机生成的图像上训练模型。“我们实际上可以合成高保真的化身,展示这些血流模式和呼吸模式,我们可以在计算机生成的数据上训练我们的算法,”McDuff说。
研究人员说,这项技术既可以用于医疗,也可以用于健身。除了远程健康访问之外,远程生命体征对于需要频繁、准确生物特征测量的慢性疾病患者也很有用。
微信号|IEEE电气电子工程师
新浪微博|IEEE中国
· IEEE电气电子工程师 ·
往期推荐
推荐阅读
4-21 IEEE
4-19 Rina Diane Caballar
4-26 Maria Gallucci
4-01 Charles Q. Choi
你“在看”我吗?
科技
-
-
- 烟花三月到江苏,5G风景独好!
- 阳春三月,江南风光旖旎。然而,与自然秀丽的山水风景相比,在5G技术支撑下城市和乡村呈现出的天翻地覆的发展面貌,更加让我们移不开目光——这一边,5G自动驾驶公交车频繁穿行在开放道路之间,无人环卫车与无人...
- C114通信网
-
-
-
- 业界丨智能影音物联网技术交流会暨 宁波市物联网智能技术应用协会 智能家居专委会成
- 4月25日,由宁波市物联网智能技术应用协会主办,主题为“知行合一 共创未来”智能&影音技术交流大会暨宁波市物联网智能技术应用协会智能家居(智装)专委会成立大会在宁波富邦大酒店隆重召开,出席大会的领导嘉...
- FiPlay影音平台
-
-
-
- Microsoft 365 企业级云原生安全服务——为时代中国信息安全保驾护航
- (本文阅读时间:5分钟)在信息安全威胁日益复杂的时代,企业对于企业级安全产品及服务的需求急剧增加,以帮助企业保护电子邮件、数据、设备和用户身份安全,抵御不断增加且破坏性越来越大的网络威胁风险,并逐...
- 微软科技
-
-
-
- 解读三大运营商2021年首季财报:千兆光网带动商业正循环
- 近日,三大运营商公布2021年第一季度财报。我们看到,得益于家庭市场、政企市场两个“增长极”的优异表现,三大运营商营收均实现强势增长。5G发展大家关注很多,但对F5G固网业务,可能有些忽略。在笔者看来,此...
- 海峰看科技
-
-
-
- [报告]Global EV Outlook 2021(附101页PDF文件下载)
- 4月底国际能源署IEA发布了新一版的《Global EV Outlook 2021 Technology report》,这份报告的特点是涵盖的内容比较齐全,包括IEA对过去历史的总结和未来的展望。以下为报告节选:......文│国际能源署
- 汽车之地
-
-
-
- 取代Cookie失败,Google上线FLoC反遭“围攻”!
- 整理 | Carol出品 | CSDN(ID:CSDNnews)前段时间,谷歌在Google Chrome浏览器上内部测试的一项新型广告技术FLoC(Federated Learning of Cohorts, 联邦队列学习),该技术使用机
- CSDN
-
-
-
- Pyston 2.2发布并回归开源
- 近日,Pyston 2.2稳定版正式发布。开发者声称该版本可实现比用于网络服务器基准的Python库存快30%,包括JIT和属性缓存机制的工作。Pyston 2.0时该项目闭源,但在新的Pyston 2.2稳定版中其代码已经回归开源,该开...
- 大众软件
-
-
-
- 不止光刻机,挡在国产芯片发展路上的“三座大山”是什么?
- 伴随着近年来国产智能手机行业的崛起,网上有关于国产芯片的话题就一直没有断过。近期的行业缺芯潮,又一次将芯片问题推上了风口浪尖。这里,我们提出一个问题:国产芯片发展需要解决的问题究竟是什么?很多朋友...
- ZOL中关村在线
-
-
-
- 中国移动国际将举办首届mCloud峰会,助企业运筹云端
- 将「雷科技Lite」收藏为我的小程序,不再错过精彩内容编辑丨钟立磊中国移动国际有限公司(CMI)将于2021年5月28日举办首届mCloud峰会,助力企业把握云转型机遇,增强与客户、合作伙伴的数字互动,共同见证云网智...
- 雷科技
-
-
-
- 智能手机摄像头可以感知病人的脉搏、呼吸频率
- SUBSCRIBE to USIllustration: iStockphoto据一项统计显示,当COVID-19在美国开始时,远程医疗访问量急剧增加 -- 超过4000%。但在这些虚拟预约中,医生能完成的工作是有限的。也就是说,他们不能通
- IEEE电气电子工程师
-
-
-
- 专访亿航CEO胡华智:实施空中交通百线计划 做空中Uber
- 雷帝网 雷建平 5月6日报道纯电动、垂直起降的智能自动驾驶飞行器(eVTOL) 企业亿航智能日前宣布战略调整,要聚焦载人和物流短、中长航距的产品研发,加快与“UAM交通运营”相关试点。亿航智能目前在实施“百线计...
- 雷帝触网
-
-
-
- 特斯拉被黑客无人机入侵
- 如今,一辆汽车包含多达150个电子控制单元和大约1亿行软件代码,是战斗机的四倍,而随着自动驾驶技术的发展,汽车的代码量有望在10年内再增长两倍。毫无疑问,随着汽车的数字化,留给黑客的攻击面也迅速扩大,这...
- 安全牛
-
-
-
- 业余无线电爱好者HAM入门(理论篇)
- 近期迷上了无线电通信,俗称对讲机,高深一点是发报机、基站电台之类的,业内称为HAM(业务无线电爱好者Radio Amateur),即“火腿”。从图书馆借了几本相关的书,在优酷查看了相关的视频,算是入门,这里整理一...
- 对讲机世界
-
-
-
- 4月VR大数据:App Lab应用达229款,Quest 2仍持续增长
- hi188|编辑Hello大家好,每月一期的VR内容/硬件大数据统计又和大家见面了。想了解VR软硬件行情么?关注这里就对了。我们会统计Steam平台的用户及内容等数据,每月初准时为你推送,不要错过喔!目前,Steam平台...
- 青亭网
-