- 智能手机摄像头可以感知病人的脉搏、呼吸频率
- 来源:IEEE电气电子工程师
点击蓝字 关注我们
SUBSCRIBE to US
Illustration: iStockphoto
据一项统计显示,当COVID-19在美国开始时,远程医疗访问量急剧增加 -- 超过4000%。但在这些虚拟预约中,医生能完成的工作是有限的。也就是说,他们不能通过电话检查病人的每一项生命体征。
但正在研发的新技术可以通过为手机配备可靠的软件来测量一个人的关键生物特征,从而改变这种状况。近日,在美国计算机协会(Association for Computing Machinery)召开的一次会议上,研究人员展示了一种机器学习系统,这种系统可以生成一个个性化模型,根据智能手机摄像头拍摄的短视频来测量心率和呼吸频率。
这项技术只需一个18秒的头部和肩部视频片段,算法就可以根据皮肤反射的光强度变化来确定心率或脉搏。呼吸频率或呼吸等可以从人们的头,肩膀和胸部的有节奏的运动收集。
微软研究院(Microsoft Research)首席研究员Daniel McDuff和华盛顿大学(University of Washington)博士生Xin Liu开发了该系统。McDuff说,目前除了极少数在家里有医疗级设备的患者外,其他人没有办法进行远程生命体征采集 -- 比如检测心率和血氧水平的脉搏血氧仪,或者血压袖带。大多数人并不拥有这些设备,因此对于绝大多数虚拟预约来说,患者还必须安排单独的面诊才能获得这些测量值。
基于视频所开发的软件可以在远程医疗预约期间收集生命体征,这将大大简化虚拟医疗流程。这类技术的研究始于2007年左右,当时数码相机变得足够敏感,能够捕捉到皮肤上显示血容量的小像素级变化。在COVID-19大流行的早期,远程医疗访问增加,这一领域出现了新的兴趣浪潮。
全球有几个研究小组一直在开发基于视频的非接触式生命体征传感技术。牛津大学的一个小组正在为医院重症监护室或接受肾透析的病人开发光学远程监测生命体征。莱斯大学的研究人员正在开发一种设备,用于监测车辆驾驶员心脏病发作的情况。
谷歌今年2月宣布,其基于Android的健康跟踪平台Google Fit将使用手机摄像头测量心率和呼吸频率。用户将一根手指放在手机后置摄像头上以获取心率,用户面部的视频可以采集呼吸频率。软件是为了健康的目的,而不是医疗用途或医生访问。这一领域的研究人员面临的挑战是开发出在真实世界环境中始终保持高精度工作的技术,在现实世界中,人脸和灯光会发生变化。McDuff和Liu开发的方法旨在解决这个问题。
在他们的方法中,心率是通过测量皮肤反射的光来确定的。”血容量的变化会影响皮肤反射光线的方式,因此,摄像机捕捉到了光强度的微小变化,可以用来恢复脉冲信号。从中我们可以推断出心率变化,并检测出心律失常等情况。
算法必须考虑诸如肤色、面部毛发、光线和衣服等变量。任何一种人脸识别技术都会出现问题,部分原因是训练机器学习算法的数据集不能代表我们不同的人群。
McDuff的模型面临着一个额外的挑战:“深色皮肤的黑色素含量较高,因此光反射强度会较低,因为更多的光被吸收,”他说,“这会导致信噪比变弱,从而更难检测到脉冲信号。”因此,这是关于有一个代表性的训练设置,还有一个基本的身体挑战,我们需要解决的问题在这里,”McDuff说。
为了应对这一挑战,该团队开发了一个系统,为每个人提供个性化的机器学习算法。“我们提出了一种学习算法来快速学习一个人的生理信号,”他说,“这个系统只需18秒的视频就能提供结果。”
与标准的医疗级设备相比,该方法在估计心率时的平均绝对误差为每分钟1到3次,Liu说。这在许多应用中都是可以接受的。
该系统还没有准备好用于医疗,还需要在临床试验中进行验证。为了提高系统的稳定性,该团队正在采取的一种方法是在计算机生成的图像上训练模型。“我们实际上可以合成高保真的化身,展示这些血流模式和呼吸模式,我们可以在计算机生成的数据上训练我们的算法,”McDuff说。
研究人员说,这项技术既可以用于医疗,也可以用于健身。除了远程健康访问之外,远程生命体征对于需要频繁、准确生物特征测量的慢性疾病患者也很有用。
微信号|IEEE电气电子工程师
新浪微博|IEEE中国
· IEEE电气电子工程师 ·
往期推荐
推荐阅读
4-21 IEEE
4-19 Rina Diane Caballar
4-26 Maria Gallucci
4-01 Charles Q. Choi
你“在看”我吗?
科技
-
-
- 线下展会,市民畅享科技大餐
- 5月28日,是2021中国国际大数据产业博览会线下展最后一天,也是免费向市民开放的公众日。趁此机会,记者继续带您探秘国际综合馆(W1馆)、数字应用馆(W2馆)、前沿技术馆(E1馆)、智慧产业馆(E2馆)4...
- 贵阳晚报
-
-
-
- 为何新药研发、基因测序、卫星遥感的发展提速都需要它?
- 人类第一次完整全基因组的测序花了13年,在新技术的加持下,这个时间已经降低到1天以内;没有这项新技术加持,电影《阿凡达》的渲染可能需要上万年;这项新技术还让新药的研发周期大幅缩短,让卫星遥感定位精度...
- 华为
-
-
-
- 大型金属3D打印厂商钢研极光亮相TCT,展示强大的生产服务能力
- 2021亚洲3D打印、增材制造展览会 (TCT Asia)于2021年5月26日-28日在国家会展中心(上海)7.1馆隆重举办。作为官方战略合作媒体,南极熊将会全程现场报道(地址https://www.nanjixiong.com/foru
- 南极熊3D打印
-
-
-
- 美国国家情报委员会《全球趋势2040——竞争更激烈的世界》报告摘译
- 2021年3月,美国国家情报委员会(NIC)发布了每四年一度的全球趋势预测报告《全球趋势2040——竞争更激烈的世界》。NIC是美国最高层级的战略情报机构,该委员会的成员均为来自政府、学术界和私营部门的高级专家...
- 全球技术地图
-
-
-
- 数字让监管更加智慧 上交所成功举办首届全行业技术大会
- 5月28日,上交所成功举办主题为“数字赋能,守正创新”的首届全行业技术大会。中国证监会副主席赵争平出席大会并致辞指出,证监会高度重视资本市场科技化转型与发展,确定了“数字让监管更加智慧”的愿景。...
- 上海证券报
-
-
-
- 湾区智行||中科创达赵鸿飞:汽车“新物种”需要共通的操作系统|中国汽车报
- “我是谁?我来自哪里?我要到哪里去?”这是哲学史上永恒的三大命题,同样也是我们甚至是企业需要不断思考的问题。此次采访对象——中科创达软件股份有限公司就是一家勤于思考、擅于思考的企业。这家企业在不断...
- 中国汽车报
-
-
-
- 广电总局表彰虚拟现实视频、超高清视频等5类96个优秀项目!
- 广电总局共评选出互动视频、沉浸式视频、虚拟现实视频、云游戏、超高清视频等5类96个优秀项目,分获一、二、三等奖和优秀奖,包括《中央广播电视总台5G+VR融合制播系统——春节联欢晚会 (2017- 2021)节目VR制作...
- 广电头条
-
-
-
- 占据市场最新赛道,“中国制造”机器人迎来爆发期
- 【环球时报记者 邢晓婧 杨沙沙】配餐机器人、迎宾机器人、扫地机器人……不知不觉间,中国老百姓对出现在餐馆、医院、火车站、养老院等场景的机器人逐渐习以为常,甚至家中也出现扫地、娱乐等家用机器人。有统计...
- 环球网
-
-
-
- 最受关注展项出炉,2021年北京科技周闭幕不落幕!
- 5月28日下午,2021年北京科技周闭幕式在中关村国家自主创新示范区展示中心举行。北京市科委、中关村管委会相关负责人介绍了本届北京科技周举办情况以及最受关注的展项。市科委、中关村管委会二级巡视员王建新出...
- 科普北京
-
-
-
- 魔高一尺,道高一丈:上交所VPN攻防札记
- 本文选自《交易技术前沿》总第四十二期文章(2020年12月)谢毅 / 上海证券交易所 yxie@sse.com.cn相晓辉 / 上海证券交易所 xhxiang@sse.com.cn虚拟专用网络(以下简称“VPN”)系统、互联网业务系统、外网
- Android编程精选
-
-
-
- 绿色召集令——聚力创赢,共赴绿色能源新征程!
- 申耀的科技观察读懂科技,赢取未来!申耀的科技观察,由科技与汽车跨界自媒体人申斯基创办,18年企业级科技媒体工作经验,专注企业数字化、产业智能化、智慧城市、汽车科技内容的观察和思考。
- 申耀的科技观察
-
-
-
- 汉朔科技和微软(中国)联合推动 IoT+AI 赋能全球零售
- (本文阅读时间:4分钟)2021年5月20日,全球领先的零售数字化解决方案供应商汉朔与微软(中国)在北京举行战略合作备忘录签约仪式,以进一步推动其在零售行业的全球布局和数字化战略。根据战略合作备忘录,汉朔...
- 微软科技
-
-
-
- 关于安全访问服务边缘(SASE),你需要知道的事情
- 在企业纷纷拥抱数字业务的过程中,由于边缘计算、云服务、混合网络的逐渐兴起,使得本就漏洞百出的传统网络安全架构更加岌岌可危,而且远远无法满足企业数字业务的需要。为了应对这种情况,一个全新的模型——安...
- FreeBuf
-
-
-
- [报告]2021年中国新能源汽车行业洞察(附44页PDF文件下载)
- 新能源车大势将至,造车新势力差异化突围。以下为报告节选:......文│Mob研究院本报告共计:44页。如欲获取完整版PDF文件,请扫描下方二维码加入“车友圈”获取。#重磅推荐#需要批量下载和及时更新最新汽车行业...
- 汽车之地
-
