守护人类健康:人工智能赋能医疗领域创新应用

常言道,“如果说人生是一场漫长的马拉松,那么健康将是决定跑道长度的关键因素。”健康是幸福生活和社会发展的基石。随着智能化时代的到来,人工智能技术在医疗健康领域的应用也日益广泛,成为了维护和促进人类健康的新工具。无论是辅助疾病的早期检测发现、病情发展预测,还是在个性化的精准医疗,以及推进医学研究和新药研发,人工智能都展现出了其独特的价值和潜力。

在过去的几年中,微软亚洲研究院持续与医疗机构和高校的专家密切合作,并且引进医疗健康领域的专业人才,希望推动人工智能技术在医疗健康领域的深入应用,促进构建健康的全球社会。

早发现、早治疗:人工智能辅助疾病检测与康复训练

疾病的早期诊断对于提高治疗效果和患者的生活质量至关重要,而康复训练则是许多疾病治疗过程中不可或缺的一环,对于恢复患者的各项功能具有重要作用。传统的诊断和康复方法往往受限于资源分配、地理位置和专业医护人员的稀缺性,在一定程度上限制了医疗服务的普及和效率。人工智能技术则能通过自动化和智能化的方法,辅助医护人员更早地识别疾病迹象,从而及时进行干预和治疗。

语音识别辅助腭裂患儿的语音恢复

腭裂和唇裂是口腔和颌面区最常见的先天性畸形,患者通常由于软腭(即腭咽功能不全)未能完全闭合,无法发出正常的声音,从而产生高鼻音。在与相关医疗机构的合作中,微软亚洲研究院的研究员们了解到,高鼻音的检测是腭裂患者治疗的关键因素。

world-health-day-2024-1

(图片来源:Operation Smile)

在临床检查中,高鼻音通常由言语-语言病理学家做出评估,但是专业的病理学家数量有限,且只分布在个别医院中,这就需要患者进行长期的跨地区诊疗。漫长的诊疗周期和高昂的成本,让患者及家属苦不堪言。因此,一种自动化的高鼻音评估方法将不仅有助于病理学家做出精确判断,也能帮助患者实现远程诊疗,减少花销。

微软亚洲研究院利用迁移学习技术,开发了一种基于自动语音识别(ASR)模型来改进高鼻音评估的新方法。该模型能够有效提取声学特征,并且具有良好的泛化能力。在两个腭裂数据集上的实验结果表明,相比已有方法,这一模型取得了更优的性能,有助于提升病理学家诊断的准确率。

基于高鼻音评估的结果,医生将为患者定制个性化的语音训练方案。在这一环节,微软亚洲研究院进一步开发了一个掩码预训练发音评估(MPA)模型,该模型支持端到端的训练,适用于无监督和有监督的学习环境,便于用户远程部署。通过利用参考文本并结合掩码和预测策略进行预测,MPA 模型可以有效避免发音评估中的错位或误识别问题,为腭裂患者提供更精确的语音校正支持。

目前,微软亚洲研究院正与医疗机构合作,共同评估这一创新语音评估技术的应用可行性,希望这项技术能够帮助医生提高诊疗效率,降低患者的治疗成本,并让广大偏远地区的腭裂患者受益。

相关论文:

高鼻音检测:Improving Hypernasality Estimation with Automatic Speech Recognition in Cleft Palate Speech. INTERSPEECH 2022.

https://arxiv.org/pdf/2208.05122.pdf

语音评估:End-to-End Word-Level Pronunciation Assessment with MASK Pre-training. INTERSPEECH 2023.

https://arxiv.org/pdf/2306.02682.pdf

语音分析模型助力阿尔茨海默症筛查

阿尔茨海默症是一种普遍的神经退行性疾病,多见于老年人群,患者会逐渐出现包括记忆减退、语言障碍、认知功能退化、计算力损害等不可逆的认知损伤。尽管目前阿尔茨海默症尚无有效的治疗方法,但及早发现并及时干预对延缓病程发展十分关键。

world-health-day-2024-2

(图片来源:pexels.com)

传统的诊断方法如脑部成像、血液检测和面对面的神经心理评估,周期长、成本高。有研究表明,阿尔茨海默症的早期阶段其实可以通过分析患者的口语来进行识别,如流利性失语,以及在词汇寻找和检索方面的困难。

正是基于这一发现,微软亚洲研究院开发了几种语音和语言分析技术,旨在从高级声学和语言特征中提取与阿尔茨海默症相关的线索,同时根据这些特征还推出了一种新的任务导向方法,将参与者的语言描述内容与认知任务之间的关系进行建模。

在自发语言识别(ADReSS)数据集的一个子任务中(“厨房偷吃饼干 Cookie Theft”的图片描述和转录文本实验,如图1所示),这些方法实现了91.4%的准确性。与传统只专注于语音或语义分析的模型不同,微软亚洲研究院创新地将语音与语义结合,极大地提升了病症检测的准确率。在未见过的测试集上,该模型也取得了较高的效率与性能,为阿尔茨海默症的广泛筛查提供了新的可行性。

图1:用于检测阿尔茨海默症描述性任务的 Cookie Theft 图像,由 DementiaBank Pitt Corpus, Becker 等人提出,1994年

图1:用于检测阿尔茨海默症描述性任务的 Cookie Theft 图像,由 DementiaBank Pitt Corpus, Becker 等人提出,1994年

相关论文:

Leveraging Pretrained Representations with Task-related Keywords for Alzheimer's Disease Detection. ICASSP 2023.

https://arxiv.org/pdf/2303.08019.pdf

利用无监督方法检测自闭症谱系障碍患者的刻板行为

自闭症谱系障碍(ASD)大多起病于婴幼儿时期,其特征往往表现为社交和交流障碍以及刻板和重复性行为。其中刻板和重复性行为,如不断拍打地面、反复撞击头部或不断拍手等,是自闭症谱系障碍检测的重要线索。自闭症患者的康复机率与发现和干预的及时性密切相关,但单纯依靠专业医护人员长时间跟踪观察儿童行为的效率较低。因此,一种快速且自动化的刻板行为检测方法将具有重要价值。

world-health-day-2024-4-scaled

(图片来源:unsplash.com)

现有方法大多利用计算机视觉技术,基于自闭症谱系障碍患者的视频录像数据,通过监督分类和活动识别技术来检测刻板行为。然而,刻板行为种类繁多,且视频录像数据因涉及隐私问题收集困难,限制了现有监督检测方法的可行性。

微软亚洲研究院与专业医疗机构合作,从新的方向入手解决挑战——利用无监督视频异常识别来检测刻板行为,并推出了一个基于人体姿势的时间轨迹和动作重复模式的双流深度模型 DS-SBD。该模型不仅可以在只包含正常行为的未标记视频中进行训练,而且还可以在推理过程中检测到未知类型的异常行为,比如识别出训练数据中未曾出现的转圈行为等。

图2:当出现刻板行为时(不正常的拍手),算法的预测概率显著升高

图2:当出现刻板行为时(不正常的拍手),算法的预测概率显著升高

广泛的实验表明,DS-SBD 模型的无监督刻板行为检测方法,将分类准确性指标的微平均(micro-average)AUROC 从60.43%提高到了71.04%,宏平均(macro-average)AUROC 从56.45%提高到了73.39%,这不仅提升了对刻板行为检测的准确性,还进一步扩展了对更多种类刻板行为的识别能力。该方法超越了现有的 SOTA 方法,有望成为未来研究的潜在基准。不过,刻板行为检测只是自闭症诊断中的一环,自闭症谱系障碍的早期识别和干预,还需要更多跨领域合作和社会各界的共同努力。

相关论文:

Unsupervised Video Anomaly Detection for Stereotypical Behaviors in Autism. ICASSP 2023.

https://arxiv.org/pdf/2302.13748.pdf

基于脑电信号提升新生儿癫痫检测准确率

儿童癫痫是儿童(0~18岁)时期常见的一种病因复杂且反复发作的神经系统综合征。为了避免影响孩子们的成长发育,新生儿癫痫的早期检测十分重要。

world-health-day-2024-6-scaled

(图片来源:unsplash.com)

癫痫发作是由脑部神经元“异常放电”所引起,所以脑电波检查对于诊断癫痫病有着决定性的作用。但由于新生儿大脑发育不完全、脑电数据噪声大且患儿个体差异明显,使得基于脑电波的新生儿癫痫检测成为世界级医学难题。

微软亚洲研究院与多家合作伙伴基于人工智能和脑电信号(EEG),提出了一个深度学习框架——时空 EEG 网络(STATENet)。该框架可以对脑信号进行精细化处理,灵活适应新生儿 EEG 通道数量的变化,以应对上述挑战。此外,研究员们还提出了一个模型级别的集成方法,通过动态聚合不同时空深度模型的结果,提高了 STATENet 模型在不同新生儿之间的泛化能力。

研究员们在包含了大规模真实世界新生儿 EEG 的数据集上进行了实验,结果表明,STATENet 模型显著提高了检测的准确性,AUPRC(精确率-召回率曲线下的面积)比现有的最先进的方法提升了超过30%,为医生诊断小儿癫痫提供了新的工具。

不仅如此,微软亚洲研究院还训练了首个跨数据集的脑电基础模型,可以对任何脑电数据进行分析,实现了“一对多”的脑电理解。基于该模型,研究员们还开发了 AI Neurologist 系统,可辅助临床和科研场景下的脑电信号分析工作,将医生的判断准确率由原来的75%提高至90%。目前,相关模型已在 GitHub 上开源,微软亚洲研究院欢迎全球的研究者共同参与,让相关技术在更广泛的医学领域发挥作用,为临床诊断与治疗带来新的突破。

图3:AI Neurologist 系统

图3:AI Neurologist 系统

相关论文:

新生儿癫痫检测论文:Protecting the Future: Neonatal Seizure Detection with Spatial-Temporal Modeling. IEEE International Conference on Systems, Man, and Cybernetics (SMC), 2023.

https://arxiv.org/abs/2307.05382

脑电预训练模型论文:Learning Topology-Agnostic EEG Representations with Geometry-Aware Modeling

https://openreview.net/attachment?id=hiOUySN0ub&name=pdf

病程预测与个性化治疗:人工智能助力精准医疗有的放矢

精准医疗是未来医疗发展的重要方向,它以个体化差异为基础,为患者提供个性化的治疗方案。然而,由于疾病的复杂性与个体差异性,精准医疗的实现仍面临着诸多挑战。人工智能在数据处理、模式识别和预测分析方面的独特能力,让其在预测疾病风险和病程进展方面展现出了巨大的潜力。这种预测能力对于慢性病的管理尤为重要,可以帮助医生和患者更好地管理疾病,减少并发症的发生。

将图神经网络用于帕金森病程发展预测

帕金森病是一种常见于中老年人的神经系统退行性疾病,其病程进展通常不快,有些患者一年也不会有明显变化,甚至会出现好转,在合理的药物和理疗帮助下,可以保持良好的生理机能。但帕金森病的症状复杂多样,包括睡眠障碍、呼吸困难、面部肌肉失调以及步态不稳和震颤等,病程发展预测是帕金森病治疗中的一大难题。

world-health-day-2024-8

(图片来源:pixabay.com)

对此,微软亚洲研究院的研究员们认为,有必要分析患者的多模态数据来提取相似特征,以提高病症发展预测的准确性。图神经网络(GNNs)就非常适合连接个体之间的关系——构建一个以患者为节点的图,并连接相似的患者,其中的相似性由患者的边缘特征决定。然而,选择这些边缘特征来定义患者相似性也具有一定的挑战,因为其非常依赖于人类专家和先验知识。

针对这些问题,微软亚洲研究院与医疗机构合作,在数据预处理、算法构建、模型设计和可解释性等方面进行了密切交流,并基于专业医护人员的建议,提出了一种新算法——AdaMedGraph。该算法可以自动选择重要特征来构建多个患者的相似性图,并与先验知识兼容,将人类专家构建的图纳入最终的集成模型。因为能够将个体间的信息与个体内的特征统一在一个模型中,AdaMedGraph 最大限度地减轻了图构建方面的负担。

在帕金森病进展标志物倡议(PPMI)(Marek等,2018年)和帕金森病生物标志物计划(PDBP)两个公开数据集上,AdaMedGraph 在预测24个月帕金森病病情发展方面,与其他基准模型相比,在所有指标上都获得了更高的准确性,为后续的个性化精准治疗提供了切入点。

此外,AdaMedGraph 模型还具有较强的泛化能力,在预测代谢综合征的发生上也表现出色。在测试数据集上的 AUROC 达到了0.675,进一步证明了将患者内部数据和患者之间的数据都纳入个体疾病发展预测的有效性,为未来的医学研究提供了新的思路和方法。

相关论文:

AdaMedGraph: Adaboosting Graph Neural Networks for Personalized Medicine

https://arxiv.org/abs/2311.14304

加强跨领域合作,释放人工智能价值

微软亚洲研究院的探索不仅限于疾病检测和病程预测。通过与医学界的广泛合作,微软亚洲研究院也在深入挖掘人工智能在药物研发和医学研究领域的巨大潜力,比如将前沿技术应用于人工视网膜构建、药物成瘾分析、癌症治疗、人体代谢探究,等等。

人工智能技术的成熟和进步使其在实际应用中的潜力逐渐显现,但要充分释放人工智能在各行各业的价值,跨学科与跨领域的合作变得至关重要。“得益于与医疗机构和医学研究机构的医学专家的跨界合作,微软亚洲研究院才能顺利开展诸多涉及医疗健康领域的研究项目,持续探索将人工智能技术应用于疾病检测、康复训练和病程预测等医疗领域的关键环节,这是团队共同努力的成果。我们也欢迎更多对跨领域研究感兴趣的优秀人才的加入,共同为守护人类健康和推动医学进步贡献力量。”微软亚洲研究院副院长邱锂力表示。

欢迎加入微软亚洲研究院:https://www.msra.cn/zh-cn/jobs

注:本文所述的微软亚洲研究院在医疗健康领域的研究均为科研探索性质,且均在专业医疗和医学研究机构的合作指导下进行,旨在推动科学进步并为人类未来的医疗健康应用提供理论和技术支持。所有研究均严格遵守微软负责任的 AI 流程的指导,并遵循公平、包容、可靠性与安全性、透明、隐私与保障、负责的原则。文中所提及的技术和方法目前均处于研究和开发阶段,尚未形成商业产品或服务,也不构成任何医疗建议或治疗方案。我们鼓励读者在面对健康问题时咨询合格的医疗专业人士。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/829137.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

《汇编语言》- 读书笔记 - 综合研究

《汇编语言》- 读书笔记 - 综合研究 研究试验 1 搭建一个精简的 C 语言开发环境1. 下载2. 配置3. 编译4. 连接 研究试验 2 使用寄存器1. 编一个程序 ur1.c ( tcc 用法)tcc 编译连接多个源文件tlink 手动连接 2.用 Debug 加载 ur1.exe,用u命令…

如何在现场电脑是部署onnx模型

调整版本为Release x64(关键)并配置好CUDA和CUDNN。 注意:Release | x64是基类主配置,包含目录下有编译器的一些链接库 以及一些库目录: 以及附加依赖项: msvcprt.lib kernel32.lib user32.lib gdi32.l…

代码随想录算法训练营day40

题目:343. 整数拆分、96.不同的二叉搜索树 参考链接:代码随想录 343. 整数拆分 思路:五部曲来走。dp数组,dp[i]用于记录拆i得到的最大乘积和,我们要求的也就是dp[n];递推公式,我们想拆分i&am…

ZooKeeper集群的搭建

ZooKeeper集群的搭建 将master节点的/data目录下的ZooKeeper安装包解压到/opt/software目录下 tar -zxvf apache-zookeeper-3.6.3-bin.tar.gz -C /opt/software/在master节点切换至ZooKeeper安装目录的conf目录下,将zoo_sample.cfg重命名为zoo.cfg,并…

OpenHarmony语言基础类库【@ohos.util.LinkedList (线性容器LinkedList)】

LinkedList底层通过双向链表实现,双向链表的每个节点都包含对前一个元素和后一个元素的引用。当需要查询元素时,可以从头遍历,也可以从尾部遍历,插入、删除效率高,查询效率低。LinkedList允许元素为null。 LinkedList…

基于Springboot的点餐平台

基于SpringbootVue的点餐平台的设计与实现 开发语言:Java数据库:MySQL技术:SpringbootMybatis工具:IDEA、Maven、Navicat 系统展示 用户登录 首页展示 菜品信息 菜品资讯 购物车 后台登录 用户管理 菜品分类管理 菜品信息管理 …

#ESP32S3N8R8(按键点灯)

一、按键对应端口为GPIO0&#xff08;上拉&#xff09; 二、代码 #include <stdio.h> #include "driver/gpio.h" #include "freertos/FreeRTOS.h" #include "freertos/task.h" #include "unistd.h"void app_main(void) {int co…

YOLOv8 实现车牌检测,生成可视化检测视频(20240424)

原项目源码地址&#xff1a;GitHub 我的源码地址&#xff1a;Gitee 环境搭建请参考&#xff1a;Win10 搭建 YOLOv8 运行环境&#xff08;20240423&#xff09;-CSDN博客 环境测试请参考&#xff1a;本地运行测试 YOLOv8&#xff08;20240423&#xff09;-CSDN博客 训练数据…

【java数据结构-优先级队列向下调整Topk问题,堆的常用的接口详解】

&#x1f308;个人主页&#xff1a;努力学编程’ ⛅个人推荐&#xff1a;基于java提供的ArrayList实现的扑克牌游戏 |C贪吃蛇详解 ⚡学好数据结构&#xff0c;刷题刻不容缓&#xff1a;点击一起刷题 &#x1f319;心灵鸡汤&#xff1a;总有人要赢&#xff0c;为什么不能是我呢 …

OpenHarmony实战开发-媒体查询 (@ohos.mediaquery)

概述 媒体查询作为响应式设计的核心&#xff0c;在移动设备上应用十分广泛。媒体查询可根据不同设备类型或同设备不同状态修改应用的样式。媒体查询常用于下面两种场景&#xff1a; 针对设备和应用的属性信息&#xff08;比如显示区域、深浅色、分辨率&#xff09;&#xff0…

异步日志方案spdlog

异步日志方案spdlog spdlog 是一款高效的 C 日志库&#xff0c;它以其极高的性能和零成本的抽象而著称。spdlog 支持异步和同步日志记录&#xff0c;提供多种日志级别&#xff0c;并允许用户将日志输出到控制台、文件或自定义的接收器。 多线程使用和同步、异步日志没有关系是…

Linux系统----信号(万字文章超级详细并且简单易学附有实操shell指令图及注释!)

绪论​ “Do one thing at a time, and do well.”&#xff0c;本章开始Linux系统其中信号是学习操作系统的基本下面将会讲到什么是信号、信号的多种产生方式、信号如何保存的、信号如何处理的、以及一些信号的细节。话不多说安全带系好&#xff0c;发车啦&#xff08;建议电脑…

【鸿蒙】通知

一、概要 Android的Notification。 说到通知&#xff0c;就想到了推送。 通知这块可以做到不像Android一样需要集成各家厂商的推送了&#xff0c;不知道是否有建立独立的推送系统 这是官网上介绍的跨APP进行的IPC通知。实际在Android开发过程中&#xff0c;可能这种场景会相对…

MarginNote 3 for Mac:一站式思维导图与笔记神器,让学习更高效

MarginNote 3 for Mac是一款功能强大的阅读和学习工具软件&#xff0c;它将PDF/EPUB阅读器和多种学习工具集成起来&#xff0c;旨在帮助用户更有效地进行阅读、笔记整理以及知识管理。 这款软件的核心功能在于其能够将阅读与学习过程紧密结合。用户可以在阅读文档时&#xff0…

勒索软件安全防护手册

文章目录 相关背景勒索软件概述勒索软件主要类型文件加密类勒索软件数据窃取类勒索软件系统加密类勒索软件。屏幕锁定类勒索软件 勒索软件典型传播方式利用安全漏洞传播利用钓鱼邮件传播利用网站挂马传播利用移动介质传播利用软件供应链传播利用远程桌面入侵传播 典型勒索软件攻…

自动驾驶传感器篇: GNSSIMU组合导航

自动驾驶传感器篇&#xff1a; GNSS&IMU组合导航 1.GNSS1.1 GNSS 系统概述1.2 GNSS系统基本组成1. 空间部分&#xff08;Space Segment&#xff09;&#xff1a;2. 地面控制部分&#xff08;Ground Control Segment&#xff09;&#xff1a;3. 用户设备部分&#xff08;Use…

Stable Diffusion WebUI 使用 VAE 增加滤镜效果

本文收录于《AI绘画从入门到精通》专栏&#xff0c;专栏总目录&#xff1a;点这里&#xff0c;订阅后可阅读专栏内所有文章。 大家好&#xff0c;我是水滴~~ 本文主要介绍 VAE 模型&#xff0c;主要内容有&#xff1a;VAE 模型的概念、如果下载 VAE 模型、如何安装 VAE 模型、如…

开箱展示——深圳市雷龙发展的存储卡

最近收到了来自深圳市雷龙发展有限公司寄来的存储卡&#xff0c;奈何最近也没有好的嵌入式项目需要用到&#xff0c;哪这里就简单给大家展示一下吧。 原始包装大概就是这样子了垃&#xff0c;有两个存储芯片和一个简单的转接器&#xff0c;测试的时候可以把芯片焊接到转接器…

如何安装mysl驱动程序jar包

简介&#xff08;为什么要安装mysql驱动jar包&#xff09; MySQL 驱动程序&#xff08;通常以 JAR 文件的形式提供&#xff09;用于在 Java 应用程序中连接和与 MySQL 数据库进行交互。这些驱动程序提供了一组 API&#xff0c;使 Java 应用程序能够执行诸如查询、插入、更新和…

【月报】​Aavegotchi 开发更新 |2024 年 4 月版,多款游戏上新玩法

朋友们好&#xff01; 春天来了&#xff0c;我们热情洋溢的团队很高兴能为 Gotchiverse 带来一堆新鲜的更新和丰富的功能。让我们一起来看看这次开发更新带来了什么&#xff1a; Gotchichain 选择定居基地 精神力量竞技场获得了 EBIC 更新 高奇守护者通过全新的进阶系统提升…