下一代 AI 医疗:知识图谱RAG + 多智能体,听医生的话没前途,让医生听你的话才是正道!

下一代 AI 医疗:知识图谱RAG + 多智能体,听医生的话没前途,让医生听你的话才是正道!

    • 医疗算法趋势
    • 现代 AI 医疗算法问题
      • 医学影像算法的局限
      • 医疗知识图谱的问题
      • 基于最本质循证医学
      • 实现人类级因果推理
      • 摆脱LLM概率性输出
    • 嘘,别人我不告诉 TA !!!

 


医疗算法趋势

①大模型 + 知识图谱(图数据重构、多跳推理,子图思维推理)

② 大模型 + 知识图谱 + RAG(引用更多、更新数据)

③ 大模型 + 知识图谱 + RAG + 多智能体(超长期、超个性化、超复杂任务)

3 者区别:

  • 如果您的应用主要关注特定领域的深度知识(常规诊断),方案 ①。
  • 如果您需要结合广泛的知识源并保持知识的时效性(医学知识不断更新),方案 ②。
  • 如果您需要多角度分析、复杂决策的场景(长期超个性化、疑难杂症诊断中心、三级图补充因果关系+生理机制解释),方案 ③ 可能更适合。

现代 AI 医疗算法问题

  • AI 在特定条件下自动推荐治疗方案,关键决策依然需要医生确认
  • AI 健康顾问和 AI 医生助理的形态落地健康咨询、辅助诊疗等医疗场景
  • 探寻基因蛋白质本质,不断发现新疗法
  • 覆盖院内院外、线上线下全流程的全病程管理,再通过居家数字生物标志物监测的持续居家监测

越往后面,越需要对人体、疾病、生病的因果分析、生理机制解释。

趋势就是从个别公司使用 AI,到系统性使用 AI,到整个社会围绕 AI 展开。

医学影像算法的局限

目前医疗AI的形式以临床影像学AI为主。

影像学AI固然减轻了影像科医生的工作强度、提高了效率。

但是,影像学的检查结果属于辅助地位,不能单凭影像学结果就做出正确的诊断,需要医生综合解读各方面的病情信息是才能做出正确的判断。

所以,目前影像类AI 没有触及医疗的核心。

医疗人工智能创业公司目前没有很好地商业化,其中一个原因是这些公司的技术和产品在【医生的临床思维】上有欠缺,就是距离真正的看病有很长的距离。

医疗知识图谱的问题

医学判断是基于证据的询证过程,推理的每一步都需要证据、知识和因果逻辑的支持。

但大模型,ta 是黑盒,基于概率性输出,微调出的医学大模型,也会有幻觉、概率性输出的问题。

没有医生真正的临床思维,不是基于证据的因果推理。

基于最本质循证医学

实现医生的临床思维:

  • 知识图谱,补上因果关系、生理性的机制解释、患者背景
  • 大模型,实现人类级因果推理能力,基于循证给出结论
  • 大模型,摆脱概率性输出,实现人的系统2(深思熟虑)

 

知识图谱 RAG 解决第一个问题,形成一个层级图。

  • 用户个人历史,是第一层
  • 知识图谱、最新研究,是第二层
  • 诊断逻辑、因果和机制解释的基础医学知识支持,是第三层

其具体落实的表现形式是,临床专科疾病的知识图谱,如心血管病知识图谱、肺病知识图谱、危重症知识图谱等等。

实现人类级因果推理

虽然层级图,使得知识图谱有了循证基础,但LLM还有问题,没有人类的因果推理能力,就做不到临床思维。

LLM 可以谈论因果关系,但实际上只是根据训练数据中的相关性进行模式识别,而不是理解和推断真正的因果关系。

  • 多阶段信息转化法:将非结构化文本逐步转化为,可计算的因果结构
  • 概率图因果推理法:构建和优化因果关系的图形表示,实现复杂推理

真实世界里任何事情都是错综复杂的,你根本就无法列举影响一个结果的所有可能缘故。

也就是说,你画不出因果关系的。

你必须做出各种取舍,你只能把你认为最重要的缘故画在图上。

图画完了,你并没有科学地、彻底地、逻辑完备地回答“为什么”,你只是说,根据你的猜测,应该是因为这几个缘故。

而事实上也不需要回答“为什么”。

我们在生活中的实际应用,对改变世界真正有用的,其实就是回答“观察、干预、想象”这三种问题!

因果分析的最终目的不是查明因果关系,而是回答三种有用的问题:

  1. 观察:这事发生了,那事是否也会发生?(症状-疾病、并发病、风险因素)

  2. 干预:我采取这个行动,会有什么后果?(治疗评估、预防有效性)

  3. 想象:如果当初我没有这么做,会是怎样?(个性化治疗、疾病预后)

因果分析的最终目的不是查明因果关系,而是回答三种问题。

把因果分析算法化,让大模型去回答这 3 种问题。

人的见识是有限的,因果图分析适合大模型,因为他有智能、有世界模型。

摆脱LLM概率性输出

早期动物 只有 系统1( 5 个 F,概括一生 ):

  1. 如果入侵者是同类,同性,且并不比自己更强壮,那么,Fight!
  2. 如果入侵者是同类,同性,且比自己更强壮,那么,Flee(快跑)!
  3. 如果入侵者是同类,异性,那么,Fuck!
  4. 如果入侵者不是同类,管它是同性还是异性,只要不比自己更强壮,那么,Feed(吃掉)!
  5. 如果以上皆不是,那么,Freeze(睡觉)……

人类实现系统2【深思熟虑】思考的方式是,通过新皮层来调控和协调复杂的理性分析、逻辑推理和深度决策过程,以解决复杂问题或进行详尽思考。


新皮层分为:

  • 前额叶:负责规划宏观路线和复杂的决策评估过程,涉及到抽象思维、意志行为控制以及问题解决等高级认知功能。

  • 前运动:负责规划和协调。尤其是在复杂或需要协调的运动中,如使用什么工具、怎么组合应用。

  • 运动:具体抓手、特定的动作。

  • 基底神经节:前额叶、前运动、运动都和基底神经节相连,每个动作实施全是基底神经节,不经过基底神经节的都是头脑模拟

人做事情的过程:

  • 项目层,定义问题与愿望(完全不可操作)
  • 任务层,设定具体目标与方向(不可操作)
  • 事件层,详细描述任务的时空、交互与情景(部分可操作)
  • 操作层,制定实际操作步骤与流程(完全可操作)

系统2,我们可以使用一个多智能体系统,来复现新皮层的完整活动,实现深思熟虑。

  • 能赋予大模型循证医学和临床思维、多角度分析、复杂决策的场景,实现医院的疑难杂症诊断中心
  • 能引用最新医学知识、适合超个性化、超长期、超复杂任务
  • 能添加反馈机制,不断提升诊断水平、考虑更多个体差异,不会死板的诊断。

嘘,别人我不告诉 TA !!!

被绿的时候我忍气吞声!!!

被甩的时候我一言不发!!!

被渣的时候我不为所动!!!

但看见关注我泪如泉涌!!!

请添加图片描述

知道文字看累了,看美女放松一下,顺便点个关注!!!

因为这里是连续剧,后面还有更多美女和干货!!!

我要让高难度知识落地!!!

我要让高精尖科学流传!!!

我要在高逼格的干货上!!!

我要给出最有用的心得!!!

和全球顶级科学家同步!!!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.xdnf.cn/news/1534572.html

如若内容造成侵权/违法违规/事实不符,请联系一条长河网进行投诉反馈,一经查实,立即删除!

相关文章

【二叉树遍历算法应用】------补录

0.二叉树结点的链式存储结构 #include<stdio.h> #include<stdlib.h> #include<stdbool.h>typedef char TElemType;//树中元素基本类型为char类型//二叉树结点链式存储结构&#xff08;二叉链表&#xff09; typedef struct BiNode {TElemType data;//数据域…

【面试干货】软件测试面试题库

我把软件测试面试的整个题库都搬来啦&#xff0c;面试能拿下80%&#xff0c;剩下就看你满不满意公司的开价咯。以下答案都是我自己写的&#xff0c;大家根据自己的经历稍作改动&#xff0c;答案仅供参考哦&#xff01;题库持续更新&#xff0c;需要PDF版可以点击文末小卡片领取…

牛耕分解+形态学分割 全覆盖路径规划(二)Part1. 分割

书接上文&#xff1a;牛耕分解形态学分割 全覆盖路径规划&#xff08;一&#xff09; 前置文章1&#xff1a;房屋区域分割算法 Morphological Segmentation 前置文章2&#xff1a;牛耕覆盖算法 Boustrophedon Coverage Path Planning 项目地址&#xff1a;ipa320 / ipa_cove…

2.Jmeter安装配置,核心目录详情,组件和作用域

一、Jmeter安装配置以及核心目录详情 Jmeter基于java语言来开发&#xff0c;java需要jdk环境。 1.安装jdk并且配置jdk的环境变量。 2.jmeter只需要解压就可以使用了。 3.在D:\apache-jmeter-5.5\bin目录下双击jmeter.bat文件就可以启动使用了 backups&#xff1a;自动备份的目录…

开放混合 数据驱动 Cloudera的商业AI布局

8月7日在新加坡揭幕的Cloudera EVOLVE24大会&#xff0c;是全球系列活动的第一站&#xff0c;此后还将在全球多个国家陆续举行。大会从亚太地区起步&#xff0c;也彰显了Cloudera对亚太市场的重视。“亚太地区已经成为我们业务增长最快的区域。在混合云环境之下&#xff0c;越来…

rust + bevy 实现小游戏 打包成wasm放在浏览器环境运行

游戏界面 代码地址 github WASM运行 rustup target install wasm32-unknown-unknown cargo install wasm-server-runner cargo run --target wasm32-unknown-unknowncargo install wasm-bindgen-cli cargo build --release --target wasm32-unknown-unknown wasm-bindgen --…

海报生成用什么软件好?小白看这里

想要让你的信息在人群中脱颖而出吗&#xff1f;一张精心设计的海报无疑是最佳选择。 无论是宣传活动、展示作品还是装饰空间&#xff0c;海报都能以视觉的力量抓住人们的眼球。 但海报制作软件哪个好呢&#xff1f;别急&#xff0c;这里有五个超实用的海报制作软件&#xff0…

再次进阶 舞台王者 第八季完美童模全球赛代言人【赵御涵】赛场+秀场超燃合集!

7月20-23日&#xff0c;2024第八季完美童模全球总决赛在青岛圆满落幕。在盛大的颁奖典礼上&#xff0c;一位才能出众的少女——赵御涵迎来了她舞台生涯的璀璨时刻。 代言人——赵御涵&#xff0c;以璀璨童星之姿&#xff0c;优雅地踏上完美童模盛宴的绚丽舞台&#xff0c;作为开…

如何对离线数仓和准实时数仓进行精准把控?

数仓是指将企业中各个业务系统产生的数据进行汇总、清洗、转化和整合&#xff0c;以便为企业提供决策支持和数据分析的存储和管理系统。 离线数仓和准实时数仓&#xff0c;这两种数据仓库模式&#xff0c;各有其特点&#xff0c;根据其特点和适用的应用场景选择合适的仓库模式…

汇编实现从1加到1000(《X86汇编语言 从实模式到保护模式(第2版》) 第135页第2题解答)

题目: 编写一段主引导扇区程序,计算从1加到1000的和,并在屏幕上显示结果 输出结果: 代码: jmp near start text db 123...1000 start:mov ax,0x07c0mov ds,ax ;数据段从主引导区开始mov ax,0xb800mov es,ax ;显存地址从B8000物理地址开始mov si,text ;si指向text的第…

2024 年 .NET 高效开发精选实用类库

目录 前言 1、Entity Framework Core 2、Newtonsoft.Json 3、AutoMapper 4、HttpClient 5、Serilog 6、Hangfire 7、xUnit 8、OxyPlot 9、Task Parallel Library (TPL) 10、Elasticsearch.NET 和 NEST 总结 最后 前言 在平时开发中&#xff0c;好的类库能帮助我们…

华火10号店隆重开业,千城万店打造增长新引擎

风吹洛阳城&#xff0c;花开盛唐梦&#xff01;9月11日&#xff0c;相约在洛阳&#xff0c;在时光、空间与浪漫的交错中&#xff0c;华火10号店盛大开业。此次开业将为洛阳市民提供领先行业的绿色厨电产品&#xff0c;营造高端化、体验化、智慧化的门店氛围&#xff0c;打造极致…

说说synchronized的锁升级过程

在 JDK 1.6之前&#xff0c;synchronized 是一个重量级、效率比较低下的锁&#xff0c;但是在JDK 1.6后&#xff0c;JVM 为了提高锁的获取与释放效&#xff0c;,对 synchronized 进行了优化&#xff0c;引入了偏向锁和轻量级锁&#xff0c;至此&#xff0c;锁的状态有四种&…

echarts 3D地图

通过echats echats-gl 实现的3D地图页面。 先上效果图: 1.通过外边js引入方式,引入必要的js压缩文件 <script src="/static/vue-v2/vue.js"></script> <script src="/static/assets/echarts-v5/echarts.min.js"></script> &l…

从头开始学MyBatis—02基于xml和注解分别实现的增删改查

首先介绍此次使用的数据库结构&#xff0c;然后引出注意事项。 通过基于xml和基于注解的方式分别实现了增删改查&#xff0c;还有获取参数值、返回值的不同类型对比&#xff0c;帮助大家一次性掌握两种代码编写能力。 目录 数据库 数据库表 实体类 对应的实体类如下&#x…

Vue2 qrcode+html2canvas 实现二维码的生成和保存

1.安装 npm install qrcode npm install html2canvas 2.引用 import QRCode from qrcode import html2canvas from html2canvas 效果&#xff1a; 1. 二维码生成&#xff1a; 下载二维码图片&#xff1a; 二维码的内容&#xff1a; 实现代码&#xff1a; <template>…

重学SpringBoot3-SpringApplicationRunListener

更多SpringBoot3内容请关注我的专栏&#xff1a;《SpringBoot3》 期待您的点赞&#x1f44d;收藏⭐评论✍ 重学SpringBoot3-SpringApplicationRunListener 1. 基本作用2. 如何实现2.1. 创建SpringApplicationRunListener2.2. 注册SpringApplicationRunListener2.3. 完整示例 3.…

初始爬虫5

响应码&#xff1a; 数据处理&#xff1a; re模块&#xff08;正则表达式&#xff09; re模块是Python中用于正则表达式操作的标准库。它提供了一些功能强大的方法来执行模式匹配和文本处理。以下是re模块的一些常见用法及其详细说明&#xff1a; 1. 基本用法 1.1 匹配模式 …

大势智慧与山东省国土测绘院签署战略合作协议

9月6日&#xff0c;山东省国土测绘院&#xff08;后简称山东院&#xff09;与武汉大势智慧科技有限公司&#xff08;后简称大势智慧&#xff09;签署战略合作协议。 山东院院长田中原、卫星应用中心主任相恒茂、基础测绘中心主任魏国忠、卫星应用中心高级工程师张奇伟&#xf…

记一次实战中对fastjson waf的绕过

最近遇到一个fastjson的站&#xff0c;很明显是有fastjson漏洞的&#xff0c;因为type这种字符&#xff0c;fastjson特征很明显的字符都被过滤了 于是开始了绕过之旅&#xff0c;顺便来学习一下如何waf 编码绕过 去网上搜索还是有绕过waf的文章&#xff0c;下面来分析一手&a…