首页/新闻资讯/正文详情

Retinal vascular biomarker concept learning with multimodal fusion for cardiovascular disease detect

发布时间:2026/9/27 3:25:22 来源:云帆数科 栏目:资讯中心
Retinal vascular biomarker concept learning with multimodal fusion for cardiovascular disease detect
1.研究背景CVD 是全身性血管疾病因此视网膜微血管可能携带反映心血管状态的信息。问题是传统深度学习模型虽然能够从眼底图预测 CVD但并没有明确告诉我们它到底利用了什么血管特征。对于患有CVD有以下四个指标Vessel density血管密度Vessel tortuosity血管迂曲度高CRAE视网膜中央动脉等效口径AVR动静脉比传统的方法是模型学习图像特征网络直接从 retinal image → CVD中间没有一个明确的学习过程说学习到了什么影像因子更易于学习到一些图像背景非血管区域。而作者做出的改进是告诉模型你需要学习这些具有明确医学含义的 concept。血管概念学习模块能预测出来是CVD,但是通过热力图的对比后发现图像并没有关注到视网膜毛细血管附近也就是说并不是因为视网膜血管密度发生了变化才认为它是 CVD。CPM 负责把眼底图转换成具有医学意义的血管 biomarker tokensCFRM 把年龄、性别、BMI、血压和吸烟等临床变量转换成 clinical tokens最后 CAAM 使用 disease tokens 作为 query通过 cross-attention 建模血管 biomarker 与临床因素之间的交互并完成 CVD 分类。1.第一个创新点 血管概念学习模块2.第二个创新点3.第三个创新点--跨模态注意力聚合模块将多模态眼底图像特征与血管生物标志物概念特征拼接得到 K/V使用可学习疾病 Token 作为 Q 执行跨注意力提取与心血管疾病相关的关键血管特征经过投影矩阵变换、平均池化压缩后输出疾病预测 logits。关键点使用可学习疾病 Token 作为 Query专门学习 CVD 疾病的特征模式主动在多模态 血管生物标志物特征中寻找疾病相关证据跨注意力聚合自动给有病理意义的血管区域分配高注意力权重抑制无关背景融合血管生物标志物先验vascular biomarker prior和多模态图像信息输出全局特征用于最终心血管疾病分类。“为了判断 CVD我应该从这些 biomarker 和 clinical features 中寻找什么样的信息”实验效果对比实验消融实验

相关推荐

苏州手机网站建设别被坑,性能优化才是省钱关键
苏州手机网站建设别被坑,性能优化才是省钱关键

苏州手机网站建设别被坑,性能优化才是省钱关键 找苏州手机网站建设公司,最怕什么?怕报价单里藏着隐形消费,怕做完网站打开速度慢如蜗牛,怕花了大几万结果搜索引擎根本不收录。很多甲方朋友拿着需求去询价,回来发现三家报价差出三倍,心里直打鼓:到底谁… · 2026/9/27 3:25:15

物联网三层架构全解析:感知、网络与应用层的实践指南
物联网三层架构全解析:感知、网络与应用层的实践指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/9/27 3:25:15

tick-stock-panel 自选功能实战:M:N 多分组、表格卡片双视图与实时指标刷新
tick-stock-panel 自选功能实战:M:N 多分组、表格卡片双视图与实时指标刷新

tick-stock-panel 自选功能实战:M:N 多分组、表格卡片双视图与实时指标刷新 【免费下载链接】tick-stock-panel TSP自托管、零运维的 A 股「选股 监控 回测」量化工作台 | LLM能力驱使策略定制个股分析复盘 | 自由接入第三方数据源与个性化扩展数据 | 个人开源 … · 2026/9/27 3:25:15

消费品跨部门指标统一实践:构建协同化经营分析体系
消费品跨部门指标统一实践:构建协同化经营分析体系

导语 不少消费品企业在完成单部门数据分析试点后,往跨部门推广阶段都会遇到棘手问题:不同部门对同一核心指标的定义、计算口径各有不同,开会汇报各报各数,数据打架成为常态,不仅拖慢跨部门协同分析效率,也让… · 2026/9/27 4:07:32

无线电导航分类指南:从信号体制到选型对照
无线电导航分类指南:从信号体制到选型对照

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/9/27 4:07:32

南宁做网站培训避坑指南:5个实战案例拆解
南宁做网站培训避坑指南:5个实战案例拆解

南宁做网站培训避坑指南:5个实战案例拆解 在南宁找建站公司,最怕的不是贵,而是被“高价包装”割韭菜。很多老板看到报价单上“高端定制”四个字就心动,结果交付的是一个换皮模板,还附带一堆用不上的功能。这时候, 实战案例… · 2026/9/27 4:07:20

DisplayPort与eDP技术原理及硬件调试实战指南
DisplayPort与eDP技术原理及硬件调试实战指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/9/27 4:07:08

网络规划设计师通过率多少?挑机构别只看哪家好
网络规划设计师通过率多少?挑机构别只看哪家好

网络规划设计师通过率多少?挑机构别只看哪家好 你是不是也被备案流程搞晕了?提交资料被退回三次,不知道改哪,心里直犯嘀咕:找哪家建站公司 哪家好… · 2026/9/27 4:07:08

购物网站风格选型难题,一文搞懂3种技术栈
购物网站风格选型难题,一文搞懂3种技术栈

购物网站风格选型难题,一文搞懂3种技术栈 网站做好了没人访问?别急着加预算投广告,先查查你的技术选型是不是在“拖后腿”。很多老板以为买个模板、套个现成系统就能开张,结果上线三个月,流量惨淡,转化率为零。这时候再回头找原因,才发现是底层架构没… · 2026/9/27 4:07:02

MATLAB雷达信号脉冲压缩仿真:LFM线性调频、匹配滤波与距离分辨率实现
MATLAB雷达信号脉冲压缩仿真:LFM线性调频、匹配滤波与距离分辨率实现

简介:这套Matlab仿真工具完整呈现雷达信号脉冲压缩过程,从线性调频(LFM)信号生成、目标回波仿真到匹配滤波压缩处理均有可运行代码支撑,面向电子信息工程、计算机、数学等专业学生,适用于课程设计、期末大作… · 2026/9/27 0:00:01

汕头网站建设制作厂家避坑指南:5大注意事项救急
汕头网站建设制作厂家避坑指南:5大注意事项救急

汕头网站建设制作厂家避坑指南:5大注意事项救急 改个需求建站公司拖一周,这种憋屈事我见得太多了。 很多汕头老板找本地建站团队,签合同前看着方案挺美,一上线就变脸。 今天不聊虚的,直接拆解找 汕头网站建设制作厂家 时的5个核心 注意事项… · 2026/9/27 0:00:01

多模态虚假新闻检测实战:BERT+ResNet双塔与对比学习
多模态虚假新闻检测实战:BERT+ResNet双塔与对比学习

简介:基于PyTorch的多模态虚假新闻检测项目完整代码包,面向自然语言处理与计算机视觉交叉方向的开发者、科研人员及毕业设计选题者,解决社交媒体中文本与图像联合识别虚假新闻的问题。系统以BERT预训练模型提取文本语义特征,以Res… · 2026/9/27 0:00:01

MATLAB雷达信号脉冲压缩仿真:LFM线性调频、匹配滤波与距离分辨率实现
MATLAB雷达信号脉冲压缩仿真:LFM线性调频、匹配滤波与距离分辨率实现

简介:这套Matlab仿真工具完整呈现雷达信号脉冲压缩过程,从线性调频(LFM)信号生成、目标回波仿真到匹配滤波压缩处理均有可运行代码支撑,面向电子信息工程、计算机、数学等专业学生,适用于课程设计、期末大作… · 2026/9/27 0:00:01

汕头网站建设制作厂家避坑指南:5大注意事项救急
汕头网站建设制作厂家避坑指南:5大注意事项救急

汕头网站建设制作厂家避坑指南:5大注意事项救急 改个需求建站公司拖一周,这种憋屈事我见得太多了。 很多汕头老板找本地建站团队,签合同前看着方案挺美,一上线就变脸。 今天不聊虚的,直接拆解找 汕头网站建设制作厂家 时的5个核心 注意事项… · 2026/9/27 0:00:01

多模态虚假新闻检测实战:BERT+ResNet双塔与对比学习
多模态虚假新闻检测实战:BERT+ResNet双塔与对比学习

简介:基于PyTorch的多模态虚假新闻检测项目完整代码包,面向自然语言处理与计算机视觉交叉方向的开发者、科研人员及毕业设计选题者,解决社交媒体中文本与图像联合识别虚假新闻的问题。系统以BERT预训练模型提取文本语义特征,以Res… · 2026/9/27 0:00:01

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码