欢迎访问智慧医疗网 | 网站首页
 
当前位置:首页 > 资讯 > 市场

最新国产医疗大模型发布,支持8个模态!

发布时间:2024-03-29 来源:大健康派 浏览量: 字号:【加大】【减小】 手机上观看

打开手机扫描二维码
即可在手机端查看

3月28日,万仞智慧智能科技(北京)有限公司(下称“万仞AI”)通过官方公众号宣布,基于自研大模型平台,正式发布全球首个8模态医疗大模型——董奉大模型。

万仞AI方面介绍,董奉大模型的名字源自“建安三神医”之一的董奉,与华佗、张仲景齐名,并开创了“杏林文化”。

据悉,董奉大模型面向患者、医护人员及医院管理人员,提供包括在线健康助理、智能分诊预诊、初级医护指引、病历校验质检、医生工作助理、诊后随访助理、专家实时分身会诊以及医疗绩效考核、控费管理等覆盖全病程的大模型应用。实现支持语音(如实时语音对话)、文字(如病历/处方/报告)、图像(如医疗影像/手机照片/病理学图片)、视频(如实时分身/自录视频/内镜/患者教育)、情感(如语气/情绪/行为)、结构化数据(如检验/诊断/医学KG)、电信号(如脑波/脉象/肌电)及生物信息(如基因数据)共计8个模态的输入与输出。
官方表示,万仞AI已与吉林大学、实在智能、威能思软等机构达成战略合作,搭建了AI科技研究基地和产研合作中心,并已定向在某省人民医院(三甲)、某省人民医院分院(二甲)和某市级互联网医院平台等完成落地。
去年5月,自动驾驶公司Momenta产品与工程副总裁王荣兴离职的消息传出,6月王荣兴便创立了万仞AI,并引入前IBM大中华区Watson医疗落地总监张轶伦作为合伙人。10月,万仞AI获得了由银瓴投资领投的数千万元种子轮投资。官方介绍,万仞AI的企业战略介于通用大模型与专属定制之间,提供贴合我国国情的私有化小型化自动化定制化的企业级大模型解决方案。除医疗行业外,未来还将拓展康养、金融、汽车、农业、零售等行业。
万仞AI展示了董奉大模型的几项能力:

  • 首先是“实时多模态分身”能力,能够为医疗机构、互联网医院服务机构提供实时多模态分身,并适配立式大屏、平板小屏以及个人手机等各类硬件。万仞AI介绍,基于董奉大模型,能以实时视频沟通的形式与用户持续进行个性化对话,而非预设脚本的循环录播,从而形成在线健康助理、智能分诊预诊、诊后随访助理以及专家实时分身会诊等线上线下医疗场景的交互入口。

微信图片_20240328200526.png

  • 二是在线问诊的能力,利用多模态能力,有效采集患者全病程中的最新症状、治疗执行、不良反应、情绪等全方位数据,从而对患者病情、依从性等进行解读和预测,给出就诊建议。同时,董奉大模型通过“医生工作助理”、“随访机器人”等工具,面向医生及患者,实现从诊疗到康复的全程助理服务。

微信图片_20240328200529.png

  • 此外,在医院管理层面,董奉大模型能为医护群体提供“初级医护指引”、“病例校验质检”等应用,帮助医护人员减轻负担,并为医院管理体系提供“国家医疗绩效考核”“方案综合费用控制”等定制功能,助力医院管理。

微信图片_20240328200531.png

根据万仞AI展示的董奉大模型与ChatGPT的简单对比,在问诊方面,ChatGPT提供了更多的可能性和建议,并引导用户提供更多信息,相对来说,董奉大模型的问诊过程体现出一定的针对性。

而在“国考”问题的反馈上,董奉大模型表现出了十足的本土化,遵照《国家三级公立医院绩效考核操作手册》给出答案,ChatGPT在这一方面则有所欠缺。
不过,此次万仞AI并未公布董奉大模型的参数规模、预训练语料等相关数据,截至发稿,董奉大模型的体验入口也尚未公布。

智慧医疗网 © 2022 版权所有   ICP备案号:沪ICP备17004559号-5