Google的Med-PaLM 2是一个用于回答医疗信息问题的AI工具,自4月以来,梅奥诊所等研究医院一直在进行测试。Med-PaLM 2是今年五月在Google I/O上发布的,该工具建立在PaLM 2之上,PaLM 2是支撑Google Bard的语言模型。
《华尔街日报》近日报道称,他们看到的一封内部邮件显示,Google相信更新后的模型在医生资源相对有限的国家中可能特别有用。Med-PaLM 2是在一套精选的医学专家演示中进行训练的,Google相信这将使其在医疗对话中比Bard、Bing和ChatGPT这样的通用聊天机器人更出色。
该报告还提到了Google在五月公开的一项研究,该研究表明Med-PaLM 2仍然存在一些我们已经习惯于在大型语言模型中看到的准确性问题。医生们发现Google的Med-PaLM和Med-PalM 2提供的答案,与其他医生相比,有更多的不准确性和无关紧要的信息。
尽管如此,在几乎所有其他的指标上,如显示推理的证据、得到共识的答案,Med-PaLM 2的表现几乎和实际的医生一样好。
《华尔街日报》称,测试Med-PaLM 2的客户将控制他们的数据,这些数据将被加密,Google无法访问。
根据Google高级研究总监Greg Corrado的说法,Med-PaLM 2仍处于早期阶段。Corrado说,虽然他不希望它成为自己家庭“医疗保健之旅”的一部分,但他相信Med-PaLM 2“占据了AI在医疗领域的重要位置,并将AI可以发挥的作用扩大了10倍”。
好文章,需要你的鼓励
从浙江安吉的桌椅,到广东佛山的沙发床垫、河南洛阳的钢制家具,再到福建福州的竹藤制品,中国各大高度专业化的家具产业带,都在不约而同地探索各自的数字化出海路径。
哥伦比亚大学研究团队开发了MathBode动态诊断工具,通过让数学题参数按正弦波变化来测试AI的动态推理能力。研究发现传统静态测试掩盖了AI的重要缺陷:几乎所有模型都表现出低通滤波特征和相位滞后现象,即在处理快速变化时会出现失真和延迟。该方法覆盖五个数学家族的测试,为AI模型选择和部署提供了新的评估维度。
研究人员正探索AI能否预测昏迷患者的医疗意愿,帮助医生做出生死决策。华盛顿大学研究员Ahmad正推进首个AI代理人试点项目,通过分析患者医疗数据预测其偏好。虽然准确率可达三分之二,但专家担心AI无法捕捉患者价值观的复杂性和动态变化。医生强调AI只能作为辅助工具,不应替代人类代理人,因为生死决策依赖具体情境且充满伦理挑战。
这项研究首次发现AI推理模型存在"雪球效应"问题——推理过程中的小错误会逐步放大,导致AI要么给出危险回答,要么过度拒绝正常请求。研究团队提出AdvChain方法,通过训练AI学习"错误-纠正"过程来获得自我纠错能力。实验显示该方法显著提升了AI的安全性和实用性,用1000个样本达到了传统方法15000个样本的效果,为AI安全训练开辟了新方向。