@TeksEdge:全球首个开源 100B 医疗大模型已发布。本地推理者现在可以在家中运行健康模型选项。安...

X AI KOLs Timeline 模型

摘要

浙江省人民医院与蚂蚁集团发布了 AntAngelMed,这是一个拥有 100B 参数的开源医疗大模型,在 MedBench 上排名前列,并支持高效且高隐私保护的本地推理。

全球首个开源 100B 医疗大模型已发布,本地推理者现在可以在家中运行健康模型选项。AntAngelMed(100B 参数,仅 6.1B 激活参数)最近发布,具有以下特点: - 在 MedBench & HealthBench 上超越开源模型 - 在 H20 硬件上达到 200+ tokens/秒的速度 - 支持 128K 的上下文长度 - 在医疗推理、安全性和同理心方面表现出色 - 可本地运行(完全隐私保护) - 仅需 6.1B 激活参数(非常高效) - 可针对医院和研究进行微调 AntAngelMed(100B 医疗大模型)的实际部署选项(均为估算): - 最佳平衡 → INT4(约 50 GB),适用于 2-4 块 GPU(RTX 5090 / 4090) - 最高质量 → FP8(约 100 GB),适用于 DGX Spark 或 Mac Studio 128GB - 预算选项 → INT4(约 50 GB),适用于 2 块 RTX 4090 + CPU 卸载(较慢) - 单块 RTX 5090(32GB)→ 不推荐(模型过大) GGUF 可以进一步减小体积 由浙江省人民医院与蚂蚁集团共同构建。这是开放和隐私友好的医疗 AI 的一大飞跃。
查看原文

相似文章

AntAngelMed - 100a6b 医疗大模型

Reddit r/LocalLLaMA

AntAngelMed 是由浙江省卫生健康信息中心、阿里健康(Ant Healthcare)以及安贞儿医疗 AI(Anzhen'er Medical AI)联合开发并开源的全新 1000 亿参数医疗大模型。该模型采用高效的 MoE(混合专家)架构以实现高性能推理,并在 HealthBench 和 MedAIBench 基准测试中取得了领先排名。

MedGemma:我们最强大的开源健康AI开发模型

Google DeepMind Blog

Google DeepMind 发布了 MedGemma 27B Multimodal 和 MedSigLIP,扩充了其开源 Health AI Developer Foundations,加入了用于医学文本和影像任务的高性能、保护隐私的模型。

LearningCircuit/local-deep-research

GitHub Trending (daily)

一款注重隐私的本地深度研究工具,支持多种大语言模型(LLM)和搜索引擎,在保持数据加密和本地化的同时,在问答任务上实现高精度。

介绍 HealthBench

OpenAI Blog

OpenAI 推出了 HealthBench,这是一个用于评估医疗保健环境中人工智能系统的新基准。该基准由来自 60 个国家的 262 名医生共同创建,包含 5,000 个逼真的健康对话和医生编写的评分标准,用于评估模型在有意义、可信和可改进的指标上的性能。