热点事件观察中
ProtModernBERT发布:计算高效的蛋白质语言模型
1 篇报道1 个报道来源1 天前更新
先了解这件事
事件综述
2026年10月14日,AI×生物医药领域发布了ProtModernBERT,这是一款采用现代化BERT架构的蛋白质语言模型。其在二级结构预测、无序预测、亚细胞定位及ProteinGym零样本功能基准上,匹配或接近Amplify-120M与ProtBert的表现,同时预训练FLOPs降低80–90%。在控制预训练条件后,该模型与ESM2的性能差距收窄。研究还指出,在低算力场景下,现代架构组件带来的归纳偏置对性能的影响超过单纯提升参数量。
由模型根据报道生成 · 2 小时前更新
最新进展10月14日 20:00
ProtModernBERT以80–90%更低的预训练FLOPs匹配或接近Amplify-120M等模型表现。报道时间线
沿着报道,了解事件的不同侧面。
10月14日
- AI × 生物医药ProtModernBERT:计算高效的蛋白质语言模型
ProtModernBERT 是一款现代化 BERT 架构的蛋白质语言模型,在二级结构预测、无序预测、亚细胞定位及 ProteinGym 零样本功能基准上匹配或接近 Amplify-120M 与 ProtBert 的表现,预训练 FLOPs 降低 80–90%,控制预训练条件后与 ESM2 的差距收窄。在低算力场景下,现代架构组件带来的归纳偏置对性能的影响超过单纯提升参数量。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。