清华系细胞大模型登Nature子刊!能对人类2万基因同时建模,代码已开源

来自清华、百图生科的团队提出的单细胞基础大模型scFoundation,登上Nature Methods。

清华系细胞大模型登Nature子刊!能对人类2万基因同时建模,代码已开源
该模型基于5000万人类单细胞测序的数据进行训练,拥有1亿参数,能够同时处理约20000个基因。

团队在模型架构上进行了创新,相同参数量下计算时间是传统Transformer架构的3%左右。相关研究成果也被NeurIPS2024接收。

量子位

关注频道 @ZaiHuaPd
频道爆料 @ZaiHuabot
来自频道: @zaihuapd
Loading comments...