微软近日发布了一组用于训练BitNet风格模型的GPU加速内核。这些模型在准确度上没有明显下降的情况下,大大降低了内存消耗。BitNet风格模型是一种新型的深度学习模型,它的特点是使用1.58位的数据表示方法,比传统的3...
Read More微软近日开源了一种名为EvoDiff的新型人工智能模型。该公司声称,只需给定一个蛋白质序列,这种AI模型就能生成高保真度、多样性的蛋白质。EvoDiff模型标志着人工智能技术在生物信息学领域的重大突破和应用。微软通过...
Read More近日,一款名为「BatteryML」的开源工具包在技术圈内引起了广泛的关注。该工具包主要用于电池退化方面的研究,包括数据集、特征工程工具,以及一个模型库。它提供了一种全新的方式来研究和理解电池退化的过程,为电...
Read MoreDeepSpeed是微软推出的一个库,可以用来扩大语言模型的预训练。虽然使用起来有些复杂,但它提供了强大的抽象功能。微软最近添加了序列并行性,可以训练具有更长上下文长度的模型。这并不是一个新的突破,而是对开源...
Read More