漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2023-07-12 talkingdev

bitsandbytes发布4位推理,实现AI模型精度与速度的突破

AI模型包含许多参数,它们在计算机中以十进制数字的形式表示。这些数字的精度决定了它们的准确度和占用的空间大小。如果将精度从32位降低到16位,将会大幅提高运行速度。现在,我们可以将精度降低到4位,从而在一些...

Read More
2023-05-02 talkingdev

HuggingFace新版本Whisper速度提升70倍

- Whisper现已在Jax上运行,能够在短短几秒钟内转录1小时的音频。 - 该模型本身已经是最强大的语音转文本系统之一,现在加上了惊人的速度,使用起来几乎是不费吹灰之力。 - 尽管仍有缺点,但这是社区取得的卓越成果...

Read More
  1. Prev Page
  2. 3
  3. 4
  4. 5