漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2024-01-20 talkingdev

Mega Dolphin成功合并

Dolphin被广泛认为是可用性最强的未经审查的开放模型之一。它主要建立在Mixtral上。这个120B的模型是通过合并两个较小的Dolphin模型而制成的。研究发现,与Goliath 120B一起使用这种合并过程可以提高整体模型性能。

Read More
2023-12-15 talkingdev

Gemini多模态能力初探

Gemini在各种视觉任务中比许多开放模型表现更好。它在相同任务中似乎与GPT-V竞争力十足。

Read More
2023-12-12 talkingdev

LLM推理速度如何实现100倍提升

随着开放模型在许多企业任务中变得有用,人们开始探索部署优化。然而,这个领域很复杂且分散。本文深入探讨了许多用于加速语言模型服务的标准技术。

Read More
2023-11-30 talkingdev

Roboflow开源适用于多模态模型的提示库

标记提示集是一种聪明的方法,可以显着提高视觉+语言模型的性能。Roboflow的这个库为您提供类似的控制,并使使用这些模型构建强大的视觉管道变得更加容易。它甚至支持像LLaVa这样的开放模型

Read More
2023-08-25 talkingdev

人类反馈改善语言模型:DPO在Llama 2的应用

人类反馈在改善语言模型对齐和整体性能方面扮演着关键角色。然而,使用近端策略优化进行训练的过程中存在一些挑战。最近的研究表明,可以直接针对人类偏好进行优化,从而绕过奖励模型。借助基于文本的强化学习,你可...

Read More
2023-06-07 talkingdev

RedPajama 7B模型完成训练

## 新闻概要: - RedPajama数据集与部分训练模型已于几周前发布。 - 7B模型在3000台V100上刚刚完成训练。 - 经过调整的版本是其规模中最有效的开放模型之一。 - 团队有很多关于持续模型开发的计划。 ## 新闻内容:...

Read More
2023-04-26 talkingdev

HuggingFace Chat(产品)推出

以下是该产品的三个核心要点: - HuggingFace Chat是一款基于30B OpenAssistant Llama模型的聊天应用程序,类似于ChatGPT。 - 尽管速度比竞争对手慢,但由于基于大部分开放模型,它仍然具有相当的能力。 - HuggingF...

Read More
2023-04-20 talkingdev

Stability AI训练了数十亿令牌的HuggingFace语言模型

以下是该新闻的要点: - Stability AI的新款StableLM模型已经训练了大约800B个令牌,目标是达到1.5T个令牌 - StableLM模型有3B和7B个参数,并且具有4k令牌的上下文长度 - StableLM模型是经过允许商业使用的许可证的...

Read More
  1. Prev Page
  2. 2
  3. 3
  4. 4
  5. Next Page