近日，GitHub上发布了一个专门用于评估AI模型在复杂函数调用方面表现的基准测试工具库。该工具库旨在为研究人员和开发者提供一套全面的测试框架，以衡量不同LLM在处理复杂函数调用时的性能。通过这一工具，用户可以...

LOKI 是一个用于评估视觉语言模型（VLMs）在检测新颖和具有挑战性项目方面表现的合成基准测试工具。该基准测试通过生成复杂的多模态数据，帮助研究人员更好地理解模型在处理未知或复杂场景时的能力。LOKI 的设计旨在...

近日，MTU-Bench作为一种全新的基准测试工具正式发布，旨在评估大型语言模型（LLMs）在不同场景下的工具使用能力。该基准测试通过多样化的任务设计，全面衡量LLMs在实际应用中的表现，特别是在复杂任务中调用外部工...

MailCatcher是一款功能强大的邮件测试工具，它运行了一个超简单的SMTP服务器。用户可以通过这个SMTP服务器发送测试邮件，无需实际发送到接收者的邮箱中。MailCatcher能够捕获并存储发送的邮件内容，方便开发者在开发...

最近，越来越多的消费者开始使用数字工具跟踪商品价格，以便在购物时节省资金。Playwright是一款新兴的自动化测试工具，现在也可以用于跟踪网上超市的价格。 使用Playwright，用户可以编写自动化脚本，以定期检查商...

Maelstrom是一个用于在本地或分布式大型集群中运行测试的工具套件，支持在隔离的微容器中进行测试。目前，它已经提供了针对Rust和Python的测试运行器，并计划陆续增加对更多编程语言的支持。Maelstrom以其高可靠性、...

近日，一款名为Mutahunter的开源LLM基础突变测试工具在GitHub上公开。这款工具是语言无关的，可以广泛应用于自动化软件测试。Mutahunter的核心功能是通过LLM基础的突变测试，帮助开发者在自动化软件测试过程中，找到...

MatText是一套专为评估材料科学中语言模型性能的基准测试工具和数据集。这套工具和数据集的设计目标，是使研究者能够更有效地理解和评估语言模型在材料科学应用中的表现。语言模型在材料科学中的应用，可以帮助科学...