在大型语言模型(LLM)时代,推荐与搜索系统正经历从传统物品ID到丰富'语义ID'(Semantic IDs)的重大转型。这一变革引入了生成式检索和多模态嵌入技术,显著提升了系统处理冷启动覆盖、长尾内容发现的能力,并实现...
Read MoreSakana AI研究团队开发出一项突破性技术——Text-to-LoRa(T2L)系统,该系统仅需文本描述即可即时定制大型语言模型,无需传统方法所需的训练数据或耗时微调过程。该技术的核心创新在于将数百个LoRA适配器(一种高效轻...
Read MoreKV(键值)缓存是大型语言模型(LLM)推理过程中的关键技术,通过存储注意力计算的中间结果显著提升生成效率。以逐词生成"Time flies fast"为例,传统方式需在每个步骤重复计算"Time"和"flies"的注意力权重,而采用K...
Read MoreNanonets-OCR-s是一款前沿的图像转Markdown OCR模型,其能力远超传统文本提取技术。该模型通过智能内容识别和语义标记,能够将文档转化为结构化的Markdown格式。它不仅理解文档结构和内容上下文,还能输出智能格式化...
Read More开源情报研究团队近期对20个AI模型进行了500次地理定位挑战测试,采用未公开的旅行照片以防止模型依赖记忆数据。测试结果显示,OpenAI最新模型通过交叉参照建筑风格、植被特征及局部可见文本,表现超越Google Lens等...
Read More斯坦福大学研究团队提出突破性框架SEAL(Self-Adapting LLMs),首次实现大型语言模型的自主适应性进化。传统LLM虽功能强大但参数固化,SEAL通过生成自我微调数据和更新指令,使模型能根据新任务、知识或案例动态调...
Read MoreHoneycomb.io最新博文指出,过去十年间可观测性工具的发展始终围绕一个简单概念展开,但大型语言模型(LLM)的出现彻底颠覆了这一范式。文章引发技术社区广泛讨论,在Hacker News获得131个点赞和58条深度评论。专家...
Read MoreTokasaurus是一款针对高吞吐量工作负载优化的大型语言模型(LLM)推理引擎,由斯坦福大学Scaling Intelligence团队研发。该引擎通过创新的架构设计和算法优化,显著提升了LLM在批量处理任务时的计算效率,为需要大规...
Read More