开源|mdream：一键将网站转换为纯净Markdown与LLMs.txt，提升AI可发现性
talkingdev • 2025-09-15
1902 views
mdream是由开发者harlan-zw推出的开源工具，专注于将任意网站内容高效转换为清洁的Markdown格式及专为大型语言模型（LLM）优化的txt文件。该工具采用定制化HTML到Markdown转换器，不仅生成符合GitHub Flavored Markdown规范的文档，还通过智能优化显著降低token消耗，兼顾人类可读性与AI处理效率。其核心价值在于帮助开发者提升网站在AI搜索中的可发现性，或为LLM项目提供高质量上下文数据，直接应对当前AI驱动开发中数据预处理的关键需求。这一工具的出现反映了开源社区对AI基础设施工具的持续创新，为语义搜索、知识库构建及自动化内容处理提供了轻量级解决方案。
核心要点
- 支持将任意网站转换为优化后的Markdown和LLM专用txt格式
- 采用定制转换器降低token消耗并生成GitHub标准文档
- 旨在提升AI对网站内容的可发现性并为LLM项目提供上下文支持