SiteMCP:一键抓取整个网站并将其作为MCP服务器运行,轻松实现网站内容的高效管理和调用。
支持高并发抓取,最高可达10倍效率提升;自定义内容选择器,精准提取网页核心内容;灵活匹配特定页面,按需抓取更高效
支持高并发抓取,最高可达10倍效率提升;自定义内容选择器,精准提取网页核心内容;灵活匹配特定页面,按需抓取更高效
llm-min.txt:使用类似于 min.js 的方法对技术文档进行压缩,以便更有效地被大型语言模型(LLM)使用。
压缩率高达90%-97%,将文档精简至10,000 tokens以内;采用机器优化的SKF格式,结构清晰;支持多种输入源,包括PyPI、网页爬取和本地文件
压缩率高达90%-97%,将文档精简至10,000 tokens以内;采用机器优化的SKF格式,结构清晰;支持多种输入源,包括PyPI、网页爬取和本地文件