Felo Web Fetch 是一款专为开发者设计的网页内容提取工具，通过调用 Felo Web Extract API，能够高效地从任意公开网页 URL 中提取结构化文本内容。该工具支持将网页转换为 Markdown、纯文本或原始 HTML 格式，适用于需要快速获取网页核心信息的自动化场景。无论是抓取新闻文章、博客内容还是技术文档，Felo Web Fetch 都能智能识别并提取可读性强的正文部分，显著减少人工筛选和清洗数据的成本。 使用 Felo Web Fetch 无需复杂配置，只需获取 API 密钥并在环境中设置即可开始调用。它提供了两种调用方式：一是通过命令行工具直接执行抓取任务，二是通过 curl 发送 HTTP 请求与 API 交互。命令行支持丰富的参数选项，包括指定目标元素（如 article.main）、启用 readability 模式以过滤广告和导航栏、设置超时时间以及选择输出格式等。此外，API 还支持缓存机制，默认开启以提升响应速度，同时允许关闭缓存以确保获取最新内容。 该工具特别适合集成到内容聚合系统、知识库构建流程或 AI 训练数据准备中。例如，当用户希望将一篇长文转换为简洁的 Markdown 供后续处理时，只需一行命令即可完成；对于动态加载内容的网站，还可结合 wait-for-selector 参数等待特定 DOM 元素渲染后再抓取。整体而言，Felo Web Fetch 是一个轻量、灵活且高可用的网页内容提取解决方案，帮助开发者和内容团队快速实现从互联网获取高质量文本资源的目标。
核心功能特点
- 支持将网页内容转换为 Markdown、纯文本或 HTML 格式
- 可指定 CSS 选择器精准提取页面中的特定区域（如 article.main）
- 内置 readability 算法自动过滤无关内容，保留主文段落
- 提供命令行工具和 curl API 两种调用方式，便于脚本集成
- 支持设置超时时间和等待动态加载元素，适应各类网页结构
- 默认启用结果缓存，提升重复访问效率，也可手动关闭
适用场景
Felo Web Fetch 最典型的应用场景是从新闻网站、博客平台或学术论文页面批量提取正文内容，用于构建内部知识库或进行文本分析。例如，运营团队可以定期抓取行业资讯并自动生成摘要报告，研究人员则能快速收集网络上的公开文献资料作为研究素材。其支持的可读性优化功能尤其适合处理排版复杂的商业网站，自动剔除侧边栏、广告横幅等非核心信息，确保输出内容干净统一。 在开发自动化工作流中，Felo Web Fetch 也表现出色。比如，当需要将外部网页嵌入到自定义应用中展示时，可通过 target_selector 参数仅抓取文章主体部分，并以 Markdown 格式返回，便于前端渲染；若需生成幻灯片或会议纪要，则可配合其他技能（如 felo-slides）将提取的内容转化为结构化演示文稿。此外，对于爬虫项目中的数据预处理阶段，该工具能有效减轻后续解析逻辑的负担，提高整体系统的稳定性和可扩展性。 对于需要实时更新内容的应用场景，开发者可通过调整 timeout 参数应对慢速服务器，并利用 with_cache: false 强制刷新缓存获取最新数据。无论是单次手动查询还是大规模定时抓取任务，Felo Web Fetch 都提供了稳定可靠的接口保障，成为现代 Web 内容处理链条中不可或缺的一环。