Pipet 是一个命令行式的网页抓取与数据提取工具,被称为“黑客的瑞士军刀”。
它可以从任意在线资源中高效提取信息,支持 HTML 解析、JSON 解析 和 客户端 JavaScript 执行 三种模式。
通过与 curl、UNIX 管道 等工具的结合,Pipet 实现了强大的可扩展性与自动化能力。
⸻
🚀 核心特点
• 三种解析模式:支持 HTML、JSON 及动态 JavaScript 内容提取。
• 命令行驱动:完全基于 CLI,可轻松整合进自动化脚本或管道流程。
• 灵活可扩展:依托 Unix pipes,可与其他工具无缝组合,构建复杂的数据流。
• 实时监控能力:可用于追踪航运、监控股票价格、票务动态、新闻变更等在线信息。
• 模板输出:支持自定义格式输出,包括 JSON、模板渲染与变化检测。
⸻
💡 一句话总结
Pipet 是信息捕手的秘密武器 —— 从网页到终端,只需一行命令。
上篇:
Kottster:即开即用的 Node.js 后台管理面板
下篇:
Open Agent Builder 是一个由 Firecrawl 驱动的可视化工作流构建器
1 presentation AI:输入一句话, AI 自动为你生成美观的 PPT 2 Scraperr 是一款 自托管的网页爬取工具 3 Pipet:为黑客而生的多功能数据抓取工具 4 Kottster:即开即用的 Node.js 后台管理面板 5 Fireplexity — 极速 AI 搜索引擎 6 Vizro - 数据可视化,低代码 Python 工具包 7 VoltAgent - 脚本人工智能代理框架 8 Ghost CMS - 极致内容体验的全能引擎 9 Maxun:开源无代码网页数据采集平台,让网站秒变 API 和表格! 10 Suna - 通用 AI 智能体 11 FastAPI-MCP - 将FastAPI应用轻松转型为MCP服务器 12 morphik - 开源多模态RAG