Maxun：开源无代码网页数据采集平台，让网站秒变 API 和表格！
0 次
ihunter 
2025/04 只需 2 分钟，训练一个自动化机器人，开启网页数据的“自动驾驶”模式！
核心亮点
• 零代码操作：无需写代码，拖拽设置即可完成网页爬取
• 支持分页 & 滚动页面：轻松处理列表页、大数据量页面
• 定时运行机器人：设定时间自动运行，无需手动干预
• 自动适配网页结构变动（即将上线）
• 支持登录后抓取 & 二次验证网站（即将上线）
• 一键导出为 API 接口 / Excel / Google 表格
• 集成第三方平台（如 Google Sheet，更多即将上线）
使用场景举例
• 市场分析：自动抓取竞争对手产品信息、价格、评论等
• 招聘数据采集：批量收集职位、薪资、公司信息
• 舆情监测：定期抓取新闻网站、论坛、社交平台内容
• 教育科研：获取研究数据或教学资源
• SEO / 内容管理：批量导出网页结构信息，辅助内容优化
本地运行：
需安装 Node.js、PostgreSQL、Redis、MinIO
支持本地部署与自定义开发
机器人能做什么？
• 抓取列表数据：例如商品、文章、职位列表等
• 抓取文本信息：网页中的具体字段、文字内容
• 截屏功能：支持整页或可见部分截图
并支持 BYOP（Bring Your Own Proxy），突破反爬限制。
上篇：
Ghost CMS - 极致内容体验的全能引擎
下篇：
没有了
IT博客索引
AI软件索引
猜你喜欢
AI软件
热门
焦点
视点
头条