AI 스크래핑 에이전트
템플릿 개요
| 항목 | 설명 |
|---|---|
| 분류 | 🤖 AI · 📄 데이터采集 |
| 통합 앱 | OpenAI、HTTP Request、Code |
| 난이도 | ⭐⭐⭐ 高级 |
| 제작자 | n8n 공식 팀 |
작동 원리
这个工作流创建了一个能够自主爬取网页的 AI 代理。你只需给它一个 URL,它就能자동抓取页面콘텐츠、분석结构、추출关键信息,并以结构化的格式返回결과。
핵심 기능
- 스마트爬取 — AI 自主决定爬取策略和데이터추출方式
- 结构化输出 — 자동将网页信息整理为表格或 JSON
- 多页面支持 — 可以자동跟踪链接、爬取多个页面
- 错误容错 — 内置重试和错误처리机制
워크플로 노드
Manual Chat Trigger → AI Agent
├── OpenAI Chat Model
├── HTTP Request Tool (爬取网页)
├── Code Tool (파싱 HTML)
└── Memory Buffer
사용 단계
- 템플릿 가져오기 — n8n에서 이 워크플로를 가져오기
- 설정 OpenAI — 추가 OpenAI API Key
- 시작대화 — 告诉 Agent 你想爬取什么
- 获取결과 — AI 자동完成爬取并返回结构化데이터
활용 시나리오
- 🔍 竞品价格监控
- 📊 市场데이터采集
- 📧 联系人信息收集
- 🏷️ 产品信息聚合