본문으로 건너뛰기

AI 스크래핑 에이전트

템플릿 개요

항목설명
분류🤖 AI · 📄 데이터采集
통합 앱OpenAI、HTTP Request、Code
난이도⭐⭐⭐ 高级
제작자n8n 공식 팀

작동 원리

这个工作流创建了一个能够自主爬取网页的 AI 代理。你只需给它一个 URL,它就能자동抓取页面콘텐츠、분석结构、추출关键信息,并以结构化的格式返回결과。

핵심 기능

  • 스마트爬取 — AI 自主决定爬取策略和데이터추출方式
  • 结构化输出 — 자동将网页信息整理为表格或 JSON
  • 多页面支持 — 可以자동跟踪链接、爬取多个页面
  • 错误容错 — 内置重试和错误처리机制

워크플로 노드

Manual Chat Trigger → AI Agent
├── OpenAI Chat Model
├── HTTP Request Tool (爬取网页)
├── Code Tool (파싱 HTML)
└── Memory Buffer

사용 단계

  1. 템플릿 가져오기 — n8n에서 이 워크플로를 가져오기
  2. 설정 OpenAI — 추가 OpenAI API Key
  3. 시작대화 — 告诉 Agent 你想爬取什么
  4. 获取결과 — AI 자동完成爬取并返回结构化데이터

활용 시나리오

  • 🔍 竞品价格监控
  • 📊 市场데이터采集
  • 📧 联系人信息收集
  • 🏷️ 产品信息聚合

관련 문서


👉 n8n에서 이 템플릿 가져오기