零基础上手：Cursor + MCP 爬取 YouTube 视频数据

原创

不叫猫先生

发布于 2025-08-29 13:48:52

2850

前言

大模型与 AI 应用越来越普及的今天，实时、稳定地获取网络数据变得尤为重要。无论是做内容分析、趋势研究还是自动化任务，爬取和处理数据始终是绕不开的一环。

传统爬虫往往面临封禁、验证码、动态渲染等难题，而 Bright Data MCP（Model Context Protocol）为我们提供了一种更高效、更稳定的解决方案。本文将带你从零开始，结合 Cursor + MCP，快速实现对 YouTube 视频数据的爬取。

免费体验地址：Bright Data MCP

(除了免费的MCP以外，此链接注册送25刀，适用所有产品)

准备工作

在使用 MCP 之前，需要做一些准备：

安装 Node.js：确保本地环境具备运行 MCP 的条件。
选择运行模式：Bright Data MCP 提供自我托管和托管两种模式，可根据需求选择。
API 模型：
快速版（Fast API）：每月 5000 个免费额度，支持解锁器、SERP。
PRO 版（Pro API）：功能更强大，支持浏览器 API、抓取器等高级功能。
高级设置：可在 Bright Data 控制台配置 Zone，包括 Web Unlocker Zone 和 Scraping Browser Zone。

Bright Data MCP

在爬取过程中使用 Bright Data MCP，它能帮我们解决爬虫里很多常见的难题：

搜索：可以直接从主流搜索引擎抓取实时结果，还能按地区定向搜索。
爬取：支持整站爬取，并且输出的数据对大模型非常友好。
访问：能自动绕过地理限制、验证码，还能渲染动态页面。
导航：甚至可以模拟真实用户的操作，像点按钮、翻页这些交互都能自动完成。

有了这些功能，爬取 YouTube 视频数据就不再是难事。

爬取结果

最终爬取结果如下：

[

  {

    "title": "AI Agents, Clearly Explained",

    "url": "https://www.youtube.com/watch?v=FwOTs4UxQS4",

    "channel": "Jeff Su"

  },

  {

    "title": "Zero To Your First AI Agent In 26 Minutes (no code)",

    "url": "https://www.youtube.com/watch?v=DV0Ln7HRyJQ",

    "channel": "Tina Huang"

  },

  {

    "title": "AI Agents Fundamentals In 21 Minutes",

    "url": "https://www.youtube.com/watch?v=qU3fmidNbJE",

    "channel": "Tina Huang"

  },

  {

    "title": "How to Build & Sell AI Agents: Ultimate Beginner's Guide",

    "url": "https://www.youtube.com/watch?v=w0H1-b044KY",

    "channel": "Liam Ottley"

  },

  {

    "title": "How to Build an Advanced AI Agent with Search (LangGraph Tutorial)",

    "url": "https://www.youtube.com/watch?v=cUC-hyjpNxk",

    "channel": "Tech With Tim"

  },

  {

    "title": "From Zero to Your First AI Agent in 25 Minutes (No Coding)",

    "url": "https://www.youtube.com/watch?v=EH5jx5qPabU",

    "channel": "Futurepedia"

  },

  {

    "title": "5 Types of AI Agents: Autonomous Functions & Real-World Examples",

    "url": "https://www.youtube.com/watch?v=fXizBc03D7E",

    "channel": "IBM Technology"

  },

  {

    "title": "The AI Agent Tutorial That Should've Been Your First (no code)",

    "url": "https://www.youtube.com/watch?v=GchXMRwuWxE",

    "channel": "Jeff Su"

  },

  {

    "title": "Introduction to ChatGPT agent",

    "url": "https://www.youtube.com/watch?v=1jn\_RpbPbEc",

    "channel": "OpenAI"

  },

  {

    "title": "The Agent Factory - Episode 1: Agents, their frameworks and more",

    "url": "https://www.youtube.com/watch?v=aLYrV61rJG4",

    "channel": "Google Cloud Tech"

  },

  {

    "title": "Introducing Manus: The General AI Agent",

    "url": "https://www.youtube.com/watch?v=K27diMbCsuw",

    "channel": "Manus AI"

  },

  {

    "title": "【生成式AI時代下的機器學習(2025)】第二講：一堂課搞懂AI Agent 的原理",

    "url": "https://www.youtube.com/watch?v=M2Yg1kwPpts",

    "channel": "Hung-yi Lee"

  }

]

原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。

如有侵权，请联系 cloudcommunity@tencent.com 删除。

爬虫