logo

澎湃新闻栏目新闻采集

输入澎湃新闻栏目页链接,采集栏目内新闻的标题、正文、来源与互动数据

发布者
SpiderByte
价格
¥0.001 / 条
最近更新
2026-09-09

概览

想知道澎湃新闻某个栏目最近在报道什么?给它一个栏目页链接,它会取回该栏目下的新闻列表,每条带标题、正文、来源和互动数据,可以直接导出做新闻跟踪或舆情分析。

比起在栏目页反复滚动逐条翻看,它把整页新闻一次拉全,正文、点赞评论数与来源都保留在结果里,适合当作新闻监控与互动分析的原始数据底表。

数据说明

新闻取自澎湃新闻(thepaper.cn)公开栏目页,只覆盖页面当前展示的新闻条目。正文为页面展示的正文内容,个别新闻可能因页面限制返回部分内容;点赞数、评论数为采集当时页面展示的值,随时间变化;来源子栏目与栏目为该条新闻在页面上的归类信息。结果按页面展示顺序返回,不做去重与排序。

结果长什么样

每条记录是一条新闻:

标题来源子栏目发布时间评论数
多地推进城市更新行动时政2026-09-09 10:05268
县域经济激活消费新场景财经2026-09-09 09:30152

应用场景

  • 做新闻监控时,按「标题」梳理栏目近期报道,结合「发布时间」把握更新节奏。
  • 做互动观察时,用「点赞数」「评论数」排序找出讨论热烈的话题。
  • 做内容盘点时,按「来源子栏目」「栏目」归类,了解不同栏目的报道构成。

适用边界

单次任务对一个栏目页链接采集新闻列表,条数上限默认 3 条、可上调(越大耗时与费用越高);仅覆盖页面当前展示的新闻。

  • 适合用于
  • 需要澎湃新闻某个栏目的新闻列表(标题、正文、来源、点赞评论数)时
  • 想一次拿回栏目整页新闻、而不是手动翻看时
  • 不要用于
  • 需要按关键词检索历史新闻时——本 App 只采集指定栏目页当前内容
  • 需要非澎湃新闻来源或跨平台数据时——本 App 只覆盖单一数据源

失败处理

开发者声明的失败与重试处理方式,接入时建议一并写进系统提示词。

  1. 1任务数据为异步获取:参数较大或数据量较大时,获取会耗时较长、结果无法及时返回,请耐心等待抓取完成
  2. 2任务状态显示「运行中」表示仍在抓取数据,并不是异常,请不要重复提交相同任务
  3. 3任务失败属可重试错误,可原样重新提交

输入参数

调用本 App 需要传入的参数,与 manifest.json 的 input.schema 同源。

  • 栏目网址column_url必填string
    要采集的澎湃新闻栏目页链接,形如 https://www.thepaper.cn/channel_25951。一次任务填写一个栏目网址
    示例https://www.thepaper.cn/channel_25951
  • 滚动次数scroll_times必填integer
    页面向下滚动加载的次数,滚动越多能加载的新闻越多。不填默认 1 次。数值越大耗时和费用越高
    范围1–100默认值1
  • 采集条数上限max_collected_rows选填integer
    本次任务采集的记录条数上限,默认 3 条。数值越大耗时和费用越高
    范围1–20000默认值3

输出数据

单条记录的字段结构,与 manifest.json 的 output.schema 同源。

  • 主编editorstring
    新闻主编
  • 发布时间publish_timestring
    新闻发布时间
  • 来源子栏目sub_columnstring
    新闻所属的子栏目
  • 来源子栏目链接sub_column_urlstring
    来源子栏目的列表页链接

调用方式

本 App 支持通过 MCP、API、SDK 与文件导出方式接入,各接入方式共享同一套能力与计价。所有请求统一使用 Authorization: Bearer 请求头完成身份认证,凭证为 API Key(长期有效,在开放平台创建);MCP 客户端另支持 OAuth 免密钥登录。CLI、Skill 等更多接入方式正在规划中。本 App 异步运行,支持中途取消:取消后任务停止;已写回的部分保留,按写回计费。

通过 MCP(Model Context Protocol)协议,可在 Claude、Cursor 等 AI 客户端中直接调用本 App。选择你的客户端与认证方式,复制下方配置即可接入。

客户端配置

把 Bearer 后替换为长期有效的 API Key 即可,各类客户端与 CI、无浏览器环境通用。

mcpServers 配置
{
  "mcpServers": {
    "bazhuayu_datahub": {
      "type": "http",
      "url": "https://mcp-v2.bazhuayu.com?pin=SpiderByte/thepaper-news",
      "headers": { "Authorization": "Bearer <YOUR_API_KEY>" }
    }
  }
}

让 AI 自己完成配置

不想手动改配置?复制配置提示词,粘贴到任意 AI 客户端对话框,由它按自身方式完成接入(提示词会让 AI 向你索要 API Key,避免凭证留在对话记录或共享配置里)。

如需在同一个 MCP 连接里指定多个 App,前往 MCP 连接页(已为你指定本 App)。

价格

返回一条新闻记录

按实际成功返回的数据条数计费,任务失败不计费。

¥0.001/ 条

多个计费事件按各自口径独立累计,具体以每一项说明为准;任务失败不计费。

立即体验

填写参数直接运行,结果来自真实调用。

示例
参数按 input.schema 校验后提交
¥0.001 / 条