> ## Documentation Index
> Fetch the complete documentation index at: https://www.bazhuayu.com/docs/llms.txt
> Use this file to discover all available pages before exploring further.

# 【新华网】关键词搜索采集

**一、采集场景**

新华网网站：[http://so.news.cn/#search/0/%E6%96%B0%E9%97%BB/1/](http://so.news.cn/#search/0/新闻/1/)，通过批量输入多个关键词检索相关新闻，然后采集新闻的列表页数据，再点击列表标题进入详情页获取新闻正文等字段，最后再翻页采集全部页的数据

 

 

**二、采集字段**

标题、标题链接、标签、时间、关键词、发布时间、来源、正文内容

<img src="https://mintcdn.com/bazhuayu/gZSxCnH5axv07u_a/assets/academy/case-studies/xinhuanet-keyword-search/01-69b92560424e0.png?fit=max&auto=format&n=gZSxCnH5axv07u_a&q=85&s=eaa6f81344d0ba5dd7846d04b200812c" alt="【新华网】关键词搜索采集" width="1264" height="806" data-path="assets/academy/case-studies/xinhuanet-keyword-search/01-69b92560424e0.png" />

 

**三、采集结果**

采集结果可导出为Excel，CSV，HTML，数据库等多种格式。导出为Excel示例：

<img src="https://mintcdn.com/bazhuayu/gZSxCnH5axv07u_a/assets/academy/case-studies/xinhuanet-keyword-search/02-69bbb5b59ec4e.png?fit=max&auto=format&n=gZSxCnH5axv07u_a&q=85&s=4722cb9b9cda167c797810ba478f4058" alt="【新华网】关键词搜索采集" width="1857" height="571" data-path="assets/academy/case-studies/xinhuanet-keyword-search/02-69bbb5b59ec4e.png" />

 

**四、采集步骤**

步骤一：打开网页

步骤二、设置循环输入关键词检索

步骤三、创建【循环列表】提取列表数据

步骤四、点击进入详情提取详情字段

步骤五、修改编辑字段

步骤六、设置循环翻页

步骤七、规则优化

步骤八、保存任务启动采集

 

**以下为具体步骤：**

 

#### 步骤一、打开网页

在首页【输入框】中输入目标网址：[http://so.news.cn/#search/0/%E6%96%B0%E9%97%BB/1/](http://so.news.cn/#search/0/%E6%96%B0%E9%97%BB/1/)   ， 点击【开始采集】，八爪鱼自动打开网页。<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/7d9a32bd5145403720636179243/5d7ulGAvAT0A.mp4" width="100%" />

 

#### 步骤二、设置循环输入关键词检索

打开网页后，通过以下几步，实现批量输入多个关键词

① 选中新闻搜索框，在操作提示框中，点击【输入文本】

②点击操作框的【批量输入文本】，输入要搜索的所有关键词

教育

科技

汽车

创新

③ 选中【搜索】按钮，在操作提示框中，点击【点击一次】，出现关键词的搜索结果，点击确定，及在右侧生成一个循环输入文本的步骤

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/d3c4e1825145403720637559281/1aKL23nuqbcA.mp4" width="100%" />

 

 

#### 步骤三、创建【循环列表】提取列表数据

通过以下步骤，采集所有商品列表中的数据：

1、选中页面上1个新闻列表（注意一定要选中整个列表，包含所有所需字段） 

2、在黄色操作提示框中，点击【选中全部子元素】

3、点击【选择全部相似组】

4、点击【元素中数据内容】\
\
5、创建一个循环列表进行提取列表数据，并且添加输入的关键词作为采集的字段

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/89560dbf5145403720636689032/Pg1traeO4RoA.mp4" width="100%" />

> 说明：如何实现采集列表数据？学习教程 *[03 采集列表数据](/docs/zh/academy/basic-collection/beginner/list-collection)*

 

#### 步骤四、点击进入详情提取详情字段

1、选中页面上1个新闻列表标题，在操作提示框中【点击该链接 】

2、选中页面中的文本，然后在操作提示框中，提取数据【文本内容】，示例中我们提取了正文内容、发布时间、来源等字段

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/3c2241565145403720635653123/yPH3aJaTXDsA.mp4" width="100%" />

 

#### 步骤五、修改编辑字段

依次修改编辑字段名，或调整字段顺序，如下：

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/6fdea4a15145403720717573771/UriTbL6E1ikA.mp4" width="100%" />

#### 步骤六、设置循环翻页

找到并点击页面中的翻页按钮，在自动弹出的【黄色操作提示框】中点击【循环点击】。这样，用翻页按钮创建【循环翻页】的步骤就完成了。可以看到流程图中出现一个【循环翻页】的步骤，这就表明我们已经成功创建好了【循环翻页】，八爪鱼就能自动完成翻页了

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/40db24585145403720720511767/c1Ui6xVpdioA.mp4" width="100%" />

#### 步骤七、规则优化

配置好任务后，为了采集效果更稳定一些，根据页面加载情况，对任务步骤设置等待时间进行优化

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/3c2473bf5145403720635657191/TuMWFhsr6zcA.mp4" width="100%" />

> 说明：规则优化是怎么优化？具体学习教程 *[规则优化](https://www.bazhuayu.com/helpcenter/docs/gui-ze-you-hua-oRYh?search=1)*

 

#### 步骤八、保存任务启动采集

1.配置好任务后，点击【保存】-【启动采集】

 

<video controls src="http://1251101074.vod2.myqcloud.com/fbbb38d8vodcq1251101074/35313ee55145403720720011105/A4kgCtHribgA.mp4" width="100%" />

2、采集完成后，选择合适的导出方式导出数据\
\\

<img src="https://mintcdn.com/bazhuayu/gZSxCnH5axv07u_a/assets/academy/case-studies/xinhuanet-keyword-search/03-69bbb813aafa1.png?fit=max&auto=format&n=gZSxCnH5axv07u_a&q=85&s=d46802ea81071ae93a16c16d8637d696" alt="【新华网】关键词搜索采集" width="593" height="483" data-path="assets/academy/case-studies/xinhuanet-keyword-search/03-69bbb813aafa1.png" />

支持导出为Excel、CSV、HTML、数据库等。这里导出为Excel。数据示例：

<img src="https://mintcdn.com/bazhuayu/gZSxCnH5axv07u_a/assets/academy/case-studies/xinhuanet-keyword-search/04-69bbb59d93e96.png?fit=max&auto=format&n=gZSxCnH5axv07u_a&q=85&s=c1cdcb55155a6539554f3a97b7ec8850" alt="【新华网】关键词搜索采集" width="1857" height="571" data-path="assets/academy/case-studies/xinhuanet-keyword-search/04-69bbb59d93e96.png" />
