一、JSON是什么
json是一种轻量的数据交换格式，由于一些优秀的特性比如比 XML 更小、更快，更易解析和阅读，并有效地提升网络传输效率，而得到广泛使用。二、JSON采集的优点
1、无需加载图片视频等信息，采集速度更快 2、部分网站防采集限制减少，采集更加顺畅三、JSON采集实例
示例网址：https://b2b.baidu.com/ 需求：采集关键词为机械设备的信息地址，包括：公司名、链接、地址等
步骤一、通过火狐浏览器获取JSON网址
JSON网址可以直接通过浏览器控制台获取。 Step1： 选择厂家，按F12或右键选择【使用查看元素】，在浏览器中浏览点击【网络】按钮，点击【XHR】，在输入关键词“机械设备”搜索后，,可以看见很多url。JSON网址一般在XHR下面，但如果XHR查找不到，则点击【全部】。 Step2： 先点开每一个url，查看是否有【JSON】对象查看，有的话则为JSON地址。 这里可能有很多 JSON 网址，因此请再次点击【JSON】，查看里面的参数是否有目标数据，有数据的 JSON 网址找到。 如下图所示，在【XHR】里面有一个JSON网址，里面有目标数据，我们很容易找到正确的JSON网址,然后【复制地址】。 https://b2b.baidu.com/c/a?ajax=1&csrf_token=53edad66312422d6a682dc7d6dd9c2b5&logid=4052523241719793196&fid=0%2C1697774921849&_=1697774960514&q=%E6%9C%BA%E6%A2%B0%E8%AE%BE%E5%A4%87&p=1&s=15&o=0&f=[%7B%22search_location%22:[%22%22]%7D,%7B%22member_type%22:[0]%7D,%7B%22safe_buy%22:[0]%7D] Step3： 所有页面的JSON网址一般需要研究目标网站的翻页规律，进行url循环采集。 在这个网站，我们点击【清除】，先清空网址，然后点击【翻页】到第二页、第三页…用同样的方法找到第二页、第三页…的JSON网址，就可以得到该网站其他页面的JSON网址列表。 该网站的翻页规律为每一页的参数中“p=n”，第一页为1，第二页为2，第3页第为3……此列表可批量生成JSON网址。 https://b2b.baidu.com/c/a?ajax=1&csrf_token=aa404292f14038a12406de70076a8a99&logid=2325547150862217302&fid=0%2C1769513903102&_=1769514631823&q=%E6%9C%BA%E6%A2%B0%E8%AE%BE%E5%A4%87&p=2&s=15&o=0&f=[%7B%22search_location%22:[%22%22]%7D,%7B%22member_type%22:[0]%7D,%7B%22safe_buy%22:[0]%7D,%7B%22topictab%22:[0]%7D,%7B%22local_merchant%22:[0]%7D]https://b2b.baidu.com/c/a?ajax=1&csrf_token=aa404292f14038a12406de70076a8a99&logid=2325547150862217302&fid=0,1769513903102&_=1769514654205&q=机械设备&p=3&s=15&o=0&f=[{“search_location”:[""]},{“member_type”:[0]},{“safe_buy”:[0]},{“topictab”:[0]},{“local_merchant”:[0]}]
步骤二、在八爪鱼中配置流程
step1： 使用八爪鱼批量生成网址的功能，生成多个JSON页面JSON网址。 打开网页后，在打开网页的设置中勾选「JSON」。 （JSON增加了参数，可将JSON网站为接口，要重新的重新理解参数也类似于接口页面中的参数。本站单独重新填写。） 当前浏览器页面展示出树状视图，即JSON数据。 Step2： 如下图所示，示例网站中的数据数据—entList标签里，entList [15]表示有15条数据。 点开列表项标签，再点开第1条数据，可以查看到里面的数据字段，接下来就可以提取数据字段啦。
注意事项： JSON利用JSON路径，详情可查看以下资料 JSONpath介绍：https://www.cnblogs.com/aoyihuashao/p/8665873.html JSONpath在线测试网页：http://JSONpath.com/编辑：FAN、YfY