网页有多级页面,蓝天采集器如何采集入库呢,规则怎么写

redmaomail 2024-08-23 12:43 阅读数 99 #建站与主机

红帽云邮外贸主机

如题,蓝天采集器要采集多层级的网页时,例如一些常见的模板站。模板站除了有列表页,详情介绍页,然后还有一个展示演示地址的DEMO页面,而DEMO页面里面又是框架调用了外部的链接。这种情况下如何使用蓝天集体器来采集呢?

其他的设置照常如采集普通网站一样设置,然后到内容起始页的时候我们这样来设置。如图:

首先,加多一个层级:

image.png

然后点开这个层级进行设置他的抓取列表内容。这里抓取的就是我们平时采集时的列表页,抓取有多少篇文章。

image.png


设置好之后,第二步:设置详情页中点击打开的DEMO网址获取地址。也就是详情页中的跳转地址。

image.png


列表设置就设置完了。现在是设置内容页。选择你想要获取的字段,可以从刚才的列表中获取,也可以说跳转后的内容页中获取。

image.png


设置完成,并保存,就可以进入采集发布了。是不是很简单呢?希望对您有所帮助。



红帽云邮外贸主机

分享到:
版权声明:本站内容源自互联网,如有内容侵犯了你的权益,请联系删除相关内容。
    红帽云邮外贸主机
热门
    红帽云邮外贸主机
    红帽云邮外贸主机