火车头采集器怎么采集文章?

所属分类: 软件教程 / 其他工具 阅读数: 1654
收藏 0 赞 0 分享

有时候我们看到一个网站的文章,想要把这些文章保存下来,一篇一篇的复制保存很麻烦,这个时候就需要用到火车头采集器把文章采集下来保存了。下面介绍一下如何用火车头采集器采集文章。

第一步采集网址,下载好火车头采集器后打开,新建一个任务,任务名随意。把需要采集的网站文章列表页网址添加到起始网址。从图中看出该列表页有34页,每页有N篇文章。

列表页会一级网址,添加多级网址获取,从而获取二级网址(文章页网址)

设置列表分页获取,3个地方分别是:分页源代码前面和后面还有中间位置。这一步用于获取列表页面链接,因为有34个列表页面。设置完保存。

网址获取选项,这一步用于获取列表页上面文章页的链接,根据自己需要设置需要截取的部分和根据网址的结构设置包含与不包含某些字符。为空即没限制,设置完保存。

设置好链接采集规则后,可以测试网址,看测试结果调整规则。看图可以看到采集链接规则从起始链接到全面列表页再到列表页上的文章页链接都已经成功采集。

第二步是采集内容,首先修改标题规则,在页面源代码里面找到标题的代码,把标题前后代码负责过去截取出标题。保存。

修改内容采集规则,跟标题规则差不多,也是源代码里面找到内容的前后代码。这里内容会有一些其他html标签,所以得添加一个html标签排除的规则。

完成后,测试看一下结果,从测试结果来调试规则,直到测试结果是自己想要的内容为止。

第三步是采集导出。前面1、2两步把规则设置好,最后就要把文章导出了。先做一个导出的模版。

然后选择方式二,把每一篇文章都分别记录到一个txt文本,保存位置自己选择,模板选择刚刚做好的导出模版.保存的文件名用文章标题为命名。其他默认,保存。

把采集网址,采集内容,发布3个选项框都勾选,然后开始采集。完成后文本就自动生成在刚刚保存的文件夹里面了。

火车头采集器采集文章教程到此就完成了,由于每个网站都是不一样的,所以这里只能用一个网站演示,只是一个方法思路,自己采集文章还需要灵活变通。

更多精彩内容其他人还在看

steam提示开始游戏失败,平台无效怎么办?解决steam平台无效的方法

有朋友在steam上玩游戏时提示开始游戏失败,平台无效怎么办?今天小编给大家带来解决steam平台无效的方法,需要的朋友可以参考下
收藏 0 赞 0 分享

UG怎么使用边倒圆角命令?

UG怎么使用边倒圆角命令?ug中想要将长方体边角做成倒圆角的效果,该怎么制作呢?下面我们就来看看详细的教程,很简单,需要的朋友可以参考下
收藏 0 赞 0 分享

逍遥安卓模拟器怎么定位 逍遥安卓模拟器模拟定位方法

逍遥安卓模拟器是一款功能非常强大的安卓模拟软件,能够让你在电脑上玩安卓平台上的游戏,我们在玩手游通常都会用到定位服务,有的用户就问逍遥安卓模拟器怎么定位,今天脚本之家小编带来逍遥安卓模拟器模拟定位方法,希望对大家有所帮助
收藏 0 赞 0 分享

逍遥安卓模拟器怎么删除下载程序 逍遥安卓模拟器卸载应用教程

逍遥安卓模拟器是一款功能非常强大的安卓模拟软件,能够让你在电脑上玩安卓平台上的游戏,在逍遥安卓模拟器的使用过程中,想将那些不太常用的应用删除,却找不到相应的删除方法,那么逍遥安卓模拟器怎么删除下载程序?今天脚本之家小编带来逍遥安卓模拟器卸载应用教程
收藏 0 赞 0 分享

雷电模拟器怎么设置王者荣耀键位 雷电模拟器设置王者荣耀按键方法

雷电模拟器是可以在电脑上玩手游的软件,可以感受到更大的屏幕、更快的速度和操作体验,雷电模拟器怎么玩王者荣耀?雷电模拟器怎么设置王者荣耀键位?相信有很多王者农药的小伙伴都在使用雷电安卓模拟器进行游戏,今天脚本之家小编带来雷电模拟器设置王者荣耀按键方法
收藏 0 赞 0 分享

雷电模拟器怎么录制视频 雷电模拟器视频录制方法介绍

雷电模拟器是可以在电脑上玩手游的软件,可以感受到更大的屏幕、更快的速度和操作体验,那么雷电模拟器怎么录视频?有很多小伙伴都想要使用雷电安卓模拟器的这个功能,今天脚本之家小编带来雷电模拟器录视频方法介绍,希望对大家有所帮助
收藏 0 赞 0 分享

孩子游戏小号怎么查?腾讯成长守护平台查小号教程

腾讯成长守护平台正式推出查小号功能,帮助家长们快速查询孩子的游戏“小号”,有的家长不清楚怎么查,下面小编给大家带来腾讯成长守护平台查小号详细教程,需要的朋友可以参考下
收藏 0 赞 0 分享

有赞微店怎么打单?有赞微店打印快递单教程

很多朋友不清楚有赞微店怎么打单?下面小编给大家带来有赞微店打印快递单教程,需要的朋友可以参考下
收藏 0 赞 0 分享

有赞店铺怎么绑定微信公众号?有赞绑定微信公众号教程

很多朋友不清楚有赞店铺怎么绑定微信公众号?下面小编给大家带来有赞绑定微信公众号教程,需要的朋友可以参考下
收藏 0 赞 0 分享

MSC Apex Grizzly 2017中文安装及破解详细教程(附破解文件下载)

MSC Apex 2017破解版是一个新一代的CAE平台,为工程师提供了一个全新的仿真过程,利用完全集成的建模工具可对设计模型进行改进,下面就介绍MSC Apex Grizzly 2017最新破解版安装教程,附有下载地址
收藏 0 赞 0 分享
查看更多