火车头采集器怎么采集文章?

所属分类: 软件教程 / 其他工具 阅读数: 1667
收藏 0 赞 0 分享

有时候我们看到一个网站的文章,想要把这些文章保存下来,一篇一篇的复制保存很麻烦,这个时候就需要用到火车头采集器把文章采集下来保存了。下面介绍一下如何用火车头采集器采集文章。

第一步采集网址,下载好火车头采集器后打开,新建一个任务,任务名随意。把需要采集的网站文章列表页网址添加到起始网址。从图中看出该列表页有34页,每页有N篇文章。

列表页会一级网址,添加多级网址获取,从而获取二级网址(文章页网址)

设置列表分页获取,3个地方分别是:分页源代码前面和后面还有中间位置。这一步用于获取列表页面链接,因为有34个列表页面。设置完保存。

网址获取选项,这一步用于获取列表页上面文章页的链接,根据自己需要设置需要截取的部分和根据网址的结构设置包含与不包含某些字符。为空即没限制,设置完保存。

设置好链接采集规则后,可以测试网址,看测试结果调整规则。看图可以看到采集链接规则从起始链接到全面列表页再到列表页上的文章页链接都已经成功采集。

第二步是采集内容,首先修改标题规则,在页面源代码里面找到标题的代码,把标题前后代码负责过去截取出标题。保存。

修改内容采集规则,跟标题规则差不多,也是源代码里面找到内容的前后代码。这里内容会有一些其他html标签,所以得添加一个html标签排除的规则。

完成后,测试看一下结果,从测试结果来调试规则,直到测试结果是自己想要的内容为止。

第三步是采集导出。前面1、2两步把规则设置好,最后就要把文章导出了。先做一个导出的模版。

然后选择方式二,把每一篇文章都分别记录到一个txt文本,保存位置自己选择,模板选择刚刚做好的导出模版.保存的文件名用文章标题为命名。其他默认,保存。

把采集网址,采集内容,发布3个选项框都勾选,然后开始采集。完成后文本就自动生成在刚刚保存的文件夹里面了。

火车头采集器采集文章教程到此就完成了,由于每个网站都是不一样的,所以这里只能用一个网站演示,只是一个方法思路,自己采集文章还需要灵活变通。

更多精彩内容其他人还在看

极速pdf阅读器是什么?极速PDF阅读器使用图文教程

极速pdf阅读器是一款阅读Pdf文件和转换Pdf文件的工具,用来查看PDF文档的,比如一些电子版的说明书,简单的说,就是,WORD是用来看WORD文件的
收藏 0 赞 0 分享

2016年最好用的网购比价工具 网购比价工具哪个好用

网购已经成为我们生活的一部分,不用在为没有时间逛街,买不到满意的商品而发愁了,网购很方面,万能的淘宝,什么商品都可以买到,甚至是国外的产品。可是如何判断商品的价格,口碑呢?下面小编通过本文给大家介绍2016年最好用的网购比价工具
收藏 0 赞 0 分享

一起作业软件如何pk 一起作业pk竞技场详解

一起作业不仅是一款非常好用的学习类软件,学生还可以在一起作业进行游戏pk,寓教于乐,在游戏中学习,那么一起作业怎么pk,下面小编就给大家带来一起作业pk竞技场详情
收藏 0 赞 0 分享

一起作业软件如何补做作业 一起作业重做补做作业教程

今天小编为大家带来了一起作业软件如何补做作业 一起作业重做补做作业教程,感兴趣的朋友们可以跟着小编去下文了解一下哦
收藏 0 赞 0 分享

一起作业软件打不开怎么办 一起做作业看不到老师布置的作业/测验怎么办

今天小编为大家带来了一起作业软件打不开怎么办 一起做作业看不到老师布置的作业/测验怎么办相关内容的介绍,感兴趣的朋友们可以跟着小编去下文了解一下哦
收藏 0 赞 0 分享

一起作业软件怎么改密码 一起作业密码忘了怎么办

今天小编为大家带来了一起作业软件怎么改密码 一起作业密码忘了怎么办相关内容的介绍,感兴趣的朋友们可以跟着小编去下文了解一下哦
收藏 0 赞 0 分享

猩猩助手怎么安装本地APK应用?猩猩助手安装本地APK应用教程

猩猩助手怎么安装本地APK应用?很多朋友们可能还不知道,下面小编就给大家带来猩猩助手安装本地APK应用教程,希望可以帮助到大家
收藏 0 赞 0 分享

Axure RP Pro 7.0怎么制作图片轮播按钮控制效果?

Axure RP Pro 7.0怎么制作图片轮播按钮控制效果?很多网页中都有一个图片轮播的功能,特别是娱乐和美食,有了图片轮播是最吸引人眼球的,今天我们就教大家使用Axure实现这个功能的教程
收藏 0 赞 0 分享

印象笔记Evernote导出转换为PDF的几种方法

印象笔记Evernote怎么导出文件?在不同的系统导出的方法也不同,今天我们给大家介绍windows系统中导出的一种方法和mac系统中导出的三种方法,需要的朋友可以参考下
收藏 0 赞 0 分享

Remix os pc版怎么样 Remix os 2.0下载地址及安装教程

Remix os pc版于今天正式推出,基于安卓深度定制的桌面系统,为你带来不一样的电脑使用体验,下面来一下Remix系统的特色
收藏 0 赞 0 分享
查看更多