火车头采集器怎么采集文章?

所属分类: 软件教程 / 其他工具 阅读数: 1640
收藏 0 赞 0 分享

有时候我们看到一个网站的文章,想要把这些文章保存下来,一篇一篇的复制保存很麻烦,这个时候就需要用到火车头采集器把文章采集下来保存了。下面介绍一下如何用火车头采集器采集文章。

第一步采集网址,下载好火车头采集器后打开,新建一个任务,任务名随意。把需要采集的网站文章列表页网址添加到起始网址。从图中看出该列表页有34页,每页有N篇文章。

列表页会一级网址,添加多级网址获取,从而获取二级网址(文章页网址)

设置列表分页获取,3个地方分别是:分页源代码前面和后面还有中间位置。这一步用于获取列表页面链接,因为有34个列表页面。设置完保存。

网址获取选项,这一步用于获取列表页上面文章页的链接,根据自己需要设置需要截取的部分和根据网址的结构设置包含与不包含某些字符。为空即没限制,设置完保存。

设置好链接采集规则后,可以测试网址,看测试结果调整规则。看图可以看到采集链接规则从起始链接到全面列表页再到列表页上的文章页链接都已经成功采集。

第二步是采集内容,首先修改标题规则,在页面源代码里面找到标题的代码,把标题前后代码负责过去截取出标题。保存。

修改内容采集规则,跟标题规则差不多,也是源代码里面找到内容的前后代码。这里内容会有一些其他html标签,所以得添加一个html标签排除的规则。

完成后,测试看一下结果,从测试结果来调试规则,直到测试结果是自己想要的内容为止。

第三步是采集导出。前面1、2两步把规则设置好,最后就要把文章导出了。先做一个导出的模版。

然后选择方式二,把每一篇文章都分别记录到一个txt文本,保存位置自己选择,模板选择刚刚做好的导出模版.保存的文件名用文章标题为命名。其他默认,保存。

把采集网址,采集内容,发布3个选项框都勾选,然后开始采集。完成后文本就自动生成在刚刚保存的文件夹里面了。

火车头采集器采集文章教程到此就完成了,由于每个网站都是不一样的,所以这里只能用一个网站演示,只是一个方法思路,自己采集文章还需要灵活变通。

更多精彩内容其他人还在看

UG钣金模块怎么制作合叶模型?

UG钣金模块怎么制作合叶模型?UG中绘制零件很方便,该怎么绘制合叶模型呢?下面我们就来看看UG使用钣金模块制作合叶模型的详细图文教程,需要的朋友可以参考下
收藏 0 赞 0 分享

UG模型中的文字无法拉伸该怎么办?

UG模型中的文字无法拉伸该怎么办?在拉伸模具的时候,发现模型中的文字没有跟着模型变化,拉伸对文字不起作用,该怎么办呢?下面我们就来看看这个问题的解决办法,需要的朋友可以参考下
收藏 0 赞 0 分享

Axure RP 8怎么完成一个登录界面并链接对应功能?

Axure RP 8怎么完成一个登录界面并链接对应功能?我们在做网页的时候,一般都会在Axure中先做原型并实现相应功能,今天我们就来看看Axure RP 8制作登录并链接功能的教程
收藏 0 赞 0 分享

ug怎么装配台虎钳? 虎钳ug建模到装配的教程

ug怎么装配台虎钳?在设计虎钳的时候想看看虎钳部件设计是否合适,以及检查配合部分的干涉问题,该怎么办呢?下面我们就来看看ug建模到装配的教程,需要的朋友可以参考下
收藏 0 赞 0 分享

ansys有限元怎么导入solidworks绘制好的模型?

ansys有限元怎么导入solidworks绘制好的模型?ansys需要使用一些模型软件模型,在solidworks绘制好以后该怎么导入到ansys中呢?下面我们就来看看详细的教程
收藏 0 赞 0 分享

谷歌卫星地图怎么添加标注?

谷歌卫星地图怎么添加标注?想要在地图上标注文字,该怎么标注呢?下面我们就来看看谷歌卫星地图添加标注的详细教程,下面我们就来看看这个问题的解决办法,需要的朋友可以参考下
收藏 0 赞 0 分享

ug中怎么绘制鼠标外壳模型?

ug中怎么绘制鼠标外壳模型?ug可以制作零件模型,今天我们就来看看使用ug绘制鼠标的实例教程,绘制教程很简单,图文很详细,需要的朋友可以参考下
收藏 0 赞 0 分享

Acrobat DC Pro怎么注册 Acrobat DC Pro注册详细图文教程

acrobat pro dc是目前Adobe公司最新发布的全新一代PDF制作软件,很多朋友不知道Acrobat DC Pro怎么注册,今天小编就为大家带来Acrobat DC Pro注册教程,一起看看吧
收藏 0 赞 0 分享

MathType编辑积分符号该怎么编辑?

MathType编辑积分符号该怎么编辑?MathType中可以编辑公式,word经常nag使用它 编辑公式,但是MathType中该怎么输入积分符号呢?下面我们就来看看这个问题的解决办法,需要的朋友可以参考下
收藏 0 赞 0 分享

MathType中怎么编辑箭头上下都添加文字?

MathType中怎么编辑箭头上下都添加文字?MathType中编辑公式很方便,如果想编辑类似于往返的符号,就是做大巴经常能看到双向箭头上下都有往返的路线文字,该怎么编辑呢?请看下文详细介绍
收藏 0 赞 0 分享
查看更多