火车头采集器怎么采集文章?

所属分类: 软件教程 / 其他工具 阅读数: 1637
收藏 0 赞 0 分享

有时候我们看到一个网站的文章,想要把这些文章保存下来,一篇一篇的复制保存很麻烦,这个时候就需要用到火车头采集器把文章采集下来保存了。下面介绍一下如何用火车头采集器采集文章。

第一步采集网址,下载好火车头采集器后打开,新建一个任务,任务名随意。把需要采集的网站文章列表页网址添加到起始网址。从图中看出该列表页有34页,每页有N篇文章。

列表页会一级网址,添加多级网址获取,从而获取二级网址(文章页网址)

设置列表分页获取,3个地方分别是:分页源代码前面和后面还有中间位置。这一步用于获取列表页面链接,因为有34个列表页面。设置完保存。

网址获取选项,这一步用于获取列表页上面文章页的链接,根据自己需要设置需要截取的部分和根据网址的结构设置包含与不包含某些字符。为空即没限制,设置完保存。

设置好链接采集规则后,可以测试网址,看测试结果调整规则。看图可以看到采集链接规则从起始链接到全面列表页再到列表页上的文章页链接都已经成功采集。

第二步是采集内容,首先修改标题规则,在页面源代码里面找到标题的代码,把标题前后代码负责过去截取出标题。保存。

修改内容采集规则,跟标题规则差不多,也是源代码里面找到内容的前后代码。这里内容会有一些其他html标签,所以得添加一个html标签排除的规则。

完成后,测试看一下结果,从测试结果来调试规则,直到测试结果是自己想要的内容为止。

第三步是采集导出。前面1、2两步把规则设置好,最后就要把文章导出了。先做一个导出的模版。

然后选择方式二,把每一篇文章都分别记录到一个txt文本,保存位置自己选择,模板选择刚刚做好的导出模版.保存的文件名用文章标题为命名。其他默认,保存。

把采集网址,采集内容,发布3个选项框都勾选,然后开始采集。完成后文本就自动生成在刚刚保存的文件夹里面了。

火车头采集器采集文章教程到此就完成了,由于每个网站都是不一样的,所以这里只能用一个网站演示,只是一个方法思路,自己采集文章还需要灵活变通。

更多精彩内容其他人还在看

UG怎么进入退出草图?

UG怎么进入退出草图?UG绘制零件图纸很简单,该怎么进入图纸he退出图纸呢?下面我们就来看看详细的教程,需要的朋友可以参考下
收藏 0 赞 0 分享

石青分类信息群发工具怎么使用?石青分类信息群发工具图文使用教程

石青分类信息群发工具怎么使用呢?初次使用石青分类信息群发工具的用户可能不知道怎么使用,下面小编就为大家具体的讲解石青分类信息群发工具的使用方法,快来试试吧
收藏 0 赞 0 分享

UG怎么设置草图尺寸? UG草图尺寸的编辑方法

UG怎么设置草图尺寸?ug绘制零件图纸的时候,首先需要知道该怎么设置草图尺寸,这是基础知识,下面我们就来看看UG草图尺寸的编辑方法,需要的朋友可以参考下
收藏 0 赞 0 分享

XShow图文编辑软件怎么使用?XShow图文使用教程

XShow图文编辑软件怎么使用呢?XShow是一款专为卡乐led显示屏打造的控制软件,下面小编就为大家具体的讲解XShow图文编辑软件的使用方法
收藏 0 赞 0 分享

BarTender条码打印怎么设置条码随文本数据的变化?

BarTender条码打印怎么设置条码随文本数据的变化?BarTender中想要让条码随文本数据的变化而产生变化,该怎么设置呢?下面我们就来看看详细的教程,需要的朋友可以参考下
收藏 0 赞 0 分享

UG NX怎么画渐开线?

UG NX怎么画渐开线?ug中绘制零件图纸的时候,经常想要使用渐开线,今天我们就来看看渐开线的使用方法,需要的朋友可以参考下
收藏 0 赞 0 分享

UG NX怎么绘制正弦规律曲线?

UG NX怎么绘制正弦规律曲线?在解数学题的时候我们经常能见正弦曲线,但是想使用ug绘制正弦曲线该怎么绘制呢?下面我们就来看看详细的教程,需要的朋友可以参考下
收藏 0 赞 0 分享

如何使用考拉宝下载优酷网视频?考拉宝图文使用教程

考拉宝怎么使用呢?最近有用户反映不知道如何使用考拉宝下载优酷网的视频,下面小编就为大家具体的讲解如何用考拉宝下载优酷网搞笑视频的方法,需要的用户快来试试吧
收藏 0 赞 0 分享

SWFText简单制作flash动画

做简单Flash动画其实很简单,不会用到专业的制作工具,也不需要你懂得什么制作技术,只需要用到一款名叫SWFText的傻瓜级Flash小工具,下面小编就为大家介绍一下,来看看吧
收藏 0 赞 0 分享

Endnote参考文献管理软件怎么将数据库建到百度云?

Endnote参考文献管理软件怎么将数据库建到百度网盘?搞科研的朋友创作的时候,最重要的资料就是参考文献,怎么将参考文献保存到百度云管家中备份呢?请看下文详细介绍
收藏 0 赞 0 分享
查看更多