标签:火车头

火车头采集之采集规则编写

前言 上一篇火车头采集系列主要给大家一个引导作用,让大家简单了解火车头采集器有什么功能,从次文起将教大家如何编写火车头采集规则。 今天以采集某资源网网站源码为例,其他举一反三。 目标网站分析 1.  网站 url 链接分析 进入目标采集栏目: 此处我进入网站源码栏目,点击下面分页,观察网址总规律。 通过查看网站我总结的规律是: 第二页网址: xxxx……

火车头采集之网站分析

前言 最近在使用火车头采集,在使用过程中还是遇到一些问题,于是想记录下。鉴于网上完整使用火车头采集的文章较少,于是我就想出一个从网站采集使用到数据发布的一系列文章。鉴于本人技术水平有限,难免有误导情况,如有问题欢迎留言讨论。 火车头软件安装 安装教程,我在此就不多做说明了吧,直接下一步下一步安装即可,没有特殊说明。火车头软件官网地址:http://www.l……

火车头采集设置一次可采集资源个数

前言 今天在使用火车头V9 版本采集资源的时候,发现资源每次只能采集 2 两个,首先在网上搜了下, 但是大多数说的都是火车头v7 的,最后按照他们说的 v7 思路找到了。 火车头采集设置方法 1.  双击需要设置的项目 2. 选择内容采集规则---> 其他设置--->更改最大采集数即可。   ……

MIPCMS火车头采集之“500 Internal Server Error”

前言 今天在用火车头采集数据的时候解决了一直困扰我的大问题,我在发布的时候一直提示”500 Internal Server Error“,网上找了很多教程都不行,结果是我自定义的字段的问题。 解决办法 首先进入后台-点击添加字段 2. 选择超长文本,刚开始我全部选的字符串,结果搞成 varchar(255),超过那个长度就会报错,改成超长文本就好了……

MIPCMS如何用火车头采集自定义字段?

前言 1.  最近在用MIPCMS采集一些东西时,需要用火车头采集自定字段,测试了许久都没有结果,于是到论坛搜了下,找到答案了,记下备用 解决方法 进入宝塔后台,选择我们的MIPCMS网站目录,进入MIPCMS火车头接口配置路径: /addons/collectHuochetou/controller/ApiUserCollectHuochetou.php ……