火车采集器程序结构中的开始菜单介绍

火车采集器程序结构中的开始菜单介绍

  1.新建分组

  新建一个任务分组,选择所属分组,确定分组名称和备注。

  2.新建任务

  确定所属分组,新建一个任务,填写任务名称并保存。

  3.Web发布配置

  Web发布配置定义了如何登陆一个网站以及向该网站提交数据。

  主要涉及到登录信息的获取,网站编码设定,栏目列表的获取,以及使用数据测试发布效果。

  详细教程后续分解。



  4.Web发布模块

  可以定义网站登录,获取栏目列表,获取网页随机值,内容发布参数,以及上传文件,构造发布数据等高级功能。

  详细教程后续分解。



  5.数据库发布配置

  数据库发布配置定义了数据库链接信息的设置以及数据库模块的选择。

  详细教程后续分解。

  6.数据库发布模块

  用于编辑数据库的发布模块,方便我们将数据发布到配置好的数据库中。

  火车采集器可选mysql、sqlserver、oracle、access四种数据库类型,在文本输入框中填写sql语句

  (需有数据库相关知识),并可使用标签替换相应数据。也可在采集器模块文件夹中加载某一模块进行编辑。

  详细教程后续分解。



  7.计划任务

  设置列表中采集任务的启动计划,可每间隔、每天、每周、仅一次、或自定义Cron表达式,

  (Cron表达式的写法可参考相关术语中的介绍)。保存设置后,任务即可按照设置执行。

  详细教程后续分解。



  8.插件管理

  插件是可以用来扩展火车采集器功能的程序

  火车采集器V9支持PHP源码、C#源码、C#类库三种类型的插件,

  可用于扩展http请求、内容处理和文件下载的功能,并可以分别进行测试。

  详细教程后续分解。

  9.http二级代理

  网络中的代理服务器,可以代理网络用户去取得所需要的网络信息。

  代理的功能有可以突破自身ip的访问限制访问国外站点,访问一些单位或团体内部资源,

  突破电信的ip封锁和隐藏真实的ip等。

  火车采集器V9支持http代理、socket4和socket5代理。

  详细教程后续分解。



  10.http模拟请求

  可以设置如何发起一个http请求,包括设置请求信息,返回头信息。并具有自动提交的功能。

  详细教程后续分解。

(0)

相关推荐

  • 什么是火车采集器?

    什么是火车采集器? 火车采集器是一款专业的互联网数据抓取.处理.分析,挖掘软件, 可以灵活迅速地抓取网页中大量非结构化的文本,图片等资源信息, 然后通过一系列的分析处理,准确挖掘出所需数据. 并可以选 ...

  • 火车采集器的相关术语介绍

    火车采集器的相关术语介绍 1.采集任务 采集任务是火车采集器中对于数据采集和数据发布任务的完整配置,包含采集规则和发布模块. 2.采集规则 即我们对如何采集和采集什么的问题给出一些设置让采集器按照设置 ...

  • 火车采集器的学习建议

    火车采集器的学习建议 火车采集器是一个非常专业的数据抓取和数据处理软件,对软件使用者有较高的技术要求, 使用者要有基本的HTML基础,能看得懂网页源码,网页结构. 同时如果用到web发布或数据库发布, ...

  • 火车头采集器无法使用的解决方法

    今早接很多会员反馈,昨天360自动将系统打了补丁以后V2009SP4版软件不可以打开. 经测试,是因为10月13号微软发布了.net的补丁,360安全卫士等程序在10月14号都自动升级了这补丁。 因为 ...

  • 使用网站采集器的建议

    此文将分析网站使用采集器的利弊,以及目前国内各采集器的对比.希望能对新手朋友能有一个帮助. 操作方法 01 采集就是把别人网站上的内容给弄到自己的网站上去.你可以手工复制与粘贴把内容发布到网站,也可以 ...

  • 冰糖自媒体图文素材采集器如何使用? 冰糖自媒体图文素材采集器安装使用教程

    冰糖自媒体图文素材采集器是一款能批量采集指定网站上的图片文件,以及网页内文字等资源素材的免费小工具.如果恰好你是做自媒体的,那么这款软件能帮助你采集图片及文章等素材哦.,就算网页不允许复制也能抓取,当 ...

  • 火车头采集器升级到V8.3版本的方法和注意事项

    一、V7、V8(8.3以下)升级到V8.3的方法 1.自动升级 正常情况下,您使用安装程序,将8.3安装在原旧版本采集器下,软件会自动升级到8.3. 2.手动升级 1.先安装一个新版本 2.用旧版的C ...

  • 爱站关键词采集器怎么用?

    爱站关键词采集器软件是一款可以快速采集爱站关键词的采集软件.做站的站长都知道,关键词是一个网站的重点,平时需要关键词都是挖掘百度底部关键词,挖来的关键词虽然很多但是80%的词都是不相关的,而在爱站查看 ...

  • 新浪微博数据采集:八爪鱼采集器图文攻略

    操作方法 01 随着大数据和社交网络的火爆发展,社交网络上产生的数据也越来越有价值,特别是微博微信作为时下最火热的社交平台,如果能对这两个平台上的数据进行深入分析挖掘,那么价值将非常巨大,但是如果要开 ...