标签归档数据采集

Navi.Soft31.任务管理器(定时同步+数据收集)

1系简介

1.1效应简述

于广大之软件分类中,有几好像的软件不是特别重点,但也不行关键。它们多每隔一段时间需要实行有职责之软件,我们给其定时类软件;还有一样种软件是采网页遭到之数码,我们被它收集类软件。

以产品是任务管理器,包括上述2种植软件

一块服务,可以因安排好之时空距离执行任务。可以各隔一段时间,也得以以有时刻接触执行

集服务,可以搜集指定页面的数量,用于深数目解析。可因网址直接采访,也得可视化采集(如:淘宝被自之订单,就是需要报到才会收集)

1.2运行条件

.NET Framework 4.0

1.3应用办法

双击软件图标,打开登录页面,验证成功后弹有要图1-1所出示

图片 1

图1-1

1.4产品亮点

l 定时模块,任务类包括:间隔时间和时间接触

l 采集模块,支持可视化采集与非可视化采集

l 完善的日志模块帮助问题之定势以及缓解

2一块服务

2.1部署并项

图片 2

倘定义好合项,这些共同项可保存至内存中,也堪储存于数据库中。用于定义有哪任务需要定时执行

2.2周转并项

图片 3

如果达到图所示

1,
记录并项的开始与了结时,定时执行次数,还有配备起,如:间隔时间,时间点等

2, 最下的日志用于出口同步项之操作结果

2.3势必时邮件

凡负程序各间隔定时间,向系统管理员发送邮件。以通知管理员系统运行如常

2.4布局集项

凡是采集模块范围,下有些详细描述

3数额搜集

3.1主界面

图片 4

图3-1

若达到图所示

1.
如约产品已经嵌入几单采访模板,如:博客园、糗事百科、淘宝网和1688(需登录后而视化采集)

2.
中选某个采集模板,点击:创建,相当给创造了之模板的一个实例(可同时创造多个)

  1. 重新选中某个实例,点击:开始。实现集数据
3.2创造实例

图片 5

3.3从头搜集

图片 6

如果达到图所示

点击开始后,实现数量收集

3.4采访结果

图片 7

3.5可是视化采集

图片 8

倘若可视化采集,点击:开始之时段,会自动弹来可视化采集页面(注:有的要报到)

3.5.1调试

图片 9

l 取分页数:是因取得有略分页,如下图所示

图片 10

l 采集当页:是指仅采集当前页数据,如下图所示

图片 11

l 下一样页:是凭当前页采集完成后,直接沾:下同样页按钮,实现页面翻转

3.5.2报到帐户

凡凭借登录的款户及密码,可径直复制。当然,需要超前安排好才行

3.5.3采集

征集是依用调试中之计,实现对持有页面的采集。步骤如下

a. 先抱有微分页

b. 循环从第1页开始征集

c. 时页采集成功后,再触发下一页按钮,采集第2页,直至所有页面都集完成

3.6组件化开发

图片 12

无可视化采集,还是未可视化采集。均已经实现组件化开发。如:采集页面就来一个,不同之募集模板,只需要传入不同的参数即可兑现

4FAQ

4.1FAQ1

问:若360康宁警卫开启时,会弹出是否同意此程序运行,如图8-1所显示

图片 13

图8-1

答:选择:一直允许运行(加入白名单)

4.2FAQ2

问:可视化采集页面中之浏览器控件用之凡哪位?

报:可视化采集控件采用的是微信自带的WebBrowser控件,在Win7或Win10系统被,它需要修改注册,来保证使用的IE内核与系统的IE内核保持一致

5后记

本着随产品感兴趣的,可以加以我微信号(xiyang1011要13867408830)私聊

 

本人的博客即将搬运一头到腾讯云+社区,邀请大家一同入驻:https://cloud.tencent.com/developer/support-plan

网站地图xml地图