ITC网络数据采集与共享系统

主要功能

　　实现对互联网专业数据资源的自动采集、分发和共享，以及下载和分发过程的可视化监控。系统通过任务管理的方式实现对数据采集任务和数据分发任务的动态配置管理，通过任务调度合理分配系统资源，以适应海量数据采集与分发的需要。系统提供友好的可视化监控界面，方便用户对任务的运行状况进行监视，并在必要的时候采取适当的人工干预手段。系统还能够自动生成业务运行状态报告，通过邮件等方式将报告自动发送给相关负责人员。对于已下载的网站数据，系统还提供相应的统计分析功能。

主要功能模块

任务配置

　　系统提供对各类数据下载任务和数据分发任务进行灵活配置的功能，并根据网站提供数据方式的不同，对任务进行分类管理。

任务生成

　　根据任务配置的启动时间等信息，自动生成需要执行的任务并将其放入任务队列，等待任务调度对任务进行处理。

任务调度

　　按各任务的启动时间来启动数据下载和数据分发任务，监视已运行任务的状态，并将任务执行状态记录下载

任务监控

　　用来实时监视和控制任务执行的情况。

业务运行报告

　　系统根据用户的需要，提供网络数据采集与共享系统业务运行报告的自动生成和分发。

统计分析

　　对任务和已下载数据提供统计分析的功能。