面向商务智能应用的分布式数据挖掘系统设计

wangfans · 发表于 2013-3-6 15:34

3.3 数据挖掘Agent

数据挖掘Agent是一种移动Agent，每个数据挖掘Agent都是一个相对独立的工作单元，利用其自带的数据挖掘算法和知识库信息等执行任务。数据挖掘Agent封装了描述其状态的属性以便当Agent移动到另一主机上重新开始工作和向数据挖掘Agent管理器返同信息。图2给出了本系统中数据挖掘 Agent的内部结构。

wangfans · 发表于 2013-3-6 15:34

1）接口模块主要将数据挖掘Agent的内部机制与外界隔离，所有信息交流都通过该接口。该模块包含与协调Agent和Agent服务器进行交互接口和消息的传递接口以及与数据源的JDBC联接接口。

wangfans · 发表于 2013-3-7 09:59

2）安全控制模块对移动Agent自身提供保护；防止外部环境对数据挖掘Agent的非法访问，以保证数据的正确性和合法性；完成对数据的加/解密、数字签名等任务。

wangfans · 发表于 2013-3-7 09:59

3）数据挖掘模块首先对业务数据挖掘数据进行预处理，然后依据数据挖掘模型来对已经规范化的数据进行分析，并将分析结果传给协调Agent以实现数据综合。

wangfans · 发表于 2013-3-7 09:59

4）路由策略确定移动数据挖掘Agent移动到企业数据库系统主机的有序列表。对于明确的任务数据挖掘过程，可采用静态路由策略，即数据挖掘系统中的协调Agent给定移动Agent的移动路径，或采用基于规则的动态路由策略以满足复杂数据挖掘任务的计算。

wangfans · 发表于 2013-3-7 09:59

数据挖掘Agent中的知识库，由协调Agent进行初始化，主要存放数据挖掘模型和其他一些必备的知识。身份信息用来标明该Agent的身份，包括该 Agent的ID号、Agent的主人、源站点、代码在源站点上的路径以及一些对该Agent权限进行限制的信息，这些信息均是加密的，而且在该 Agent的Java类设计中将这些属性设置为只读的。状态反映的是Agent执行状态信息、原始数据、中间数据以及数据挖掘结果。

wangfans · 发表于 2013-3-7 10:00

3.4 移动Agent服务器

为了实现移动数据挖掘Agent在网络中安全可靠地访问不同的业务主机并在本地执行数据挖掘任务，系统中的业务主机必须提供Agent支撑环境为 Agent提供所需要的服务，包括Agent的传输、创建、激活、挂起、删除以及安全管理、通信和事件服务等。本系统中，移动Agent服务器采用如图3 所示的内部结构。

wangfans · 发表于 2013-3-8 13:53

wangfans · 发表于 2013-3-8 13:53

1）ATP模块提供Agent传输服务，即包括负责发送和接收移动Agent。本系统采用Java环境中的弱迁移方式，采用Agent传输协议 ATP（Agent transfer protocol），并在底层移动平台上采用socket技术。系统在确认符合接受方安全要求的情况下，进行Agent的传输，并在由Agent安全器