顶尖数据挖掘开发平台(TipDMD2)产品白皮书刘名军

地址:广州市经济技术开发区科学城232号

热线:40068-40020

邮编:510663

目录

第1章引言.....................................................................................................................3

1.1.产品简介...........................................................................................................3

1.2.产品功能...........................................................................................................3

1.2.1.产品构成..................................................................................................3

1.2.2.TipDM数据挖掘建模平台.........................................................................4

1.2.3.Model-Int模型调用模块............................................................................5

第2章快速开发示例.......................................................................................................5

2.1.建设目标...........................................................................................................6

2.2.模型构建...........................................................................................................6

2.3.模型发布...........................................................................................................8

2.4.模型调用...........................................................................................................9

2.5.模型更新..........................................................................................................10

第3章接口开发示例.....................................................................................................10

3.1.创建方案..........................................................................................................11

3.2.加载数据..........................................................................................................12

3.3.模型训练..........................................................................................................12

3.4.模型评价..........................................................................................................14

3.5.模型应用..........................................................................................................15

第4章联系我们............................................................................................................16

随着企业信息化的推进和应用水平的不断提高,企业中积累的数据规模越来越庞大。如何有效地利用历史数据,挖掘出价值的分析信息,从而帮助企业能够对未来变化作出及时正确的决策,最终在激烈的市场竞争中占据主动,已经成为当前企业越来越迫切想要解决的问题。顶尖数据挖掘开发平台(TipDM-D2,称简D2)数据挖掘开发平台就是这样一套用于从大量的企业数据中创建出智能知识技术,快速进行应用定制的二次开发平台。

D2以智能预测算法为核心,并提供标准的应用接口,以满足企业复杂的应用需求。基于该平台提供的接口,能方便在DEPHI、PB、VC、VB、NET、JAVA等环境进行二次开发调用。产品可广泛运用在金融业,保险业,电信业,证券业,制造业,零售业,生物制药等各行业。

基于TipDM的数据挖掘二次开发主要包括创建方案、加载数据、构建模型、评价模型和应用模型等步骤,如图16-1所示。

图11基于TipDM的数据挖掘二次开发流程

构建模型是数据挖掘应用开发的重要环节,常用的数据挖掘模型包括分类与预测、聚类分析、关联规则挖掘、时序模式和智能推荐等模型。

以分类与预测模型为例,接口方案如下图所示。

由上图可知,分类与预测模型接口方案主要包括两大部分:

1)TipDM数据挖掘建模平台:主要提供方案管理、数据管理、分类与预测建模和模型发布等功能

2)Model-Int模型调用模块:完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

模型构建流程如下:

模型构建的目的是基于专家样本数据,形成一个稳定的可用的预测模型(可理解为一个公式)。

平台主界面如下:

Model-Int为模型调用模块,完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

本例要求实现基于数据挖掘技术的变电设备预警及故障诊断,为实现设备运行状态及发展趋势全面掌控,提升设备状态检修水平,保障电网的安全稳定运行提供必要的技术支撑。具体包括:

2设备潜在风险分析

2在线监测装置的运行评价方法

2GIS设备局部放电内部放电源类型的辨识方法以及综合定位方法

2变压器设备状态的油色谱差异化预警方法

2设备故障案例库的建设以及智能诊断方法

1、创建模型方案

根据建设目标,本例需要构建如下预测模型:

2设备潜在风险评价模型(Model1)

2在线监测装置的运行评价模型(Model2)

2GIS设备局部放电内部放电源类型辨识模型(Model3)

2GIS设备局部放电综合定位模型(Model4)

2变压器设备状态油色谱差异化预警模型(Model5)

2、专家样本管理

以设备潜在风险评价模型为例,在方案管理界面中,双击激活该方案,在数据管理界面中导入进行设备潜在风险评价的专家样本数据(专家样本数据需要在充分理解业务的基础上,由有经验的专家和数据挖掘建模人员共同整理得到)。

3、数据探索和预处理

模型预测的质量不会超过抽取样本的质量。数据探索和预处理的目的是为了保证样本数据的质量,从而为保证预测质量打下基础。

数据预处理主要包括缺失值处理、坏数据处理、属性选择、数据规约、离散处理、特征提取等。下图为对导入的样本数据进行属性选择。

4、模型训练

模型训练是针对导入的专家样本数据,在设置好建模参数后,进行模型构建,下图为采用LM神经网络算法进行建模界面。

5、模型验证

模型训练完成后,需采用一些新的样本来对模型进行验证,以确保模型稳定和有效。

模型经训练并验证后,即可点击“发布模型”按钮发布该模型。如设备潜在风险评价模型方案采用LM神经网络建模,发布的模型文件Model1.tdm包含如下信息:

模型发布后,根据集成环境需要,可通过VB、VC、PB、Dephi、C#、.NET、JAVA等不同开发语言来调用。

模型调用非常简单,以下为JAVA语言调用示例:

y=myFunction(Stringp,StringmodelTdm)

式中:

myFunction—调用接口函数名

p—模型输入

modelTdm—模型文件

y—模型预测输出

当模型需要更新时,可重新训练并发布模型,并将新的模型文件覆盖掉原有的模型文件即可。

下面以下表所示防窃漏电建模样本数据为例,实现分类与预测模型的构建及接口调用。样本数据中前80%为模型训练数据,后20%为模型检验样本。模型输入项为电量趋势增长指标、线损指标和告警类指标;输出项为是否窃漏电。

防窃漏电样本数据

用户编号

电量趋势

增长指标

线损指标

告警类

指标

是否窃漏电

2014年9月6日

9900667154

4

1

2014年9月20日

9900639431

0

2014年9月17日

9900585516

2

2014年9月14日

9900531154

9

9900491050

3

2014年9月13日

9900461501

2014年9月22日

9900412593

5

9900366180

2014年9月19日

9900322960

2014年9月9日

9900254673

2014年9月18日

9900196505

10

2014年9月16日

9900145248

9900137535

2014年9月7日

9900064537

9110103867

2014年9月23日

9010100689

2014年9月21日

8910101840

2014年9月11日

8910101209

8910101132

8

8910100309

8810101463

8710100857

7

分类与预测模型构建及接口调用具体包括如下几个步骤:

创建数据挖掘方案,接口调用请求说明:

参数说明:

参数名称

属性类型

最大长度

必须

详细说明

appcode

String

32

接入系统在TipDM平台下注册所得的注册码

userId

在TipDM平台的注册Id

schemeName

50

方案名称

appType

方案应用类别,当前支持的应用类别有以下几种

100:数据分类;

101:数值预测;

102:聚类分析;

103:关联规则;

104:时序模式;

105:偏差检测

schemeDesc

100

针对方案的描述信息

返回值:json数据,成功创新方案

{"status":"success","schemeId":"40285e814bdd60d9014bdd62bda70001","msg":"远程创建方案成功!"}示列代码:

schemeId

在TipDM平台新建的方案ID

dataFile

File

样本数据文件

返回值:json

示列代码:

L

Double

学习速率

M

学习动量

S

Integer

随机数种子

N

训练次数

返回值:json,训练结果及模型存放路径,其中模型存放路径在调用模型评价接口时当作输入参数传入。

接口调用请求说明:

testData

以英文逗号进行分隔,字段个数(不包含分类结果)、顺序与专家样本保持一致

THE END
1.广东泰迪智能科技股份有限公司(广州市黄埔区西成中街17号C栋601...广东泰迪智能科技股份有限公司的地址为广州市黄埔区西成中街17号C栋601房,位于广东广州黄埔区,属于广东省广州黄埔区穗东街道,广东省广州黄埔区南湾社区,广东广州黄埔区南湾社区居民委员会,注册于2013年5月17日,法人是张良均,公司社保参保人数89人,主要业务范围为家https://gongshang.mingluji.com/guangdong/name/%E5%B9%BF%E5%B7%9E%E6%B3%B0%E8%BF%AA%E6%99%BA%E8%83%BD%E7%A7%91%E6%8A%80%E6%9C%89%E9%99%90%E5%85%AC%E5%8F%B8
2.广州泰迪智能科技有限公司广州泰迪智能科技有限公司是一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业,不断推出顶尖大数据挖掘系列产品。 管理团队 黄震均 陈朝君 融资情况 未知 发展历史和介绍 泰迪科技是广州高新技术开发区内一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业。公司开始...http://wydb.leshanvc.com/21026.html
3.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司成立于2013年05月17日,注册地位于广州市高新技术产业开发区开泰大道36号1栋212房,法定代表人为张良均。经营范围包括业务培训(不含教育培训、职业技能培训等需取得许可的培训);会议及展览服务;版权代理;信息安全设备销售;数字视频监控系统销售;计算机软硬件及辅助设备零售;教学用模型及教具销...https://jypt.gdsdxy.cn/web/Index/company-info?id=33382
4.广东泰迪智能科技股份有限公司职业技能人才培养评价一体化平台...信息中心 评价公示 资料下载 培训中心 就业中心 关于2024年10月产教评人工智能训练师职业技能等级认定工作的通知2024-10-11 关于2024年8月计算机程序设计员职业技能等级认定工作的通知2024-07-22 关于2024年9月计算机程序设计员职业技能等级认定工作的通知2024-07-22 ...http://tipdm.gdskills.com/
1.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司招标采购专栏,每天实时更新有关广东泰迪智能科技股份有限公司招标公告、企业采购、拟在建项目等一系列商业信息,查询更多广东泰迪智能科技股份有限公司信息尽在比地招标网。http://www.bidizhaobiao.com/company_215964556470472704.html
2.泰迪智能科技大数据实验室建设大数据实训平台广东泰迪智能科技股份有限公司(简称:泰迪智能科技)提供高校大数据实训平台,人工智能实训平台,商务数据分析平台,专注于大数据人工智能专业建设,为高校大数据实验室建设,人工智能实验室建设,商务数据分析实验室提供一体化解决方案,实现学生从理论知识到能力塑造的开放型能http://www.tipdm.com/
3.「广州泰迪科技怎么样」广州泰迪智能科技有限公司性质: 民营公司 规模: 100-499人 成立: 11年 行业: 计算机软件 全称: 广州泰迪智能科技有限公司。 发展阶段 排名: 广州数据服务人气排名第18名 荣誉: 高新技术企业 科技型中小企业 根据算法标注 工资: 51.4%的岗位拿10-20K,2024年较去年增长6%。 招聘: 2024年较2023年下降34%。 公司介绍 广州泰迪...https://www.jobui.com/company/12591385/
4.广州泰迪智能科技有限公司广州泰迪智能科技有限公司2013年5月成立,主要从事大数据基础研究、培训、咨询服务,公司办公面积1000多平方米,位于广州市科学城益民科技园内。广州泰迪智能科技有限公司自成立以来,与Hortonworks、IBM、轻工业环境保护研究所、华南师范大学、华南理工大学等企业及高校广泛开展大数据研究及应用合作立足大数据领域,为企业提供基于ha...https://www.11467.com/qiye/34121787.htm
5.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司 查企业 基本信息: 广东泰迪智能科技股份有限公司,于广州市市场监督管理局登记,成立于2013-05-17,注册资金为726.2091万人民币,法人是张良均,位于广州市黄埔区西成中街17号C栋601房。 公司介绍: -- 广东泰迪智能科技股份有限公司...https://www.cbi360.net/hhb/jqbk_1577844.html
6.教育大数据行业发展现状及前景战略规划建议报告8.3.5 新开普电子股份有限公司——高校大数据及人工智能实验室 1、企业基本信息 2、企业经营情况 3、企业业务架构 4、企业教育大数据产品研发 5、企业教育大数据解决方案 6、企业教育大数据项目案例 7、企业业务布局战略&优劣势 8.3.6 广东泰迪智能科技股份有限公司——高校大数据实训平台 ...https://maimai.cn/article/detail?fid=1846094883&efid=fVq5WNoRddfGQrd6lI_77A
7.泰迪智能科技产教融合实训基地课程价格简介怎么样广州学习培训泰迪智能科技产教融合实训基地怎么样?好不好?进入大众点评网广州学习培训频道,查看泰迪智能科技产教融合实训基地简介、课程、价格、电话、交通线路、营业时间、促销团购、图片视频、用户评价等信息,真实消费口碑带给您更好的学习体验!https://www.dianping.com/shop/H5WbxAdSBO1cODhY
8.深圳市嘉泰智慧科技有限公司深圳市嘉泰智慧科技有限公司是一家专业研发和制造消防应急灯、智能疏散系统、应急标志灯、疏散指示灯、消防应急照明灯、B型应急照明灯、疏散照明系统、应急照明系统、疏散指示标志的企业,有a型灯具、应急照明控制器、应急照明配电箱、EPS应急电源等产品。公司拥有来自上市http://www.meichuyouxian.com/
9.泰迪智能科技(威海)有限公司简介:泰迪智能科技(威海)有限公司成立于2008-05-20,法定代表人为杨松玺,注册资本为50 万人民币,统一社会信用代码为91371002675523424N,当前处于存续状态。企业注册地址位于威海市统一路-29号1012室,所属行业为信息系统集成服务,经营范围包括:软硬件开发;信息系统集成服务;金属制品制造;公章刻制;计算机软硬件及辅助设备、...http://qixin.com/company/693855a1-71e4-4a4c-bf5a-f62e51fc3502.html
10.企业实践广州新华学院携手泰迪智能科技开展大数据开发企业实践圆满结...12月3日,新华学院健康学院携手广东泰迪智能科技股份有限公司联合开展大数据开发企业实践活动圆满结束,健康学院专业老师陈键聪及来自信息资源管理专业2023级24名学生参与此次活动结业仪式。泰迪智能科技董事长张良均、校企合作经理吴桂锋、钟秋平出席。 此次活动为期三天,以“大数据开发”实战能力提升为核心,主要围绕Python编程、...https://blog.csdn.net/tipdm0301/article/details/144257756