顶尖数据挖掘开发平台(TipDMD2)产品白皮书刘名军

地址:广州市经济技术开发区科学城232号

热线:40068-40020

邮编:510663

目录

第1章引言.....................................................................................................................3

1.1.产品简介...........................................................................................................3

1.2.产品功能...........................................................................................................3

1.2.1.产品构成..................................................................................................3

1.2.2.TipDM数据挖掘建模平台.........................................................................4

1.2.3.Model-Int模型调用模块............................................................................5

第2章快速开发示例.......................................................................................................5

2.1.建设目标...........................................................................................................6

2.2.模型构建...........................................................................................................6

2.3.模型发布...........................................................................................................8

2.4.模型调用...........................................................................................................9

2.5.模型更新..........................................................................................................10

第3章接口开发示例.....................................................................................................10

3.1.创建方案..........................................................................................................11

3.2.加载数据..........................................................................................................12

3.3.模型训练..........................................................................................................12

3.4.模型评价..........................................................................................................14

3.5.模型应用..........................................................................................................15

第4章联系我们............................................................................................................16

随着企业信息化的推进和应用水平的不断提高,企业中积累的数据规模越来越庞大。如何有效地利用历史数据,挖掘出价值的分析信息,从而帮助企业能够对未来变化作出及时正确的决策,最终在激烈的市场竞争中占据主动,已经成为当前企业越来越迫切想要解决的问题。顶尖数据挖掘开发平台(TipDM-D2,称简D2)数据挖掘开发平台就是这样一套用于从大量的企业数据中创建出智能知识技术,快速进行应用定制的二次开发平台。

D2以智能预测算法为核心,并提供标准的应用接口,以满足企业复杂的应用需求。基于该平台提供的接口,能方便在DEPHI、PB、VC、VB、NET、JAVA等环境进行二次开发调用。产品可广泛运用在金融业,保险业,电信业,证券业,制造业,零售业,生物制药等各行业。

基于TipDM的数据挖掘二次开发主要包括创建方案、加载数据、构建模型、评价模型和应用模型等步骤,如图16-1所示。

图11基于TipDM的数据挖掘二次开发流程

构建模型是数据挖掘应用开发的重要环节,常用的数据挖掘模型包括分类与预测、聚类分析、关联规则挖掘、时序模式和智能推荐等模型。

以分类与预测模型为例,接口方案如下图所示。

由上图可知,分类与预测模型接口方案主要包括两大部分:

1)TipDM数据挖掘建模平台:主要提供方案管理、数据管理、分类与预测建模和模型发布等功能

2)Model-Int模型调用模块:完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

模型构建流程如下:

模型构建的目的是基于专家样本数据,形成一个稳定的可用的预测模型(可理解为一个公式)。

平台主界面如下:

Model-Int为模型调用模块,完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

本例要求实现基于数据挖掘技术的变电设备预警及故障诊断,为实现设备运行状态及发展趋势全面掌控,提升设备状态检修水平,保障电网的安全稳定运行提供必要的技术支撑。具体包括:

2设备潜在风险分析

2在线监测装置的运行评价方法

2GIS设备局部放电内部放电源类型的辨识方法以及综合定位方法

2变压器设备状态的油色谱差异化预警方法

2设备故障案例库的建设以及智能诊断方法

1、创建模型方案

根据建设目标,本例需要构建如下预测模型:

2设备潜在风险评价模型(Model1)

2在线监测装置的运行评价模型(Model2)

2GIS设备局部放电内部放电源类型辨识模型(Model3)

2GIS设备局部放电综合定位模型(Model4)

2变压器设备状态油色谱差异化预警模型(Model5)

2、专家样本管理

以设备潜在风险评价模型为例,在方案管理界面中,双击激活该方案,在数据管理界面中导入进行设备潜在风险评价的专家样本数据(专家样本数据需要在充分理解业务的基础上,由有经验的专家和数据挖掘建模人员共同整理得到)。

3、数据探索和预处理

模型预测的质量不会超过抽取样本的质量。数据探索和预处理的目的是为了保证样本数据的质量,从而为保证预测质量打下基础。

数据预处理主要包括缺失值处理、坏数据处理、属性选择、数据规约、离散处理、特征提取等。下图为对导入的样本数据进行属性选择。

4、模型训练

模型训练是针对导入的专家样本数据,在设置好建模参数后,进行模型构建,下图为采用LM神经网络算法进行建模界面。

5、模型验证

模型训练完成后,需采用一些新的样本来对模型进行验证,以确保模型稳定和有效。

模型经训练并验证后,即可点击“发布模型”按钮发布该模型。如设备潜在风险评价模型方案采用LM神经网络建模,发布的模型文件Model1.tdm包含如下信息:

模型发布后,根据集成环境需要,可通过VB、VC、PB、Dephi、C#、.NET、JAVA等不同开发语言来调用。

模型调用非常简单,以下为JAVA语言调用示例:

y=myFunction(Stringp,StringmodelTdm)

式中:

myFunction—调用接口函数名

p—模型输入

modelTdm—模型文件

y—模型预测输出

当模型需要更新时,可重新训练并发布模型,并将新的模型文件覆盖掉原有的模型文件即可。

下面以下表所示防窃漏电建模样本数据为例,实现分类与预测模型的构建及接口调用。样本数据中前80%为模型训练数据,后20%为模型检验样本。模型输入项为电量趋势增长指标、线损指标和告警类指标;输出项为是否窃漏电。

防窃漏电样本数据

用户编号

电量趋势

增长指标

线损指标

告警类

指标

是否窃漏电

2014年9月6日

9900667154

4

1

2014年9月20日

9900639431

0

2014年9月17日

9900585516

2

2014年9月14日

9900531154

9

9900491050

3

2014年9月13日

9900461501

2014年9月22日

9900412593

5

9900366180

2014年9月19日

9900322960

2014年9月9日

9900254673

2014年9月18日

9900196505

10

2014年9月16日

9900145248

9900137535

2014年9月7日

9900064537

9110103867

2014年9月23日

9010100689

2014年9月21日

8910101840

2014年9月11日

8910101209

8910101132

8

8910100309

8810101463

8710100857

7

分类与预测模型构建及接口调用具体包括如下几个步骤:

创建数据挖掘方案,接口调用请求说明:

参数说明:

参数名称

属性类型

最大长度

必须

详细说明

appcode

String

32

接入系统在TipDM平台下注册所得的注册码

userId

在TipDM平台的注册Id

schemeName

50

方案名称

appType

方案应用类别,当前支持的应用类别有以下几种

100:数据分类;

101:数值预测;

102:聚类分析;

103:关联规则;

104:时序模式;

105:偏差检测

schemeDesc

100

针对方案的描述信息

返回值:json数据,成功创新方案

{"status":"success","schemeId":"40285e814bdd60d9014bdd62bda70001","msg":"远程创建方案成功!"}示列代码:

schemeId

在TipDM平台新建的方案ID

dataFile

File

样本数据文件

返回值:json

示列代码:

L

Double

学习速率

M

学习动量

S

Integer

随机数种子

N

训练次数

返回值:json,训练结果及模型存放路径,其中模型存放路径在调用模型评价接口时当作输入参数传入。

接口调用请求说明:

testData

以英文逗号进行分隔,字段个数(不包含分类结果)、顺序与专家样本保持一致

THE END
1.广州泰迪智能科技有限公司广州泰迪智能科技有限公司是一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业,不断推出顶尖大数据挖掘系列产品。 管理团队 黄震均 陈朝君 融资情况 未知 发展历史和介绍 泰迪科技是广州高新技术开发区内一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业。公司开始...http://wydb.leshanvc.com/21026.html
2.三维动画制作3D动画制作广州三维动画罗先法 创始人/客户总监 2015年创办广州泰迪熊公司;主要从事客户项目管理。主导公司的中、长期市场客户合作和年度实施计划的制订、负责公司市场规划,品牌规划、传播和市场队伍的建设和管理。 -主创团队- Senior Team 合作客户http://www.teddi.com.cn/col.jsp?id=103
3.广东省广州市泰迪熊婴幼儿用品有限公司——质量月广州市泰迪熊婴幼儿用品有限公司 泰迪熊纸尿裤由德国著名的婴童消费品公司Teddyb?r international GmbH授权,是欧洲助产士推荐的著名日用护理品牌,深受妈妈们的信赖。 2009年泰迪熊开始进入中国市场,运用世界领先的科技,携手优质全球战略合作伙伴,共同研发具有高科技含量的优质产品。旗下拥有三大系列:新敏肌亲肤系列纸...http://12365.ce.cn/zly2020/59909.html
4.商标名称TEDDYTIKOK商标申请人嘻闹泰迪熊文化(广州)有限公司的...嘻闹泰迪熊文化(广州)有限公司于2023年08月04日申请了名称为TEDDY TIKOK的第20类商标,商标注册号为73288615,由东莞市艺标知识产权代理有限公司代理申请。https://www.tmkoo.com/detail/13f45080a217b738967541ee3bb13223/20
5.广州市泰迪熊幼儿用品有限公司公司介绍广州市泰迪熊幼儿用品有限公司,获得Teddybar international GmbH的独家授权,全权负责泰迪熊品牌在中国区的运营。广州泰迪熊始终致力于“为万千宝宝提供安全放心的产品”,以优秀的员工队伍,强大的营销网络和不断创新的品牌推广模式,不断整合泰迪熊品牌形象,构建品牌运营系统,推动泰迪熊品牌跃升,让泰迪熊品牌走进万千家庭。http://www.baobei360.com/company/271403/about
1.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司招标采购专栏,每天实时更新有关广东泰迪智能科技股份有限公司招标公告、企业采购、拟在建项目等一系列商业信息,查询更多广东泰迪智能科技股份有限公司信息尽在比地招标网。http://www.bidizhaobiao.com/company_215964556470472704.html
2.广东泰迪熊投资有限公司招聘怎么样?个人简介:电子商务运营,任职广东泰迪熊投资有限公司营运助理职位,常驻广东;近期有10位访问者,在脉脉形成影响力23;在2022-2至2022-5,任广东泰迪熊投资有限公司公司营运助理职位。 个人简介 电子商务运营,任职广东泰迪熊投资有限公司营运助理职位,常驻广东;近期有10位访问者,在脉脉形成影响力23;在2022-2至2022-5,任广...https://maimai.cn/brand/home/XfZlCnFu
3.东莞茶山镇宠物公司排名(排行榜)东莞茶山镇宠物公司有哪些?东莞茶山镇宠物公司排行榜:东莞兴德玩具制衣有限公司、卡豆克隆、东莞致欧家居科技有限公司、东莞市南森毛绒玩具有限公司、东莞市联亚礼品有限公司等。同时还可以了解东莞宠物公司最新招聘,高薪企业,上市公司,人气产品,最新融资,最新快讯等https://www.jobui.com/rank/company/view/dongguan/chongwu/area192008/
4.公司简介我们力争成为企业打造品牌的忠实伙伴 广州泰迪熊数字科技有限公司是一家专注于影视制作、三维动画制作的创意型科技公司,是全国性的专业数字视觉综合服务提供商,立足于视觉科技与应用。以创意为核心、市场需求为导向,依托长期积累的技术实力和前瞻性的创意设计能力,为客户提供最优质的数字视觉综合服务。 广州泰迪熊以满足...http://teddi.m.gzaujet.cn/col.jsp?id=103
5.泰迪智能科技大数据实验室建设大数据实训平台广东泰迪智能科技股份有限公司(简称:泰迪智能科技)提供高校大数据实训平台,人工智能实训平台,商务数据分析平台,专注于大数据人工智能专业建设,为高校大数据实验室建设,人工智能实验室建设,商务数据分析实验室提供一体化解决方案,实现学生从理论知识到能力塑造的开放型能http://www.tipdm.com/
6.广州泰迪教育科技有限公司是否有经营异常简介:广州泰迪教育科技有限公司成立于2012-09-12,法定代表人为张良均,注册资本为200 万人民币,统一社会信用代码为914401160525946645,当前处于存续状态。企业注册地址位于广州市黄埔区西成中街17号C栋601房,所属行业为信息系统集成服务,经营范围包括:计算机系统服务;人工智能基础资源与技术平台;人工智能公共服务平台技术咨询...http://qixin.com/warn/b669e741-25a8-4481-83ae-d558715c6a3b
7.广东省广州市泰迪熊婴幼儿用品有限公司——质量月广州市泰迪熊婴幼儿用品有限公司 泰迪熊纸尿裤由德国著名的婴童消费品公司Teddyb?r international GmbH授权,是欧洲助产士推荐的著名日用护理品牌,深受妈妈们的信赖。 2009年泰迪熊开始进入中国市场,运用世界领先的科技,携手优质全球战略合作伙伴,共同研发具有高科技含量的优质产品。旗下拥有三大系列:新敏肌亲肤系列纸...http://11412315.com/act/zly2020/59909.html
8.广州市泰迪熊婴幼儿用品有限公司工资待遇(共1条)职朋职业圈独有的广州市泰迪熊婴幼儿用品有限公司工资待遇,共有1人分享了广州市泰迪熊婴幼儿用品有限公司工资待遇,是否加班,是否准时下班,是否有五险一金等,马上进入和大家一起交流了解广州市泰迪熊婴幼儿用品有限公司工资待遇。职朋职业圈,专业职业分享交流平台,助https://m.job592.com/pay/comxc29578595.html
9.广州泰迪熊科技集团有限公司工商信息信用信息企业地址:广州市番禺区东环街番禺大道北555号天安总部中心25号楼2001房 公司简介:广州泰迪熊科技集团有限公司,于2015-04-16在广州市番禺区市场监督管理局登记成立,梁俊峰担任法定代表人,注册资本为1,284.1625(万人民币),公司位于广州市番禺区东环街番禺大道北555号天安总部中心25号楼2001房,公司经营范围:软件开发;软...https://www.qichamao.com/orgcompany/searchitemdtl/4c5daf85b5009e734253dba2660017c9.html
10.关于同意广州泰迪职业技能培训学校有限公司变更培训工种的复函广州泰迪职业技能培训学校有限公司: 我局于2024年8月14日受理你校提交的变更培训工种行政审批申请,经审查,符合《中华人民共和国民办教育促进法》、《中华人民共和国民办教育促进法实施条例》的相关规定,我局作出准予你校变更培训工种的决定,现培训工种变更为:计算机程序设计员(四、三、二、一级)、人工智能训练师(五...https://www.hp.gov.cn/xwzx/tzgg/qtgg/content/post_9813010.html
11....宝宝尿不湿L3XL婴儿纸尿裤S/M秋季薄使用广州苏锐科技有限...购物,预计帮您节省¥3726.2 【拍2件】泰迪熊肌贵族臻薄拉拉裤*2包 累计销量:6000+ 件 独家优惠:76元券 商品标签:天猫包邮每满300减30 ¥ 140¥216 30天最低价 领券购买 扫码购买 推荐理由 【极限凑单到手59.2/包】无限回购的一款纸尿裤!轻薄又透气,不怕侧漏!不断层,不鼓包...http://www.integrat.net/?r=l/d&u=1&id=44486254