顶尖数据挖掘开发平台(TipDMD2)产品白皮书刘名军

地址:广州市经济技术开发区科学城232号

热线:40068-40020

邮编:510663

目录

第1章引言.....................................................................................................................3

1.1.产品简介...........................................................................................................3

1.2.产品功能...........................................................................................................3

1.2.1.产品构成..................................................................................................3

1.2.2.TipDM数据挖掘建模平台.........................................................................4

1.2.3.Model-Int模型调用模块............................................................................5

第2章快速开发示例.......................................................................................................5

2.1.建设目标...........................................................................................................6

2.2.模型构建...........................................................................................................6

2.3.模型发布...........................................................................................................8

2.4.模型调用...........................................................................................................9

2.5.模型更新..........................................................................................................10

第3章接口开发示例.....................................................................................................10

3.1.创建方案..........................................................................................................11

3.2.加载数据..........................................................................................................12

3.3.模型训练..........................................................................................................12

3.4.模型评价..........................................................................................................14

3.5.模型应用..........................................................................................................15

第4章联系我们............................................................................................................16

随着企业信息化的推进和应用水平的不断提高,企业中积累的数据规模越来越庞大。如何有效地利用历史数据,挖掘出价值的分析信息,从而帮助企业能够对未来变化作出及时正确的决策,最终在激烈的市场竞争中占据主动,已经成为当前企业越来越迫切想要解决的问题。顶尖数据挖掘开发平台(TipDM-D2,称简D2)数据挖掘开发平台就是这样一套用于从大量的企业数据中创建出智能知识技术,快速进行应用定制的二次开发平台。

D2以智能预测算法为核心,并提供标准的应用接口,以满足企业复杂的应用需求。基于该平台提供的接口,能方便在DEPHI、PB、VC、VB、NET、JAVA等环境进行二次开发调用。产品可广泛运用在金融业,保险业,电信业,证券业,制造业,零售业,生物制药等各行业。

基于TipDM的数据挖掘二次开发主要包括创建方案、加载数据、构建模型、评价模型和应用模型等步骤,如图16-1所示。

图11基于TipDM的数据挖掘二次开发流程

构建模型是数据挖掘应用开发的重要环节,常用的数据挖掘模型包括分类与预测、聚类分析、关联规则挖掘、时序模式和智能推荐等模型。

以分类与预测模型为例,接口方案如下图所示。

由上图可知,分类与预测模型接口方案主要包括两大部分:

1)TipDM数据挖掘建模平台:主要提供方案管理、数据管理、分类与预测建模和模型发布等功能

2)Model-Int模型调用模块:完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

模型构建流程如下:

模型构建的目的是基于专家样本数据,形成一个稳定的可用的预测模型(可理解为一个公式)。

平台主界面如下:

Model-Int为模型调用模块,完成对TipDM生成Model的调用实现。Model调用支持VB、VC、PB、Dephi、C#、.NET、JAVA等开发环境。

本例要求实现基于数据挖掘技术的变电设备预警及故障诊断,为实现设备运行状态及发展趋势全面掌控,提升设备状态检修水平,保障电网的安全稳定运行提供必要的技术支撑。具体包括:

2设备潜在风险分析

2在线监测装置的运行评价方法

2GIS设备局部放电内部放电源类型的辨识方法以及综合定位方法

2变压器设备状态的油色谱差异化预警方法

2设备故障案例库的建设以及智能诊断方法

1、创建模型方案

根据建设目标,本例需要构建如下预测模型:

2设备潜在风险评价模型(Model1)

2在线监测装置的运行评价模型(Model2)

2GIS设备局部放电内部放电源类型辨识模型(Model3)

2GIS设备局部放电综合定位模型(Model4)

2变压器设备状态油色谱差异化预警模型(Model5)

2、专家样本管理

以设备潜在风险评价模型为例,在方案管理界面中,双击激活该方案,在数据管理界面中导入进行设备潜在风险评价的专家样本数据(专家样本数据需要在充分理解业务的基础上,由有经验的专家和数据挖掘建模人员共同整理得到)。

3、数据探索和预处理

模型预测的质量不会超过抽取样本的质量。数据探索和预处理的目的是为了保证样本数据的质量,从而为保证预测质量打下基础。

数据预处理主要包括缺失值处理、坏数据处理、属性选择、数据规约、离散处理、特征提取等。下图为对导入的样本数据进行属性选择。

4、模型训练

模型训练是针对导入的专家样本数据,在设置好建模参数后,进行模型构建,下图为采用LM神经网络算法进行建模界面。

5、模型验证

模型训练完成后,需采用一些新的样本来对模型进行验证,以确保模型稳定和有效。

模型经训练并验证后,即可点击“发布模型”按钮发布该模型。如设备潜在风险评价模型方案采用LM神经网络建模,发布的模型文件Model1.tdm包含如下信息:

模型发布后,根据集成环境需要,可通过VB、VC、PB、Dephi、C#、.NET、JAVA等不同开发语言来调用。

模型调用非常简单,以下为JAVA语言调用示例:

y=myFunction(Stringp,StringmodelTdm)

式中:

myFunction—调用接口函数名

p—模型输入

modelTdm—模型文件

y—模型预测输出

当模型需要更新时,可重新训练并发布模型,并将新的模型文件覆盖掉原有的模型文件即可。

下面以下表所示防窃漏电建模样本数据为例,实现分类与预测模型的构建及接口调用。样本数据中前80%为模型训练数据,后20%为模型检验样本。模型输入项为电量趋势增长指标、线损指标和告警类指标;输出项为是否窃漏电。

防窃漏电样本数据

用户编号

电量趋势

增长指标

线损指标

告警类

指标

是否窃漏电

2014年9月6日

9900667154

4

1

2014年9月20日

9900639431

0

2014年9月17日

9900585516

2

2014年9月14日

9900531154

9

9900491050

3

2014年9月13日

9900461501

2014年9月22日

9900412593

5

9900366180

2014年9月19日

9900322960

2014年9月9日

9900254673

2014年9月18日

9900196505

10

2014年9月16日

9900145248

9900137535

2014年9月7日

9900064537

9110103867

2014年9月23日

9010100689

2014年9月21日

8910101840

2014年9月11日

8910101209

8910101132

8

8910100309

8810101463

8710100857

7

分类与预测模型构建及接口调用具体包括如下几个步骤:

创建数据挖掘方案,接口调用请求说明:

参数说明:

参数名称

属性类型

最大长度

必须

详细说明

appcode

String

32

接入系统在TipDM平台下注册所得的注册码

userId

在TipDM平台的注册Id

schemeName

50

方案名称

appType

方案应用类别,当前支持的应用类别有以下几种

100:数据分类;

101:数值预测;

102:聚类分析;

103:关联规则;

104:时序模式;

105:偏差检测

schemeDesc

100

针对方案的描述信息

返回值:json数据,成功创新方案

{"status":"success","schemeId":"40285e814bdd60d9014bdd62bda70001","msg":"远程创建方案成功!"}示列代码:

schemeId

在TipDM平台新建的方案ID

dataFile

File

样本数据文件

返回值:json

示列代码:

L

Double

学习速率

M

学习动量

S

Integer

随机数种子

N

训练次数

返回值:json,训练结果及模型存放路径,其中模型存放路径在调用模型评价接口时当作输入参数传入。

接口调用请求说明:

testData

以英文逗号进行分隔,字段个数(不包含分类结果)、顺序与专家样本保持一致

THE END
1.广东泰迪智能科技股份有限公司(广州市黄埔区西成中街17号C栋601...广东泰迪智能科技股份有限公司的地址为广州市黄埔区西成中街17号C栋601房,位于广东广州黄埔区,属于广东省广州黄埔区穗东街道,广东省广州黄埔区南湾社区,广东广州黄埔区南湾社区居民委员会,注册于2013年5月17日,法人是张良均,公司社保参保人数89人,主要业务范围为家https://gongshang.mingluji.com/guangdong/name/%E5%B9%BF%E5%B7%9E%E6%B3%B0%E8%BF%AA%E6%99%BA%E8%83%BD%E7%A7%91%E6%8A%80%E6%9C%89%E9%99%90%E5%85%AC%E5%8F%B8
2.广东泰迪智能科技股份有限公司招聘广州泰迪智能科技有限公司是一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业,不断推出顶尖大数据挖掘系列产品。 职位查看更多 销售经理 15-30k 广州-黄埔区3-5年 大专 渠道销售经理 15-30k 广州-黄埔区5-10年 大专 区域销售经理 ...https://www.liepin.com/company/12406309/
3.广州泰迪智能科技有限公司广州泰迪智能科技有限公司是一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业,不断推出顶尖大数据挖掘系列产品。 管理团队 黄震均 陈朝君 融资情况 未知 发展历史和介绍 泰迪科技是广州高新技术开发区内一家专业从事基于云计算技术的大数据挖掘应用研发、咨询和培训服务的高科技企业。公司开始...http://wydb.leshanvc.com/21026.html
4.「泰迪智能科技(成都)有限公司招聘」公司简介 泰迪智能科技(成都)有限公司于2020-11-11创办 。法定注册地址为中国(四川)自由贸易试验区成都高新区府城大道西段399号10栋19层1号 市场范围为一般项目:软件销售;技术服务、技术开发、技术咨询、技术交流、技术转让、技术推广;计算机系统服务;网络与信息安全软件开发;信息技术咨询服务;人工智能理论与算法软件...https://www.kanzhun.com/firm/info/1nZ-3Ny4EFtQ.html
5.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司成立于2013年05月17日,注册地位于广州市高新技术产业开发区开泰大道36号1栋212房,法定代表人为张良均。经营范围包括业务培训(不含教育培训、职业技能培训等需取得许可的培训);会议及展览服务;版权代理;信息安全设备销售;数字视频监控系统销售;计算机软硬件及辅助设备零售;教学用模型及教具销...https://jypt.gdsdxy.cn/web/Index/company-info?id=33382
6.广东泰迪智能科技股份有限公司职业技能人才培养评价一体化平台...信息中心 评价公示 资料下载 培训中心 就业中心 关于2024年10月产教评人工智能训练师职业技能等级认定工作的通知2024-10-11 关于2024年8月计算机程序设计员职业技能等级认定工作的通知2024-07-22 关于2024年9月计算机程序设计员职业技能等级认定工作的通知2024-07-22 ...http://tipdm.gdskills.com/
7.泰迪智能科技(武汉)有限公司[信息查询工商查询泰迪智能科技(武汉)有限公司成立于2020年06月12日,注册地位于洪山区书城路15号武汉亿胜科技大楼D728室,法人代表为田代平。经营范围包括:计算机软件开发、批发兼零售;计算机、人工智能系统技术开发、技术服务;计算机硬件、教学设备、计算机网络、物联网技术的设计、研发;计算机信息技术咨询服务;区块链技术开发;专利代理;会...https://www.dingtalk.com/qidian/company/1200619000112320007
1.广州泰迪智能科技有限公司广州泰迪智能科技有限公司2013年5月成立,主要从事大数据基础研究、培训、咨询服务,公司办公面积1000多平方米,位于广州市科学城益民科技园内。广州泰迪智能科技有限公司自成立以来,与Hortonworks、IBM、轻工业环境保护研究所、华南师范大学、华南理工大学等企业及高校广泛开展大数据研究及应用合作立足大数据领域,为企业提供基于ha...https://www.11467.com/qiye/34121787.htm
2.广东泰迪智能科技股份有限公司招聘招聘信息上班地址 : 广州市及全国各大城市 公司简介 所有职位 公司简介 广东泰迪智能科技股份有限公司是专注于实验室建设、双师课堂、岗前培训及线上微服务,致力于为高校大数据人工智能应用型人才能力提升提供全方位教学服务。同时积极参与大数据人工智能人才培养体系及1+X标准建设。公司核心技术完全基于自主知识产权,将持续不...https://m.51job.com/jobs/all/co4082915.html
3.「广州泰迪科技工资待遇怎么样」广州泰迪智能科技有限公司薪酬...广州泰迪科技一个月多少钱?工资15-20K占比最多占31.4%。本科工资¥11.8K,硕士工资¥12.5K。按地区统计,广州工资¥15.0K。 广州泰迪科技薪酬区间: 6K - 30K,其中51.4%的岗位拿¥10-20K 说明:广州泰迪科技工资统计来自于近一年35条工资数据,数据取决于岗位样本。仅供参考。 ¥10-20K 51.4%的岗位拿 ? 岗位...https://m.jobui.com/company/12591385/salary/
4.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司 查企业 基本信息: 广东泰迪智能科技股份有限公司,于广州市市场监督管理局登记,成立于2013-05-17,注册资金为726.2091万人民币,法人是张良均,位于广州市黄埔区西成中街17号C栋601房。 公司介绍: -- 广东泰迪智能科技股份有限公司...https://www.cbi360.net/hhb/jqbk_1577844.html
5.广东泰迪智能科技股份有限公司广东泰迪智能科技股份有限公司招标采购专栏,每天实时更新有关广东泰迪智能科技股份有限公司招标公告、企业采购、拟在建项目等一系列商业信息,查询更多广东泰迪智能科技股份有限公司信息尽在比地招标网。http://www.bidizhaobiao.com/company_215964556470472704.html
6.教育大数据行业发展现状及前景战略规划建议报告8.3.5 新开普电子股份有限公司——高校大数据及人工智能实验室 1、企业基本信息 2、企业经营情况 3、企业业务架构 4、企业教育大数据产品研发 5、企业教育大数据解决方案 6、企业教育大数据项目案例 7、企业业务布局战略&优劣势 8.3.6 广东泰迪智能科技股份有限公司——高校大数据实训平台 ...https://maimai.cn/article/detail?fid=1846094883&efid=fVq5WNoRddfGQrd6lI_77A
7.ak.akvtc.cn/mokoi11三一集团认为,由于罗尔斯公司控制人为中国公民,奥巴马和CFIUS对罗尔斯公司的风电场项目做出选择性执法,侵犯了罗尔斯公司享有的平等保护的宪法权利。 国家明明规定的“工本费”,到了“一卡通”这里,却变成了“成本费”。-——。 在野党方面,当然不会认同安倍政权的自说自话。民主党代表海江田万里反驳称,“涨工资...http://ak.akvtc.cn/mokoi11_29/243914.html
8.泰迪智能科技产教融合实训基地课程价格简介怎么样广州学习培训泰迪智能科技产教融合实训基地怎么样?好不好?进入大众点评网广州学习培训频道,查看泰迪智能科技产教融合实训基地简介、课程、价格、电话、交通线路、营业时间、促销团购、图片视频、用户评价等信息,真实消费口碑带给您更好的学习体验!https://www.dianping.com/shop/H5WbxAdSBO1cODhY