大数据领域中新兴的最佳实践

大数据革命正在顺利进行。我们知道,有趣的并非数据之大。而且,大数据也与这20多年来熟悉的把文字和数字数据存储在关系型数据库中并试用SQL进行分析非常不同。大数据的格式和内容非常丰富:非结构化的自由文本,高度结构化的关系型数据,向量,矩阵,图像,名称-值集合。

最大的冲击在于,标准关系型数据库和SQL根本无法存储或者处理大数据,并且已经触及了其处理能力和扩展的极限。关系型数据库所不能处理的不仅仅是更多的数据格式,还包括处理过程中的需要迭代的逻辑,复杂的分支,特殊的分析算法等。SQL是一种声明型的语言,它的语法强大,但是却是固定的。大数据通常需要过程语言,并且可以创建任意新的逻辑。

其次的冲击在于,基于简单的过滤和汇总的切片和切块正在转换为分析。报表,仪表盘,即席查询依旧会重要,但是大数据最佳的利用方式是整合若干未经过滤的巨大的数据集,数据集中将会包括历史数据和实时数据。

DAMA 中国 2013第一季度DAMA北京会员分享活动

 2013年3月23日下午,DAMA China在北京举办了2013第一季度DAMA北京会员分享活动。

 
DAMA China会员王曙先生主持了本次沙龙活动。参加本次沙龙活动的建行总行车春雷先生、工商银行程中涛先生、北京CA侯爱华先生、MTC杨彤先生、Informatica杜绍森先生、长城资产管理公司李彬先生、中国电信焦利博士、CMA吉雅先生,石竹薛勇先生、中国移动设计院李志宏先生、叶杰燎先生和张少华先生、新奥集团李志伟先生、李红伟先生、张静芳小姐、肖静怡小姐和黄翼、艾特世纪宾军志先生和杜永强先生,中国标准化研究院曾繁仰先生、中国科学院信息研究所张英杰先生、神州宏图胡德平博士、数据堂肖永红先生,群环域公司陈修杰先生、夏明武先生和张月震先生和DAMA中国刘凯先生等。

 

各位参会人员先自行介绍了各自从事的工作及对涉及到的数据管理领域;随后张月震先生从银行业数据治理的市场背景、基本概念和实践经验等角度分享了他的理解和经验;与会的数据管理专家对本次活动的讨论话题均表示出了浓厚的兴趣,大家展开了热烈的讨论。

中国数据管理协会(DAMA中国)胡本立会长拜访中国银行业协会

          2013年3月7日下午,中国数据管理协会(DAMA中国)胡本立会长一行数人到金融街拜访了中国银行业协会系统服务部赵成刚主任,胡本立会长介绍了DAMA的定位、会员组成以及近期工作重点和关注目标,赵成刚主任介绍了中国银行业协会的定位,近几年的工作情况以及近期在科技管理上的工作重点;双方同意未来可以在金融业数据管理方面的培训认证,标准化、行业实践推广等方面展开进一步的探讨和合作。从南京过来的田景熙教授、DAMA中国副秘书长虞舜旭、北京会员刘凯,群环域公司王曙等DAMA中国会员参与了此次会谈。

生命华冠,信息为王 —— 一个企业信息工作者的遐思

生命华冠,信息为王
—— 一个企业信息工作者的遐思
引子
如何认识这个世界?
如何认识企业?
如何认识信息在企业中的作用?
我们如何自觉的去进化,以获取更大的竞争优势?
这是写这篇文章的初衷。但是,我想表达的,也许远远超出这个范畴。
一、子在川上曰,逝者如斯夫
世界是运动的。在我们可观察的世界里,这运动将我们带向熵增,还是熵减?
所谓熵增,就是遵循热力学第二定律,趋向终极的平衡态,空间中所有各点没有差异,没有万事万物,只有一事一物。尘归尘、土归土。

我会成为 “金融数据论坛.中国2013”支持单位

我会成为 2013年1月10日由传商在上海主办的“金融数据论.中国2013”(www.bbzgroup.cn/fida)支持单位。此次论坛将汇聚超过150位企业高管如:总裁/执行总裁/总经理销售总监/市场总监/技术总监,分析师,金融工程总监...等, 分别来自银行/证券公司/基金公司/期货公司/保险公司/数据供应商/科技供应商共同探讨金融数据服务业的发展趋势和用户需求,领会及借鉴行业先行者投资战略,洞悉新技术、新应用、拓展与业界同仁的合作关系。我会会员胡乃静教授将代表我会在大会发言!

热点话题:

- 获取金融数据的重要因素—速度/质量/数量  

-量化投资和程序化交易

- 创新和可持续发展:风险和数据管理的实践  

- 寻找低延时和数据成本的平衡点

 

会员夏明武分享《电信行业数据挖掘与大数据》心得体会

DAMA China 北京会员聚会活动于12月1日星期六下午在北京成功举行,网融众成、神州数码、光大银行、蓝讯、MTC、大唐电信、华创国富和群环域等公司的会员和对电信大数据应用感兴趣的朋友参加了此次聚会。

夏明武(微博:@夏明武)在会上给大家介绍了电信行业数据挖掘的情况,分享了自己对大数据应用的体会,最后还介绍了一个用于大数据挖掘的技术构架。参会人员交流非常热烈,大家一致表示这种聚会很重要,除了可以学习到技术知识,还可以更多地认识业界同仁,希望DAMA能够多组织类似聚会,推动数据管理行业的发展。

下面是活动现场图片。

 

会员胡乃静教授在第七届COINFO论坛代表我会发言

我会成为由中国科学技术信息研究所主办的第七届COINFO论坛支持单位,论坛于1122日至25日在北京与南京召开。上海金融学院信息管理学院副院长——胡乃静教授代表DAMA在北京会场发表题为——“大数据治理”的专题演讲。胡教授的演讲很受与会者欢迎,在演讲完毕后,很多与会者都询问主办方关于胡教授及DAMA的联系方式。主办方对胡教授的发言评价是应该把胡教授的发言放在第一个讲,非常有意义。下图是胡教授发言的会场照片。

数据治理和主数据管理共建共赢

主数据管理(MDM, Master Data Management),已经从领域内的新生事物,成长为在提供可靠的业务数据方面被广泛应用的成熟且可接受的技术。经常有人提到,成功的主数据管理中数据治理(Data Governance)是关键,确实如此吗?并没有足够的信息说明各种组织是采用何种方法来实现数据治理和主数据管理。

商业及投资银行业企业数据管理培训

DAMA ChinaDAMA International(国际数据管理协会)在中国的分会,它的目标是促进数据与业务的有机结合, 成为相关知识的一流交流平台,以帮助解决各业务中遇到的多层次多方面的数据挑战和问题

现代商业及投资银行业正面临持续的产品的创新,运营效率的提高,资本的有效利用,客户体验的改善及法律和法规的变化等挑战。无论是运行还是决策,它们最终都会在很大程度上既依赖于又会反映在数据上,企业数据管理正成为企业管理的重要组成部分。

在数据管理的培训和咨询方面,DAMA有它一流和独立的网络资源,可为企业提供高质量、定制的数据管理培训和咨询,并提供数据管理专业人士的认证(Certified Data Management Professional)DAMA的企业数据管理(EDM)培训强调专业知识与案例分析相结合,提高学员对数据管理和驾驭的能力

数据管理知识体系指南( DAMA-DMBOK)中文版前言

 前言
 

同步内容