大数据革命正在顺利进行。我们知道,有趣的并非数据之大。而且,大数据也与这20多年来熟悉的把文字和数字数据存储在关系型数据库中并试用SQL进行分析非常不同。大数据的格式和内容非常丰富:非结构化的自由文本,高度结构化的关系型数据,向量,矩阵,图像,名称-值集合。
最大的冲击在于,标准关系型数据库和SQL根本无法存储或者处理大数据,并且已经触及了其处理能力和扩展的极限。关系型数据库所不能处理的不仅仅是更多的数据格式,还包括处理过程中的需要迭代的逻辑,复杂的分支,特殊的分析算法等。SQL是一种声明型的语言,它的语法强大,但是却是固定的。大数据通常需要过程语言,并且可以创建任意新的逻辑。
其次的冲击在于,基于简单的过滤和汇总的切片和切块正在转换为分析。报表,仪表盘,即席查询依旧会重要,但是大数据最佳的利用方式是整合若干未经过滤的巨大的数据集,数据集中将会包括历史数据和实时数据。
2013年3月23日下午,DAMA China在北京举办了2013第一季度DAMA北京会员分享活动。
各位参会人员先自行介绍了各自从事的工作及对涉及到的数据管理领域;随后张月震先生从银行业数据治理的市场背景、基本概念和实践经验等角度分享了他的理解和经验;与会的数据管理专家对本次活动的讨论话题均表示出了浓厚的兴趣,大家展开了热烈的讨论。
2013年3月7日下午,中国数据管理协会(DAMA中国)胡本立会长一行数人到金融街拜访了中国银行业协会系统服务部赵成刚主任,胡本立会长介绍了DAMA的定位、会员组成以及近期工作重点和关注目标,赵成刚主任介绍了中国银行业协会的定位,近几年的工作情况以及近期在科技管理上的工作重点;双方同意未来可以在金融业数据管理方面的培训认证,标准化、行业实践推广等方面展开进一步的探讨和合作。从南京过来的田景熙教授、DAMA中国副秘书长虞舜旭、北京会员刘凯,群环域公司王曙等DAMA中国会员参与了此次会谈。
生命华冠,信息为王
—— 一个企业信息工作者的遐思
引子
如何认识这个世界?
如何认识企业?
如何认识信息在企业中的作用?
我们如何自觉的去进化,以获取更大的竞争优势?
这是写这篇文章的初衷。但是,我想表达的,也许远远超出这个范畴。
一、子在川上曰,逝者如斯夫
世界是运动的。在我们可观察的世界里,这运动将我们带向熵增,还是熵减?
所谓熵增,就是遵循热力学第二定律,趋向终极的平衡态,空间中所有各点没有差异,没有万事万物,只有一事一物。尘归尘、土归土。
我会成为 2013年1月10日由传商在上海主办的“金融数据论.中国2013”(www.bbzgroup.cn/fida)支持单位。此次论坛将汇聚超过150位企业高管如:总裁/执行总裁/总经理销售总监/市场总监/技术总监,分析师,金融工程总监...等, 分别来自银行/证券公司/基金公司/期货公司/保险公司/数据供应商/科技供应商共同探讨金融数据服务业的发展趋势和用户需求,领会及借鉴行业先行者投资战略,洞悉新技术、新应用、拓展与业界同仁的合作关系。我会会员胡乃静教授将代表我会在大会发言!
热点话题:
- 获取金融数据的重要因素—速度/质量/数量
-量化投资和程序化交易
- 创新和可持续发展:风险和数据管理的实践
- 寻找低延时和数据成本的平衡点
DAMA China 北京会员聚会活动于12月1日星期六下午在北京成功举行,网融众成、神州数码、光大银行、蓝讯、MTC、大唐电信、华创国富和群环域等公司的会员和对电信大数据应用感兴趣的朋友参加了此次聚会。
下面是活动现场图片。
我会成为由中国科学技术信息研究所主办的第七届COINFO论坛支持单位,论坛于11月22日至25日在北京与南京召开。上海金融学院信息管理学院副院长——胡乃静教授代表DAMA在北京会场发表题为——“大数据治理”的专题演讲。胡教授的演讲很受与会者欢迎,在演讲完毕后,很多与会者都询问主办方关于胡教授及DAMA的联系方式。主办方对胡教授的发言评价是应该把胡教授的发言放在第一个讲,非常有意义。下图是胡教授发言的会场照片。
主数据管理(MDM, Master Data Management),已经从领域内的新生事物,成长为在提供可靠的业务数据方面被广泛应用的成熟且可接受的技术。经常有人提到,成功的主数据管理中数据治理(Data Governance)是关键,确实如此吗?并没有足够的信息说明各种组织是采用何种方法来实现数据治理和主数据管理。
DAMA China是DAMA International(国际数据管理协会)在中国的分会,它的目标是促进数据与业务的有机结合, 成为相关知识的一流交流平台,以帮助解决各业务中遇到的多层次多方面的数据挑战和问题。
现代商业及投资银行业正面临持续的产品的创新,运营效率的提高,资本的有效利用,客户体验的改善及法律和法规的变化等挑战。无论是运行还是决策,它们最终都会在很大程度上既依赖于又会反映在数据上,企业数据管理正成为企业管理的重要组成部分。
在数据管理的培训和咨询方面,DAMA有它一流和独立的网络资源,可为企业提供高质量、定制的数据管理培训和咨询,并提供数据管理专业人士的认证(Certified Data Management Professional)。DAMA的企业数据管理(EDM)培训强调专业知识与案例分析相结合,提高学员对数据管理和驾驭的能力。