首先我表达个人观点，运维数据统一治理并非自动化的先行条件，需要先把运维数据概念的定义以及自动化运维的覆盖范围厘清。我更倾向于配置管理是自动化运维的先决条件。先说说对运维数据的理解，我所认为有几类，一类是描述生产资源的数据即我们常说的配置数据，另一类是生产资源运...
摘要近年来，银行业不断推陈出新及迅猛发展的业务对数据建模提出了两点要求。一是要求模型比传统的业务系统有更强的场景驱动性，业务穿透性更强，即要求数据模型需通过新的数据不断的迭代优化，以适应新的业务需求。二是，数据在广度深度上的激增及应用场景的增加如客户管理、零售...
(more)大数据平台中适合存放数据量极大，而且是一次写入，多次读的应用需求，存储在HDFS分布式文件系统，采用多副本机制保障数据的安全和可靠影像类数据包括视频数据和图像数据，非常适合存放在HDFS中，系统将影像类数据进行切分，按照128MB大小进行切分，然后对每个128MB的数据进行多副本进行...
1 机器学习的发展和现状2017年，谷歌通过深度学习训练的Alphago，战胜了排名世界第一的世界围棋冠军柯洁而名声大噪。这也让人们感到机器学习和人工智能的强大。时至今日，无论是国外巨头谷歌、亚马逊和Facebook还是国内互联网领军者“BAT”，都在大力的研究人工智能，将人工智能...
(more)我们银行目前也在用FusionInsight大数据平台C8.0版本，实时数据可以放到HBASE里面，用HIVE ON HBASE的方式去处理实时的数据，SPARK SQL处理轻量级别的数据没有问题，大量的数据SPARK SQL 不合适，SPAKR 的计算单元RDD每一个动作都会有一个RDD产生对内存要求很高。...
CMDB建设为何会失败，很重要原因就是数据不准：1、数据不准在企业里面就是一个恶性循环，因为数据不准，大家不用，导致数据消费的少，更加不准，CMDB越来越边缘化。虽然有自动发现，但解决不了所有问题；2、真实的运维工作比我们想象的复杂，总有无法标准化、自动化的地方，运维人员作为一线人...
(more)从时间结构上看，CMDB和其他活动的因果关系分为两种：一种是先“变更”再更新CMDB，变更活动是“因”，CMDB是果。这种情况CMDB比较被动，你要么要(gui)求(qiu)人家改你的CMDB，要么想办法通过数据发现自动捕捉人家的变化。另一种是先更新CMDB，再实施变更。CMDB是因，变更活动是“果”。...
目前银行业很早已经认识到大数据的重要性，利用开源的技术组件来建立大数据平台整合行里的数据资源，从而进一步挖掘数据的内涵价值，支持银行业务。目前本人身处商业银行，所以我只能谈谈商业银行大数据平台推进和落地的大致情况。大数据平台在大中型商业银行已经落地开花，相应的...
