参照中研普华产业研究院发布的《中国大数据产业市场规模预测》,2019年到2023年将是大数据产业市场高速发展的5年。伴随着大数据产业的快速发展,大数据的产品或客户项目的成功交付也显得越来越重要。本文将从数据架构的视角,来阐述大数据项目成功交付的关键要素。
基于TOGAF架构框架来看,业务架构(Business Architecture)、应用架构(Application Architecture)、技术架构(Technology Architecture)和数据架构(Data Architecture)共同构成了系统的架构域(Architecture Domains)。其中,典型的“4+1”数据架构,由逻辑视图(Logical View)、过程视图(Process View)、开发视图(Development View)和物理视图(Physical View),以及情景驱动(Scenario-Driven)这个核心来构成。
大数据本质上也是数据,因为这个“4+1”的数据架构同样适用于大数据。大数据的情景驱动(Scenario-Driven)这个核心由存储、计算和服务三个要素构成。就大数据项目而言,大数据的主体和客体,大数据的生命周期以及大数据的过程和流程将是主要的研究对象。从成功交付的角度来讲,核心在于“你之所需,我之服务!”。下面我们分别从大数据项目的特点、所面临的挑战、理论与实践、反思和总结等5个方面来诠释大数据项目的成功交付。
一、大数据项目的特点
涉及新技术面广、业务融合难度大和系统性更强是大数据项目的突出特征。从其涉及到的技术面上看,涉及到SQL、NoSQL 与NewSQL、庞大的Hadoop技术生态,以及机器学习、可视化等诸多方面。同时,还涉及大量的非IT的其他自然科学技术。大数据项目涉及到的技术面不仅仅是IT,而是一个综合的学科集。从其涉及的业务融合难度来看,大数据项目往往涉及多个主体、多个客体,多个来源、多个形态,从讲的最多的“多源异构”采集、到“纠结”的存储与计算、再到“难以验证”的数据服务,业务融合难度非常之大。从大数据项目的系统性来看,机器类人化、规律和不确定性并存的局面在成为常态,不停地在平衡战略规划 VS 商业价值、技术可行 VS 客户体验、“不确定”VS“确定性”,其系统性非常强。
二、大数据项目所面临的挑战
为“大数据”而“大数据”、与传统信息化、互联网割裂,成功与否难以衡量是大数据项目所面临的主要挑战,投入与产出往往很难成正比。传统信息化重工程思维(应用、交付服务,电子化、自动化---产品资源),互联网重产品思维(产品、运营服务,中台平台化、市场化---市场资源),大数据重敏捷思维(数据、价值创造,数据“会说话”,模式待明朗。走向融合是出路---数据资源)。从传统信息化到互联网、再到大数据的进程,也是从产品资源为核心、到市场资源为核心,再到数据资源为核心的进程。为“大数据”而“大数据”、与传统信息化、互联网割裂做不好大数据项目,融合的思维更有利于走向成功。
三、理论与实践:成功交付的“方法论”与“真功夫”
大数据时代之前的CMMI、敏捷与迭代这些方法论依然没有过时。大数据的运营是业务驱动的,产生价值、创新价值和传递价值是大数据运营的价值链,业务支撑和运营支撑是基础,外部服务和内部协同是目标,数据规划和数据治理是手段。从方法论而言,SEI和PMI是非常令人钦佩的两大家,其系统化、体系化长期引领着能力和过程管理,以及结果导向、收益导向和价值导向的多层级管理潮流。从SEI来看敏捷,能发现CMMI体系的设计非常具有包容性,敏捷与CMMI并非相对立,而是相融合。而PMI对待敏捷的方式更加彻底,已经将敏捷成为了PMBOK的一部分。
理论终究要归于实践,而真功夫来自于实战。动态变化、验证困难和管控复杂是大数据项目交付实战时面临的主要问题。而真功夫就在于养成前瞻性“本能”:能够提前处置、有备选方案,会权衡取舍。未来的世界是融合的世界,深度融合的软件工程方法、项目管理实施路径,深度融合的规范与方法论、实战经验是趋势。
大数据项目交付过程中,经验并不等同于真功夫,很多经验都是“伪经验”:仅仅是经历、重复或累积。方法论讲的是“从实践中来,到实践中去”,而真功夫强调的是将方法论的运用成为本能。
四、反思:大数据项目的成“因”败“果”
在大数据项目交付过程中,完全不做技术的PM,完全不考虑客户的DEV都是令人崩溃的;很多时候,1+1 <<2? 这确实很让人沮丧,但往往是我们难以回避的现状。在很多情形下,责任、动力和协作才是保障项目成功的重要因素。
大数据项目实施团队往往和客户有着不同的关注点,需求的范围也往往是蔓延的,交付的过程也难免会有失控。团队在完成一个又一个产品开发,一个又一个项目交付之后,会发现所积累的东西少得可怜。因此,一致的目标、系统的行动组织、共同的持续努力就显得尤为重要。从项目中走出来,培养自己日益强大的内心,学会把经验转化为成长就成为大数据人的必然选择。
五、总结:让大数据项目走向成功
如同《延禧攻略》中的经典台词:“这世上并没有多少凑巧之事,许多凑巧,事后清算,皆是人为。”大数据项目的成功源于项目经理的担当,源于项目团队的共同努力,源于有效的项目管理。而团队的认可、团队的成长和客户的认同都是项目成功与否的重要衡量标志。
何为成功交付?提供给服务对象想要的。 如何有效保障?把握服务对象所期望的。何为成功?取决于评价方。永远牢记:在大数据项目的交付过程中,我们是被评价方,客户认可了,我们才有机会拿“实力”证明自己。最难是第一步:能够有机会开始与客户的合作。
简言之,大数据项目成功的本质是——对客户期望的成功把握,核心在于切实做到“你之所需,我之服务!”。
联系客服