跳至正文

“新瓶”岂能装“旧酒”?传统报表模式 VS. 敏捷BI分析模式实践

01—

大数据既记录着过去,也创造着未来。

同时,数据本身没有价值,数据分析和辅助业务决策才能创造价值。这就对业务分析师和业务经理如何高效地理解、处理、使用数据提出了要求。‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍在未来,那些深谙业务逻辑和分析方法的人,占据优势位置。

当然,喜乐君在最近的企业咨询实务中也发现,很多规模庞大、数据密集型企业依然深陷传统的开发模型,甚至面对政策风浪不惜开”历史倒车“。企业中提前看得见未来的少数关键用户,也不得不在组织惯性下临时降低”追求“,等待合适的时机才能推动组织的改变。本文,喜乐君试图介绍”传统报表开发模式“与”敏捷开发模式“(或曰DW+BI模式),以及彼此的优缺点。

02-传统开发模型的特征与问题

传统开发模式,是以“问题导向”、强调IT中间表构建、面向确定性问题的开发模型,常适用于业务分析水平较弱、IT主导数据和分析的公司。传统的开发方式典型特征如下:

  • IT部门作为开发主力,业务部门提供确定性分析需求
  • 依赖于SQL取数,通过view视图或BI工具(business information)固化查询请求,问题的粒度往往对应到SQL查询粒度

可以用如下的图示理解这个过程。

在这种开发模式下,围绕数据的存储、查询、呈现的任务都被视为专业工种,被视为是IT部门的“势力范围”,这个领地周围是沉重的技术壁垒。在这种认识之下,过于抽象的业务问题(包含过多假设)会被拒绝——因为难以转换为标准化、规范化取数过程;IT的响应是面向每个具体问题的——这是工作考核的基本单位,也是SQL取数的基本依据。

在这种模式下,随着业务部门的需求增加,就会出现如下的问题:

  • 需求持续增加,响应随之下降;问题更新变得困难。
  • 数据碎片化、需求碎片化,最终数据准确性和一致性成为双方的噩梦
  • 开发难以应对包含多个问题的主题分析、结构化分析
  • 数据库资源日渐被碎片化的数据查询所占用

在喜乐君的客户这里,就明显出现了上述的问题。从Tableau集群来看,Tableau后台进程几乎处于12小时全时忙碌状态。当然,忙碌的不是机器,而是机器背后背后的碎片化需求和碎片化查询。‍‍‍‍‍‍

起初,实时查询就能响应报表的呈现,随着报表增加,实时不得不转变为“定时抽取”从而加速呈现;随着报表进一步增加,所有计划争相占用资源,最终陷入困境。这就像电影院少数前排观众站起,最终导致全部人不得不站起来——资源消耗了,效果却重归于0。

这种情况下,系统设计和工具应用就要重新考虑当前和远期需求,转向DW和BI一体化的敏捷开发模式,正是当前的大趋势。

03—敏捷开发模型的特征和要求

敏捷开发模式,是强调业务用户的主动性、面向业务主题而非单一问题、追求持续迭代的系统方式。它在报表开发模型基础上,增加了多个逻辑层,适用了探索性问题分析的需求。

敏捷分析架构的关键假设是:熟悉业务逻辑的业务用户,应该成为数据分析的主力军。得益于技术进步和优秀工具(比如Tableau)的加持,像喜乐君一样的“平民数据分析师”不仅持续壮大,而且未来将占据业务领导的岗位。

在这种模式下,数据存储和数据查询分离、大批量数据预抽象和宏大主题分析相分离,从而既保持了数据规范性、数据一致性,而且为分析打开了全新世界。在转换过程中,喜乐君就为客户提供了如下的建议:

  • 独立于业务数据库设立数据仓库,高频使用的数据合理选择T-1数据提取,非高频使用选择实时连接。
  • 强化数据关系用关系模型,“自定义聚合SQL”常常是单一问题的反映,而关系模型是业务主题的反映。常用关键指标(比如利润率、客座率、同比)还可以置于关系模型中,简化分析师的同质化操作,提高指标一致性。
  • 通过“视图加速”“数据新鲜度策略”等前端技术,灵活加速视图访问,避免强化后端导致资源浪费

从传统报表到敏捷BI模型转变的关键,一个是大容量数据仓库的基础要好,足以支撑宏大主题的数据存储和即时呈现,另一个是业务分析师的能力跟得上工具的升级,让数据和工具转化为生产力。

所以,在项目过程中交付方法论和培训,几乎是和经典案例一样的关键工作;毕竟,只有”授之以渔“才能帮助客户真正实现转型。不能交付最佳实践的”实施顾问“只是低级开发者;不能交付方法论和培训的”咨询顾问“只是语言的机器。

在Tableau中,很多已经发布多年的功能一直被忽视,它们其实是敏捷分析体系中的重要支撑。比如高级的“虚拟连接”可以用于数据源控制和权限控制,比如“数据新鲜度策略”为数据抽取提供了更多灵活选择,比如“数据角色”为字段数据值的一致性提供了超级棒的规范检查等等。

04—工具是能力”变现“天花板

最近两年,”Tableau退出中国“的负面消息一直不绝于耳,早期传播这些”夸大其词“言论的还有一些自媒体,如今几乎都是竞争同行。虽然硕软(software ONE)一直在为国内老客户及其关联公司提供续费、增购服务,Salesforce战略合作伙伴阿里云的合作不日就会落地,喜乐君也曾经帮助诸多客户从Tableau官网获得正版授权,我们不得不接受”Tableau中国式微“的现状。

虽然如此,我们每个局内人也要清醒地认识到,工具是我们能力”变现“的“天花板”,如同冷兵器胜不了火枪,人类胜不了“三体”一样。我们可以接受工具层面的改变,但务必要谨慎落后工具和落后文化的“反噬”。

作为曾经的Tableau Partner,作为连续三年入围的Tableau Visionary,喜乐君之所爱,不仅仅是Tableau的优雅、灵活和专业,更是它可以帮助我们构建你对行业的专业理解,工具日渐熟练、业务认知持续升级,二者相互促进,最终帮助我们成为“更优秀的自己”。

环顾国内外,想依赖对Tableau的深度理解赢得Visionary荣誉已经没有什么空间,但是,借助于Tableau的专业、敏捷能力(DW/BI+ai)重建你所在行业的业务理解和深刻洞见,不管是零售业、制造业、航空业,还是互联网金融、酒店服务,目前市场上依然是大面积的空白。如果谁有这样的决心,喜乐君也乐意提供力所能及的帮助。

等待喜乐君的《数据可视化分析2.0》出版,我在畅想一个“Tableau在零售/制造/航空/互联网金融……中的高级应用”的连载计划,如果有更多行业内部人员合作,我们甚至可以做一个专业的数字化电子图书系列……

反观很多国产报表工具、大屏工具,他们或许可以帮我们面对当下的境地,却难以帮助我们看到未来。这些陷入并不断强化“形式主义”的工具,必然会被历史所淘汰。随着越来越多的“互联网原住民”毕业成为就业的主力,依然深陷Excel、SQL和复杂报表开发的用户,甚至连成长的机会都难以获得。

在成长的路上,希望有你有我,有Tableau。


Jul 1, 2023写于 海南岛环岛高铁

@喜乐君 |上海唯知唯识科技有限公司www.XILEJUN.com
Tableau Visionary 2021~2023

《数据可视化分析:Tableau原理与实践》2020
《业务可视化分析:从问题到图形的Tableau方法》2021
《数据可视化分析:原理与Tableau、SQL业务实践》2023·coming