科百科
当前位置: 首页 范文大全

数据中台深度思路(一文读懂数据数据中台)

时间:2023-08-01 作者: 小编 阅读量: 2 栏目名: 范文大全

一、数据中台的定义

数据中台被誉为大数据的下一站,由阿里兴起后,百度、美团、京东等知名企业都纷纷调整组织架构,发力技术中台与数据中台建设。似乎人人都在提数据中台,但数据中台到底是什么?数据中台是一种数据管理体系,在企业中是独立的部门,为数据挖掘而建,最重要的目标是支持各部门业务数据和提供计算服务。数据中台的本质就是“数据仓库 数据服务中间件”。这么说是不是难以理解?我们用养生茶来举个例子。门店前台(业务部门)销售供各种效果的花茶,比如美白祛斑、排毒养颜、补气养血、健脾理气(各种业务应用)。但这些都需要专业员工(技术部门)在店铺后台精准抓配,否则性质相悖或比例不合理可能会适得其反。但是当客流越来越多,等待抓配的时间过长会造成大量的客户流失。这时店长则对工作流程进行优化,让后台员工提前按不同功效所需的比例抓取称重做成小茶包(数据产品),顾客到店后若需要三周的美白祛斑和补气养血便可以各取三袋包装(业务应用)。

后台员工制作小茶包的过程便是构建了一个数据中台,它让产品更快到达前台顾客手中并获取价值。 ThoughtWorks 技术雷达峰会上,数据和智能总监史凯总结说,“数据中台是聚合和治理跨域数据,将数据抽象封装成服务,提供给前台以业务价值的逻辑概念”。

二、数据中台的优势

数据中台要做四个方面的工作分别是“采集”、“存储”、“打通”、“使用”。采集就是要采集各条业务线的业务数据、日志数据、用户行为数据等有用的数据。存储就是要用更加科学的方式存储数据,一般采用三层建模的方式,让收集上来的数据形成公司的数据资产。打通就是要打通用户的行为数据和用户的业务数据,如电商用户的浏览,点击行为和用户的支付业务数据,就要做到打通。使用就是就打通的数据赋能业务人员,领导展进行决策,做到数据反哺业务。

其核心功能是“数据汇聚整合”、“数据提纯加工”、“数据服务可视化”、“数据变现”,使数据应用变得更加方便快捷。同时由于数据中台项目成果能见度高、容易出成绩,对现有组织框架影响小,因此迅速被企业所认可。

三、如何构建数据中台

  1. 数据模型

按照数据仓库规范分层开发模型,实现数据的标准化,多采用维度建模。数据中台中的模型具有通用性,一些数据挖掘模型如果使用频次较高,也可以沉淀到数据中台中。数据建模一般分为2个步骤:确认事实表,分析业务的生命周期,明确业务的关键步骤。在进行指标定义的时候是否覆盖了本主题语中的全部指标,判断哪些指标可以通过加减乘除计算得到等。确定维度,粒度是模型设计的关键,太细的粒度不利于上层数据分析汇总,太粗的粒度又不能满足前段多维度个性化查询需求。基于此,模型设计时候一般考虑分层,层级越往后,粒度越粗。冗余维度也是需要考虑的,设计冗余的维度可以避免统计中过多的关联导致复杂的计算逻辑,影响性能。

  1. 数据资产

数据仓库中已构建了一些模型,但是只有在数据孤岛被突破时,这些模型才能被称之为数据资产。在进行指标库的规范化之后,才可以将其组合为个性化的中台组件,以满足立足于业务的指标需求以及资产管理。

  1. 数据治理

数据治理是一整套完整的组织、制度、技术管理行为。数据治理项目的范围通常包含:组织建设、数据安全、数据开发、数据质量、元数据管理、数据价值等几个模块。通过统一数据口径,打破数据隔阂,疏通原本拥堵在各个业务系统的数据堰塞湖,让其汇流到数据中台的汪洋大海之中。

  1. 数据服务

数据中台最重要的就是要对外提供统一的服务能力。数据服务包括提供给开发者,让开发者能够快速、简单地访问数据服务;对于业务分析人员可以让他们轻松地进行算法分析,包括模型管理、可视化编排流程,算法模型发布等功能。

关于MagicBI数预智能MagicBI数预智能成员主要来自微软、阿里、百度、字节等公司的⼤数据团队,我们的使命是“简便每⼀次分析,只为每⼀位⽤户”,公司主要做下⼀代的搜索式分析,帮助企业打造⼀站式企业搜索百科,通过类似百度搜索的⽅式查询数据,应用可解释AI、自然语言分析等技术,实现数据分钟级地⾃动化洞察,⽆需过多培训,同时打通PC端与移动端,支持语音输入,满足任何⼈、任何时间、任何地点、任何方式进⾏数据洞察,实现企业的数字化升级,业务⼈员不⽤学SQL,也能做分析,提⾼业务决策效率。

    推荐阅读
  • 杨老师10个金句(用九十个春秋修炼了三个)

    杨老师10个金句董子华1960年冬,我们全家随中建一局从四川德阳北上大庆,在安达落脚后,62年我考进安达县一中。杨老师看了也连连点头。于是,在他的指导下,我做了一些修改后,定名为《歧路与新途》。结果当年学校“十一”征文,《歧路与新途》评上了一等奖。当时学校有个校刊《习作》,《歧路与新途》连载三期。当年我们年组有十个班,每个班的语文课老师都把《歧路与新途》当范文讲过。

  • 精英律师酒会是哪一集(男女主角色简介)

    《精英律师》是由刘进执导,靳东领衔主演,蓝盈莹、孙淳、田雨、刘敏涛、朱珠、代旭主演的都市律政剧。该剧围绕权璟律所的职场江湖,讲述了以罗槟、戴曦为首的一群法律从业者,为守护公平正义、为职业理想奋斗的故事。该剧于2019年12月20日在东方卫视、北京卫视首播,并在爱奇艺、腾讯视频同步播出。戴曦虽是罗槟的助理,却与冷静理性的罗槟有着截然相反的个性,甚至还因为理念差异与其频发冲突。

  • 鲺怎么读(鲺字组词)

    接下来我们就一起去了解一下吧!鲺怎么读“鲺”读音:[shī]。节肢动物,身体扁圆形,像臭虫,头部有一对吸盘。寄生在鱼类身体的表面。塘鲺,又称塘角鱼、胡子鲶。

  • 二十四孝图谁给的鲁迅(中学生读鲁迅先生的二十四孝图我们怎么做好神助攻)

    2月,陈独秀在《新青年》发表了《文学革命论》一文,正式高举起文学革命军的大旗。他明确提出反对文言文,提倡白话文;反对旧文学,提倡新文学的运动,成为五四新文化运动革命的纲领和宣言。鲁迅先生在五四新文化运动中,以他最勇猛热忱的战斗,成为文学革命的伟大旗手,《二十四孝图》即写于这个时期。所谓《二十四孝图》,是一本讲述中国古代二十四个孝子故事的书,配有图画,主要目的是宣扬封建的孝道。

  • 辽宁铁岭包括哪几个县(辽宁铁岭的这个镇)

    事实上,铁岭的城市规模在辽宁省14个地级市中排名最后一名。就是昌图县下辖的八面城镇。昌图本身就是铁岭若干区县中最大的一个,面积4324平方公里,户籍人口超过100万。昌图县城昌图镇位于县境南部,八面城则是县境北部的中心城镇。八面城南距昌图县城45公里,东距吉林省四平市区只有20公里,是铁岭乃至辽宁省最靠北的重镇。1954年辽东、辽西合并为辽宁省,同时昌北县撤销并入昌图县。

  • 四岁失去左腿逆袭成为单腿舞王 为陪孩子6年拒接商演

    在翟孝伟看来,自己与其他人的区别只是到达目的地的方式不同。在体育队,翟孝伟用了三个月时间,达到了国家全国运动会冠军级别的成绩。"单腿舞王"翟孝伟,靠梦想和生命的韧性迎来了他人生的高光时刻。而后,在一场又场的直播里,翟孝伟再次感受到了一名舞者在舞台上的价值。翟孝伟发现,他的观众年龄跨度很大,从四五岁的小孩到六七十岁的大爷,但是他希望传递给每个人的都是正能量。

  • 毛笔写哪种字体比较好(不同的字体要选择不同的毛笔)

    假定以狼毫毛笔书写,笔锋较健且尖,关于回锋、逆笔,有必要更用心方能抵达作用。篆书用笔结体上,大篆接近于甲骨文,结体参差有致,呈天然质朴之美。小篆的规划是以大篆演化而来,其结体较大篆更为规整齐律,呈匀称整饰之美。其用笔不但纯用中锋,而且笔势更为圆转流通,显得朴茂端重。习学篆字大都有恰当笔龄,握笔恰当稳健,因而可选用羊毫毛笔来书写,特别长锋羊毫或长锋兼毫更能臻于至善境地。

  • 云南最有代表性的地方(猜你想认识这六个云南人)

    “阿卡人”又被称为“跨境民族”,大致分布在云南南部、缅甸东北部、老挝北部、越南西北部。日常祭祀活动必须在女人的房间进行。也有好奇者称“阿卡人”为“露奶族”。由频繁的祭祀活动,可知“俐米人”对大自然的虔诚和对神灵的顺从。除了祭祀,“俐米人”最欢乐的节日,就是大体上与火把节同期举行的“摸奶节”。三天的“摸奶节”,是未婚男女出门赶集、找对象的隆重节日。相比之下,最为重视“摸奶节”的是鄂家镇。

  • 五种描写方法(五种描写方法是什么)

    五种描写方法肖像描写:通过对容貌、神情、姿态、服饰、音调的描写,来揭示人物性格的一种描写方法、例如:她有着乌黑的头发,粉红色的外套称托出她那水灵灵的脸蛋。