概述
SUMMARY
平台架构
PLATFORM ARCHITECTURE
平台特点
PLATFORM FEATURES
数据汇集是对外提供的稳定高效、弹性伸缩的数据同步系统。致力于提供复杂网络环境下、丰富的异构数据源之间数据高速稳定的数据移动及同步能力。
智政数据中台对数据汇聚提供了业务方数据库进行抽取监控的智能服务,能对数据源头的数据资源能够进行统一清点,并能够在复杂网络情况下对异构的数据源进行数据同步与集成,包括对关系型数据库、NoSQL数据库、大数据数据库、文本存储(FTP)等数据库类型支持,支持离线数据的批量、全量、增量同步,支持分钟、小时、天、周、月来自定义同步时间。支持实时同步可以将源库中的数据变化实时同步至目标库中。
数据质量管理是中台数据可用性和可持续性的核心,为了保证对于用户数据的精细化质量管理,金沙娱场城app中台系统提供了内容离线计算引擎和UDF引擎。离线计算提供多种内建函数,适用于海量数据(GB、TB、EB级别)离线批量计算;UDF全称为User Defined Function,即用户自定义函数计算和数据清洗转换。
智政数据中台以用户单位实际为核心,利用盘点、规划、获取的数据管理模式实现单位数据资源的管理和完整呈现;同时通过元数据信息收集、数据血缘探查、数据权限申请授权等手段,解决"有哪些数据可用"、"到哪里可以找到数据"的难题,并且提升数据资源的利用率。
智政数据中台创造性的利用智能业务标签分类的模式进行数据模型管理,在规则配置和表名、字段名的定期校验过程实现针对用户业务主题域进行标签提取,以业务关系为导向,前置进行后期数据应用规划和再利用的模型管理。
数据中台不只是数据池,因此为了满足后期业务分析应用的实际需求,智政数据中台策略的基本理念是整合多样化数据开发服务,无论是指标和分析类的,还是画像类和大数据类的个性化前端应用不仅可以从数据中台获取标签库(DMP)数据,如果数据中台没有,智政数据中台还提供了数据开发平台,用户可以基于该平台访问到所有的数据并进行可视化开发。
智政数据中台业务资源可视化,是在理解客户复杂的场景、复杂的业务资源的基础上,以更简化易懂的可视化数据屏展示,可以使复杂的数据简单化、通俗化、形象化,使人一目了然,便于理解和比较。对用户内部知识挖掘和信息直观生动感受起关键作用。