苏宁数据中台架构实践
演讲简介:
数据中台概念在18年随着 ToB 的兴起,越发火热,透过现象看本质,数据中台本质还是为了更好的将数据服务出去,支撑业务。但数据不是从天而降,数据的产生涉及:业务部门、数据采集、ETL、计算、存储等多个环节,数据质量、数据管理、数据建模、数据口径一致性,也严重制约着对外服务能力。
正因为数据本身的复杂性,数据中台应运而生,通过系统化、产品化的方案,帮助我们管理数据、 与业务打通,将数据服务出去。苏宁数据中台的建设构想,始于16年底,在17年6月启动,经过2年左右的建设,已经初见成效,在这过程中我们不断完善对数据认知、对业务的认知,我们越发相信,数据中台本质提供的是对数据的认知能力。
翟小青 苏宁易购 IT 总部技术经理
嘉宾介绍:
现担任苏宁易购大数据中心技术经理,加入苏宁以来一直从事数据中台系统研发,致力于通过系统化、产品化的方案,帮助我们管理数据、与业务打通,将数据更好、更快捷的服务出去。不仅对 Druid、ES、Spark 等数据分析引擎,有深入了解,对数据分析的业务场景也有丰富的认知。
大数据时代的数据治理
演讲简介:
本演讲以大数据时代的数据本身所具有的特点以及数据应用的难点为出发点,系统的介绍了大数据时代数据治理的主要组成部分,以及各部分应当具备的主要功能。同时,本演讲也介绍了部分行业典型的数据治理案例,从而为大家带来解决大数据应用困难的一些思路与启发。
薛勇 石竹软件 总经理
嘉宾介绍:
薛勇先生毕业中国人民大学,获得硕士学位;有着近20年的 IT 从业经验,从事数据治理工作将近15年,是国内早一批从事数据治理产品研究与推广的人;参与并见证了中国数据治理市场从起步到全面暴发的全过程;从2004年国内个元数据项目开始,15年来参与的数据治理项目有:中国移动总部、中国移动25个省公司、中国电信总部、中国联通总部、中国银行总部、中国农业银行总部、烟草总局,山东地税、江苏国税、中航信、中央债券结算、人民银行征信中心、民生银行、华润集团、中信集团等,将近上百个大型企业的数据治理项目;薛勇先生拥有 IPMP C 级证和项目管理师等专业资质,同时获得两项数据治理的专利。
数据治理方法论及实践
演讲简介:
当前教育行业大数据发展迅速,数据质量问题严重阻碍着大数据的价值呈现,而数据治理迫在眉睫。在这个主题里,主要分享在围绕智学网的数据仓库建设过程中,遇到的一些数据问题及相关解决方案,围绕这些案例,构建一些工具的方法论,更好的支撑数据治理的落地。
王龙生 科大讯飞 教育事业群中台数据部门经理
嘉宾介绍:
教育事业群中台数据部门经理,主导完成了讯飞教育大数据仓库系统建设及数据治理相关工作,构建了智学网的数据运营系统。
美团配送实时数仓建设实践
演讲简介:
美团配送是业界领先的智能物流平台,拥有全球领先的实时配送网络,为用户和商家提供任意时间的即时配送、同城配送和跑腿配送服务。美团配送业务的快速发展,从系统的稳定性、高并发到对数据质量的高要求和高实效性,对技术研发带来了更多的挑战。美团配送在配送时长1小时以内,平均配送时长约30分钟的即时配送业务,过程涵盖了用户、商户、骑手和平台互相交错的四元关系,美团配送技术团队建立了配送的“超脑”配送系统,从用户下单,商家接单到骑手的接单送达,进行准确的时间、运力的预估,通过动态定价、智能派单、网络规划等系统来提升配送效率、优化用户体验、降低配送成本,对于实时数据需求的效率和质量都带来极大的挑战。本次分享主要为大家介绍配送实时数仓的发展历程、关键技术和成功实践。
李金康 美团 大众点评技术专家
嘉宾介绍:
2013年加入美团,现任美团配送数据组数据应用组负责人,长期负责配送数据架构的系统开发与架构升级,主导配送实时数据建设、配送 BI 系统建设、实时特征平台建设,为海量骑手及各级管理团队和算法团队提供信息化支持;拥有多年互联网研发及技术管理经验,在大数据、高并发、高可用架构设计等领域积累了丰富的经验。
并行不悖 - OLAP 在互联网公司的实践与思考
演讲简介:
互联网业务,通常以保障高并发、高性能、大容量的 OLTP 业务为要务,但与之相关的,各种 OLAP 需求也是对公司运营、发展状态的直观展示和反映,也是至关重要的数据库功能。如果简单的将这两大类需求在一套数据库中实现,则很容易产生各种问题,比如性能问题、容量问题。那么如何解决这些问题,响应好各种需求?如果设计和实践 OLAP 架构,让两大类需求相互关联并行不悖?从数据角度看,这些需求的本质是什么?本次演讲,就分享一下我在互联网公司的 OLAP 实践与思考,使用 Greenplumn 和 PostgreSQL 的经验和注意事项,希望能给大家带来借鉴和启发。
赵飞祥 斗鱼网络 DBA
嘉宾介绍:
现在斗鱼网络从事数据库相关工作,Oracle 10G OCP,11G OCM,Oracle YEP 年轻专家,8年数据库运维和架构经验,对 MySQL、Oracle、PostgreSQL、Greenplum、MongoDB 等多种常见数据库有丰富的运维实践经验,掌握与数据库相关的前后端架构和 DevOps 实现技术,擅长数据库架构设计、维护优化、数据流转、Shell 和 Python 开发;乐于技术交流,以网名 yumushui 进行了大量的技术总结和思考分享。
用大数据来优化数据管理与数据湖建设
演讲简介:
1. 滴滴数据建设概述;
2. 如何将大数据+NLP+知识图谱技术用于数据管理与数据湖内容建设;
3. 对数据平台智能化的设想。
张茂森 滴滴出行 数据专家
嘉宾介绍:
滴滴出行数据专家,2017年加入滴滴出行,负责滴滴数据平台部门工作,之前在阿里巴巴负责大数据产品与平台的研发工作。