数据蜂巢 - 轻量级数据处理平台
演讲简介:
批量与实时的数据加工同步系统,支持 join,union,where 和用户自定义逻辑同步,支持从 MySQL 到 MySQL、ES、Cassandra、JDQ、JMQ 等目标端的同步。平台使用分布式架构,具有高可用及负载均衡等特点。
贺思远 京东物流 架构师
嘉宾介绍:
2015年加入京东物流,10年工作经验,6年数据处理及相关研发经验,曾任职于亚信,奇虎等公司。
数据库架构设计一次搞定(上)
演讲简介:
由沈剑老师全程出场,系统性地讲解数据库架构,历时3小时,让大家能够将数据库架构一次搞定,如果你所在的单位已经完成了数据库架构设计,也能通过本次深入的讲解,进行对比与经验总结。
数据库,是每一个技术人工作中都会接触到的,在工程师日常工作中,除了根据业务模式设计表结构,根据访问模式设计索引结构之外,还需要设计什么呢?
作为架构师,在数据库架构设计上,至少四个方面是需要系统性考虑的:
一、如何保证数据库的高可用
(1)读库高可用,如何保证?
(2)写库单点,如何消除?
(3)服务层,站点层,如何高可用?
二、如何提升数据库的读写性能
(1)索引为何会降低读性能?
(2)一主多从真的好么?
(3)数据库写入性能如何线性提升?
三、如何保证数据的一致性
(1)主从有延时,如何保证一致性?
(2)缓存与数据库,如何保证一致性?
四、如何保证数据库的扩展性
(1)表要增加一个属性,如何扩展?
(2)数据量又暴涨了,该怎么办?
(3)数据要迁移了,如何不停机?
(4)分库之后,夸库分页如何实现?
系统性思考,每一个方向上的行业佳实践,希望大家有收获。
沈剑 快狗打车(原58速运) CTO
嘉宾介绍:
互联网架构技术专家,快狗打车 CTO,“架构师之路”公众号作者;曾任百度工程师,58同城技术委员会主席,58到家技术委员会主席;现任快狗打车 CTO,负责快狗打车技术体系的搭建;本质,技术人一枚。