演讲主题:腾讯大数据实时体系的架构和应用
简介:介绍腾讯实时数据平台(TRC)实时接入,计算,存储的平台体系架构,如何利用可视化的IDE提升业务开发的效率,以及基于实时计算体系下的业务应用,例如:实时广告推荐,用户画像,监控等等
演讲嘉宾:张文郁 腾讯数据平台部 工程师
2010年加入腾讯负责分布式计算平台,集群调度的开发设计,现任数据平台部实时计算中心业务开发组组长,负责实时计算体系的建设 和业务推广,对分布式计算,流计算有丰富的应用开发经验。
演讲主题:实时分析海量日志
简介:运维日志、用户日志蕴藏着许多重要信息,如何实时挖掘其价值?如何把日志这种非结构化的数据转化为结构化数据?如何快速查询日志? 1、分析传统使用数据库、Hadoop分析日志的不足; 2、日志处理流式架构:抽取关键字段,建全文索引,进行关联分析; 3、Splunk与日志易的架构对比。
演讲嘉宾:陈军 日志易创办人兼CEO
拥有17年IT及互联网研发管理经验,曾就职于Cisco、Google、腾讯和高德软件,历任软件工程师、专家工程师、技术总监、技术副总裁等岗位,负责过Cisco路由器研发、Google数据中心系统及搜索系统研发、腾讯数据中心系统和集群任务调度系统研发、高德软件云平台系统研发及管理,对数据中心自动化运维和监控、云计算、搜索、大数据和日志分析具有丰富的经验。他发明了4项计算机网络及分布式系统的美国专利,拥有美国南加州大学计算机硕士学位。
演讲主题:基于Storm的美团实时计算应用实践
简介:以Kafka, Storm为代表的实时计算技术,提供了不同于MapReduce的另一种大数据解决方案,更好地解决了海量数据处理的时效性问题。我们将从需求、架构、应用和优化等方面介绍美团在实时计算技术方面的应用和实践经验。
演讲嘉宾:鞠大升 美团技术专家
负责日志收集系统和实时计算平台的建设和优化,专注于大数据相关技术,在分布式系统和流式计算等方面积累了丰富的经验。