视频演讲: Twitter Heron: Streaming at Scale

栏目: 服务器 · 发布时间: 6年前

内容简介:符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意

个人简介

符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意分享工业化成果,在多个学术会议,大数据相关峰会,以及学校做过专题演讲。此外,我们在 2011年开源了Storm,后者成为目前业界最流行的分布式实时分析框架。分布式领域水深, 我也是初窥门径,目前也在编写实时分析相关技术书籍,很希望可以和大家多多交流,合作。

视频演讲: Twitter Heron: Streaming at Scale QCon是由InfoQ主办的全球顶级技术盛会,每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来,已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区,演讲嘉宾依据热点话题,面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

推荐系统实践

推荐系统实践

项亮 / 人民邮电出版社 / 2012-6-1 / 49.00元

内容简介: 随着信息技术和互联网的发展,人们逐渐从信息匮乏的时代走入了信息过载(information overload)的时代 。在这个时代,无论是信息消费者还是信息生产者都遇到了很大的挑战:对于信息消费者,从大量信息中找到自己感兴趣的信息是一件非常困难的事情;对于信息生产者,让自己生产的信息脱颖而出,受到广大用户的关注,也是一件非常困难的事情。推荐系统就是解决这一矛盾的重要工具。推荐系统......一起来看看 《推荐系统实践》 这本书的介绍吧!

HTML 压缩/解压工具
HTML 压缩/解压工具

在线压缩/解压 HTML 代码

在线进制转换器
在线进制转换器

各进制数互转换器

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换