视频演讲: Twitter Heron: Streaming at Scale

栏目: 服务器 · 发布时间: 8年前

内容简介:符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意

个人简介

符茂松,摩尔定律逐渐失效,系统设计者再也无法简单地通过硬件升级来获得巨大的性能提升;但人们需要处理的数据规模和对结果的响应速度需求,增长得越来越快。这时候,我们希望可以把过去的单机任务分割给许多计算机进行并行处理。我们需要分布式系统,从资源的分布式管理,分布式消息分发,分布式计算,到分布式存储等等。我目前在Twitter 工作,关注分布式系统领域,包括分布式实时分析,分布式消息分发和分布式存储。 另一方面,我致力于将理论研究工业化,和团队成员一起设计实现了 Storm/Heron等实时处理框架。我们很乐意分享工业化成果,在多个学术会议,大数据相关峰会,以及学校做过专题演讲。此外,我们在 2011年开源了Storm,后者成为目前业界最流行的分布式实时分析框架。分布式领域水深, 我也是初窥门径,目前也在编写实时分析相关技术书籍,很希望可以和大家多多交流,合作。

视频演讲: Twitter Heron: Streaming at Scale QCon是由InfoQ主办的全球顶级技术盛会,每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来,已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区,演讲嘉宾依据热点话题,面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

智能优化方法

智能优化方法

汪定伟 / 2007-4 / 37.10元

《智能优化方法》主要介绍近年来产生发展的多种智能优化算法。包括为人熟知的遗传算法、禁忌搜索算法、模拟退火算法和蚁群优化算法;近年来已成为研究热点的粒子群优化算法;还有尚待普及的捕食搜索算法和动态环境下的进化计算。书中讨论这些算法的产生和发展、算法的基本思想和理论、基本构成、计算步骤和主要的变形以及数值例子和实际应用。为了方便读者学习,各章之后还附有精选的习题、思考题及相关的参考文献。 本教材......一起来看看 《智能优化方法》 这本书的介绍吧!

HTML 编码/解码
HTML 编码/解码

HTML 编码/解码

XML、JSON 在线转换
XML、JSON 在线转换

在线XML、JSON转换工具

XML 在线格式化
XML 在线格式化

在线 XML 格式化压缩工具