APP下载

每年1.2亿美元 Twitter计划将全球最大Hadoop集群迁移到谷歌云

消息来源:baojiabao.com 作者: 发布时间:2026-07-06

报价宝综合消息每年1.2亿美元 Twitter计划将全球最大Hadoop集群迁移到谷歌云

本周四,Twitter宣布将部分基础设施从物理数据中心转移到谷歌云平台上。需要说明的是,这家社交网站的大部分基础设施仍将保留在自己的数据中心,但是具体的工作量会利用谷歌的云计算平台。

具体来说,Twitter正在迁移其冷数据存储和灵活的计算Hadoop集群。这样做是为了提高公司工程团队处理Twitter数据平台的工作效率,而不会影响Twitter用户的体验。

对此,Twitter首席技术官Parag Agrawal在宣布时解释道:“Hadoop计算系统是我们数据平台的核心,Twitter运行着全球最庞大的多个大型Hadoop集群。事实上,我们的Hadoop文件系统在数以万计台服务器上放置的数据超过了300PB。”换句话说,该公司的基础设施会变得越来越笨重,所以它决定,用一种更好的方式跟上经济增长的步伐。

不过,迁移不会很快进行,并且Twitter也没有得到一个任务完成的时间表。但Parag Agrawal表示,希望这次动作可以给公司带来好处。

“迁移完成后,将有助于加快容量配置速度、提高灵活性、访问更广泛的工具和服务生态系统、增强安全性以及改进灾难恢复功能。”Parag Agrawal说,“从架构上讲,我们还将能够为这类Hadoop工作负载分离计算和存储,这在扩展和运营方面有着许多长远的好处。”

当然,谷歌也很高兴,Twitter能成为自己的客户。

谷歌云首席技术官Brian Stevens在一份声明中表示:“Twitter的技术战略旨在满足其平台的需求,这与谷歌云在全球范围内提供的服务恰好相一致。谷歌云平台的数据解决方案和可信赖的基础设施将为Twitter提供其平台所需要的技术灵活性和一致性,我们期待与他们团队展开长期的技术合作。”

其实,在Twitter宣布这一决定的三天前,谷歌刚刚与另一家领先的科技公司Fitbit 签署了一份云计算协议。作为该项目的一部分,这一健身追踪器制造商将使用谷歌的云平台处理其设备收集的生物特征数据,并将其与电子健康记录相结合,用于医疗领域。





2018-05-05 03:31:00

相关文章