5/30~6/12重要Container新闻精选
#失败经验 #Spotify
误删50节点K8s丛集为何3小时才能复原?Spotify揭自家事故幕后经验
线上音乐串流服务Spotify一位基础架构工程师David Xia,在今年欧洲KubeCon大会上分享了自家Kubernetes丛集一次意外事件。拥有上亿用户的Spotify,旗下开发者高达1千人,经常要在上万台VM上部署程式码。Spotify主要使用了GCP云端服务,在云端容器服务GKE上拥有3套生产丛集,分别负责欧洲、亚洲和美国,每小时会自动备份一次。
2018年11月时,有一次工程师为了测试GKE的新功能,新增了一个测试用的丛集,完成测试后,工程师要删除这个测试丛集来节省资源,却不小心删除了负责美国区用户的一个50节点的丛集。David眼看着删除指令关闭了一个又一个节点,问遍同事如何紧急停止这个删除指令,“完全没办法阻止,只能重建丛集。”他坦言,后来Spotify足足花了3.25小时才重建了这个丛集。
为何这么久?重建过程中,他才发现,丛集建立Scrips有臭虫,参考文件的内容不完整也不尽正确,导致他们设计的丛集建立程式,无法反复使用。一个月,Spotify试图将防止误删丛集的做法,列入自家的开发管理规范中,并采用了基础架构管理工具Terraform来避免丛集部署的意外,但是,这又引发了另一起事故。这次是要将两个现成丛集合并成一个新的丛集时,建立新丛集时因为权限不够而失败,工程师后来扩充了权限后才能执行。尽管合并工作顺利完成后,却导致Terraform误判丛集需要异动,而删除了整个亚洲区丛集,甚至连美国区丛集也一起删除。
David表示,出错难免,但失败也要有因应计划。后来,Spotify采取了3个因应对策,第一是执行K8s服务合并时,分批进行。第二是改变在K8s上登录服务的作法,第三是建立K8s实例出错时,可以快速由非K8s实例接手的备援机制。
#失败经验 #Datadog
SRE注意,要小心Kubernetes常见十大类问题
监控工具服务商Datadog两位工程师Laurent Bernaille和Robert Boll在今年欧洲KubeCon分享了自家经验中,管理Kubernetes常遇到的十种问题。Datadog投入Kubernetes专案超过2年多,自家服务也大力拥抱,最大规模的一个K8s丛集高达2千个节点,平均K8s丛集节点数也多有1,000~1,500之多。第一类问题是DNS管理问题,而且最常造成K8s事故的问题也多半是DNS问题。第二类常见问题则是任务启动失败而导致映像档抓取失效。第三是kubectl命令列工具操作出错。再者,应用程序Pod排程没有考虑到新节点,Log档10倍速度暴增塞满储存空间、大量副本和重制导致Pod失踪、Cassandra丛集内有鬼(未预期的操作)、部署程序越来越慢、容器化过程出包、关超慢的Pod关闭过程(Termination)。他们提醒,要避免出错得特别留意4件事,使用管理Pod的DaemonSet要小心,认清DNS管理向来很难,云端基础架构不见得很透明,最后则是容器不一定真的顺利容器化了。
#GKE #云端排程
Google正式推出云端排程工作服务,GKE也能自动派工
Google正式推出其云端托管的排程工作(Cron Job)服务Cloud Scheduler,使用者可以用Cloud Scheduler来触发任何批次、大资料或是云端基础设施操作,而且这个功能不只可以在GCP上使用,还能从用户本地端或是第三方资料中心来触发目标工作。包括GCP容器服务GKE、Compute Engine、Cloud Run以及Cloud Functions等多项GCP服务,甚至可以是在本机端应用程序,都可以透过Cloud Scheduler来自动派工。更多报导
#Fargate #基础架构管理
Pulumi开源基础架构即程式码框架Crosswalk,能简化AWS各类部署工作
基础架构即程式码供应商Pulumi开源了一个可用于部署AWS工作负载的框架Pulumi Crosswalk for AWS,提供基础架构即程式码元件,并内建AWS最佳实践,帮助用户根据需求,将应用程序部署到AWS上。可支援多种AWS服务,包括无服务器服务Lambda和API Gateway,还有容器服务ECS以及Fargate,以及像是热门的Kubernetes服务EKS、跨网络的VPC和SecurityGroups,而监控服务Cloudwatch Dashboards与Alarms等都有支援。由于Crosswalk的模块建构在AWS的原生功能模组之上,用户可以自由地使用高阶元件,或是使用低阶平台原语,也能根据需求混合使用。更多报导
#DevOps #Git
强化Azure DevOps程式码提交机制,微软释出Multi-Cherry-Pick扩充套件
为了让Azure DevOps开发者,可以更简单地同时对多分支的应用提交,微软释出了PR Multi-Cherry-Pick扩充套件,该套件是使用git Cherry-Pick指令,能够自动应用程序码变更到多个分支上。扩充套件Multi-Cherry-Pick的名称来自git指令Cherry-Pick,这是用来接受一个或多个现有的提交(Commit),并将每个提交的更改当作新的提交,应用到不同的分支上的操作。更多报导
#架构重构 #Kubernetes #IBM
IBM花2年改用K8s重新打造自家云端平台,部署上万内部应用的现代化IT新架构首度公开
2年前,IBM展开了旗下云端平台产品的大整顿,不光只是重整品牌,还找来了20年前开发出IBM第一代SOA和Web产品的IBM Watson和云端平台首席架构师Andrew Hately,大力采用Docker、Kubernetes、Linux和Cloud Foundry,设计出全新的现代化IT架构。3年前,IBM开始研究跨云管理架构,决定大力投入Kubernetes开源专案,2年前,IBM悄悄地展开了自家内部平台的架构改造任务,甚至不惜重构自家云端平台,要将大部分的IBM软件和云端平台,都搬上Kubernetes。IBM先从数据库平台开始着手改造,例如将天气预测应用改部署到IBM云上的Kubernetes环境中,后来更进一步扩大到所有的分析和AI产品,都转而部署到Kubernetes环境上。Andrew Hately表示,去年终于完成了这个庞大的平台重构计划,除了用来管理基础架构上运算、储存和网络的控制台程式,以及基础架构的虚拟机器(VM)不是采用Kubernetes,IBM其余的云端服务,甚至内部所用的上万支应用程序,几乎全都搬上了Kubernetes。完整报导
责任编辑/王宏仁
更多Container动态
- 红帽和容器储存新创联盟,要打造K8s上的HCI平台
- Information Builders分析软件开始提供Docker映像档安装版本,方便用户部署到公云
@资料来源:iThome整理,2019年5月
相关文章
- YouTube更新违反规定政策,提升惩处透明度和一致性
2023-12-31 14:00:52
- 传苹果将把中国iCloud正式交给本地化经营 苹果手机icloud换区存储操作
2023-12-27 18:34:43
- 刘德华代言什么手机?刘德华成华为Mate 60 RS非凡大师华为5G新手机代言人
2023-09-26 21:55:08
- WebOS新系统:Palm Pre手机最新款高价登港
2023-06-23 15:39:14
- 帮助企业组织对抗勒索软件,资安通报机构设立防护专区,可协助事前、事中与事后因应
2023-06-22 09:36:10
- 蔚来全系产品降价3万 取消免费换电 换一次电池180元
2023-06-12 17:27:49
- 电商平台三巨头开打最大规模折扣 价格战再次打响
2023-03-05 18:58:40
- 爱立信节省成本裁员四千人 爱立信全球员工总数五分之一
2023-02-24 22:27:29
- 蜜芽关停近况,八位数重金买三字顶级新域名mia.com也关闭
2023-02-23 16:18:14
- 联想CEO杨元庆:联想集团需要裁员32%削减部分业务支出
2023-02-18 12:45:25
- 蓝色光标2022营收亏损18亿 客户预算减少明显
2023-02-18 12:40:08
- 三星工厂或将80%生产转至越南 因本地劳动力成本上升
2023-02-17 23:09:16
- 香港八达通卡如何激活?没用失效过期余额怎么办
2023-02-17 18:34:51
- 中兴通讯被曝将裁员20% 称只裁国外的
2023-02-17 18:33:26
- 苹果新iPhone15Pro手机终于改用USB-C(火牛)数据线??Lightning充电接口退出
2023-02-17 16:57:22
- 突发!蓝色光标曾为中国民企500强龙头 如今业绩亏损断崖下跌
2023-02-16 14:31:19
- 三星发布自家carplay车载中控系统 Car Mode for Galaxy 可以连接carplay吗?
2023-02-14 00:53:17
- Opera浏览器宣布集成ChatGPT 一键生成网页内容摘要
2023-02-14 00:32:08
- 谷歌google计划重返进入中国市场?但结果可能令你失望
2023-02-13 16:57:15
- Zoom紧急裁员1300人 佔员工总数15%
2023-02-08 14:59:11
最新资讯
- YouTube更新违反规定政策,提升惩处透明度和一致性2023-12-31 14:00:52
- 美国法院裁定阿里须为Squishmallows玩具侵权案答辩2023-12-28 19:59:34
- 小米汽车传员工3700人 雷军称小米汽车不可能卖9万92023-12-28 19:41:57
- 吉利飙逾6% 电动车品牌极氪新车款极氪007昨上市 预售价格22.99万元2023-12-28 19:30:28
- 日本丰田汽车厂11月全球产量创新高2023-12-28 19:26:02
手机
- 中国11月手机出货量增34% 5G手机出货量2709.2万部2023-12-28 19:27:57
- 荣耀发布新一代旗舰荣耀Magic5系列,新款上市价格分期0首付3999元起2023-03-06 16:12:32
- 美国商务部指违禁,长江存储被美国拜登制裁名单面临停工裁员2023-02-17 18:41:53
- 苹果Apple iOS车载系统CarPlay支持哪些更多汽车品牌2023-02-02 17:33:27
- 香港去哪买三星手机回来吗? 买香港便宜售价手机市场地点和网站2023-02-02 11:03:11
数码
- 华为5G芯片正式亮相:预示华为将发首款5G手机2023-08-31 13:22:33
- 腾讯传计划放弃虚拟现实VR硬件计划2023-02-17 23:32:30
- 三星手机份额大跌!三星手机中国市场份额变化国内仅剩3%2023-02-01 17:06:15
- 三星手机份额大跌在中国没市场了!国内市场占有率仅剩1%国外比苹果销量高2023-02-01 16:59:53
- vivo发布2022 vivoNEX手机极简易浏览器下载:简洁流畅无广告!2022-12-02 17:29:30
科技
- 中兴受美国制裁事件 被罚了20亿美元过程事件始末 中兴被制裁后公司现状2023-11-02 22:12:46
- B站怎么炸崩了哔哩哔哩服务器今日怎么又炸挂了?技术团队公开早先原因2023-03-06 19:05:55
- 苹果iPhoneXS/XR手机电池容量续航最强?答案揭晓2023-02-19 15:09:54
- 华为荣耀两款机型起内讧:荣耀Play官方价格同价同配该如何选?2023-02-17 23:21:27
- google谷歌原生系统Pixel3 XL/4/5/6 pro手机价格:刘海屏设计顶配版曾卖6900元2023-02-17 18:58:09