本文始發于：雲栖社群
時間：2020-06-02
原文連結：
https://yq.aliyun.com/articles/763340
2020年初，新冠肺炎疫情爆發。春節後，企業要複産，百姓要複工，政府需盡快保障各項工作有序開展。如何精準防控，統籌疫情期間的各項工作，有序穩健恢複經濟社會秩序，成為當務之急。對此，阿裡巴巴快速反應，除各種物資支援、政策響應外，還配合多地政府開發健康碼，充分運用大資料手段助力疫情防控和複工複産，實作數字化防疫，讓政府相關人員更快速、更清晰、更精準地進行防控管理決策。
健康碼開發期間，SRE團隊發揮團隊優勢，緊急召開專題會議，成立專項應急小組，協調各方資源，并在第一時間趕往各省市，配合相關團隊完成資源準備、業務壓測、業務優化等工作，保證了多地健康碼的順利上線。健康碼上線後，SRE團隊持續對各項關鍵名額資料進行監控，確定健康碼應用可以承受業務高峰壓力并順利運作。
1 河南健康碼——一“碼”當先
河南省疫情防控指揮部依據《國務院應對新型冠狀病毒肺炎疫情聯防聯控機制關于依法科學精準做好新冠肺炎疫情防控工作的通知》等相關法律法規，結合河南省實際情況，制定“健康碼”管理辦法。項目3月5日正式啟動，按照局方要求3月9日上線投入使用，團隊接到通知提前一天3月4日第一個到達現場。
團隊到現場後，首先梳理資源需求與系統部署架構，提前完成資源開通準備及遠端環境準備，以保障其它團隊可遠端傳遞。其次評估系統壓測目标，并對系統進行多輪多場景壓測，壓測過程中發現并處置1處業務邏輯問題、3處産品優化、1處APIServer資源瓶頸擴容問題，最終達到壓測目标并設定AHAS限流控制保障系統穩定運作。安全方面全部使用https域名證書并接入WAF，對系統安全通路進行加強。運維監控方面接入ARMS、TAC、封神、銅雀等運維監控巡檢平台保障系統運作穩定。系統順利于3月9日18:00正式上線，截至3月15日健康碼累計申領人數380W。接下來政府将對全省各市級推廣，阿裡雲SRE團隊将繼續支援客戶保障健康碼業務穩定。
2 海南健康碼——一心戰“疫”
面對新型冠狀病毒肺炎疫情的迅猛爆發，針對海南省精準防控、疫情統籌與經濟社會秩序恢複的指導方針，海口市政府與市科工信局等機關立即展開多方協同，要求第一時間上線疫情申報相關應用，即海南省健康一碼通應用。這是首個全省健康碼應用，政府采取多種方式推廣，需要在上線第一周内完成全省900多萬市民的注冊和使用。
由于海口城市大腦雲平台資源已經接近飽和，阿裡雲SRE-TAM團隊緊急召開專題會議，迅速成立專項應急小組，與AM團隊一起争分奪秒協調海南其他項目組，完成緊急資源釋放、擴容及相關并網，并通過全鍊路壓測、資源的提前儲備（ECS、SLB）、應用同步改異步（MQ）、資料庫讀寫分離（RDS）以及業務限流（AHAS）等優化手段，為海南健康碼保駕護航。健康碼準時上線并向全省推廣，在此期間阿裡雲SRE-TAM團隊、應用團隊以及AM團隊聯合進行每日的護航保障，通過個性化運維監控方案實作關鍵資源、核心執行個體、業務名額等監控，并進行網絡相關保障，確定健康碼應用可以承受業務高峰壓力并順利運作。截止3月24日，健康碼應用注冊使用量達到300萬+，預計在4月底注冊使用量将超過1000萬。該系統将有助于更加科學高效地防範疫情，更好地服務廣大人民群衆安全，為打赢這場全民戰役貢獻一份力量！
圖2：海南健康碼成果圖
3 蘇州健康碼——阿裡速度
為解決大量外來人口返蘇複工的管理難題，提升人員流動效率，蘇州市政府、蘇州市疫情防控指揮部決定上線蘇城碼（蘇州健康碼）。阿裡雲數字政府華東大區江蘇團隊和集團GR團隊、螞蟻團隊、GTS團隊和資料智能團隊，從接到需求、立項、進場部署僅僅耗時40小時就完成了“蘇城碼”上線，這是除浙江省外第一個運用阿裡資料引擎短時間完成上線的城市，我們充分運用數字化防疫，為中國最強地級市打造便捷、高效的管理模式！
【與時間賽跑，火速拉齊，投入戰鬥】
客戶根據本地情況提出了很多定制化開發的需求，面對客戶需求，團隊快速分析、展開調研、拿出最終方案，客戶最終同意将整個系統部署在蘇州城市大腦平台上，充分發揮城市大腦在算力、資料融合方面的強大能力。
圖3：客戶現場讨論方案
【不眠不休展開部署】
确定方案之後，項目團隊不眠不休，火速在現場展開各項部署，與時間賽跑。數字政府和支付寶團隊項目經理在現場合理組織傳遞節奏和方案實施。資料智能的精兵強将，現場與客戶的各個專班展開對接，确定客戶各項需求的實施方案。GTS的傳遞同學精準實施，從硬體到軟體的全次元保證了項目上線。
客戶對于蘇州團隊的努力和付出非常感動和認可，蘇州市副市長江海同志親自到現場慰問項目團隊，感謝團隊成員争分奪秒為蘇州全市人民平穩複工複産所做出的努力。
圖4：市上司慰問現場項目團隊
【踐行客戶第一的價值觀，組織重保團隊力保穩定運作】
2020年2月22日晚9:30分，蘇州市疫情防控指揮部正式下發第9、10号公告，在全市正式推廣“蘇城碼”。在公告下發之後的2小時之内完成了40萬的健康碼發碼，平台瞬間流量激增，業務平台受到了極大考驗，現場GTS同學密切監控、随時排障，蘇州城市大腦平台經受住了考驗。
圖5：項目順利上線
為保證項目能夠長期穩定可靠地運作，GTS同學快速拉通GOC團隊建立項目重保機制，得到客戶首肯。江海副市長和李晶處長現場說，隻有把業務放在阿裡雲上才放心！并且表示要把蘇城碼在城市通行場景方面做有力探索，讓蘇城碼成為蘇州市民通行的電子碼。與此同時，也有其他政府部門開始思考蘇城碼與各自業務的結合，比如園林局考慮是否可以把蘇城碼和園林的進出和電子票進行結合，加強園林的管理和通行效率。
“一心戰一疫”，“客戶第一”！借助蘇州健康碼項目的火速上線，再次重新整理了健康碼快速上線的速度，既服務了客戶，也激發了團隊強大的戰鬥力，同時為數字政府在蘇州乃至江蘇的破局打下了堅實的基礎！
4 上海健康碼——健康出行
上海“一網通辦”依托移動端“随申辦”打造的“随申碼”于2月17日試點上線。依托上海市大資料資源平台彙聚的國家及本市公共管理機構資料，經過資料模組化、分析評估後，測算出紅色、黃色、綠色三種風險狀态供參考，賦予“随申碼”健康出行、防控管理的相關資訊。
結合新冠肺炎疫情防控的需求，随申碼的發碼與查碼量不斷攀升，系統負載不斷加大，阿裡雲GTS團隊迅速介入，幫助随申碼搭建高可用高可靠系統平台。GTS團隊用一個晚上的時間快速确定高并發方案，在确認方案後SRE團隊基于阿裡雲中國政務雲平台快速為随申碼搭建可擴充的高可用雲平台，TM和産品研發團隊基于雲平台部署定制化的資料智能碼引擎，并通過全鍊路壓測、應用彈性擴容、基礎架構優化、應用邏輯優化、業務限流（AHAS）等優化手段将随申碼的并發承載能力提升百倍以上。2月28日8:00阿裡雲-随申碼平台正式上線，承載的使用者并發突破萬次每分鐘，累計查碼量突破一千萬次，覆寫上海全部的兩千四百萬人口，并保持不斷的産品疊代，在後續的企業碼、親情碼業務中持續給與技術和資源支援。
圖6：項目人員加班加點保障上海随申碼上線
我們是阿裡雲智能全球技術服務-SRE團隊，我們緻力成為一個以技術為基礎、面向服務、保障業務系統高可用的工程師團隊；提供專業、體系化的SRE服務，幫助廣大客戶更好地使用雲、基于雲建構更加穩定可靠的業務系統，提升業務穩定性。我們期望能夠分享更多幫助企業客戶上雲、用好雲，讓客戶雲上業務運作更加穩定可靠的技術，您可用釘釘掃描下方二維碼，加入阿裡雲SRE技術學院釘釘圈子，和更多雲上人交流關于雲平台的那些事。