編輯推薦

√ 星光熠熠的技術翹楚

√ 匠心獨具的破局思路

√ 業界首創的一綫實踐

√ 韆錘百煉的專題精華

內容簡介

《高可用架構（第1捲）》由數十位一綫架構師的實踐與經驗凝結而成，選材兼顧技術性、前瞻性與專業深度。各技術焦點，均由極具代錶性的領域專傢或實踐先行者撰文深度剖析，共同組成“高可用”的全局視野與領先高度，內容包括精華案例、分布式原理、電商架構等熱門專題，及雲計算、容器、運維、大數據、安全等重點方嚮。不僅架構師可以從中受益，其他IT、互聯網技術從業者同樣可以得到提升。

精彩書評

　　這本成型於兩年前的書，完整地見證瞭技術社交圈剛剛興起的年代，充滿瞭時代感，讓我能夠迴憶起那段並不遙遠的愉快曆史。書中很多文章的作者在這短短兩年裏，已經迅速提升，成為瞭各個公司的骨乾人員。我很願意推薦這本書，相信它能為願意踏上技術巔峰的同學提供幫助。
　　——張亮 某大型電商網站架構部總監

　　係統的高可用架構梳理，各大互聯網公司的高可用實踐，能落地的高可用細節，相信不管在互聯網做技術多少年，閱讀本書後，你一定會有收獲，推薦。
　　——58瀋劍 架構師之路作者

　　2017年我國移動互聯網用戶已經突破7億，互聯網用戶可以選擇的服務越來越豐富。而互聯網服務的可用性，直接關乎提供這些互聯網服務的公司的營收和業績報錶。眾多的流量湧入互聯網公司的服務器，在高並發的場景下，使用高可用架構會有效改善服務的可用性。本書匯集瞭業界很多領先公司在高可用方嚮上的實踐經驗，以及在各類業務場景下實現高可用架構的實操案例，希望本書能給你帶來在高可用架構設計上的一些啓發。
　　——付海軍 時趣互動技術總監

　　很高興看到《高可用架構（第1捲）》一書的麵世，更高興看到楊衛華老師的“高可用架構”公眾號還在堅持運營，這是技術社區的福音。架構的重要性不言而喻，這本書裏除瞭我的篇章外，每篇文章都闡述瞭和架構相關的一個技術點，而且都包含瞭一綫研發人員的實際經驗，相信你會很感興趣並收獲多多。
　　——霍泰穩 極客邦科技創始人兼CEO

　　《高可用架構（第1捲）》在講述高可用架構的理論知識之外，更重要的是收錄瞭眾多知名互聯網公司專傢骨乾的一綫實戰經驗，包含瞭各個優秀團隊在麵對業界前沿的棘手問題時所做的探索和取捨，相信各位讀者在讀完本書之後會對架構這個話題有全新的認識。
　　——秦迪 微博平颱及大數據技術專傢

　　在最近這兩三年裏，國內的技術社群飛速發展，“高可用架構”便是其中的代錶，它匯聚瞭國內中的一批真正的技術專傢，專注技術的分享和交流。這本書是現在中國互聯網技術發展的一個縮影，見證瞭它從封閉走嚮分享和開放，從跟隨走嚮參與和引領。
　　希望每個工程師都能讀讀這本書，體會技術帶來的樂趣。
　　——溫銘 OpenResty Inc. 閤夥人，工程師

　　在學習編程時，我們有很多教程類的書籍可利用，但要學習架構，就很難有教程瞭。而這本書的內容是直接來自一綫的架構實踐經驗總結，雖然內容跨度比較大，但這正是在其他教程類型的書中很難學習到的，所以推薦給進階的研發人員。另外，即便同在軟件研發行業，細分起來，領域的區隔還是很大的，看看同行的一些實踐經驗，即便不能拿來直接用，但對解決自己麵臨的難題還是會有幫助的。
　　——王淵命 青雲容器平颱負責人，前微博架構師，技術寫作者

目錄

第1 章 高可用架構案例精選 1

郭斯傑／1.1 Twitter 高性能分布式日誌係統架構解析 1

顔國平／1.2 騰訊基於用戶畫像大數據的電商防刷架構.16

王淵命／1.3 如何設計類似微信的多終端數據同步協議：Grouk 實踐分享.26

周 洋／1.4 如何實現支持數億用戶的長連消息係統：Golang 高並發案例33

唐福林／1.5 雪球在股市風暴下的高可用架構改造分享.46

麥俊生／1.6 億級短視頻社交美拍架構實戰59

劉道儒／1.7 微博“異地多活”部署經驗談69

孫宇聰／1.8 來自Google 的高可用架構理念與實踐75

那 誰／1.9 深入理解同步／異步與阻塞／非阻塞區彆84

第2 章 高可用架構原理與分布式實踐.88

黃東旭／2.1 Codis 作者細說分布式Redis 架構設計88

霍泰穩／2.2 給你介紹一個不一樣的矽榖.98

金自翔／2.3 解耦的藝術——大型互聯網業務係統的插件化改造110

瀋 劍／2.4 從零開始搭建高可用IM 係統117

陳宗誌／2.5 360 分布式存儲係統Bada 的架構設計和應用.129

張 亮／2.6 新一代分布式任務調度框架：當當Elastic-Job 開源項目的10 項特性143

付海軍／2.7 互聯網DSP 廣告係統架構及關鍵技術解析152

王衛華／2.8 億級規模的Elasticsearch 優化實戰170

楊衛華／2.9 微博分布式存儲考試題：案例講解及作業精選179

李 凱／2.10 架構師需要瞭解的Paxos 原理、曆程及實戰.184

溫 銘／2.11 OpenResty 的現在和未來193

第3 章 電商架構熱點專題.205

張開濤／3.1 億級商品詳情頁架構演進技術解密.205

楊 超／3.2 大促係統全流量壓測及穩定性保證——京東交易架構.232

呂 毅／3.3 秒殺係統架構解密與防刷設計.248

王富平／3.4 Lambda 架構與推薦在電商網站實踐.257

楊 碩／3.5 某公司綫上真實流量壓測工具構建.265

第4 章 容器與雲計算.273

陳 飛／4.1 微博基於Docker 容器的混閤雲遷移實戰.273

高 磊／4.2 互聯網金融創業公司Docker 實踐287

高永超／4.3 使用開源Calico 構建Docker 多租戶網絡.297

彭哲夫／4.4 解析Docker 在芒果TV 的實踐之路310

王關勝／4.5 微博基於Docker 的混閤雲平颱設計與實踐323

第5 章 運維保障333

王 康／5.1 360 如何用QConf 搞定兩萬以上服務器的配置管理.333

尤 勇／5.2 深度剖析開源分布式監控CAT347

楊尚剛／5.3 單錶60 億記錄等大數據場景的MySQL 優化和運維之道359

秦 迪／5.4 微博在大規模、高負載係統問題排查方法379

秦 迪／5.5 係統運維之為什麼每個團隊存在大量爛代碼387

秦 迪／5.6 係統運維之評價代碼優劣的方法395

秦 迪／5.7 係統運維之如何應對爛代碼404

第6 章 大數據與數據庫415

王 勁／6.1 某音樂公司的大數據實踐.415

王新春／6.2 實時計算在點評.431

王衛華／6.3 百姓網Elasticsearch 2.x 升級之路.446

董西成 張虔熙／6.4 Hadoop、HBase 年度迴顧457

常 雷／6.5 解密Apache HAWQ——功能強大的SQL-on-Hadoop 引擎.469

蕭少聰／6.6 PostgresSQL HA 高可用架構實戰.482

王晶昱／6.7 從NoSQL 曆史看未來.495

楊尚剛／6.8 MySQL 5.7 新特性大全和未來展望.508

譚 政／6.9 大數據盤點之Spark 篇521

蕭少聰／6.10 從Postgres 95 到PostgreSQL 9.5：新版亮眼特性532

畢洪宇／6.11 MongoDB 2015 迴顧：全新裏程碑式的WiredTiger 存儲引擎551

王曉偉／6.12 基於Xapian 的垂直搜索引擎的構建分析561

第7 章 安全與網絡572

郭 偉／7.1 揭秘DDoS 防護——騰訊雲大禹係統572

馮 磊 趙星宇／7.2 App 域名劫持之DNS 高可用——開源版HttpDNS 方案詳解580

馬 濤／7.3 CDN 對流媒體和應用分發的支持及優化595

馬 濤／7.4 HTTPS 環境使用第三方CDN 的證書難題與最佳實踐611

蔣海滔／7.5 互聯網主要安全威脅分析及應對方案613

前言/序言

　　推薦序1技術沒有高低
　　高可用架構居然成書瞭，厚厚的一本，讓人贊嘆。從TimYang建立這個社群開始，我就一直參與其中，然而一切發生得如此之快，如此之自然，也是齣乎意料。我想，這也是俠少約我寫序的原因之一吧。
　　這裏麵有太多熟悉的朋友，確切地說，我跟他們中的大多數人都是很好的朋友。他們都樂於將自己的所知所學分享給社區，而我也每每從他們那裏學到各種技術。
　　你可能會驚訝於本書內容的跨度之大，從業務係統到數據庫，從容器到安全，從社區建設到行業觀察，包羅萬象。同時，講解內容又實實在在，沒有很多空話，偶有沒說清楚的地方，肯定會有問答環節來補充說明。因為都是群內聽講的人提問，所以問答也非常契閤主題。
　　這就保證瞭本書在特定章節上，比大多數同類書要講得透徹、明白，適閤初級人員閱讀。同時，又對中高級技術人員有更大的價值。我們經常說架構師對技術的把握要有深度，也要有廣度。廣度從何而來，隻能是讀萬捲書，閱韆套係統積纍而來。本書無疑是一個很好的素材源泉。
　　具體的內容我不在此贅述，相信大傢仔細閱讀後會收獲頗豐。這裏我還是介紹一下背後的這群人——這個由分享者和聽眾共同組成的大群體，這個稱為高可用架構群的組織。
　　我經常講，高可用架構這些群，像極瞭《一代宗師》裏的金樓。因為你仔細看，技術圈就是互聯網時代的武林。大傢聚在這裏，是因為在自己的領域裏有所建樹，都身懷絕技麵對這個世界。所以我們會看到驕傲和拼搏，也會看到爭論。因為很多人也都想著，功夫是一橫一竪，站著的纔有資格說話，錯的，躺下。
　　但是幸運的是，他們找到瞭一種方式，來平息這種內心的躁動，就是通過在群裏進行分享和答疑來進行“比武”。你說你的方式可行，就來分享吧。隻要你的話我能懂，隻要你的迴答能使我滿意，我便服氣。而且慢慢地，大傢也都認可瞭這種方式，技術領域之寬廣，並非一個人可以統領。而承認一個人在某一個領域比你強並不丟人，更並不意味著你不可以在另外的領域獨領風騷。
　　隨著時間的流逝，這種技術驅動的交流也慢慢發酵成瞭真正的友情。金樓戲裏最讓我感動的一幕。葉問比武前，金樓裏的各位師傅都齣來幫忙。三姐說，八卦手黑，小心。賬房說，形意拳霸道，韆萬彆輕敵。勇哥說，追風趕月彆留情，你一定得響啊。
　　因為過去的這些坦誠交往，那些原本會被視為對手的人，在你遇到睏難的時候，可以堅定地站在你身後。而當你遇到各種行業上的新事件，也會在群裏錶達自己真實的聲音，期待從群裏接收來自各方的諍言。
　　一群所學為一人學，一人可頂一群人。
　　這種健康的氛圍，在技術圈裏也愈發變得可貴。現在互聯網在迅猛發展，很多新的技術被發明和引入瞭進來，碰撞和爭論在所難免。但有一些圈子卻變得特彆吵鬧，為瞭一個框架，為瞭一個語言就可以爭到頭破血流，發齣各種攻擊和謾罵，甚至堵上事業和人品，想想實在是讓人遺憾。
　　高可用架構的這群人，他們都是工作在各個公司的一綫技術管理人員，掌握著業界先進的工程技術。但其實他們也很普通，跟你一樣，每天都在默默得工作和學習。不一樣的是，他們可以聚在一起，輸齣這樣優質的內容。
　　他們對技術的追求，他們共同的性格特質，也許更值得你體會。如果看完本書，你能夠在技術理念有進一步的思考，那肯定是比看一本書本身收獲更大的。
　　“其實天下之大，又何止南北？勉強求全等於固步自封，在你眼中這塊餅是一個武林，對我來講是一個世界。所謂大成若缺，有缺憾纔能有進步，真管用的話，南拳又何止北傳呐？”
　　我在葉先生齣生的佛山旁邊，廣州，腦海中不斷迴響這段話。
　　一樂環信首席架構師兼雲通訊事業部總經理
　　推薦序2
　　如果去問架構師什麼是架構，可能會得到很多不同的答案，每個架構師都會對“架構”有不一樣的理解，當然這不分對錯，數據架構、應用架構、物理架構、組織架構等都是架構，甚至不僅在計算機行業，各行各業都會有類似的角色，但我覺得有一個核心的概念是共通的：架構必定是長期的生産活動中，經過深度思考，積纍下來的最佳實踐和可復用的閤理抽象。
　　作為Tim叔的朋友，我也是Tim叔發起的高可用架構微信群的早期成員之一，看著高可用架構群一步步發展起來，聚集瞭一大批一綫的互聯網架構師一起探討和交流技術和架構上的問題。同時這個群也是國內最早的一批嘗試“在綫群分享”這種形式的微信群，過去技術會議的分享受限於時間和空間，在它卻這種形式下變得更加靈活和輕量，同時也能更好地沉澱下來。這裏不得不提到Tim叔其人，雖然我不清楚技術群分享這個形式是否為Tim獨創，但是確是非常“Tim-ish”的一個形式，Tim是國內最早的分布式係統和高可用架構的實踐者，同時也是一個活躍的技術，Blogger，我大概從2009年開始訂閱Tim叔的Blog（後端技術），上麵有很多很有價值和深度的技術文章，也算是看著Tim叔的Blog成長起來的程序員。互聯網的分享精神，在這裏就是一個很好的體現。隨著近幾年國內的互聯網的蓬勃發展，新技術層齣不窮，行業內也湧現齣瞭很多優秀的工程師和架構師，Tim這兩年就聚集起這樣的一撥人，創造一個平颱，能讓大傢的經驗互相分享，思想互相碰撞，這本書就是一個很棒的階段性的産物。
　　在一名工程師在成長的過程中，是否培養齣“大局觀”是一個重要的轉摺點，而快速提升自己“大局觀”的方法之一就是多觀察彆人是怎麼做的，並從中分析優勢和劣勢，在你麵對不同的選擇時多看看彆人的思考過程，見多必然識廣，也許此時你並不能直接解決自己遇到的問題，但更重要的是吸取彆人的經驗，思考得更全麵。這幾年隨著互聯網以及移動互聯網的爆發，後端技術迭代的速度很快，新技術層見疊齣，從RDBMS到NoSQL再到最近的NewSQL；從單模塊到SOA再到微服務；從簡單的腳本部署和簡單的HA到容器化的自動部署及調度；從單機到分布式再到最近的雲和Serverless……麵對琳琅滿目的設計和工具，該如何做齣選擇，本書不會明確告訴你答案，但是會通過一篇篇實際案例和分享來拓展你的眼界和視野，在你麵臨選擇的時候能給到你一些啓發。
　　本書並不是麵嚮編程初學者的書，涉及一些比較深的內容，麵也很廣，建議有一定經驗並希望更進一步的工程師和架構師閱讀，你們一定會喜歡的。
　　再次感謝各位分享者和架構師，也感謝Tim和高可用架構團隊的工作人員！
　　黃東旭PingCAPCTO
　　2017年8月寫於海南三亞
　　推薦序3
　　我開始以為這是從理論開始的一本講高可用的書，結果我拿到電子稿後發現上來就是很多不同公司的具體高可用的架構案例，而且是精選過的案例。從案例切入，會更加直接直觀地讓讀者去瞭解高可用的架構，並且也提供瞭非常好的可參考的實例，如果讀者在自己的場景中遇到類似問題，可以直接參考。除具體案例外，本書還通過不同公司中的係統的設計、改造的經驗來介紹高可用的原理和分布式的實踐，這個做法也比較有特色，依然選擇瞭從具體的實踐經驗和具體的實例齣發，而沒有去憑空介紹很多道理，實踐性非常強，並且案例所涵蓋的範圍是非常廣泛的，和第1章的案例精選一樣，都來自眾的公司的實踐。結束瞭前兩章對高可用架構的案例和原理的介紹後，第3章用電商架構作為一個專題點進行瞭展開，在體量比較大的時候，利用電商的後端架構解決高可用還是有比較大挑戰的，一些電商的經驗還可以移植或者轉化到彆的係統當中，比較有參考價值。第4章從容器和雲計算切入，這對高可用來說是一個重要的基礎設施，不論基於公有雲還是自己在內部做私有雲亦或是采用混閤雲，雲都是現在後端繞不過去的一個話題，而說到容器，就等同與說到瞭Docker，其輕量化以及通過Image來快速部署應用的特點，也使得Docker得到瞭廣泛的應用。有瞭容器和雲的支撐，那麼如何在自身運維保障上能夠適配高可用的要求，則是第5章提到的內容。沒有高效的、自動的、可靠的運維支撐，是很難保障我們係統的高可用的。再接下來就到瞭大數據與數據庫的部分，做高可用也好，做水平擴展也好，有狀態的節點總是最難處理的，這個章節專門針對數據庫層麵去做瞭案例的分析，大數據本身不僅僅包括瞭狀態，還包括瞭計算，而大數據的計算往往是單個任務比較重的，那麼做到高可用的挑戰和處理我們很多前颱的並發更高但是處理時長短、消耗資源小的並發任務有很大不同，這也是第6章會介紹的內容。最後一章，介紹的是安全和網工，這個部分本身為整體應用係統提供瞭安全的防護和保障，進而使得從用戶層麵看係統是可用的。
　　本書的章節設置、前後的邏輯性很強，特彆讓我贊嘆的是全書所有章節都是具體的案例，沒有大套的理論、空洞的說教，都是從具體實際案例齣發來介紹，一方麵會給讀者更強的現場感，一方麵這些一個個具體的案例都是讀者可參考的，相信這本書會給讀者在高可用架構方麵帶來更多的信息和收獲。
　　曾憲傑現任美麗聯閤集團技術副總裁
　　推薦序4
　　記得我還在新浪工作的那會兒，作為一名職場工程師新人，很早就開始關注Tim的技術博客。在理想國際大廈裏也常見到Tim，但那時Tim對我來說是“隻可遠觀而不可褻玩焉”。
　　很多年過去，隨著自己在技術上的成長，我有幸加入到Tim組織的高可用架構群裏。高可用群裏的一項基本規則就是：大傢要積極做技術分享。當時作為相對年輕的成員，我有些焦慮，畢竟與群裏的大拿比較，我做的事情似乎不夠高大上。但在百度完成一段搶購類型項目後，我發現在項目中總有些值得提煉的技術可以分享，於是主動聯係瞭Tim並錶達瞭分享的意願。讓人意外的是，在Tim事先瞭解內容的情況下，我也順利地完成瞭一場人氣爆棚的群內技術分享，總體反饋是，效果不錯！事後也的確有同學聯係我，采用瞭我的一些思路在公司內實現瞭搶購方案，同樣，我也從高可用架構的其他分享裏升華瞭技術視野，自此，我感受到瞭技術交流的重要性。
　　近兩年我參加瞭不少技術會議，翻譯瞭技術書籍，也隨著團隊內不少同學嘗試圖文、現場的技術交流，能明顯感受到技術社區的活躍以及中國技術的快速崛起。當得知高可用組織要與博文視點聯閤齣品《高可用架構（第1捲）》一書時，我強烈支持，能夠讓更多的人學習到高可用組織這幾年的積纍，這是讓人興奮的！雖然本書中我分享的部分已經是兩年前的方案，但現在看來，其中的設計思想與問題思考依然有參考價值。在得到博文視點送來的樣書時，我又重新閱讀瞭書中一些大拿的技術分享，反倒相比之前通過手機閱讀文章有瞭更多的收獲！
　　所以，這本高可用架構一書，一定可以作為你技術進階路上常伴左右的好書！
　　呂毅鏈傢大數據部負責人
　　前言　　

　　成為一名優秀的架構師需要哪些條件？首先需要有紮實的編程理論基礎，對軟件運作的原理以及算法有深入的理解；其次還需要有豐富的實踐，能夠將理論與實際相結閤。除此之外，從他人優秀的實踐經驗中學習，是成為卓越架構師最有效的方法。筆者在剛開發微博之初，國內並沒有類似社交網絡的技術經驗，但在國外，Facebook、Twitter等公司的工程師發錶的相關實踐文章，給瞭筆者所在團隊架構師很多啓發，團隊也順利地搭建瞭自己的架構，成功應對瞭業務的飛速增長。

　　搭建高並發及高可用大型係統長期都是業界難題，Twitter在創建之初，也多次齣現不穩定甚至宕機的現象。不少架構師可能有同感，大型係統中任何一個小的模塊設計不慎，就可能會導緻部分用戶訪問失敗，甚至全站不能訪問的後果，給用戶體驗帶來巨大的傷害。因此在微博核心係統中，團隊中的架構師將係統可用性作為設計的首要考慮因素，如履薄冰，一路走來，終於在可用性方麵跟同類産品相比取得瞭更好的成績。類似的，係統可用性也應該是大部分互聯網係統架構最基本的要求，這也是筆者發起及參與高可用架構社區的原因。

　　係統的可用性在過去、現在以及未來都是架構領域最重要的一個環節，但是相關的知識並沒有太多現成的渠道可以獲取。物以類聚，人以群分，高可用架構技術社區聚集瞭業界關注互聯網架構的人群，並將各大一綫公司具有豐富 高可用架構（第1捲） 下載 mobi epub pdf txt 電子書

作為京東忠實客戶，東西均在京東采購，對於好的商品，統一評價：不錯(? ?•??• ?)?

質量好，服務好，物流快，價格閤適

架構解密：從分布式到微服務

還不錯，希望對自己有用，京東送貨就是快

架構解密：從分布式到微服務

開始學習架構知識，加油＾０＾~

湊單買的，內容還沒看，估計隻能提供些思路不會有具體的操作，拓寬思路用吧

湊單買的，內容還沒看，估計隻能提供些思路不會有具體的操作，拓寬思路用吧

看瞭一段，能學到些東西，都是實際經驗案例的精髓