2017年中，無憂精英網(wǎng)上線剛剛2年，目前平臺已擁有7500萬個精英信息，匯集了超過5萬名獵頭，提供IT/互聯(lián)網(wǎng)、金融、房地產(chǎn)、汽車等行業(yè)的職位超過20萬個，其中“IT/互聯(lián)網(wǎng)/通信行業(yè)”日均在線職位近5W個。

我們匯總了2017年上半年無憂精英網(wǎng)互聯(lián)網(wǎng)行業(yè)的職位數(shù)據(jù)，為你展現(xiàn)排在前十位的熱門崗位的背景和專業(yè)要求等。

1、 JAVA開發(fā)工程師

背景

Java是世界上最受歡迎的編程語言之一，是目前最為普遍的開發(fā)平臺，也是目前最主流的計算機技術(shù)之一。Java憑借高效、安全、平臺獨立且可移植等特性而廣泛應(yīng)用于網(wǎng)站、移動平臺、數(shù)據(jù)中心等領(lǐng)域的開發(fā)。

由于Java應(yīng)用的廣泛性，Java的就業(yè)方向也十分廣泛。最為基礎(chǔ)的是Java程序員，是初級開發(fā)工作者，也是所有崗位實現(xiàn)的基礎(chǔ)；還有Java網(wǎng)站開發(fā)工程師，很多大型網(wǎng)站都是采用JSP編寫的；還有移動開發(fā)工程師，Android系統(tǒng)就是建立在Java的基礎(chǔ)上開發(fā)的，很多智能設(shè)備也是基于Java開發(fā)的。

Java軟件工程師的未來發(fā)展方向大致分為兩類：

一是成為管理人員，例如產(chǎn)品研發(fā)經(jīng)理，技術(shù)經(jīng)理，項目經(jīng)理等；

二是繼續(xù)他的技術(shù)工作之路，成為高級軟件工程師、需求工程師等。

專業(yè)要求

Java在IT界屹立不倒，對于Java開發(fā)人才的需求也有增無減，越來越多的人想要通過學(xué)習(xí)進入Java開發(fā)行業(yè)。那么，想要成為一名合格的Java程序員需要學(xué)什么呢？要學(xué)的東西很多，需要熟悉Apache、NginX、Tomcat、WildFly、Weblogic等Web服務(wù)器和應(yīng)用服務(wù)器的使用，熟悉面向?qū)ο蟮脑O(shè)計原則，熟悉基于JSP和Servlet的JavaWeb開發(fā)，熟練使用JSTL和EL編寫無腳本動態(tài)頁面，熟練使用Java語言進行面向?qū)ο蟪绦蛟O(shè)計等等。

2、測試工程師

背景

測試工程師，軟件質(zhì)量的把關(guān)者，工作起點高，發(fā)展空間大。我國的軟件測試職業(yè)還處于一個發(fā)展的階段，所以測試工程師具有較大發(fā)展前景。

目前傳統(tǒng)的軟件行業(yè)還是以軟件測試工程師為主，但是在新興的互聯(lián)網(wǎng)行業(yè)大多還是以QA來命名這個職位，也就是質(zhì)量保證。

專業(yè)要求

無憂精英網(wǎng)發(fā)布測試工程師崗位專業(yè)要求主要包括：1、熟悉性能測試的整體流程、方法，具備性能測試需求分析和設(shè)計能力；2、具備Java等語言開發(fā)經(jīng)驗；2、熟悉ORACLE 或MYSQL數(shù)據(jù)庫，并能熟練編寫SQL語句；3、熟練使用Linux操作系統(tǒng)，具有SHELL腳本編寫能力；4、具有搭建和維護復(fù)雜測試環(huán)境能力，包括APACHE,NGINX,JBOSS等測試環(huán)境。

3、C/C++開發(fā)工程師

背景

C/C++語言發(fā)展至今已經(jīng)有近40年歷史，由于C/C++語言的穩(wěn)定性及跨平臺性，使得C/C++是在國內(nèi)乃至全世界應(yīng)用最廣泛的編程語言之一，無論是PC，還是移動設(shè)備；無論是網(wǎng)絡(luò)、通訊、圖像、游戲，還是硬件驅(qū)動、嵌入式等行業(yè)，C/C++都獲得了足夠的市場份額。2017年6月，最新一期的TIOBE編程語言排行已發(fā)布，對比去年同期，排名前5名的語言的排序沒有發(fā)生變化，還是Java，C，C++，Python，C#。

近年來，隨著智能設(shè)備不斷增多及物聯(lián)網(wǎng)的飛速發(fā)展，企業(yè)對C/C++人才的需求量呈現(xiàn)出了爆炸式增長。由于大家普遍認為C/C++相對于Java、.NET、PHP語言入門較難，因此選擇學(xué)習(xí)C/C++的人比較少，導(dǎo)致C/C++人才非常匱乏。目前工作在一線的C/C++程序員年齡普遍在30歲以上，已經(jīng)呈現(xiàn)出了斷層現(xiàn)象。

專業(yè)要求

從無憂精英網(wǎng)上發(fā)布C/C++開發(fā)人員的需求可以看出，現(xiàn)在市場上缺少的是能真正解決企業(yè)級應(yīng)用的人才，而不是新手。1、1-3年以上C++項目開發(fā)經(jīng)驗，嵌入式多任務(wù)系統(tǒng)的C++過硬的技能。2、熟悉Lua、Python、Perl等腳本語言；3、熟悉windows底層技術(shù)，熟悉win32 API、MFC、熟悉STL、boost ；4、熟悉Linux環(huán)境，熟悉數(shù)據(jù)結(jié)構(gòu)與算法、Socket編程、多線程編程等等。

所以，新手程序員想以高薪加入C/C++程序開發(fā)人員的戰(zhàn)隊，還需要在入行后下苦工，掌握更多的腳本語言、數(shù)據(jù)結(jié)構(gòu)、算法、數(shù)據(jù)庫等技能，將成為絕大部分新手C/C++程序開發(fā)人員的必經(jīng)之路。

4、前端工程師

背景

前端工程師的職責(zé)是制作標準優(yōu)化的代碼，并增加交互動態(tài)功能，開發(fā)JavaScript以及Flash模塊，同時結(jié)合后臺開發(fā)技術(shù)模擬整體效果，進行豐富互聯(lián)網(wǎng)的Web開發(fā)，致力于通過技術(shù)改善用戶體驗。

前端工程師屬于IT技術(shù)職業(yè)的一種，是近5年發(fā)展起來的職業(yè)，舊的體系將其定義為Web前端工程師，主要的技術(shù)包含：HTML、JavaScript、CSS。但IT技術(shù)屬于變化比較快的領(lǐng)域，最近發(fā)生了很大的變革，新的體系下，前端工程師技術(shù)又增加了：nodejs、Hybrid App。

因此，前端工程師所涵蓋的職責(zé)范圍，已經(jīng)包含后端、跨平臺等多種職能，不能簡單地認為只是Web前端工程師。

專業(yè)要求

無憂精英網(wǎng)發(fā)布前端工程師崗位專業(yè)要求主要包括：1、熟練運用javascript語言與HTML5、CSS3等技術(shù)；2、對前端前沿技術(shù)敏感，掌握zepto、Jquery、bootstrap、requirejs、seajs等前端常見框架，熟悉至少一門mvvm框架，比如vue、avalonjs等；3、熟練運用gulp,webpack等前端編譯、構(gòu)建工具，對web前端性能和技術(shù)體驗進行優(yōu)化；4、熟悉一門服務(wù)器語言如Java、nodeJS等。

5、算法工程師

背景

目前國內(nèi)從事算法研究的工程師不少，但是高級算法工程師卻很少，是一個非常緊缺的專業(yè)工程師。算法工程師一般包括音/視頻算法工程師（通常統(tǒng)稱為語音/視頻/圖形開發(fā)工程師）、圖像處理算法工程師、計算機視覺算法工程師、通信基帶算法工程師、信號算法工程師、射頻/通信算法工程師、自然語言算法工程師、數(shù)據(jù)挖掘算法工程師、搜索算法工程師、控制算法工程師（云臺算法工程師，飛控算法工程師，機器人控制算法）、導(dǎo)航算法工程師等等。另外數(shù)據(jù)挖掘、互聯(lián)網(wǎng)搜索算法也成為當(dāng)今的熱門方向。算法工程師逐漸往人工智能方向發(fā)展。

專業(yè)要求

無憂精英網(wǎng)發(fā)布算法工程師崗位專業(yè)要求主要包括：1、計算機、通信相關(guān)專業(yè)畢業(yè)；2、熟悉常用的計算機語言，如C/C++、OpenCV、Matlab、Python兩種或以上；3、熟悉常用的圖像處理方法，如Enhance、Filter、Transform、Segment、Label等；4、熟悉經(jīng)典的機器學(xué)習(xí)算法，如PCA、LDA、LBP、HOG、HAAR、BP、RBF、SVM、AdaBoost、CNN三種或以上；5、熟悉依賴于第三方工具的AI或ADAS常見應(yīng)用場景的技術(shù)驗證；

6、PHP開發(fā)工程師

背景

PHP技術(shù)人才，正迎合了目前的互聯(lián)網(wǎng)的發(fā)展趨勢。PHP作為非常優(yōu)秀的、簡便的Web開發(fā)語言，和Linux，Apache，MySQL緊密結(jié)合，形成LAMP的開源黃金組合，不僅降低使用成本，還提升了開發(fā)速度，滿足最新的互動式網(wǎng)絡(luò)開發(fā)的應(yīng)用，這使得php軟件工程師成為一個發(fā)展迅速的職業(yè)。

專業(yè)要求

無憂精英網(wǎng)發(fā)布PHP開發(fā)工程師崗位專業(yè)要求主要包括：1、具備良好的代碼編程習(xí)慣及較強的文檔編寫能力；2、精通PHP語言，精通CGI標準和HTTP等互聯(lián)網(wǎng)協(xié)議；3、熟練掌握HTML語言、JavaScript腳本語言；4、英文水平過硬，能基本不借助字典快速閱讀英文文檔；5、熟悉LINUX或WINDOWS操作系統(tǒng)；6、有良好的溝通、協(xié)調(diào)能力和學(xué)習(xí)能力，具備良好的團隊合作精神，對工作積極嚴謹踏實，能承受較大的工作壓力。

7、UI設(shè)計師

背景

UI設(shè)計師簡稱UID（User Interface Designer），指從事對軟件的人機交互、操作邏輯、界面美觀的整體設(shè)計工作的人。

UI設(shè)計師的涉及范圍包括商用平面設(shè)計、高級網(wǎng)頁設(shè)計、移動應(yīng)用界面設(shè)計及部分包裝設(shè)計，是目前中國信息產(chǎn)業(yè)中最為搶手的人才之一。

專業(yè)要求

無憂精英網(wǎng)發(fā)布UI設(shè)計師崗位專業(yè)要求主要包括：1、藝術(shù)類、美術(shù)類、平面設(shè)計類相關(guān)專業(yè)本科以上學(xué)歷（優(yōu)秀人才，有設(shè)計經(jīng)驗者，專業(yè)和學(xué)歷可適當(dāng)放寬）；2、具備較高的藝術(shù)素養(yǎng)和較強視覺表現(xiàn)力，富于創(chuàng)新、思維活躍，并對先進的設(shè)計理念和技術(shù)有較強的理解能力，并對新事物有足夠的敏感度；3、精通Photoshop、Illustrator、Flash、CorelDRAW等設(shè)計軟件。

8、.NET開發(fā)工程師

背景

.NET軟件工程師的工作內(nèi)容包括完成軟件的設(shè)計、實現(xiàn)、測試、修改bug等工作，包括業(yè)務(wù)需求的溝通，功能模塊詳細設(shè)計，業(yè)務(wù)功能實現(xiàn)與單元測試，系統(tǒng)維護；參與產(chǎn)品構(gòu)思和架構(gòu)設(shè)計等

經(jīng)過一段時間的工作經(jīng)驗的積累后，可發(fā)展成為高級軟件工程師、算法應(yīng)用開發(fā)工程師和需求工程師，但需要具有豐富的軟件開發(fā)經(jīng)驗和相關(guān)工作的技術(shù)背景。如果想成為技術(shù)精英、項目經(jīng)理，則還需要具有較強的管理和組織等方面的能力。

.NET軟件工程師一般分為WEB應(yīng)用開發(fā)和桌面程序開發(fā)兩個方向。WEB應(yīng)用開發(fā)方向?qū)⒅饕獜氖缕髽I(yè)網(wǎng)站系統(tǒng)開發(fā)，是目前比較熱門的方向。

專業(yè)要求

無憂精英網(wǎng)發(fā)布.NET工程師崗位專業(yè)要求主要包括：1、計算機相關(guān)專業(yè)背景，?？埔陨蠈W(xué)歷；2、有數(shù)據(jù)庫開發(fā)經(jīng)驗。熟練掌握sql server；能熟練編寫使用存儲過程， 具備數(shù)據(jù)庫的設(shè)計及優(yōu)化能力；3、熟練掌握.NET Framework（C#），能開發(fā)C/S構(gòu)架的應(yīng)用程序； 4、熟悉.NET框架及.NET開發(fā)環(huán)境，熟練掌握ASP基本開發(fā)技能；5、熟練掌握使用.NET開發(fā)過程中的一些常見技術(shù)，如：ADO.NET/MVC/EF/WEB SERVICE/WEB API/多線程/WCF等；6、熟練關(guān)系型數(shù)據(jù)庫（如SQL Server\MySQL），熟練編寫T-SQL語句，了解SQL性能優(yōu)化。

9、系統(tǒng)架構(gòu)師

背景

現(xiàn)在好一些的公司都將架構(gòu)師區(qū)分為技術(shù)架構(gòu)師和業(yè)務(wù)架構(gòu)師兩種，前者顧名思義是偏向于技術(shù)的選型，做到架構(gòu)的合理性，后者更多的是偏向業(yè)務(wù)的架構(gòu)，組織合理的業(yè)務(wù)結(jié)構(gòu)，很多業(yè)務(wù)架構(gòu)師從產(chǎn)品經(jīng)理中轉(zhuǎn)化而來，所以這類人和產(chǎn)品經(jīng)理的工作職責(zé)區(qū)別不大，只是管理更多的產(chǎn)品線而已。

專業(yè)要求

無憂精英網(wǎng)發(fā)布系統(tǒng)架構(gòu)師崗位專業(yè)要求主要包括：1、計算機科學(xué)技術(shù)、信息技術(shù)、大數(shù)據(jù)等相關(guān)專業(yè)；2、至少8年以上大中型軟件產(chǎn)品的全生命周期開發(fā)經(jīng)驗；3、精通Java、C/C++至少一門開發(fā)語言；4、對數(shù)據(jù)結(jié)構(gòu)，算法有深入的理解；5、熟練分布式系統(tǒng)設(shè)計和分布式存儲架構(gòu)，具有實際應(yīng)用的開發(fā)經(jīng)驗；6、熟悉Linux/Windows操作系統(tǒng)內(nèi)核，并熟悉分布式系統(tǒng)的設(shè)計和應(yīng)用 ；7、熟悉軟件架構(gòu)模式、概念和技巧，能夠準確無誤地理解相關(guān)系統(tǒng)構(gòu)架等。

翻譯一下就是：

1.你得首先是個程序員，需要能基本了解常用平臺，語言，數(shù)據(jù)庫等的特點，并能根據(jù)需求搭配出適用的開發(fā)配置方案，然后你得會寫代碼，必須知道怎么寫代碼才是性價比最高的。

2.你得是行業(yè)顧問，至少得了解行業(yè)的特色，能找到需求問題的切入點，能夠合理安排每個環(huán)節(jié)的聯(lián)系結(jié)點。

3.你得具有技術(shù)說服力，能把你所構(gòu)思的想法說給別人聽，并能讓別人理解并接受你的設(shè)計想法。

4.你得具有富豐的想像力，一個架構(gòu)師得需要足夠的想像力，能把各種目標需求進行不同維度的擴展，為目標客戶提供更為全面的需求清單。

5.你得盡可能的理新最新資訊，更新最新技術(shù)理論，雖然不一定需要去學(xué)習(xí)或掌握，但需要知道新的技術(shù)能用在哪種情況中，資訊能給你帶來更多業(yè)界動態(tài)。

6.你得需要多做項目，項目的積累是非常重要，以設(shè)計模式來說，設(shè)計模式的名字是人定的，應(yīng)用設(shè)計多了，自然而然的會將模式應(yīng)用到系統(tǒng)中，在這過程中你并不會知道你所設(shè)計的應(yīng)用到哪些模式，你只會知道要實現(xiàn)這個功能需要怎么做，當(dāng)你有空的時候會不經(jīng)意間發(fā)現(xiàn)原來這種做法還有個模式名。

10、 Android開發(fā)工程師

背景

Android工程師是指從事Android移動應(yīng)用操作系統(tǒng)、游戲和各種Android平臺功能的應(yīng)用、開發(fā)和測試的技術(shù)人員。以手機開發(fā)為主要對象，包括但不限于手機操作系統(tǒng)、手機游戲、手機其他多種功能的開發(fā)和優(yōu)化人員。

Android工程師是移動應(yīng)用開發(fā)者，希望將自己的應(yīng)用移植到該平臺上或者在該平臺上開發(fā)應(yīng)用。主要包括：Android應(yīng)用軟件開發(fā)工程師、Android游戲程序員、Android網(wǎng)絡(luò)游戲程序員、Android軟件移植工程師、Android嵌入式設(shè)備軟件開發(fā)工程師、Android游戲開發(fā)工程師、Android網(wǎng)絡(luò)游戲開發(fā)工程師等。

專業(yè)要求

無憂精英網(wǎng)發(fā)布Android開發(fā)工程師崗位專業(yè)要求主要包括：1、熟悉Java程序設(shè)計及各種主流技術(shù)，對面向?qū)ο蟮脑O(shè)計和開發(fā)有較深的理解,2年以上實際Android平臺開發(fā)經(jīng)驗；2、熟悉Android手機平臺應(yīng)用開發(fā)，熟練UI編程，對Android系統(tǒng)有全面的了解；3、熟悉Android SDK, Android Debug Bridge Tool, Eclipse/ADT；4、熟悉Android OS系統(tǒng)體系結(jié)構(gòu)、framework、以及底層庫，熟練編寫Sql語句；5、熟悉現(xiàn)有Android設(shè)備，熟悉移動設(shè)備的開發(fā)特點等。

每到年底，人們總喜歡展望下一年，Web 開發(fā)領(lǐng)域也不例外。在 Web 開發(fā)領(lǐng)域，技術(shù)革新的速度堪比光速，未來總是超乎我們的想象，我們只能盡自己所能做一些合理的預(yù)測。

以下是我們需要關(guān)注的一些趨勢：

1

更加移動優(yōu)先

響應(yīng)式設(shè)計顯然是目前 Web 開發(fā)領(lǐng)域的主要趨勢之一，并且這一趨勢還將持續(xù)一段時間。雖然現(xiàn)在的響應(yīng)式設(shè)計大部分還是以 PC 版優(yōu)先，然而，如果有一天我們把 PC 版放到比移動版次要的位置上，也沒什么好奇怪的。

許多 Web 開發(fā)者已經(jīng)開始轉(zhuǎn)向以移動優(yōu)先方案來做他們的響應(yīng)式設(shè)計和開發(fā)。這象征一個重大轉(zhuǎn)變，值得我們跟進。

2

更多使用快速原型開發(fā)工具

我們在 2016 年開始嘗試使用快速原型開發(fā)工具，而 2017 年將是這種技術(shù)真正爆發(fā)的一年。

“UXpin、Webflow、Invision 以及其它許多快速原型開發(fā)工具，讓設(shè)計師不用寫一行代碼，就能為網(wǎng)站和服務(wù)快速創(chuàng)建低保真和高保真原型，便于設(shè)計師衡量它們的可用性和美觀性?！?Web 設(shè)計師 Jamie Leeson says 如是說，“許多工具也允許你在瀏覽器中設(shè)計原型并從工具里真正啟動網(wǎng)站自身?！?/p>

快速原型工具的一個優(yōu)點是它們能讓開發(fā)者/設(shè)計師與最終用戶同時獲益。雙方能夠提前對產(chǎn)品頁面和交互達成一致，避免了最終交付的產(chǎn)品和用戶預(yù)期的不符。

3

簡化的 Web 設(shè)計

在 2016 年，我們看到簡化的 Web 設(shè)計得到廣泛認可。事實上極簡設(shè)計成為大部分行業(yè)的主要趨勢。在 2017 年，預(yù)期極簡設(shè)計會繼續(xù)流行，即使有變化也是一些微小的改變。

雖然頁面上留白將繼續(xù)被認為是有價值的，但是也不用奇怪有些網(wǎng)站開始回歸到使用基于文本內(nèi)容的文字填充。你可以找到更多類似于這樣的網(wǎng)頁，它們合理地結(jié)合了留白和文本，創(chuàng)造出一個視覺上簡單，而信息內(nèi)容很豐富的網(wǎng)頁，也帶給用戶很好的體驗。

4

更加重視人工智能

你已經(jīng)聽說了人工智能（AI），但是你對 Web 設(shè)計和開發(fā)中的人工智能熟悉嗎？在 2017 年，我們期待 Web 與 AI 的碰撞，帶來更強大的網(wǎng)頁，為網(wǎng)站主和用戶同時帶來價值。

提供網(wǎng)絡(luò)主機服務(wù)的 Wix，是這一領(lǐng)域的領(lǐng)頭羊。他們現(xiàn)在提供了一個過程來詢問用戶一些問題，然后使用一個基于 AI 的平臺根據(jù)用戶的回答提供給用戶最符合他們需求的 Web 設(shè)計。這非?？?，值得一看。

5

更多單頁站點

現(xiàn)在不流行那種有各種 Tab 頁和許多子頁面的網(wǎng)站了。在 2017 年，你可以期待看到更多的單頁站點。由于用戶更喜歡用滾屏方式瀏覽網(wǎng)頁，各公司將會引起重視并停止浪費時間在設(shè)計和開發(fā)用戶不喜歡的層層相套的子頁面上。這一趨勢將簡化互聯(lián)網(wǎng)并帶來更迷人和身臨其境的網(wǎng)頁瀏覽體驗，每個人都會感覺到愉悅。

6

虛擬現(xiàn)實

如果要討論 2017 年技術(shù)趨勢，怎能不提到虛擬現(xiàn)實（VR）？2017 年將是 VR 成為主流的一年，這意味著 Web 開發(fā)者將通過 VR 來吸引用戶。

我們已經(jīng)看到一些公司比如 Mozilla 和 Google 投資開發(fā) VR 與 Web 之間的 API。越來越多的 VR 應(yīng)用程序?qū)⒃诮酉聛淼膸讉€月里相繼問世，所以如果看到越來越多的虛擬現(xiàn)實元素出現(xiàn)在 Web 上，也別覺得奇怪。

1 架構(gòu)演化

大型網(wǎng)站的關(guān)注指標

高可用

高性能

易擴展

可伸縮

安全

大型網(wǎng)站的特點

高并發(fā)，大流量

高可用

海量數(shù)據(jù)

用戶分布廣泛，網(wǎng)絡(luò)情況復(fù)雜

安全環(huán)境惡劣

需求快速變更，發(fā)布頻繁

漸進式發(fā)展

大型網(wǎng)站架構(gòu)演化發(fā)展過程

初始階段，多使用LAMP來搭建，All In One即所有資源存放在一臺服務(wù)器上

應(yīng)用服務(wù)和數(shù)據(jù)服務(wù)分離，有獨立的數(shù)據(jù)庫服務(wù)器

使用緩存改善網(wǎng)站性能（依據(jù)是二八定律：80%的業(yè)務(wù)訪問集中在20%的數(shù)據(jù)上）

這里需要考慮哪些數(shù)據(jù)適合緩存

緩存可以是本地緩存，也可以是遠程分布式緩存

需要考慮使用合理的緩存策略，防止透傳

使用應(yīng)用服務(wù)器集群改善網(wǎng)站的并發(fā)處理能力

如果能通過增加一臺服務(wù)器的方式來改善負載壓力，就可以以同樣的方式持續(xù)增加服務(wù)器來不斷改善系統(tǒng)性能，從而實現(xiàn)系統(tǒng)的可伸縮性

這里需要考慮使用哪些負載均衡的策略

數(shù)據(jù)庫讀寫分離

可以利用主流數(shù)據(jù)庫提供的主從熱備功能，通過配置兩臺數(shù)據(jù)庫的主從關(guān)系，同時業(yè)內(nèi)也有很多優(yōu)秀的開源中間件如Atlas

緩存中的數(shù)據(jù)，如果更新過快，那么會持續(xù)刷新緩存，從而降低性能

使用反向代理和CDN加速網(wǎng)絡(luò)響應(yīng)

CDN和反向代理的基本原理都是緩存

CDN部署在網(wǎng)絡(luò)提供商的機房，用戶在請求網(wǎng)絡(luò)服務(wù)時，可以從距離自己最近的網(wǎng)絡(luò)提供商機房獲取數(shù)據(jù)

反向代理部署在網(wǎng)站的中心機房，當(dāng)用戶的請求到達中心機房后，首先訪問的服務(wù)器是反向代理服務(wù)器，如果反向代理服務(wù)器中緩存著用戶請求的資源，那么就將其直接返回給用戶

CDN的重點：——《大型網(wǎng)站系統(tǒng)與Java中間件實踐》

全局調(diào)度

緩存技術(shù)

內(nèi)容分發(fā)

帶寬優(yōu)化

使用分布式文件系統(tǒng)和分布式數(shù)據(jù)庫系統(tǒng)

網(wǎng)站常用的數(shù)據(jù)庫拆分手段是業(yè)務(wù)分庫，即將不同業(yè)務(wù)的數(shù)據(jù)庫部署到不同的物理服務(wù)器上

使用NoSQL和搜索引擎

ES

MongoDB

業(yè)務(wù)拆分，使用分而治之的手段將整個網(wǎng)站業(yè)務(wù)分成不同的產(chǎn)品線

SOA、服務(wù)化

中心化的 gataway方式

消息隊列

不同服務(wù)訪問同一個DB等

這部分十分重要，道理很簡單，但是執(zhí)行起來的效果千差萬別。

當(dāng)下火熱的微服務(wù)，也是基于這種思想。

技術(shù)實現(xiàn)方式也有很多

分布式服務(wù)

大型網(wǎng)站架構(gòu)演化的價值觀

網(wǎng)站的價值在于它能為用戶提供什么價值，在于網(wǎng)站能做什么，而不在于它是怎么做的。因此對于小型網(wǎng)站來說，最需要做的是位用戶提供好的服務(wù)來創(chuàng)造價值，得到用戶的認可，從而活下去，野蠻生長。

大型網(wǎng)站架構(gòu)技術(shù)的核心價值是隨網(wǎng)站所需靈活應(yīng)對， 它是一個演化的過程

驅(qū)動大型網(wǎng)站技術(shù)發(fā)展的主要力量是網(wǎng)站的業(yè)務(wù)發(fā)展，是業(yè)務(wù)成就了技術(shù)，而不是相反。因此要摒棄為了技術(shù)而技術(shù)的套路

網(wǎng)站架構(gòu)設(shè)計誤區(qū)

一味追求大公司的解決方案

為了技術(shù)而技術(shù)

企圖用技術(shù)解決所有問題

2 架構(gòu)模式

分層，這是在橫向方向?qū)ο到y(tǒng)進行切分

分層的挑戰(zhàn)在于必須合理規(guī)劃層次邊界和接口

分層包括物理分層和邏輯分層兩種

分割，這是在縱向方向?qū)ο到y(tǒng)進行切分

將不同的功能和服務(wù)分割開來，包裝秤高內(nèi)聚低耦合的模塊單元

分布式

1） 分布式應(yīng)用和服務(wù)；

2） 分布式靜態(tài)資源；

3） 分布式數(shù)據(jù)和存儲；

4） 分布式計算；

5） 分布式配置、分布式鎖、分布式文件系統(tǒng)。。。

1） 分布式意味著服務(wù)調(diào)用必須通過網(wǎng)絡(luò)，需要考慮帶寬的影響；

2） 服務(wù)器越多，宕機的概率越大

分層和分割的目的在于小模塊便于分布式部署

帶來的問題：

常用的分布式方案：

集群，即多臺服務(wù)器部署相同的應(yīng)用，從而構(gòu)成一個集群，通過負載均衡設(shè)備共同對外提供服務(wù)

即使訪問量很小的分布式應(yīng)用和服務(wù)，也至少要部署到兩臺服務(wù)器來構(gòu)成一個小集群，這樣可以提高系統(tǒng)的可用性

緩存，即將數(shù)據(jù)放在距離計算最近的位置以加快處理速度

CDN

反向代理

本地緩存

分布式緩存

異步，業(yè)務(wù)之間的消息傳遞不是同步調(diào)用，而是將一個業(yè)務(wù)操作分成多個階段，每個階段之間通過共享數(shù)據(jù)的方法異步進行協(xié)作

1） 提高系統(tǒng)可用性；

2） 加快網(wǎng)站響應(yīng)速度；

3） 消除并發(fā)訪問高峰

通常需要使用消息隊列

帶來的好處：

冗余

集群帶來的必然結(jié)果

安全需求的必然結(jié)果

自動化，DevOps思維，盡量減少人工干預(yù)

自動化發(fā)布

自動化代碼管理

自動化測試

自動化安全監(jiān)測

自動化部署

自動化監(jiān)控

自動化報警

自動化失效轉(zhuǎn)移、恢復(fù)

自動化分配資源

......

安全

3 大型網(wǎng)站核心架構(gòu)要素

性能

一個性能問題可能會導(dǎo)致網(wǎng)站用戶嚴重流失

衡量性能的指標：響應(yīng)時間、TPS、系統(tǒng)性能計數(shù)器等

可用性

沒有網(wǎng)站可以完美的7*24運行

網(wǎng)站高可用結(jié)構(gòu)的前提是必然會出現(xiàn)服務(wù)器宕機，兒高可用設(shè)計的目標是當(dāng)服務(wù)器宕機時，服務(wù)或者應(yīng)用依然可用

必要的手段是集群，即冗余

伸縮性，即通過不斷向集群中加入服務(wù)器的手段來環(huán)節(jié)不斷上升的用戶并發(fā)訪問壓力和不斷增長的數(shù)據(jù)存儲需求

衡量標準：是否可以構(gòu)建集群；是否可以方便的向集群中添加新的服務(wù)器

擴展性，直接關(guān)注網(wǎng)站的功能，保證可以快速響應(yīng)需求變更

衡量標準： 網(wǎng)站增加新的業(yè)務(wù)產(chǎn)品時，是否對現(xiàn)有業(yè)務(wù)透明無影響

安全性

衡量標準： 針對現(xiàn)存和潛在的各種攻擊和竊密手段，是否可以有效的應(yīng)對

4 瞬時響應(yīng) - 網(wǎng)站的高性能架構(gòu)

不同視角下的網(wǎng)站性能

用戶視角

主要是端到端的感覺

主要通過前段優(yōu)化的手段來提升用戶體驗

開發(fā)人員視角

主要關(guān)注應(yīng)用程序本身以及相關(guān)子系統(tǒng)的性能，包括響應(yīng)延遲、系統(tǒng)吞吐量、并發(fā)處理能力、系統(tǒng)穩(wěn)定性等

主要優(yōu)化手段： 使用緩存加速數(shù)據(jù)讀取、使用集群提高吞吐能力、使用異步消息加快請求響應(yīng)、使用代碼優(yōu)化提升程序性能

運維人員視角

主要關(guān)注基礎(chǔ)設(shè)施性能和資源利用率

主要優(yōu)化手段： 建設(shè)優(yōu)化骨干網(wǎng)、使用高性價比定制服務(wù)器、利用虛擬化技術(shù)優(yōu)化資源利用率

性能測試指標

響應(yīng)時間，即應(yīng)用執(zhí)行一個操作需要的時間，包括從發(fā)出請求開始到收到最后響應(yīng)數(shù)據(jù)所需要的時間

并發(fā)數(shù)，即系統(tǒng)能夠同時處理的請求的數(shù)目，也反映了系統(tǒng)的負載特性

吞吐量，即單位時間內(nèi)系統(tǒng)處理的請求數(shù)量，體現(xiàn)系統(tǒng)的整理處理能力

性能計數(shù)器， 描述服務(wù)器或者操作系統(tǒng)性能的一些數(shù)據(jù)指標

性能測試方法

性能測試，以系統(tǒng)設(shè)計初期規(guī)劃的性能指標為預(yù)期目標，對系統(tǒng)不斷增壓，驗證系統(tǒng)在資源可接受范圍內(nèi)，是否能達到性能預(yù)期

負載測試，對系統(tǒng)不斷的增加并發(fā)請求，知道系統(tǒng)的某項或者多項性能指標達到安全臨界值

壓力測試，超過安全負載的情況下，繼續(xù)對系統(tǒng)增壓，直到系統(tǒng)崩潰或者不能再處理任何請求

穩(wěn)定性測試，在特定硬件、軟件、網(wǎng)絡(luò)情況下，給系統(tǒng)加載一定壓力，是系統(tǒng)運行較長一段時間，來觀察系統(tǒng)是否穩(wěn)定

Web前端優(yōu)化

瀏覽器訪問優(yōu)化

減少http請求

使用瀏覽器緩存

啟用壓縮

CSS放在頁面最上面，JavaScript放在頁面最下面

減少Cookie傳輸

CDN加速

反向代理

應(yīng)用服務(wù)器性能優(yōu)化

分布式緩存

一般會使用消息隊列，帶來的額外好處是會削平峰值

1）不同的緩存服務(wù)器之間進行通信，例如JBoss Cache；

2）不同緩存服務(wù)器之間不進行通信，例如Memcached

緩存從本質(zhì)上來說，就是一個內(nèi)存hash表

緩存需要緩存那些讀寫比很高、很少變化的數(shù)據(jù)，一般來說讀寫比在2:1以上時，緩存才有意義

應(yīng)用程序讀取數(shù)據(jù)時，首先到緩存中讀取，如果緩存不存在或者已失效，再訪問數(shù)據(jù)庫，同時將新的數(shù)據(jù)放入緩存

緩存也需要注意緩存熱點數(shù)據(jù)

緩存預(yù)熱，在新啟動的緩存系統(tǒng)中，在啟動時就加載熱點數(shù)據(jù)，這樣啟動后就可以直接使用

緩存穿透， 應(yīng)用持續(xù)大量訪問不存在的數(shù)據(jù)，因為這類數(shù)據(jù)不存在于緩存中，因此會大量訪問數(shù)據(jù)庫，從而降低性能

對于分布式緩存來說，目前有兩類：

異步操作

使用集群

代碼優(yōu)化

多線程

1） 將對象設(shè)計成無狀態(tài)對象；

2） 使用局部對象；

3） 并發(fā)訪問資源時使用鎖

需要注意線程安全問題，方法：

資源復(fù)用

主要是單例和資源池（對象池）

數(shù)據(jù)結(jié)構(gòu)，選擇合適的算法

垃圾回收

合理設(shè)置垃圾回收策略

存儲性能優(yōu)化

機械硬盤 vs 固態(tài)硬盤

B+樹 vs LSM樹

RAID vs HDFS

5 萬無一失 - 網(wǎng)站的高可用架構(gòu)

網(wǎng)站可用性度量

網(wǎng)站不可用時間 = 故障修復(fù)時間點 - 故障發(fā)現(xiàn)時間點

網(wǎng)站年度可用性指標 = （1 - 網(wǎng)站不可用時間/年度總時間）* 100%

一般以幾個9來表示，2個9是基本可用，網(wǎng)站年度不可用時間小于88小時；3個9是較高可用，網(wǎng)站年度不可用時間小于9小時；4個9是具有自動恢復(fù)能力的高可用，網(wǎng)站年度不可用時間小于53分鐘；5個9是極高可用性，網(wǎng)站年度不可用時間小于5分鐘

網(wǎng)站高可用架構(gòu)的設(shè)計目標是保證服務(wù)器硬件故障時服務(wù)依然可用、數(shù)據(jù)依然保存并能夠被訪問

網(wǎng)站高可用架構(gòu)的主要手段：數(shù)據(jù)和服務(wù)的冗余備份以及失效轉(zhuǎn)移，一旦服務(wù)器宕機，就將服務(wù)切換至其他可用的服務(wù)器上。

高可用的應(yīng)用

無狀態(tài)應(yīng)用： 應(yīng)用服務(wù)器不保存業(yè)務(wù)的上下文信息，而僅根據(jù)每次請求提交的數(shù)據(jù)進行相應(yīng)的業(yè)務(wù)邏輯處理，多個服務(wù)實例之間完全對等，請求提交到任何一個服務(wù)器上，處理的結(jié)構(gòu)都是相同的。

通過負載均衡進行無狀態(tài)服務(wù)的失效轉(zhuǎn)移

負載均衡： 主要使用在業(yè)務(wù)量和數(shù)據(jù)量較高的情況下，當(dāng)單臺服務(wù)器不足以承擔(dān)所有的負載壓力時，通過負載均衡手段，將流量和數(shù)據(jù)分攤到一個集群組成的多臺服務(wù)器上， 以提升整體的負載處理能力

應(yīng)用服務(wù)器集群的Session管理

Session復(fù)制

Session綁定

利用Cookie記錄Session

Session服務(wù)器

高可用的服務(wù)

分級管理

核心服務(wù)與非核心服務(wù)隔離

核心服務(wù)優(yōu)先使用高性能服務(wù)器

超時設(shè)置

異步調(diào)用

必須滿足可以使用異步調(diào)用方式

服務(wù)降級

冪等性設(shè)計

服務(wù)高可用（高可靠）一直是美團外賣的第一要求，為了提高可用性，做了很多策略，包括并不限于上文提出的各種架構(gòu)設(shè)計方案。

其實造成線上問題的很大一部分原因是由于發(fā)版造成的，也體現(xiàn)出了SOP的重要性。

關(guān)于降級與依賴隔離，可以考慮采用Hystrix實現(xiàn)自動降級與依賴隔離 。

高可用的數(shù)據(jù)

數(shù)據(jù)一旦出現(xiàn)問題，對于網(wǎng)站往往是毀滅性的打擊，因此保護網(wǎng)站的數(shù)據(jù)就是保護企業(yè)的命脈。

主要手段：數(shù)據(jù)備份和失效轉(zhuǎn)移

緩存服務(wù)高可用

觀點一：緩存服務(wù)已經(jīng)承擔(dān)了業(yè)務(wù)中絕大多數(shù)的數(shù)據(jù)讀取訪問，因此需要同樣保證高可用

觀點二：緩存服務(wù)并不是數(shù)據(jù)存儲服務(wù)，出現(xiàn)服務(wù)不可用導(dǎo)致數(shù)據(jù)丟失應(yīng)從別的手段解決，而不是提高緩存服務(wù)本身高可用

緩存服務(wù)器集群中單機故障，集群規(guī)模較大時，數(shù)據(jù)丟失比例和數(shù)據(jù)負載壓力影響很小。

CAP原理： 一個提供數(shù)據(jù)服務(wù)的存儲系統(tǒng)無法同時滿足數(shù)據(jù)一致性（Consistency）、數(shù)據(jù)可用性（Availibility）、分區(qū)耐受性（Parition Tolerance）這三個條件

數(shù)據(jù)高可用含義：

副本間數(shù)據(jù)一致

多個副本可讀

同時寫入數(shù)據(jù)副本

1）數(shù)據(jù)持久性

2）數(shù)據(jù)可訪問性

3）數(shù)據(jù)一致性

數(shù)據(jù)一致性分類：

1） 數(shù)據(jù)強一致；

2） 數(shù)據(jù)用戶一致；

3） 數(shù)據(jù)最終一致

數(shù)據(jù)備份

1） 異步熱備；

2） 同步熱備

冷備的優(yōu)點是簡單和廉價，成本和技術(shù)難度較低，缺點是不能保證數(shù)據(jù)最終一致

熱備分為兩種：

失效轉(zhuǎn)移

1） 心跳檢測（Keepalived、Heartbeat）；

2） 應(yīng)用程序訪問失敗報告

失效確認：

訪問轉(zhuǎn)移

數(shù)據(jù)恢復(fù)

高可用網(wǎng)站的軟件質(zhì)量保證

網(wǎng)站發(fā)布，它的過程和服務(wù)器宕機效果箱單，其對系統(tǒng)可用性的影響也 類似

一般采取批量更新的方式進行，不會一次關(guān)掉集群中的全部服務(wù)器

自動化測試

一般使用Selenium來進行測試

預(yù)發(fā)布驗證

預(yù)發(fā)布服務(wù)器是一種特殊用途的服務(wù)器，它和線上的正式服務(wù)器唯一的區(qū)別是沒有配置在負載均衡服務(wù)器上，外部用戶無法訪問

代碼控制

主干開發(fā)，分支發(fā)布

分支開發(fā)，主干發(fā)布，這是目前使用的主流方式

自動化發(fā)布

火車模型：將每個應(yīng)用的發(fā)布過程看做一次火車旅程，火車定點運行，期間有若干站點，每一站都進行例行檢查，不通過的項目下車，通過的項目繼續(xù)坐著火車旅行，直到火車到達終點。

實際中，可能所有項目在途中都下車了，這樣火車不得不回到原點，等待?...