四輪網易面試結果下來之後，我收穫了哪些經驗？

前幾天去豬場面試了一下，搜尋相關的。雖然最後還是沒有通過，但是感覺還是有很多收穫的。在此小結一下，為以後的面試增加點經驗，也給想去網易的同學一個參考。
閒話不多說，直接進入主題吧！

一面(電面)
當時剛下班,回家的路上打來的電話。

• 自我介紹

• 專案用的什麼做的（elasticsearch）

• 全量/實時索引怎麼做的（這個只要結合自己的專案回答即可。個人感覺回答的不是很好，因為當時在武紡旁邊，車流量較大，周圍很嘈雜，我儘量走到僻靜的地方對方還是聽不清）

• 資料量多少，目前叢集的狀況，以及日常的維護情況（這個也不難回答）

• 他又問到目前使用ES的過程中有沒有遇到什麼問題，我回答了出現過效能問題，以及嚴重的線上問題。面試官對效能問題比較感興趣，我們都知道ES中有一個query叫functionScoreQuery，可以做到人為給檔案打分（使用指令碼）。我們一開始使用的是比較普遍的groovy指令碼，自己定義了一套規則對檔案進行打分，但是這會帶來效能上的影響(ES官方檔案好像有過相關介紹)。面試官問我們是怎麼解決的，這個是我自己有重新寫了一個Java的指令碼(或者說plugin),將語言型別從groovy改成了native

• 後面他又了幾個ES相關的問題，但是比較簡單，就略過了。

個人覺得，如果是電面，一定要選擇一個較為安靜的地方這樣容易交流。

二面
一面過了一週後，便有hr電話通知去杭州面試。因此，請了幾天假，跑到杭州去面了一下。二面個人覺得是最最重要的面試，會直接決定你能否進入下一輪。

• 自我介紹
  專案（全量/實時）,面試官很注重細節和問題處理能力，一開始從業務開始，全量索引怎麼建立（從資料read，到join，再到推播到ES），建議在面試前對自己專案梳理一遍，可以自己畫一個大致流程圖（當時面試官叫我畫一下你們的全量流程）後面又問了很多專案的細節，不多闡述；
• 如果資料量大起來了怎麼處理，因為目前我們的資料量不是特別大，我說可能會考慮hadoop，面試官跟著問那你知道ES-hadoop嗎。當時就有點懵，自己只聽說過這個，就說這個是es結合hadoop的一個外掛。他接著問，那你在使用它的過程中有遇到什麼問題或者需要注意什麼嗎，我大概答了一下巨量資料相關的（本人並非巨量資料開發，只寫過很簡單的mapreduce，並沒有用過這個es-hadoop）;
  為什麼選擇ES(簡單易用啊)，選的ES什麼版本（我們用的是2.4.1），怎麼沒有用5.x（很明顯高版本可能會帶來各種不穩定因素啊）
• 叢集，分片副本的情況
• 如果在巨量資料量進ES怎麼處理（全量一般有定時任務每天建立，因此可以在建索引時關閉refresh（設定為-1），暫時關閉副本等索引建立完成後再開啟；）
• ES的refresh與flush的區別（一個是記憶體重新整理到Lucene的索引中，一個是從Lucene索引重新整理到磁碟）
• flush如果重新整理時機器有故障怎麼保證成功（translog機制，用於記錄事物紀錄檔，也可當節點時資料重發的紀錄檔）
• 一個搜尋請求的過程（協調節點接受請求後，將請求傳送到每個分片，可能是主分片也是副本分片，各節點返回匹配檔案和排序值（query）,然後協調節點進行排序後得到一個所需要獲取的檔案，再從各個節點去獲取這些檔案）
• 是否瞭解segment（Lucene索引實際上就有一個一個的段組成的，es的一個分片資料就是一個完整的lucene索引，由一定數量的段組成）。關於段你知道什麼（段合併，如果使用ssd可以適當的把段合併速率調高一些，同時建議把段合併成一個）。那麼段合併的策略是什麼，什麼時候要合併（這個當時真的一下子懵了，沒有注意到這些，有知道的同學麻煩告知下）。
• ES怎麼更新檔案（協調節點接受請求後，確定檔案所在主分片，然後將更新請求傳送到主分片進行更新，更新成功後將資料同步到副本分片）。如果更新失敗怎麼辦（更新有一個retry次數，超過該次數則放棄），副本分片如何更新資料（主分片將更新的檔案發到副本分片，副本分片重新建立索引），es採用什麼機制進行更新（剛剛已經解釋了，基於檔案複製的機制），為什麼採用這種機制（es使用非同步請求，其實使用的是netty，如果是更新請求的話，先後順序會影響檔案結果；而直接使用檔案則可以避免），如果副本分片資料更新失敗怎麼辦（這個當時回答的不是很好，我想的是會重試幾次；面試官問重試了還是失敗呢，我回答那會返回更新失敗，面試官又問但是主分片資料已經更新，而副本分片資料沒有，這樣資料就不一致了，我回答可能副本分片會自己拉取主分片的資料進行更新，面試官有點不滿意這個回答，麻煩了解詳細機制的同學講解一下），es多個檔案更新（與單檔案類似，不再贅述），es檔案資料型別判斷（true，false，double，long，integer，date之類的，需要注意date和string）
• ES叢集master選舉（當前網路內節點按id字典排序，選舉0節點，即第一個節點，超過mininum主節點數的節點當選），為什麼要有這個minimum主節點數（其實就是用來防止腦裂），腦裂怎麼產生（可能由於網路延遲，節點預設ping超時為5s；也可能由於節點壓力過大，導致ping失去響應；節點故障宕機，ping無響應），如何預防（當叢集超過3個節點時，可以設定最小主節點數來防止；為兩個時，只能人為的指定主節點與從節點；避免跨網段或資料中心形成叢集；叢集壓力過大時可以適當延長ping超時時間），如果一個節點出故障後叢集會怎麼做（master節點感知到有節點退出叢集，則馬上將該節點上的主分片對應的副本分片提升為主分片，重新進行分片資料分配），當該節點修好後會怎麼處理（master節點發現後將該節點加入叢集，而該節點的資料其實已經是無用的資料，因此該節點會刪除本節點資料，並重新進行分片資料分配），如果節點較多呢（可以暫時先關閉資料分配，待達到最小資料恢復節點數後再開始），這個節點怎麼進行資料恢復（根據translog進行恢復，為空的節點恢復的更快，所以在節點下線前可以flush一下），如果剛好主節點出問題宕機了怎麼半（首先會選舉主節點，然後將原主節點上的的主分片對應的分本分片提升為主分片，進行分片資料分配），分片資料如何分配（根據路由id，一般是檔案id，確定檔案所在分片後，將分片儘量平均分配到每個節點）
• 建一次索引需要多久（30s左右），如何提高速率（目前使用的是5個執行緒進行建立，可以使用ssd，建索引時不設定副本，待建立好之後再開啟），索引時應該注意什麼（只儲存必需的欄位以減小索引，使用ssd可適當增打索引速率，關閉refresh待建立完成後再開啟），如果線上索引出問題不可用了怎麼半（我們目前線上索引有3份，每天建立一份並刪除最舊的一份；當出問題時，直接通過別名將索引切換到另一個可用的版本即可，同時分析問題所在並馬上修復），索引有多大（1.3g左右，並不大）
• 搜尋時返回的結果怎麼排序（分為預設排序和非預設排序，非預設即按欄位排序；預設排序採用檔案得分進行排序），如何判定檔案得分（有靜態和動態得分組成），靜態得分是怎麼評斷（自定義Java指令碼，使用functionScoreQuery進行判分），動態呢（自定義打分外掛，人為控制得分，boost實現），為什麼不使用原始的TF/IDF（TF/IDF的得分只是針對當前分片的詞頻/逆檔案頻率，並非全域性得分，我們不能說node0的0.1分比node1的0.2分低），對於TF/IDF你有什麼理解（這個回答的不好，畢竟沒有仔細研究過這個，我只簡單說了一下空間向量模型，面試官說那你能簡單證明一下嗎，只需要思路即可，不用數學推導，但是我數學那些東西早就忘了。。。），那你知道solr嗎（知道），那麼你覺得solr跟es那個更好（沒有好不好之說，他們都是工具，最終目的是幫我們完成要做的事。就我個人而言更偏向es，輕量，使用簡單，易擴充套件，而且社群也很活躍，參見github）
• 簡單的一個小程式設計，去除一個字串中的指定特殊字元，不要使用第三方的類、庫什麼的（我寫了三種，第一種直接遍歷，第二種replaceAll，第三種將字元ascii碼與字元放入map），但面試官說這些都不是最好的答案，他說的是將字元的ascii碼存入表，在遍歷一遍判斷字元的ascii在不在表什麼的，感覺跟我想的第三種方法差不多，這個沒搞懂。

二面大概就這些內容，接近一個小時，跟這個面試官聊的還不錯。

有個小插曲，面完後，他說他這邊已經面完了，問我什麼安排（不是你告訴我的嗎。。）我說我也不知道，就是前臺的小姐姐讓我去面試。他說哦，那你問一下她該怎麼辦把。我說小姐姐，小姐姐說面試官跟你說的是可以回去等訊息還是在再稍等一下後面還有，我說他說他也不知道，小姐姐直接說那你就先回去等訊息把。我知道可能沒過，就準備走，然後那個面試官出來叫住我，說等一下，待會有一個面試官來面你。

三面
等了半個小時，三面面試官才來。然後沒說廢話，直接開始。

• 自我介紹
• 有沒有用過hadoop（寫過簡單mapreduce）
• 對於hdfs有什麼理解（回答的不好，很粗糙）
• 知不知道yarn，使用過沒有（知道，沒有用過。。。）
• 那你簡單給我介紹一下es把（我。。。）
• 有沒有使用過多執行緒（有，countdownlatch，executorService，threadPoolExecutor等），原理知道嗎（基於aqs，採用佇列方式，回答也不是太好）
• 如何實現執行緒同步（synchronized，violate，reentrantLock等），synchronized與reentrantLock有什麼區別（synchronized隱式鎖，粗粒度鎖，reentrantlock顯示鎖，更靈活，細粒度可控，一般都是用reentranlock）

還有Java的一些小的點，就不在列舉了

• 一個簡單的小題目，從葉子節點找到根節點，我提出了一種大眾的思路。她問還有其他的方法嗎，想了一會她說就這樣把。

三面完，我心態有點不好，感覺這次應該掛了（後面問了一下，這個面試官是巨量資料組的，所以問的都是一些巨量資料的問題）。我從會議室出來，準備直接走，她叫住我讓我到外面等一下，待會還會有個面試官來面你。

四面
又等了一個多小時，四面面試官叫我去面試。我稍微整理了一下思路，就去了會議室。

• 看了你的簡歷，主要使用的是es，那你給我介紹一下唄（我。。。）
• 為什麼選擇網易（大廠啊），覺得杭州怎麼樣（不錯，環境比武漢好多了）
• 對於前幾輪面試有什麼感想（這也太難了把，我只是來面試的啊。。）
• 前面幾個面試官，那個給你印象比較深（二輪，問的很多，很細）
• 有沒有女朋友（沒有）
• 有沒有同學在這邊（有）
• 有沒有想過來杭州發展（嗯，如果有機會的話）

最後

大概就這些。
基本上面試的內容就這些，寫出來讓大家也可以參考一下。過了幾天，讓同學幫忙看了一下，發現沒有通過，也是略遺憾，哎。。
外本人整理收藏了20年多家公司面試知識點整理 ，以及各種Java核心知識點免費分享給大家，想要資料的話請點選這裡來加入我們的交流分享群 暗號 qf 。