ES學習(02):ElasticSearch簡介及其發展歷史

原文:ES(入門二):ElasticSearch簡介及其發展歷史

前言


在上篇文章ES(入門一):走進ElasticSearch中已經dui ES的簡介做了介紹。這篇文章還是想就“ElasticSearch簡介及其發展歷史”作進一步補充。希望可以對ES的背景有更深的了解,個人覺得背景的了解也會有助于后面系統的學習。

背后的公司、愿景


我們都知道ES它是一款開源的、近實時、高性能的分布式搜索引擎,但是很多人可能不知道其背后的公司已經在紐約上市了,去年10月份的時候美國股市十分的蕭條(很多人可能知道這個),但是有家公司他在上市首天開盤的漲幅就達到了94%,這其實就是ES背后的公司Elastic。

那我們先來看一個數字,ES為什么在資本市場受到這樣的追捧:

  • 從開源到上市
從開源到上市.png
  • ElasticSearch 客戶
ElasticSearch 客戶.png
  • DBRanking2019年5月的數據庫評測中 ,ES在Search Engine(搜索引擎)分類中名列第一


    圖片.png

ElasticSearch簡介


起源 - Lucene

圖片.png

這個看著很帥氣的男人他叫Doug Cutting,是Lucene的創始人,同時他也是Hadoop的創始人,被稱為Hadoop之父。重點還是來看下Lucene有哪些特點:

(1)基于Java語言開大的搜索引擎類庫
(2)創建于1999年,2005年成為Apache頂級開源項目
(3)Lucene具有高性能、以擴展的有點
(4)Lucene的局限性:

  • 只能基于Java語言開發
  • 類庫的接口學習成本高
  • 原生并不支持水平擴展(這對于搜索引擎來說是一個非常大的問題)

ElasticSearch的誕生

圖片.png

Shay Banon是ElasticSearch的創始人,他曾說過:“搜索是每一個軟件都必須擁有的功能”

2004年Shay Banon基于Lucene開發了Compass(ES的前身)

2010年Shay Banon重寫了Compass,取名ElasticSearch:

  • 支持分布式,可水平擴展
  • 降低全文檢索的學習難度(即提供了Rest API風格的接口),它也可以被任何編程語言調用

ElasticSearch的分布式架構


ElasticSearch的分布式架構.png

從這張圖我們可以看出來:我們可以很方便的在自己的PC上安裝ES環境,但數據變大的時候我們可以迅速擴展到數百個節點。

簡單歸納:

  • 集群規模可以從單個節點擴展至數百個節點
  • 高可用 & 水平擴展:從服務和數據兩個維度
  • 支持不同的節點類型:支持Hot & Warm架構

支持多種方式集成接入

ElasticSearch提供的主要功能

  • 海量數據的分布式存儲及集群管理能力:服務于數據的高可用,水平擴展
  • 近實時搜索,性能卓越:結構化 / 全文 / 地理位置 / 自動完成
  • 海量數據的近實時分析: 指聚合功能

結合一個真實事例看下其使用的場景:

圖片.png

這是一個個人比較喜歡的一個酒店訂閱的平臺,使用ES可以實現酒店的搜索,通過聚合(左側)可以根據價格區間可以高效的篩選滿足要求的結果列表。

Elastic的版本升級及重要版本的新特性

  • 0.4:2010年2月第一次發布
  • 1.0:2014年1月
  • 2.0:2015年10月
  • 5.0:2016年10月
  • 6.0:2017年10月
  • 7.0:2019年4月

新特性5.X

  • Lucene 6.x(表示此時以來的Lucene版本)性能升級,默認打分機制從TF-IDF(計算分詞相似的一個算法)改為BM 25
  • 支持Ingest節點/Painiess Scripting / Completion suggested支持 / 原生的Java REST客戶端
  • Type標記成deprecated(過時,以前我們在創建索引的時候是需要創建一個Type標記的,現在可以不創建它),支持了keyword類型
  • 性能優化:
    (1)內部引擎移除了避免同一文檔并發更新的競爭鎖,帶來15% - 20%的性能提升
    (2)支持分片上聚合的緩存
    (3)新增了Prefile API

新特性6.X

  • Lucene 7.x
  • 新功能
    (1)跨級群復制(CCR)
    (2)索引聲明周期管理
    (3)SQL的支持
  • 更友好的升級及數據遷移
    (1)在主要版本之間的遷移更為簡化,體檢升級
    (2)全新的基于操作的數據復制框架,可加快恢復數據、
  • 性能優化
    (1)有效存儲稀疏字段的新方法,降低了存儲成本
    (2)在索引時進行排序,可加快排序的查詢性能

新特性 7.X

  • Lucene 8.0
  • 重大改進 - 正式廢除單個索引下多Type的支持
  • 7.1開始,Security功能免費使用
  • ECK - Elasticsearch Operator on Kubernetes
  • 新功能
    (1)New Cluster coordination
    (2)Feature-Complete High Level REST Client
    (3)Script Score Query、
  • 性能優化
    (1)默認的Permary Shard數從5改為1,避免Over Sharding
    (2)性能優化,更快的Top K

總結


ES是一個開源的搜素和分析引擎,有很好的的性能,天生支持水平個擴展;另外ES接口也支持多種客戶端接入語言;有非常好的社區的支撐;目前以前有超過3.5億次的下載量,原因是ES背后有一個很強的公司支撐。

歡迎關注更多個人博客:RelaxHeart網 - Tec博客

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,546評論 6 533
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,570評論 3 418
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,505評論 0 376
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,017評論 1 313
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,786評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,219評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,287評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,438評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,971評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,796評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,995評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,540評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,230評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,662評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,918評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,697評論 3 392
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,991評論 2 374

推薦閱讀更多精彩內容