手把手教你起superset(附贈連kylin數據源)

1、pip流

裝了pip可以無視步驟2,但是專業人士一般會使用Anaconda

1.1、裝pip

https://pip.pypa.io/en/stable/installing/

懶得看就直接:

a)wgethttps://bootstrap.pypa.io/get-pip.py

b)sudo python get-pip.py

1.2、裝virtualenv

http://qicheng0211.blog.51cto.com/3958621/1561685

懶得看就直接:

a)sudo pip install virtualenv

b)sudo pip install virtualenvwrapper

c)給自己~/.profile里加上

export WORKON_HOME=~/{自己起個名放workspace}

source /usr/bin/virtualenvwrapper.sh #如果是pip下來的一般會在/usr/local/bin/virtualenvwrapper.sh,總之自己找一下

d)mkvirtualenv superset

2、Anaconda流

2.1、裝Anaconda

a)官網下一個https://www.anaconda.com/download/#linux,500多M,覺得慢可以到小伙伴那里抓一個過來

b)不用sudo,bash?Anaconda2-*******.sh

c)一路回車,默認會裝在~/anaconda2目錄下,如果想裝在別的地方,在看完那個巨長的一定要看但是肯定沒人看的用戶協議之后,輸入安裝目錄

d)把anaconda2/bin加到你的PATH里

e)更新一下自己conda upgrade --all

做完上一步,你一定發現下包速度很慢了,按下面的來

# 添加Anaconda的TUNA鏡像

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/

# TUNA的help中鏡像地址加有引號,需要去掉

# 設置搜索時顯示通道地址

conda config --set show_channel_urls yes

2.2、配個環境

其實anaconda自帶切環境功能,

conda create -n {env_name}

source activate?{env_name}

conda install pip

更多操作看這里http://www.lxweimin.com/p/169403f7e40c

3、裝superset

https://superset.incubator.apache.org/installation.html

懶得看就直接:

寫作“注意”,讀作“坑”:如果你先裝的pip,后裝的anaconda,使用pip install superset的時候,使用pip -V看一下你使用的是系統默認的pip還是虛擬環境中的pip

a)刷一下pip install --upgrade setuptools pip

b)官方教你走一下這個流程

# Install supersetpipinstallsuperset

# Create an admin user (you will be prompted to set username, first and last name before setting a password)fabmanagercreate-admin--appsuperset# Initialize the databasesupersetdbupgrade# Load some data to play withsupersetload_examples# Create default roles and permissionssupersetinit# Start the web server on port 8088, use -p to bind to another portsupersetrunserver# To start a development web server, use the -d switch# superset runserver -d

以下是贈品

4、打通superset與kylin

4.1、安裝pykylin

a)照著做:https://github.com/imaidata/pykylin

b)python setup.py install的時候可能會報README找不到,在setup.py里找到readme相關的兩行代碼注釋之

b)在superset中添加數據源,source?→ databases?→ add record 然后這么填

kylin://{此處是賬號}:{此處是密碼}@{url}:{port}/kylin/api?project={project}

c)點test connection,等出現seems ok, 不過一般來說會報flask_wtf.csrf: The CSRF?token has expired

一般來說這是缺少flask包導致的,conda install flask或者pip install flask

4.1、改pykylin源碼

由于pykylin的代碼已經比較陳舊,跟不上superset和kylin的更新

本次修改基于如下版本,不保證其他版本有效

superset:0.20.4

apache kylin:release 2.1

pykylin:https://github.com/imaidata/pykylin/commits/mastercommit9f5f2d7218f76b35c76a3bc3de22db4cbe09f61d

a) 添加table的時候會報get_table_names參數個數不對,修改pykylin的dialect.py,找到get_table_names和get_schema_names兩個方法,將3個參數擴充為四個,姑且叫做unknown=None,如下圖:


b) count是kylin關鍵字,pykylin會將sql中的count替換為'__superset_count',但返回時未替換回來,所以需要修改cursor.py的execute方法。62行65行


最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,527評論 6 544
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,687評論 3 429
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 178,640評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,957評論 1 318
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,682評論 6 413
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 56,011評論 1 329
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 44,009評論 3 449
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 43,183評論 0 290
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,714評論 1 336
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,435評論 3 359
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,665評論 1 374
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,148評論 5 365
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,838評論 3 350
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,251評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,588評論 1 295
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,379評論 3 400
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,627評論 2 380