清洗處理類
主要是文本、格式以及臟數(shù)據(jù)的清洗和轉(zhuǎn)換。很多數(shù)據(jù)并不是直接拿來就能用的,需要經(jīng)過數(shù)據(jù)分析人員的清理。數(shù)據(jù)越多,這個步驟花費的時間越長。
Trim
清除掉字符串兩邊的空格。
MySQL有同名函數(shù),Python有近似函數(shù)strip。
Concatenate
=Concatenate(單元格1,單元格2……)
合并單元格中的內(nèi)容,還有另一種合并方式是&。"我"&"很"&"帥"=我很帥。當(dāng)需要合并的內(nèi)容過多時,concatenate的效率快也優(yōu)雅。
MySQL有近似函數(shù)concat。
=CONCATENATE(A1,A2,A3)=A1&A2&A3
=A1&””&A2&A3
Replace
=Replace(指定字符串,哪個位置開始替換,替換幾個字符,替換成什么)
替換掉單元格的字符串,清洗使用較多。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
Substitute
和replace接近,區(qū)別是替換為全局替換,沒有起始位置的概念
Left/Right/Mid
=Mid(指定字符串,開始位置,截取長度)
截取字符串中的字符。Left/Right(指定字符串,截取長度)。left為從左,right為從右,mid如上文示意。
MySQL中有同名函數(shù)。
=LEFT(A1,1):從第左邊開始取,取一個長度。
=RIGHT(A1,1):從右邊開始取,取一個長度。
=MID(A1,2,1):從第二個開始取,取一個長度。
Len/Lenb
返回字符串的長度,在len中,中文計算為一個,在lenb中,中文計算為兩個。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
=LEN(C1)
=RIGHT(A1,LEN(A1)-1)
Find
=Find(要查找字符,指定字符串,第幾個字符)
查找某字符串出現(xiàn)的位置,可以指定為第幾次出現(xiàn),與Left/Right/Mid結(jié)合能完成簡單的文本提取
MySQL中有近似函數(shù)find_in_set,Python中有同名函數(shù)。
Search
和Find類似,區(qū)別是Search大小寫不敏感,但支持*通配符
Text
將數(shù)值轉(zhuǎn)化為指定的文本格式,可以和時間序列函數(shù)一起看
————
關(guān)聯(lián)匹配類
在進(jìn)行多表關(guān)聯(lián)或者行列比對時用到的函數(shù),越復(fù)雜的表用得越多。多說一句,良好的表習(xí)慣可以減少這類函數(shù)的使用。
Lookup
=Lookup(查找的值,值所在的位置,返回相應(yīng)位置的值)
最被忽略的函數(shù),功能性和Vlookup一樣,但是引申有數(shù)組匹配和二分法。
Vlookup
=Vlookup(查找的值,哪里找,找哪個位置的值,是否精準(zhǔn)匹配)
Excel第一大難關(guān),因為涉及的邏輯對新手較復(fù)雜,通俗的理解是查找到某個值然后黏貼過來。
=VLOOKUP(A12,B2:E8,2,0)
Tips:2代表要查詢的目標(biāo)值距離A12值得相對位置。0位精確匹配,1為模糊匹配。只能匹配從匹配值開始右邊的列。
Tips:通過“數(shù)據(jù)驗證”工具將某個值變成下拉列表。
Index
=Index(查找的區(qū)域,區(qū)域內(nèi)第幾行,區(qū)域內(nèi)第幾列)
和Match組合,媲美Vlookup,但是功能更強(qiáng)大。
Match
=Match(查找指定的值,查找所在區(qū)域,查找方式的參數(shù))
和Lookup類似,但是可以按照指定方式查找,比如大于、小于或等于。返回值所在的位置。
Row
返回單元格所在的行
Column
返回單元格所在的列
Offset
=Offset(指定點,偏移多少行,偏移多少列,返回多少行,返回多少列)
建立坐標(biāo)系,以坐標(biāo)系為原點,返回距離原點的值或者區(qū)域。正數(shù)代表向下或向右,負(fù)數(shù)則相反。
————
邏輯運算類
數(shù)據(jù)分析中不得不用到邏輯運算,邏輯運算返回的均是布爾類型,True和False。很多復(fù)雜的數(shù)據(jù)分析會牽扯到較多的邏輯運算
IF
經(jīng)典的如果但是,在后期的Python中,也會經(jīng)常用到,當(dāng)然會有許多更優(yōu)雅的寫法。也有ifs用法,取代if(and())的寫法。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
=IF(A1<200,5%,IF(A1<1000,10%))
Tips:IF(判斷條件,成立值,不成立值);用$(F4)鎖定不可變的值。
And
全部參數(shù)為True,則返回True,經(jīng)常用于多條件判斷。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
Or
只要參數(shù)有一個True,則返回Ture,經(jīng)常用于多條件判斷。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
IS系列
常用判斷檢驗,返回的都是布爾數(shù)值True和False。常用ISERR,ISERROR,ISNA,ISTEXT,可以和IF嵌套使用。
——
計算統(tǒng)計類
常用的基礎(chǔ)計算、分析、統(tǒng)計函數(shù),以描述性統(tǒng)計為準(zhǔn)。具體含義在后續(xù)的統(tǒng)計章節(jié)再展開。
Sum/Sumif/Sumifs
統(tǒng)計滿足條件的單元格總和,SQL有中同名函數(shù)。
MySQL中有同名函數(shù),Python中有同名函數(shù)。
=SUMIFS(C1:C12,A1:A2,”李*”,B1:B2,”員工”)
=SUMIF(A1:A2,”李*”,C1:C12)
Tips:SUMIFS把求和列寫在前面,條件在后面;SUMIF把條件寫在前面,求和列在后面
Sumproduct
統(tǒng)計總和相關(guān),如果有兩列數(shù)據(jù)銷量和單價,現(xiàn)在要求賣出增加,用sumproduct是最方便的。
MySQL中有同名函數(shù)。
Count/Countif/Countifs
統(tǒng)計滿足條件的字符串個數(shù)
MySQL中有同名函數(shù),Python中有同名函數(shù)。
=COUNTIFS(C2:C7,”>”&B3,C2:C7,”<5000”)
Tips:運算符和單元格之間用&進(jìn)行連接。
Max
返回數(shù)組或引用區(qū)域的最大值
MySQL中有同名函數(shù),Python中有同名函數(shù)。
Min
返回數(shù)組或引用區(qū)域的最小值
MySQL中有同名函數(shù),Python中有同名函數(shù)。
MOD
取余操作,IF(MOD(A1,2)
Tips:IF(MOD(A1,2)=0,"偶數(shù)","奇數(shù)")
Rank
排序,返回指定值在引用區(qū)域的排名,重復(fù)值同一排名。
SQL中有近似函數(shù)row_number()。
Rand/Randbetween
常用隨機(jī)抽樣,前者返回0~1之間的隨機(jī)值,后者可以指定范圍。
MySQL中有同名函數(shù)。
Averagea
求平均值,也有Averageaif,Averageaifs
MySQL中有同名函數(shù),python有近似函數(shù)mean。
Quartile
=Quartile(指定區(qū)域,分位參數(shù))
計算四分位數(shù),比如1~100的數(shù)字中,25分位就是按從小到大排列,在25%位置的數(shù)字,即25。參數(shù)0代表最小值,參數(shù)4代表最大值,1~3對應(yīng)25、50(中位數(shù))、75分位
Stdev
求標(biāo)準(zhǔn)差,統(tǒng)計型函數(shù),后續(xù)數(shù)據(jù)分析再講到
Substotal
=Substotal(引用區(qū)域,參數(shù))
匯總型函數(shù),將平均值、計數(shù)、最大最小、相乘、標(biāo)準(zhǔn)差、求和、方差等參數(shù)化,換言之,只要會了這個函數(shù),上面的都可以拋棄掉了。
參數(shù):
1:AVERAGE101
2:COUNT102
3:COUNTA103
4:MAX104
5:MIN105
6:PRODUCT106
7:STDEV.S107
8:STDEV.P108
9:SUM109(隱藏和篩選時有區(qū)別,手動隱藏單元格時使用109,先篩選,后隱藏)
10:VAR.S110
11:VAR.P111
Int/Round
取整函數(shù),int向下取整,round按小數(shù)位取數(shù)。
round(3.1415,2)=3.14;
round(3.1415,1)=3.1
Indirect
數(shù)據(jù)引用跳轉(zhuǎn)
————
時間序列類
專門用于處理時間格式以及轉(zhuǎn)換,時間序列在金融、財務(wù)等數(shù)據(jù)分析中占有較大比重。時機(jī)序列的處理函數(shù)比我列舉了還要復(fù)雜,比如時區(qū)、分片、復(fù)雜計算等。這里只做一個簡單概述。
Year
返回日期中的年
MySQL中有同名函數(shù)。
Month
返回日期中的月
MySQL中有同名函數(shù)。
Weekday
=Weekday(指定時間,參數(shù))
返回指定時間為一周中的第幾天,參數(shù)為1代表從星期日開始算作第一天,參數(shù)為2代表從星期一開始算作第一天(中西方差異)。我們中國用2為參數(shù)即可。
MySQL中有同名函數(shù)。
Weeknum
=Weeknum(指定時間,參數(shù))
返回一年中的第幾個星期,后面的參數(shù)類同weekday,意思是從周日算還是周一。
MySQL中有近似函數(shù)week。
Day
返回日期中的日(第幾號)
MySQL中有同名函數(shù)。
Date
=Date(年,月,日)
時間轉(zhuǎn)換函數(shù),等于將year(),month(),day()合并
MySQL中有近似函數(shù)date_format。
Now
返回當(dāng)前時間戳,動態(tài)函數(shù)
MySQL中有同名函數(shù)。
Today
返回今天的日期,動態(tài)函數(shù)
MySQL中有同名函數(shù)。
Datedif
=Datedif(開始日期,結(jié)束日期,參數(shù))
日期計算函數(shù),計算兩日期的差。參數(shù)決定返回的是年還是月等。
MySQL中有近似函數(shù)DateDiff。