OpenCL架構

1. 簡介


OpenCL(Open Computing Language),即開放運算語言,是一個統一的開放式的開發平臺。OpenCL是首個提出的并行開發的開放式的、兼容的、免費的標準,它的目的是為異構系統通用提供統一開發平臺。OpenCL最初是由蘋果公司設想和開發,并在與AMD,IBM,英特爾和NVIDIA技術團隊的合作之下初步完善。隨后,蘋果將這一草案提交至Khronos Group。


OpenCL歷史版本.png

2. 框架組成


OpenCL的框架組成可以劃分為三個部分,分別為OpenCL平臺API、OpenCL運行時API,以及OpenCL內核編程語言。

2.1 平臺API

平臺(Platform)這個詞在OpenCL中擁有非常特定的含義,它表示的是宿主機、OpenCL設備和OpenCL框架的組合。多個OpenCL平臺可以共存于一臺異構計算機。舉個例子,CPU開發人員和GPU開發人員可以在同一個系統上分別定義自己的OpenCL框架。這時就需要一種方法來查詢系統中可用的OpenCL 框架,哪些OpenCL設備是可用的,以及這些OpenCL設備的特性。相當于CUDA的主機和設備之間的關系
此外,為了形成一個給定的OpenCL應用平臺,還需要對這些框架和設備所屬的子集進行控制。這些功能都是由OpenCL平臺API中的函數來解決的。此外,平臺API還提供了為OpenCL創建上下文的函數。OpenCL的上下文規定了OpenCL應用程序的打開方式(相當是CUDA中核函數的調用),這可以在宿主機程序代碼中得到驗證。

2.2 運行時API

平臺API提供函數創建好上下文之后,運行時API主要提供使用上下文提供的功能滿足各種應用需求的函數。這是一個規模龐大且內容十分復雜的函數集。運行時API的第一個任務是創建一個命令隊列。命令隊列與設備相關聯,而且一個上下文中可以同時存在多個活動的命令隊列。有了命令隊列,就可以通過調用運行時API提供的函數來進行內存對象的定義以及管理內存中的對象所依賴的所有其他對象。以上是內存對象的持有操作,另外還有釋放操作,也是由運行時API提供的。
此外,運行時API還提供了創建動態庫所需要的程序對象的函數,正是這些動態庫實現了Kernel的定義。最后,運行時層的函數會發出與命令隊列交互的命令。此外,管理數據共享和對內核的執行加以限制同步點也是由運行時API處理的。

2.3 內核編程語言

內核編程語言是用于編寫OpenCL內核代碼的。除了宿主機程序之外,內核程序也十分重要,它負責完成OpenCL中的實際工作。在部分OpenCL實現中用戶可以跟其他語言編寫的原生內核實現交互,但多數情況下內核是需要用戶使用內核編程語言編寫實現的。OpenCLC編程語言就是OpenCL中的內核編程語言,該編程語言是“ISO C99 標準”的一個擴展子集,也就是說它是由 ISO C99語言派生而來的。現在的OpenCL2.1還支持C++,是基于eISO/IEC JTC1 SC22 WG21 N3690(C++14)。

2.4 適合平臺

  1. AMD
    根據AMD官網所提供的內容,OpenCL在AMD顯卡中只能適用X86核心的CPU架構,而對其他PowerPC和ARM架構則不適用;并且也不是所有的AMD顯卡都能運行OpenCL,按其官網介紹只能是AMD Radeon、AMD FirePro和AMD Firestream三種類型的顯卡;但對于操作系統則可以是Linux或Windows的系統,如表1所示。
    表 1 AMD OpenCL
CPU架構 顯卡類型 操作系統 系統位數
X86 AMD Radeon Linux/ Windows 32/64
AMD FirePro Linux/ Windows 32/64
AMD Firestream Linux/ Windows 32/64
  1. NVIDIA
    NVIDIA OpenCL是一種運行于具有CUDA能力GPU上的一種底層API,即OpenCL是運行于CUDA之上的一種API,從而若適用CUDA的平臺,也同樣適用OpenCL。根據NVIDIA官網最新版本的CUDA
    7.5適合的平臺如表 2所示。
    表 2 NVIDIA OpenCL
操作系統 CPU架構 Distribution
Windows X86_64 10、8.1、7、Server 2012 R2、Server 2008 R2
Linux X86_64 Fedora、OpenSUSE、RHEL、CentOS、SLES、steamOS、Ubuntu.
ppc64le Ubuntu
Mac OSX x86_64 10.11、10.10、10.9

3. 計算架構


OpenCL 的設計目標是為開發人員提供一套移植性強且高效運行的解決方案。為了更好的描述OpenCL設計的核心理念,Khronos Group官方將OpenCL的計算架構分解成四個模型,分別平臺模型(Platform Model)、內存模型(Memory Model)、執行模型(Execution
Model)以及編程模型(Programming Model)。

3.1 平臺模型(Platform Model)

從整體上來看,主機(host)端是負責掌管整個運算的所有計算資源,因此OpenCL 應用程序首先是由主機端開始,然后由程序將各個計算命令從主機端發送給每個 GPU 設備處理單元,運行完畢之后最后由主機端結束。

OpenCL架構的平臺模型.png

平臺模型如圖 16所示。從圖中可以直觀的看到,最基本處理單位是Processing Element,簡稱PE(處理單元),而一個或多個PE組成了Compute Unit,簡稱CU(計算單元),進而一個或多個CU就組成了Compute Device,即OpenCL設備。最后,一個或多個OpenCL設備連接到主機,并等待著處理主機發送的計算指令,由于PE是最基本處理單位,因此每條計算指令最終都歸PE進行處理,而PE是在CU中的。

3.2 內存模型(Memory Model)

OpenCL將內核程序中用到的內存分為圖 17所示的四種不同的類型。


OpenCL內存模型.png

其中它們的讀寫特性分別為:

  • Global memory:
    工作區內的所有工作節點都可以自由的讀寫其中的任何數據。OpenCL
    C語言提供了全局緩存(Global buffer)的內建函數。
  • Constant memory:
    工作區內的所有工作節點可以讀取其中的任何數據但不可以對數據內容進行更改,在內核程序的執行過程中保持不變。主機端負責分配和初始化常量緩存(Constant buffer)。
  • Local memory:
    只有同一工作組中的工作節點才可以對該類內存進行讀寫操作。它既可以為 OpenCL的執行分配一塊私有內存空間,也可以直接將其映射到一塊全局緩存(Global buffer)上。特點是運行速度快。
  • Private memory:
    只有當前的工作節點能對該內存進行訪問和讀寫操作。一個工作節點內部的私有緩存(Private buffer)對其他節點來說是不可見的。
    表 3 OpenCL各種存儲器的分配方式和訪問權限
存儲器類型 主機 內核
分配方式 訪問權限 分配方式 訪問權限
Global 動態分配 可讀、可寫 不可分配 可讀、可寫
Constant 動態分配 可讀、可寫 靜態分配 只讀
Local 動態分配 不可訪問 靜態分配 可讀、可寫
Private 不可分配 不可訪問 靜態分配 可讀、可寫

3.3 執行模型(Execution Model)

OpenCL的執行模型是應用程序通過主機端對OpenCL設備端上的內核程序進行管理,該模型分為兩個模塊:一個是在主機端執行的管理程序,也稱為Hostprogram,另一個是主機端的Hostprogram所管理的在OpenCL上執行的程序,也被稱作Kernels。在執行Kernels前,先要建立一個索引空間,來對設備里的每個節點進行標識,每個節點都將執行相同的kernel程序。在每個工作組中,都有一個局ID,每個節點在全局里還有個全局ID,OpenCL使用NDRange來定義這個索引空間。

OpenCL執行模型.png

如圖 18所示的OpenCL執行模型,其過程可以細分為如下的步驟完成:

  1. 查詢連接主機上的OpenCL設備;
  2. 創建一個關聯到OpenCL設備的context;
  3. 在關聯的設備上創建可執行程序;
  4. 從程序池中選擇kernel程序;
  5. 從主機或設備上創建存儲單元;
  6. 如果需要將主機的數據復制到OpenCL設備上的存儲單元上;
  7. 執行kernel程序執行;
  8. 從OpenCL設備上復制結果到主機上。

3.4 編程模型(Programming Model)

OpenCL支持兩種編程模型,分別為數據并行編程模型和任務并行編程模型,并支持上面由這兩種編程模型混合的混合編程模型。

  1. 數據并行編程模型
    OpenCL提供一個分層的數據并行編程模型,即典型的SIMD計算模型,其特點是每個數據經由同樣的指令序列處理,而處理數據的次序是不確定的,并且每個數據的處理是不相干的,即任一線程的計算不得依賴于其它線程的結果(包括中間結果)。
  2. 任務并行編程模型
    任務并行模型中的每個內核是在一個獨立的索引空間中執行的,也就是說,執行內核的計算機單元內只有一個工作組,其中只有一個工作項。在這樣的模型中,每個線程都可以執行不同的帶啊,著相當于MIMD的計算模型,適合多核心CPU。
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,606評論 6 533
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,582評論 3 418
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,540評論 0 376
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,028評論 1 314
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,801評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,223評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,294評論 3 442
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,442評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,976評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,800評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,996評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,543評論 5 360
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,233評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,662評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,926評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,702評論 3 392
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,991評論 2 374

推薦閱讀更多精彩內容

  • 1. 簡介 官網在這里 OpenCL(Open Computing Language),即開放運算語言,是一個統一...
    王偵閱讀 1,897評論 0 1
  • Spring Cloud為開發人員提供了快速構建分布式系統中一些常見模式的工具(例如配置管理,服務發現,斷路器,智...
    卡卡羅2017閱讀 134,785評論 18 139
  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,662評論 25 708
  • 暮落之夜閱讀 216評論 2 1
  • 今天和閨蜜聊了很多她相親的趣事,有個很深的體會。你是怎么樣的女子,就值得什么樣的男生來追求。你的生活邋遢,事業懶惰...
    organnn閱讀 370評論 1 2