10.并發編程之MasterWorker

Master-Worker模式:常用的并行計算模式,核心思想是系統由兩類進行協作工作:Master進程 和Worker進程。
Master負責接收和分配任務,Worker負責處理子任務。當各個Worker子進程處理完成后,會將結果返回給Master,由Master做歸納與總結。
好處是將一個大任務分解成若干個小任務,并行執行,提高系統吞吐量。
實際具體的業務處理方法handle()不應該寫在核心框架中,最好寫在Worker子類中,且是抽象的,模板方法。在Main函數中可以new自己的子類,進行解耦。

    package demo5;

    public class Task {
        private int     id;
        private String  name;
        private int     price;

        /**
         * @return the id
         */
        public int getId() {
            return id;
        }

        /**
         * @param id
         *            the id to set
         */
        public void setId(int id) {
            this.id = id;
        }

        /**
         * @return the name
         */
        public String getName() {
            return name;
        }

        /**
         * @param name
         *            the name to set
         */
        public void setName(String name) {
            this.name = name;
        }

        /**
         * @return the price
         */
        public int getPrice() {
            return price;
        }

        /**
         * @param price
         *            the price to set
         */
        public void setPrice(int price) {
            this.price = price;
        }
    }
    package demo5;

    import java.util.concurrent.ConcurrentHashMap;
    import java.util.concurrent.ConcurrentLinkedQueue;

    public abstract class Worker implements Runnable {

        private ConcurrentLinkedQueue<Task>         workQueue;
        private ConcurrentHashMap<String, Object>   resultMap;

        public void setWorkerQueue(ConcurrentLinkedQueue<Task> workQueue) {
            this.workQueue = workQueue;
        }

        public void setResultMap(ConcurrentHashMap<String, Object> resultMap) {
            this.resultMap = resultMap;
        }

        public abstract Object handle(Task input);

        @Override
        public void run() {
            while (true) {
                Task input = this.workQueue.poll();
                if (input == null) {
                    break;
                }
                // 真正去做業務處理
                Object output = handle(input);
                this.resultMap.put(Integer.toString(input.getId()), output);
            }

        }

    }
    package demo5;

    public class MyWorker extends Worker {
        public Object handle(Task input) {

            Object output = null;
            try {
                Thread.sleep(500);
                output = input.getPrice();
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
            return output;
        }
    }

    package demo5;

    import java.util.HashMap;
    import java.util.Map;
    import java.util.concurrent.ConcurrentHashMap;
    import java.util.concurrent.ConcurrentLinkedQueue;

    public class Master {
        // 1.應該有一個盛裝任務的集合
        private ConcurrentLinkedQueue<Task>         workQueue   = new ConcurrentLinkedQueue<Task>();

        // 2.使用HashMap去盛裝所有worker對象
        private HashMap<String, Thread>             workers     = new HashMap<String, Thread>();

        // 3.使用一個容器盛裝每一個worker并發執行任務的結果集
        private ConcurrentHashMap<String, Object>   resultMap   = new ConcurrentHashMap<String, Object>();

        // 4.構造方法
        public Master(Worker worker, int workerCount) {
            // 每一個worker對象都需要有Master的引用workQueue用于任務的領取,resultMap用于任務的提交
            worker.setWorkerQueue(this.workQueue);
            worker.setResultMap(this.resultMap);
            for (int i = 0; i < workerCount; i++) {
                // key表示每一個worker的名字,value表示線程執行對象
                workers.put("子節點" + Integer.toString(i), new Thread(worker));
            }
        }

        // 5.提交方法
        public void submit(Task task) {
            this.workQueue.add(task);
        }

        // 6.需要有一個執行的方法,啟動應用程序,讓所有的worker工作
        public void execute() {
            for (Map.Entry<String, Thread> me : workers.entrySet()) {
                me.getValue().start();
            }
        }

        // 7.判斷線程是否執行完畢
        public boolean isComplete() {
            for (Map.Entry<String, Thread> me : workers.entrySet()) {
                if (me.getValue().getState() != Thread.State.TERMINATED) {
                    return false;
                }
            }
            return true;
        }

        // 8.返回結果集數據
        public int getResult() {
            int ret = 0;
            for (Map.Entry<String, Object> me : resultMap.entrySet()) {
                ret += (Integer) me.getValue();
            }
            return ret;
        }
    }

    package demo5;

    import java.util.Random;

    public class Main {
        public static void main(String[] args) {
            System.out.println("我的機器可用processor數量:" + Runtime.getRuntime().availableProcessors());

            Master master = new Master(new MyWorker(), Runtime.getRuntime().availableProcessors());
            Random r = new Random();
            for (int i = 0; i <= 100; i++) {
                Task t = new Task();
                t.setId(i);
                t.setName("任務" + i);
                t.setPrice(r.nextInt(1000));
                master.submit(t);
            }
            master.execute();
            long start = System.currentTimeMillis();
            while (true) {
                if (master.isComplete()) {
                    long end = System.currentTimeMillis() - start;
                    int result = master.getResult();
                    System.out.println("最終結果:" + result + ", 執行耗時: " + end);
                    break;
                }
            }
        }
    }
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,117評論 6 537
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,860評論 3 423
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 177,128評論 0 381
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,291評論 1 315
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,025評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,421評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,477評論 3 444
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,642評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,177評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,970評論 3 356
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,157評論 1 371
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,717評論 5 362
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,410評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,821評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,053評論 1 289
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,896評論 3 395
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,157評論 2 375

推薦閱讀更多精彩內容

  • Android 自定義View的各種姿勢1 Activity的顯示之ViewRootImpl詳解 Activity...
    passiontim閱讀 172,682評論 25 708
  • 前文再續,就書接上一回,隨著與Server、TCP、Protocol的邂逅,Swoole終于迎來了自己的故事,今天...
    蝸牛淋雨閱讀 1,762評論 1 14
  • 關于黑夜 沒有誰能夠比白天更懂他 這是開始 也是白天辛苦孕育的胎芽 快樂掙扎 原來最美的一刻就是臨盆的剎那
    候鳥飛呀閱讀 183評論 0 4
  • 不知不覺已經堅持了長達36天寫作了。雖然有很多篇文章無法令自己滿意,可收獲的是一個好習慣。21天形成習慣不是吹的。...
    Miss文小姐閱讀 179評論 1 0
  • 也許大家已經看到了我和兩位助教在一起的照片,曙東和現發兩位助教專程為我趕來,還有我的EMO和幾位學長,其原因就是因...
    卜芳閱讀 198評論 2 5