發簡信
IP屬地：香港
-
redis學習[toc] redis 數據結構 字符串 setnx可以作為分布式鎖的實現方法； 內部編碼 哈希表 內部編碼 ziplistimage.png ...
-
摘要
1、站在書脊之上，我可以飛躍眼前的圍墻，借文字之翼，我可以抵達世界之巔，這是自由，只有閱讀時的人生后無追兵，閱讀時，是我在追尋上帝的腳步。2、成...
-
hadoop生態搭建（包括hbase,hive,hue等）
重要tip 項目git地址 hadoop搭建部分，使用了kiwenlau的hadoop dockefile。 注意，hadoop的分布式是基于多...
-
搜索詞推薦
使用golang開發，借助字典樹結構+堆的數據結構，實現了us級別的搜索前綴詞和熱門搜索詞的獲取。 相關鏈接demo相關github 返回樣例
-
數據平臺實踐②——Logstash+Elasticsearch+Kibana簡介 在上一次的數據平臺實踐①中，對基于Flume，Kafka和Spark Streaming的數據平臺組合做了介紹，這一次對業界流行的ELK組...
-
Tip：Hadoop+Idea（本地測試+遠程調試）
MapReduce調試常見情況 Idea是一款很贊的IDE，結合Hadoop可以做本地測試+遠程調試。首先，我們知道針對MapReduce有以下...
-
數據平臺實踐①——Flume+Kafka+SparkStreaming(pyspark)蜻蜓點水 Flume——數據采集 如果說，爬蟲是采集外部數據的常用手段的話，那么，Flume就是采集內部數據的常用手段之一（logstash也是...
-
爬蟲之scrapy-splash——scrapy+js渲染容器
簡介 scrapy作為爬蟲利器，我就不多說了。常見的結合js的爬蟲，一般用來扒取網頁動態內容，就是通過操作js獲取渲染的內容。現在大部分網站都是...
-
keystonejs試手簡介 keystonejs是一款數據庫驅動的基于Express和MongoDB開發的node框架。keystonejs可以被理解成是一款cms。...