發簡信
IP屬地：廣東
-
Tensorflow四種Cross Entropy交叉熵算法實現
1. softmax_cross_entropy_with_logits 方法定義： 計算方式： 2. sparse_softmax_cross...
-
7.Spark數據讀取與保存1. 常見數據源 文件格式與文件系統對于存儲在本地文件系統或分布式文件系統（比如NFS、HDFS、Amazon S3 等）中的數據，Spark ...
-
6. Spark數據分區示例：PageRank
1. 算法簡介 PageRank 是執行多次連接的一個迭代算法，因此它是RDD 分區操作的一個很好的用例。算法會維護兩個數據集： 一個由(pag...
-
5. 第四章 鍵值對操作1. 創建Pair RDD 當用Scala 和Python 從一個內存中的數據集創建pair RDD 時，只需要對這個由二元組組成的集合調用Sp...
-
4. 第三章 RDD編程Spark 中的RDD 就是一個不可變的分布式對象集合。每個RDD 都被分為多個分區，這些分區運行在集群中的不同節點上。 總的來說，每個Spar...
-
3. 第二章 Spark入門示例1. Spark文件目錄簡介 1.1 README.md包含用來入門Spark的簡單的使用說明。1.2 bin包含可以用來和Spark 進行各種...
-
2. 第一章 Spark導論1. Spark 簡介 Spark是一個用來實現快速而通用的集群計算的平臺。Spark 不僅可以將任何Hadoop 分布式文件系統（HDFS）上...
-
1. Spark概述1.Spark介紹 Spark，是一種通用的大數據計算框架。正如Hadoop的MapReduce、Hive引擎，以及Storm流式實時計算引擎。...
-
Java網頁正文提取工具
最近做一個項目，其中涉及到網頁信息采集，隨后對相關的技術進行了學習與研發，網頁正文提取技術常用的有joyhtml、boilerpipe、cx-e...