ubuntu15.10下nutch2.2.1+hbase1.1.1搭建爬蟲平臺(失敗的嘗試)

前言

這篇博客是建立在上一篇<a href="http://www.lxweimin.com/p/5e30a6f24d59">ubuntu15.10下nutch2.2.1+mysql搭建爬蟲平臺</a>基礎上的。勸懵逼的小伙伴看一下。

nutch配置的區別

  • 修改conf/nutch-site.xml
<property>
  <name>storage.data.store.class</name>
  <value>org.apache.gora.hbase.store.HBaseStore</value>
  <description>Default class for storing data</description>
</property>
  • 修改 conf/gora.properties
gora.datastore.default=org.apache.gora.hbase.store.HBaseStore
gora.sqlstore.jdbc.driver=org.hsqldb.jdbc.JDBCDriver
gora.sqlstore.jdbc.url=jdbc:hsqldb:hsql://localhost/nutchtest
gora.sqlstore.jdbc.user=youth
gora.sqlstore.jdbc.password=
  • 修改ivy/ivy.xml


<dependency org="org.apache.gora" name="gora-hbase" rev="0.3" conf="*->default" />

####結語
剩下的又是漫長的等待,這個月想自己建一個maven,把常用的jar都放進去
####預告
下一篇<a href="http://www.lxweimin.com/p/4979d6eb4ea7">nutch2.2.1與solr4.5.1的整合</a>
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。

推薦閱讀更多精彩內容