hortonworks-data-platform

1熱度

1回答

我們使用的複製因子爲3的Hortonworks HDP 2.1（HDFS 2.4）。我們最近已經退役了一個數據節點，並且在複製塊中留下了很多簇。集羣現在試圖通過在其他節點之間分配複製塊來滿足複製因子。如何停止該過程。我確定一些文件只能被複制兩次。如果我在該目錄中將複製因子更改爲2，該過程是否會終止？對於具有3個副本的文件的目錄，複製因子爲2會產生什麼影響。羣集是否會啓動另一個進程以刪除3個

1熱度

1回答

蜂房導入失敗[java.lang.OutOfMemoryError]

我正在做一個SQL數據庫的輸入到配置單元數據庫中的蜂巢客戶端節點上（使用Hortonworks數據平臺）與bash命令： $ hive -f tables.sql 我得到的錯誤： log4j:WARN No such property [maxFileSize] in org.apache.log4j.DailyRollingFileAppender. Logging initialize

0熱度

1回答

在Oozie-Spark動作中添加多個罐子

我正在使用HDP2.6。哪裏安裝oozie 4.2。和Spark2。我追蹤了本網站上的Hortonworks指南：https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.6.1/bk_spark-component-guide/content/ch_oozie-spark-action.html在4.2中爲Spark2添加了庫。 Oozie版本。

0熱度

1回答

Oozie協調員調度使用cron表達式給出錯誤

我已經使用cron表達式頻率=「20 3 * * 2-4」安排了一個協調器，但它給出了錯誤。 oozie協調器日誌說「java.lang.IllegalArgumentException」：paramter [頻率] = [20 3 * * 2-4]必須是一個整數。解析錯誤輸入字符串：「20 * 3 * 2-4」 HDP版本：2.5.3 Oozie的客戶端生成版本：4.2.0.2.5.3.0-

1熱度

1回答

無法驗證serde：org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe

在Hive上創建表時獲取Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Cannot validate serde: org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe 。下面是創建表的腳本： CREATE EXTERNAL TABlE

0熱度

1回答

有關如何在Hive查詢中設置Hive屬性的示例

我需要一個快速示例來說明如何使用查詢更改配置單元中的屬性，例如，我想更改屬性'mapred.reduce.tasks' ，如何在查詢中執行此更改。我正在爲HDPCD考試培訓自己，考試的目標之一是'在Hive查詢中設置Hadoop或Hive配置屬性'所以我認爲它與在Hive控制檯中執行的操作不一樣像： set mapred.reduce.tasks=2;

1熱度

2回答

Hortonworks shc未解決的依賴關係

我想使用hbase hortonworks連接器。 github guide 但我不知道如何將它導入到我的項目中。我有以下build.sbt： name := "project" version := "1.0" scalaVersion := "2.11.8" libraryDependencies ++= Seq( "org.apache.spark" % "spark-

0熱度

2回答

沒有Namenode高可用性的HBase高可用性

我已經使用安裝了HBase的Ambari設置了兩個節點羣集。我知道我們無法實現沒有三個節點的Namenode HA。但是，通過添加備用HBase主控制器，我們是否可以通過兩個節點使HBase成爲高可用性？ Hbase的高可用性取決於Namenode的高可用性嗎？

0熱度

1回答

爲什麼默認的HDFS塊大小設置爲134.2 MB（大約）

我在Ambari中看到，默認塊大小設置爲134217728.是否有任何特定的原因將其設置爲此值（128或256除外））？

0熱度

1回答

鳳凰視圖爲巨大的HBase表

我正在安裝HBase 1.1.2和Phoenix 4.7 Hortonworks數據平臺2.6羣集。我有一個巨大的HBase表，有很多列，如果添加新數據（數據由HBase API的Put機制添加），有時會添加新列。現在我想使用鳳凰這個表。我發現本教程，我必須創建一個基於HBase表格結構的單獨Phoenix視圖：https://khodeprasad.wordpress.com/2016/07