問(wèn)題現象 用idea 運行Zookeeper是報錯 com.codahale.metrics.Reservoir找不見(jiàn)。 問(wèn)題原因 Zookeeper-server下面的pom.xml 里面引用jar的時(shí)候加了<scope>provided</scope>導致IDEA加載不到依賴(lài)的包。所以只要將其注釋掉即可。 解決辦法 將Zookeeper-server下面的pom.xml里面的全部的<scope>provided</scope>注釋掉，重新編譯即可。

簡(jiǎn)介 distributedShell是Yarn自帶的應用程序，和MR類(lèi)似，當前工具可以用來(lái)對Yarn進(jìn)行壓測。 使用示例 參考命令如下： ./bin/hadoop jar ./share/hadoop/yarn/hadoop-yarn-applications-distributedshell-3.4.1.jar \ -jar ./share/hadoop/yarn/hadoop-yarn-applications-distributedshell-3.4.1.jar -shell_command \ '/bin/date' -num_containers 5 可以提交一個(gè)樣例作業(yè)到Yarn上面。 源碼閱讀 當前樣例的入口類(lèi)是org.apache.hadoop.yarn.applications.distributedshell.Client ，在pom文件里面默認定義了當前類(lèi)為主類(lèi)。所以在提交的時(shí)候可以不用指定主類(lèi)。 <plugin> <artifactId>maven-jar-plugin</artifactId> <execu....

背景 新建的HDFS使用web短上傳文件的時(shí)候報錯： Permission denied: user=dr.who, access=WRITE, inode="/":hadoop01 解決 在core-site.xml中增加下面配置,其中hadoop01為hdfs運行的用戶(hù)，修改完重啟hdfs即可。 <property> <name>hadoop.http.staticuser.user</name> <value>hadoop01</value> </property>