IDEA在本地,读取本地的json时出错

来源:5-2 -A SQLContext的使用

进击的大黄鸭

2017-06-29

 ERROR Shell: Failed to locate the winutils binary in the hadoop binary path

java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

读取本地的数据时也不需要hadoop啊 从网上下载了winutils.exe 添加了一个目录,加了这条语句System.setProperty("hadoop.home.dir", "d:\\winutil\\")解决了这个问题 但是为什么这里还要有hadoop的参与呢?

写回答

2回答

Michael_PK

2017-06-30

你是windows上开发的吧?这个错可以忽略的,只要结果出来就行

0
2
进击的大黄鸭
非常感谢!
2017-06-30
共2条回复

进击的大黄鸭

提问者

2017-07-19

1) download compiled winutils.exe from
http://social.msdn.microsoft.com/Forums/windowsazure/en-US/28a57efb-082b-424b-8d9e-731b1fe135de/please-read-if-experiencing-job-failures?forum=hdinsight
2) put this file into d:\winutil\bin
3) add in my test: System.setProperty("hadoop.home.dir", "d:\\winutil\\")
after that test runs


0
0

以慕课网日志分析为例 进入大数据Spark SQL的世界

快速转型大数据:Hadoop,Hive,SparkSQL步步为赢

1644 学习 · 1129 问题

查看课程