鍍金池/ 問答/人工智能  Python/ win10下安裝pyspark后報(bào)錯NativeCodeLoader:62

win10下安裝pyspark后報(bào)錯NativeCodeLoader:62

根據(jù)這個(gè)鏈接https://blog.csdn.net/w417950... 配置了spark的環(huán)境,但是啟動時(shí)都會報(bào)錯:

clipboard.png

搜索了一下沒找到能解決我的問題的方法還是做伸手黨了。。新手上路,請見諒

回答
編輯回答
巴扎嘿

clipboard.png
你確定這個(gè)不是正常情況?
參考: win10下安裝pyspark
如果這個(gè)鏈接的安裝方式是正確的話, 那么你應(yīng)該是正確安裝了.

NativeCodeLoader只是一個(gè)WARN, 警告不是錯誤, 你可以正常體驗(yàn) pyspark.
參考:微軟的一個(gè)解釋

This warning is unrelated to RevoScaleR operation. It is usually a result of running in a 64-bit Linux environment while the
$HADOOP_HOME/lib/native/libhadoop.so
was compiled in a 32-bit environment. The warning is harmless and can be ignored.

但是原生的 hadoop 應(yīng)該沒配置好. 如果是 Linux 環(huán)境, 參考這篇文章看看能不能解決問題:異常解決:util.NativeCodeLoader: Unable to load native-hadoop library for your platform
對于 windows 環(huán)境, sorry, There are no native hadoop libraries for Windows, 參考:stackoverflow上的一個(gè)回答

2018年8月30日 13:56