无法导入pyspark统计模块
Python 2.7、Apache Spark 2.1.0、Ubuntu 14.04在pyspark shell中出现以下错误：
>>> from pyspark.mllib.stat import Statistics Traceback (most recent call last): File "", line 1, in ImportError: No module named stat
解决办法？
>>> from pyspark.mllib.linalg import SparseVector Traceback (most recent call last): File "", line 1, in ImportError: No module named linalg
>>> sys.path ['', u'/tmp/spark-2d5ea25c-e2e7-490a-b5be-815e320cdee0/userFiles-2f177853-e261-46f9-97e5-01ac8b7c4987', '/usr/local/lib/python2.7/dist-packages/setuptools-18.1-py2.7.egg', '/usr/local/lib/python2.7/dist-packages/pyspark-2.1.0+hadoop2.7-py2.7.egg', '/usr/local/lib/python2.7/dist-packages/py4j-0.10.4-py2.7.egg', '/home/d066537/spark/spark-2.1.0-bin-hadoop2.7/python/lib/py4j-0.10.4-src.zip', '/home/d066537/spark/spark-2.1.0-bin-hadoop2.7/python', '/home/d066537', '/usr/lib/python2.7', '/usr/lib/python2.7/plat-x86_64-linux-gnu', '/usr/lib/python2.7/lib-tk', '/usr/lib/python2.7/lib-old', '/usr/lib/python2.7/lib-dynload', '/usr/local/lib/python2.7/dist-packages', '/usr/lib/python2.7/dist-packages', '/usr/lib/python2.7/dist-packages/PILcompat', '/usr/lib/python2.7/dist-packages/gst-0.10', '/usr/lib/python2.7/dist-packages/gtk-2.0', '/usr/lib/python2.7/dist-packages/ubuntu-sso-client']
共有1个答案
拆卸pyspark安装。
sudo -H pip uninstall pyspark
-
在使用python和pyspark开发数据管道时，我面临以下错误。 PS C：\用户\文件夹\文档\文件夹\项目\code\etl-gd\src\作业\更大数据 代码非常简单，只需尝试一下： Java、spark、python和pyspark的正确安装如下： 提前感谢您的帮助。
-
我使用的是Apache-Spark（pyspark），一切都很好。现在，我正在尝试加载一个可能存在也可能不存在的数据。因此，我试图捕捉Py4JJavaError并试图按以下方式导入它： 解压缩此文件时：/usr/local/cellar/apache-spark/1.6.2/python/lib/py4j-0.9-src.zip 我找不到。 我做错了什么？我应该使用其他地方/路径吗？
-
我正在尝试构建一个electron Desctop应用程序，但当我想使用nodejs的文件系统（fs）时，我遇到了错误“UncaughtReferenceError:require未定义”。当我搜索这个问题时，我在您的包中找到了一些提示，如“delete”类型：“module”。json或使用导入，但对我来说没有任何效果。一般来说，我不能使用任何模块，不仅仅是fs，而是我的主模块中的所有模块。js
-
我正在使用Ubuntu14.04计算机，试图将google.protobuf模块导入到Python2.7中。 我已经试过了 和 没有成功。 在python内部，我得到一个错误，即： “导入错误：没有名为google.protobuf的模块” 编辑1： 对不起，谢谢大家的评论。我还是Ubuntu和StackOverflow的新手。 具体来说，我输入到命令行 并获得反馈 Traceback（最近的调用
-
我试图从djangotoolbox.fields使用Listfield，但它给我一个错误说： 我做错了什么？
-
问题内容： 为什么会发生这种情况？ 结果是： 如果可以的话，它可以很好地加载模块，但是加载时似乎不起作用。 有关一些可能相关的其他信息： 我保存文件的模块在中。该模块。开始： 我试图从中加载的模块在in中，而不会弄乱路径。 在两种情况下都是相同的：我要加载的模块是。 可能以某种方式将附加内容弄乱吗？ 问题答案： 泡菜取决于模块路径。不管您如何加载模块，如果您不介意的话，泡菜的加载和保存都应该起作用