当读取数据时，PySpark中的。csv文件。我得到这个错误“名称'spark'没有定义”
rom pyspark导入sparkconf
从pyspark.context导入sparkcontext
从pyspark.sql导入SparkSession,SQLContext
从pyspark.sql.types导入*
df=spark.read.csv（“/home/sourabh/downloads/1535617931_lms_data_1.csv”,inferschema=true,header=true）df.printschema（）
共有1个答案
这是因为在执行spark.read之前还没有创建任何spark会话实例，所以必须创建一个SparkSession对象，可以像spark=SparkSession.builder().getorcreate()这样做。这是定义它的最基本方法，可以使用.config（“
向它添加配置。
-
我犯了个奇怪的错误。“找不到线”。我试着对我的sem变量进行评论，认为这就是问题所在，但没有骰子。我试着注释我的字符串元素，看看这些是否是问题所在。任何帮助都将不胜感激。 错误：线程“main”java中出现异常。util。NoSuchElementException:在java中找不到行。base/java。util。扫描仪。位于Driver2的nextLine（Scanner.java:165
-
> 我运行spark shell，如下所示： spark-shell--jars.\spark-csv2.11-1.4.0.jar；.\commons-csv-1.2.jar（我不能直接下载这些依赖项，这就是我使用--jars的原因） 使用以下命令读取csv文件： 在执行第一个建议的解决方案后：
-
我想读Spark的CSV。所以我使用Java中的命令。 谢谢大家。
-
AMQ6235E:缺少目录“H：”。 我无法找到解决这个问题的方法，它正在连接队列，它显示了这个错误。我不能公开我运行的代码，但我可以解释节点脚本将做什么，首先尝试连接队列管理器，然后尝试通道名，主机名，端口名，这里问题是当它需要建立连接而不是得到上面的错误
-
我有一个数据框架，我想将其编写为具有特定名称的单个json文件。我在下面试过了 感谢有人能提供解决方案。
-
当我试图在Python中打印CSV文件的内容时，我得到了这个错误。 回溯（最近调用最后）：文件“/users/cassandracampbell/library/preferences/pycharmce2018.2/scratches/player.py”，第5行，在打开('player.csv')的csvfile:filenotfounderror:[errno2]中没有这样的文件或目录:'p