当前位置: 首页 > 知识库问答 >
问题:

无法在 Azure DataBricks 群集上执行 scala 代码

程亦
2023-03-14

我正在尝试为DataBricks设置一个开发环境,因此我的开发人员可以使用VSCODE IDE(或其他一些IDE)编写代码并针对DataBricks集群执行代码。

因此,我阅读了DataBricks Connect的文档,并按照文档中的建议进行了设置。https://docs.databricks.com/dev-tools/databricks-connect.html#overview

发布安装程序,我可以在Azure DataBricks集群上执行python代码,但不能使用Scala代码

在运行设置时,我发现它说跳过windows上的scala命令html" target="_blank">测试,我不确定我是否遗漏了一些配置。

请建议如何解决此问题。

共有1个答案

竺国兴
2023-03-14

这不是一个错误,但只是一条语句表明<code>databricks connect test</code>正在跳过在windows上测试scala代码。如果您仍然可以使用databricks-connect从集群上的本地计算机执行代码,则需要将<code〕databrick-connect get jar dir</code>目录中的jar添加到IDE中的项目结构中,如本文档步骤所述https://learn.microsoft.com/en-us/azure/databricks/dev-tools/databricks-connect#intellij-scala或java

另请注意,使用 Azure 数据砖时,请在执行数据砖连接配置时输入通用数据砖主机以及工作区 ID(组织 ID)

例如-<html" target="_blank">代码>https://westeurope.azuredatabricks.net/o=?xxxx而不是https://adb-xxxx.yz.azuredatabricks.net

 类似资料:
  • 无法对代理执行签出:“”C:\Program Files\git\bin\git.exe“-C Core.askpass=C:\TeamCity\BuildAgent\Temp\BuildTmp\Pass8517307457314531623.bat-C Credential.helper=-C Credential.helper=C:/TeamCity/Buildagent/Temp/Build

  • 在开发servlet程序时,我遇到了一个问题,我使用了netbeans ide,并使用了glassfish服务器。这是我的索引代码。html文件:- servlet的代码是:- 我认为问题是在解析变量时发生的。。。拜托,谁能帮我??而且索引文件执行得很好,但当我直接点击按钮而不在文本框中键入任何内容时,它会显示正确的输出,但当我输入程序(abc)中指定的用户名和密码时 HTTP状态500-内部服务

  • 当用户按下ctrl键时,我试图在Chrome中保存HTML文件,但Chrome崩溃了。 (我只想下载HTML文件的源代码) 我读到它发生是因为我的文件比1.99M大... 在第一次尝试中(在我知道Chrome崩溃之前): 第二次尝试,在我读到崩溃后,我使用了: 这里我得到了错误: 我不知道,但我读到我需要将我的字符串编码为base 64:如何在JavaScript中将字符串编码为Base64? 有

  • 问题内容: 我正试图让nvidia-docker在我的centos7系统上运行: 到目前为止,一切都很好: 现在,让我们尝试使用nvidia运行时: 但是奇怪的是 问题答案: 所以…最后,我完全禁用了selinux并重新启动,并对其进行了修复。

  • jps输出正确: 在主机上: 在5个从节点上:

  • 正如标题所预期的,我在向docker上运行的spark集群提交spark作业时遇到了一些问题。 我在scala中写了一个非常简单的火花作业,订阅一个kafka服务器,安排一些数据,并将这些数据存储在一个elastichsearch数据库中。 如果我在我的开发环境(Windows/IntelliJ)中从Ide运行spark作业,那么一切都会完美工作。 然后(我一点也不喜欢java),我按照以下说明添