当前位置: 首页 > 知识库问答 >
问题:

如何使用ADF在数据库中安装罐子

章青青
2023-03-14

我们可以使用UI方法将jar文件安装到特定集群。但我们需要在工作区中的所有ondemand集群上安装它。我们使用下面的shell脚本将jar文件下载到DBFS。不确定如何使用全局初始化脚本在所有集群中引用/安装这个jar

卷曲https://repo1.maven.org/maven2/com/databricks/spark-xml_2.12/0.12.0/spark-xml_2.12-0.12.0.jar

任何帮助都将不胜感激!!

共有2个答案

斜博超
2023-03-14

在全局初始化脚本中,您只需将该文件下载到/databricks/jars/目录中,然后集群就会获取它

司马高韵
2023-03-14

有一个替代解决方案可以将jar库添加到作业群集中,该作业群集在运行作业时从Azure数据工厂调用。

在ADF中,在调用notebook时,我们可以选择在DBFS中包含jar目录,或者我们可以给出Maven坐标。

ADF设置

 类似资料:
  • 本文向大家介绍PHP中安装使用mongodb数据库,包括了PHP中安装使用mongodb数据库的使用技巧和注意事项,需要的朋友参考一下 传统数据库中,我们要操作数据库数据都要书写大量的sql语句,而且在进行无规则数据的存储时,传统关系型数据库建表时对不同字段的处理也显得有些乏力,mongo应运而生,而且ajax技术的广泛应用,json格式的广泛接受,也使得mongo更贴近开发人员。 mongo简介

  • 如何从psql列出已安装在数据库或架构中的所有扩展? 另见 查找PostgreSQL附带的可用扩展列表

  • 我有这个密码 E/AndroidRuntime:致命异常:AsyncTask#1进程:com.arnaway.metromap,pid:9493 java.lang.RuntimeException:在Android.os.AsyncTask$3执行doInBackground()时出错。done(AsyncTask.java:353)在java.util.concurrent.FutureTas

  • 我有一个罐子用另一个罐子做库。我希望它们都被混淆。 引用ProGuard文档: ProGuard要求指定输入jar的库jar(或war、ears、zips或目录)。这些本质上是编译代码所需的库。ProGuard使用它们来重建正确处理所必需的类依赖关系。库罐子本身始终保持不变。您仍然应该将它们放在最终应用程序的类路径中。

  • 现在;我得到以下错误: 我以为这是因为我没有在会话中使用那个数据库;所以我去处理使用session.execute并使用sql语句use来使用数据库,但它给我带来了语法错误 check_if_exists=session.query(latest_movies_scraper).filter_by(name=dictionary['title']).first()

  • 正如您在标题中可能已经看到或可能还没有看到的那样,我试图找出如何在我的库中使用spring数据,以及如何在我的其他项目中使用这个库。(并非所有基于web的应用程序只是为了澄清) 我试着回答这个问题好几天了,也许我只是看起来错了,就Spring而言,我是一个完全的初学者。 它只在启动时显示错误。 在这里找到项目https://gitlab.com/roboflax/Spring-Data-In-Li