《同花顺2023春招交流讨论》专题

问题内容： 我正在看书，有一些带有花括号的程序示例 例如 问题答案： 这是一个代码块。在其中声明的变量在上部代码块（这些curl之外的方法体）中不可见，即它们的作用域更加有限。

我是新来的火花...在阅读基本原理时，一些基本的东西我不清楚：

我在我们的项目中使用了HDFS上的Apache spark和MapR。我们正面临着运行火花工作的问题，因为它在数据小幅增加后失败了。我们正在从csv文件中读取数据，做一些转换，聚合，然后存储在HBASE中。 请建议，如果上面的配置看起来很好，因为am geting的错误看起来像是要离开内存。

我通过连接到一个有500'000'000行和14列的数据库。 下面是使用的代码： 上面的代码花了9秒来显示DB的前20行。 后来，我创建了一个SQL临时视图 上面的代码用了1355.79秒（大约23分钟）。这样可以吗？这似乎是一个大量的时间。 最后，我尝试计算数据库的行数 用了2848.95秒（约48分钟）。 是我做错了什么，还是这些数额是标准的？

我试图在我的网格上创建一个贴花使用three.js和反应-三纤维。我相信我正确地设置了网格和材料，但由于某种原因，贴花没有出现在画布上。 这是包含模型、背板和贴花的父组件。 这是我从. glb文件创建t恤网格的组件的一部分。网格传递回父节点，然后传递到Decal组件。 以下是我尝试设置贴花网格的方式： 我没有得到任何错误，贴花只是没有出现。我希望有人有一些见解。没有太多关于贴花几何体与3J在那里，

我是新的火花，请帮助我这一点。

正在尝试读取avro文件。 无法将运行到Avro架构的数据转换为Spark SQL StructType:[“null”，“string”] 尝试手动创建架构，但现在遇到以下情况： 通用域名格式。databricks。火花阿夫罗。SchemaConverters$CompatibleSchemaException:无法将Avro架构转换为catalyst类型，因为路径处的架构不兼容（avroTyp

我正在一个playscala应用程序中从1.6升级到spark 2.0，不太确定如何设置我想要的jar文件。以前会定义一个SparkConf，我可以调用的方法之一是setJars，它允许我指定我想要的所有jar文件。现在我正在使用SparkSession构建器构建我的spark conf和spark上下文，我没有看到任何类似的方法来指定jar文件？我该怎么做？ 这是我之前如何创建我的火花会议： 我

我正在使用雪花，我正在寻找插入数据到一个表，而使用一个变量，使用变量的目的是，当我可以改变它，而不做查找和替换所有 以下作品 以下操作不起作用 然而，这是有效的。 https://docs.snowflake.com/en/sql-reference/session-variables.html

我知道我们将无法使用雪花中的GET_DDL函数获取外部表的DDL。是否有任何变通方法来获取雪花中外部表的DDL（Create语句）？

我想在Spark中做累积和。以下是注册表（输入）： 配置单元查询： 输出： 使用火花逻辑，我得到相同的输出： 然而，当我在spark cluster上尝试这个逻辑时，的值将是累积和的一半，有时它是不同的。我不知道为什么它会发生在spark cluster上。是因为分区吗？ 如何计算spark cluster上一列的累积和？

嗨，我对Spark很陌生。我正在Apache Spark scala命令行上执行以下命令

我正在处理UDF中的空值，该UDF在数据帧（源自配置单元表）上运行，该数据帧由浮点数结构组成： 数据帧（）具有以下架构： 例如，我想计算x和y的总和。请注意，我不会在以下示例中“处理”空值，但我希望能够在我的udf中检查、或是否。 第一种方法: 如果＜code＞struct是否为空，因为在scala中＜code＞浮点不能为空。 第二种方法： 这种方法，我可以在我的udf中检查是否为空，但我可以检查

如何使用雪花存储过程将current_date()bind变量插入到表中 创建或替换过程abc（“p_message_id”浮点数、“p_theater”字符串、“p_month”字符串、“p_message”字符串、“p_message”字符串、“p_start_date”字符串、“p_end_date”字符串、“p_action”字符串、“p_msg_type”字符串、“p_logged_us

DecalGeometry 可被用于创建贴花网格物体，以达到不同的目的，例如：为模型增加独特的细节、进行动态的视觉环境改变或覆盖接缝。 代码示例 const geometry = new DecalGeometry( mesh, position, orientation, size ); const material = new THREE.MeshBasicMaterial( { color