在带有镶木地板文件的Impala表中键入转换

Question

我无法使用镶木地板文件将列的类型从字符串更改为Impala的int。

使用:

改变表DATABASE.TABLE改变COL INT（从字符串到int）

或

< code >更改表数据库。表格更改列列字符串(从int到string)

读取数据时产生错误：

文件x的“db.table.col”列具有不兼容的拼花架构。列类型：INT，拼花模式：可选byte_array col[i:1 d:1 r:0]

读了这个留档，我明白：

• TINYINT到SMALLINT/INT：正常
• SMALLINT到INT:ok

考虑以下事项：

列的任何其他类型转换都会在查询期间产生转换错误

这是否意味着除了上述类型转换之外，所有类型转换都是可能的（查询通过），但在查询时会引发错误？

其他信息:

< li >在计算统计信息(或选择)之前刷新表格并不能解决问题。 < li >更改列类型后使元数据无效也是如此。 < li >问题出现在Hue或使用python脚本时。 < li >我使用的是impalad版本2.12.0-cdh5.16.2版 < li >该错误与第一个parquet文件有关(在更新类型之前包含表格内容的文件)。< img src = " https://I . stack . imgur . com/hqkd 4 . png " alt = "在此输入图像描述" >

Answer 1

由于您正在更改数据类型（元数据），因此您需要使元数据失效，以便impala强制查找元数据而不使用旧的元数据。

所以，在你的change语句之后，请使用它来修复错误。Impala将在查询时使用最新的元数据，SQL将正常工作。

INVALIDATE METADATA mytable