带有ORC格式的Hive外部表-如何将orc文件中的列名映射到hive表列？

Question

在使用ORC文件格式的Hive中，有没有一种方法可以将列名映射到独立于列顺序的Hive表列？

orc文件的示例架构：

root
 |-- age: string (nullable = true)
 |-- first_name: string (nullable = true)
 |-- last_name: string (nullable = true)
 |-- salary: string (nullable = true) 
 |-- load_date: date (nullable = true) 

所需配置单元表列顺序：

first_name
last_name
age
salary

但是，当我创建具有所需列顺序的表时，数据没有正确对齐。配置单元根据列顺序而不是列名获取数据。这对于拼花格式很好，其中Hive能够根据列名选择正确的顺序。如有任何解决此问题的建议，我们将不胜感激。

我没有选择更改orc文件模式，因为它是由外部进程创建的。也不想创建任何中间临时表和插入覆盖选项。

Hive Table DDL:

create external table if not exists test.user_profile(
first_name String,
last_name String,
age String,
salary String)
PARTITIONED BY (load_date String)
stored as orc
Location '/test/user_profile_data/';

Answer 1

Hive 2.1的ORC支持模式演化。来自Hive 2.3。通过设置这个属性，您可以同时执行位置演化和模式演化。武力位置。evolution请注意，所述属性的默认值为false