配置单元:在unicode csv文件上创建TABLE

Question

在HDInsight集群上，尝试在unicode csv文件上创建配置单元表。

Invoke-Hive -Query @"
CREATE EXTERNAL TABLE TestUnicode(Numeric1 INT,Numeric2 INT,Numeric3 INT,Name String)ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE LOCATION
'wasb://$containerName@$storageAccountName.blob.core.windows.net/TestUnicode.csv';
"@

但是Hive无法正确识别unicode字符串。此外，所有整数字段都加载为NULL。

Answer 1

将TestUnicode.csv的编码更改为UTF-8。适用于我。