Supprimer/mapper la clé dupliquée sur la table Hive?

Question

J'ai des fichiers JSON à charger dans la table hive, mais il contient une clé en double qui rend toutes les données nulles ou impossibles à sélectionner sur Hive.

ces fichiers JSON avait quelque chose comme ceci:

{"timeSeries":"17051233123","id":"123","timeseries":"17051233123","name":"sample"}

J'essaie de créer la table ruche

CREATE EXTERNAL TABLE table_hive (`id` 
STRING, `name` STRING, `timeseries` STRING,`timeseries2` STRING) 
ROW FORMAT SERDE 'org.openx.data.jsonserde.JsonSerDe' 
WITH SERDEPROPERTIES ("mapping.timeseries2" = "timeSeries") 
LOCATION 'app/jsonfile.json'; 

comment faire devenir interrogeable table de ruche?

Answer 1

fonctionne très bien avec le SerDe JSON qui vient avec la distribution Ruche

create external table table_hive 
(
    id   string 
    ,name  string 
    ,timeseries string 
) 
row format serde 'org.apache.hive.hcatalog.data.JsonSerDe' 
stored as textfile 
; 

---

select * from table_hive 
; 

---

+-----+--------+-------------+ 
| id | name | timeseries | 
+-----+--------+-------------+ 
| 123 | sample | 17051233123 | 
+-----+--------+-------------+