Apache Spark SQL prend-il en charge la clause MERGE?

Question

Apache Spark SQL prend-il en charge la clause MERGE qui est similaire à la clause MERGE SQL d'Oracle?

MERGE into <table> using (
    select * from <table1> 
    when matched then update... 
     DELETE WHERE... 
    when not matched then insert... 
) 

Answer 1

Ce n'est pas le cas. A partir de maintenant (il pourrait changer dans le futur) Spark ne supporte pas UPDATES, DELETES ou toute autre variante de modification d'enregistrement.

Il ne peut remplacer que le stockage existant (avec une implémentation différente selon la source) ou ajouter INSERT.

Answer 2

Si vous travaillez sur Spark, peut-être que this pourrait vous aider à résoudre le problème de fusion en utilisant DataFrames. Quoi qu'il en soit, en lisant some documentation de Hortonworks, il est dit que la phrase Merge est prise en charge dans Apache Hive 0.14 et versions ultérieures.