SQL: Vérification du format de colonne dont la valeur est 'Date' mais le type est 'Chaîne'

Question

J'exécute un travail ETL qui échoue en raison de problèmes de qualité des données. Dans ma source, ma colonne de date est au format String et je la convertis en TIMESTAMP en utilisant la méthode to_timestamp() en la stockant dans la cible.

Ce travail échoue lorsqu'une valeur de date (au format String) est égale à 2016-06- au lieu de 2016-11-10 06:07:48.633. En raison de la valeur incorrecte, je ne peux pas le convertir en horodatage et tout mon travail échoue. Comment puis-je appliquer une vérification de format de manière générique pour vérifier que la date (dans le type de données String) est au format correct avant de la convertir en horodatage?

Answer 1

Vous pouvez utiliser la fonction Isdate() pour vérifier si une chaîne est datée ou non.

Utilisez cette fonction au niveau du filtre et filtrez les dates non valides et chargez le reste.