Nous avons déjà Move-AzureRmDataLakeStoreItem
qui va déplacer les fichiers entre les dossiers à l'intérieur d'Azure datalake. Ce que je cherche est de copier des fichiers dans le datalake sans affecter le fichier original.Comment nous pouvons copier n'importe quel fichier dans les dossiers Azure Data Lake Store
Les possibilités que je connais sont-
- utilisant
USQL
àEXTRACT
données de sourcefile puisOUTPUT
au destinationfile - mais je suis en train de copier toutes sortes de fichiers (.gz, txt .INFO , .exe, .msi) et je ne sais pas siUSQL
peut me aider avec Gz ou des fichiers .exe ou .msi - en utilisant
Data Factory
pour copier des données de/versData Lake store
Alors, ma question ici est de savoir si nous avons autre chose à notre disposition avec laquelle nous pouvons effectuer une copie des fichiers dans Azure Data Lake Store?
Une autre approche à considérer est, peut-être ne pas copier autant vos fichiers? Vous pouvez placer vos données dans votre zone "brute" ou zone de transit, puis toutes les versions supplémentaires de ce fichier doivent être affinées, agrégées, nettoyées, augmentées ou traitées d'une manière ou d'une autre, et non des doublons. – wBob