Quelle est la plus rapide approche pour remplir MS SQL base de données avec une grande quantité de données

Question

Dilemme:

Je suis sur le point d'effectuer la population des données sur MS SQL Server (2012 Dev Edition). Les données sont basées sur les données de production. Le montant est d'environ 4 To (environ 250 millions d'articles).

Objet:

Pour tester les performances sur la recherche en texte intégral et régulier index ainsi. Le nombre cible devrait être d'environ 300 millions d'articles autour de 500K chacun.

Question:

Que dois-je faire avant d'accélérer le processus ou les conséquences que je vous inquiéter?

Ex.

1. Désactiver les statistiques?
2. Dois-je effectuer une insertion en bloc de 1k articles par transaction au lieu d'une seule transaction?
3. Modèle de récupération simple?
4. Troncature de log?

Important:

Je vais utiliser l'échantillon de 2k des éléments de production pour créer chaque élément aléatoire qui sera inséré dans la base de données. J'utiliserai des échantillons quasi uniques générés en C#. Ce sera une table:

table 
(
    long[id], 
    nvarchar(50)[index], 
    nvarchar(50)[index], 
    int[index], 
    float, 
    nvarchar(50)[index], 
    text[full text search index] 
) 

Answer 1

Presque toujours, dans une situation comme ça, et je l'ai eu plusieurs d'entre eux, je l'ai utilisé SSIS. SSIS est le moyen le plus rapide que je connaisse pour importer de grandes quantités de données dans une base de données SQL Server. Vous avez un contrôle complet sur le lot (taille de la transaction) et il effectuera l'insertion en masse. De plus, si vous avez des besoins de transformation, SSIS s'en chargera facilement.