Sortie Groovy SQL au format eachRow

Question

Je dois synchroniser la base de données MSSQL avec la base de données MYSQL. (> 500 tables et total> 10000000 lignes).
J'ai une solution de travail, mais la performance n'est pas acceptable.
Le goulot d'étranglement peut être ici:

Je lis de la base de données MSSQL avec

mssqlDaten = mssql.eachRow (....) { row_data -> ... 

à cause des noms de domaine en évolution dans les différents tableaux que je utilise une boucle pour créer l'instruction d'insertion

str = "insert into current_table values (" 
    for (over all fields from the current table) { 
    str += "'" + row_data[i] + "', " 
    } 
    str += ")" 
    mssql.execute (str) 

Cela peut être le problème pour chaque ligne que je dois passer à travers la boucle.

A quelqu'un une idée pour obtenir les données de ligne directement dans le format (ValueField1, ValueField2, ....). Lorsque j'imprime les données de ligne maintenant, j'obtiens (NameField1: ValueField1, NameField2.ValueField2, ...).

Answer 1

essayer de faire insertion avec lot comme celui-ci:

def table = "MYTABLE" 
//the list of column names could be selected from source database 
def columns = ["A","B","C","D"] 

def sQuery = "select ${columns.join(',')} from $table".toString() 

//build insert query with column list and ? as value placeholders 
//as result we have query like : insert into MYTABLE (A,B,C,D) values (?,?,?,?) 
def iQuery = "insert into $table (${columns.join(',')}) values (${ columns.collect{'?'}.join(',') })".toString() 

def updateCounts = mysql.withBatch(100, iQuery) { ps -> 
    mssql.eachRow (sQuery) { row_data -> 
     def row_array = columns.collect{ colname-> rowdata[colname] } 
     ps.addBatch(row_array) 
    } 
}