Was ist die effizienteste Methode zum Massenkopieren von Java nach SQL Server?

Ich habe Daten, die von einer Festplatte gestreamt und von einer Java-Anwendung im Speicher verarbeitet werden und die schließlich in SQL Server kopiert werden müssen. Die Daten können ziemlich groß sein (daher das Streaming) und können das Einfügen von bis zu mehreren 100.000 Zeilen erfordern. Die schnellste Lösung scheint die Massenkopierfunktion von SQL Server zu verwenden. Allerdings habe ich für Java-Programme keine Möglichkeit gefunden, dies einfach oder fast schnell genug zu tun.

Hier sind einige Möglichkeiten, die ich bereits untersucht habe:

• Verwenden der SqlBulkCopy-Klasse in .NET. Dies ist sehr effizient, da Sie Daten direkt von einer Datenquelle und direkt zu SQL Server streamen können. Das Problem bei diesem Ansatz ist, dass Sie .NET ausführen müssen. Vielleicht könnte dies mit einer Java zu .NET Brücke verwendet werden. Obwohl ich mich über die Kosten für das Marshalling von Daten zwischen Laufzeiten wundere.

• Verwenden der BULK INSERT-TSQL-Anweisung. Das Problem dabei ist, dass Sie eine korrekt formatierte Datei auf der Festplatte erstellen müssen. Ich habe einige kleine Leistungszuwächse gegenüber dem JDBC-Batch-Einsatz gesehen, der dies verwendet. Dies ist auch nur lokal nützlich.

• Schreiben Sie Dateien auf die Festplatte und verwenden Sie das Befehlszeilenprogramm bcp. Immer noch ein wenig schneller als JDBC Batch-Einsatz, aber nicht so viel. Ich verliere auch die Fähigkeit, eine Transaktion mit dieser Methode zu verwenden.

• Verwenden Sie die C-API . Nochmals, sehr effizient, aber Sie müssen C verwenden. Es wäre eine Möglichkeit, dies über JNI zu nutzen. Wenn es eine freie Java-Bibliothek gibt, die das tut, würde ich es gerne wissen.

Ich suche nach der schnellsten Lösung. Speicher ist kein Problem.

Danke!