Batch-DB-Befehle in Entity Framework 4.0

Question

Mein aktuelles Projekt erfordert eine tägliche Synchronisation mit einem externen System. Die Synchronisation basiert auf einer komplexen Importdateistruktur, die mit umfangreicher Geschäftslogik analysiert und verarbeitet wird. Aufgrund der Geschäftslogik haben wir uns dazu entschieden, dies in .NET-Code zu machen und vorhandene BL-Komponenten wiederzuverwenden, anstatt dieselbe Logik in gespeicherten Prozeduren oder Integrationsdiensten zu schreiben.

Die BL-Schicht befindet sich auf der EF 4.0-Datenzugriffsebene. Die aktuelle Implementierung verarbeitet den Import-Batch, füllt alle Änderungen in ObjectContext und führt SaveChanges in der Transaktion aus. Wenn ich SQL Profiler überprüfe, sehe ich, dass EF jede Änderung der Entität als einzelner SQL-Befehl ausführt (mit eigenem Umlauf in DB). Außerdem sieht es so aus, als würden diese Befehle vollständig sequentiell ausgeführt. So habe ich bis zu 100.000 Roundtrips zur Datenbank für den ersten Import und zwischen 10.000 - 50.000 Roundtrips zur Datenbank für die tägliche Synchronisation.

Ist es möglich, Kommandos irgendwie durch EF selbst oder durch irgendeinen Provider/eine Erweiterung einzufügen/zu aktualisieren/zu löschen?

Answer 1

Nein, es kann nicht getan werden (ja - ich weine auch).

EF unterstützt keine Batch-Operationen, LINQ-SQL hatte (hat) das gleiche Problem.

Sie haben ein paar Optionen bekam:

1. Stored Procedures
2. Klassische ADO.NET oder EntitySQL
3. Trigger

Ich habe in der mit Option 1 und 3 gegangen Vergangenheit.

Das Problem mit allen drei Ansätze ist, verlieren Sie die EF-Abstraktion, die interne Grafik (optimistische Nebenläufigkeit), und Ihre zurück in die Welt der nativen SQL gebracht.

Answer 2

Schreiben dieses Projekts bewusst: magiq.codeplex.com

Es Batch-Operationen bringt Linq to SQL und wir arbeiten jetzt in EntityFramework Unterstützung.

Prost

Answer 3

Es gibt einige Workarounds in SQL Server:

• Batch-Einsätze sind in der Entity Framework Bulk Copy Artikel beschrieben

• Batch-Updates (und Löschungen) in der Multiple entity updates with Entity Framework – EF Fetch Updates Artikel beschrieben werden.

Falls Sie interessiert sich für Oracle, MySQL, PostgreSQL oder SQLite, die neueste Devart dotConnect providers verwenden können. Die BatchUpdates functionality ist in den neuesten Versionen dieser Anbieter bereits in der SaveChanges-Methode integriert.

Answer 4

Hier ist ein Weg, mit dem Sie Ihren Code ersten POCOs verwenden können und ist schnell. Sped eine Masseneinfügung von> 1 Stunde bis ~ 5 Sekunden.

SqlBulkCopy for Generic List (useful for Entity Framework & NHibernate).

Answer 5

Nur mit Ihnen ein GitHub-Projekt nur für das, ab sofort unterstützt es Bulk einfügen/aktualisieren/löschen für Sql-Server transparent mit SqlBulkCopy. https://github.com/MHanafy/EntityExtensions Es gibt noch andere Leckerbissen, und hoffentlich wird es erweitert, um mehr auf der Strecke zu tun. Die Benutzung ist so einfach wie

var insertsAndupdates = new List<object>(); 
var deletes = new List<object>(); 
context.BulkUpdate(insertsAndupdates, deletes); 

Hoffe, es hilft!