Was ist der beste Weg, um Sqlite3 direkt im Browser mit Javascript zu lesen?

Question

Für eine unserer Insights-Plattform planen wir, zusammenfassende SQLite3-Datenbanken im Hintergrund zu generieren und diese im Browser als Diagramme darzustellen. Gegenwärtig beabsichtigen wir einen serverseitigen Endpunkt, der die Datenanforderung bedienen wird.

Wir versuchen, dies weiter zu optimieren, indem wir den serverseitigen Endpunkt vollständig eliminieren. Uns ist es gut (aus Sicherheitsgründen), die SQLite3 direkt auf S3 verfügbar zu machen und ein JavaScript-Modul zu lesen und die Diagramme zu generieren.

Die SQLite3-Dateien werden zu recht klein erwartet - vielleicht 4-6 Spalten und vielleicht 10-500 Zeilen von Daten, und alle von ihnen enthalten nur eine Tabelle. Testläufe zeigen Dateigrößen von weniger als 15 KB an. Wir beabsichtigen nicht, SQLite3 im Browser zu schreiben oder zu manipulieren. Wir müssen es nicht im Browser als WebSQL- oder IndexedDB-Formular zwischenspeichern, aber wir sind in Ordnung, wenn Sie es verwenden, wenn das erforderlich ist.

Von meinen Web-Suchen können wir keine Javascript-Bibliothek finden, die eine SQLite3-Datei lesen und nach Ergebnissen abfragen kann. Wenn Sie JavaScript-Bibliotheken kennen, die das können, lassen Sie es uns bitte wissen.

Auf der anderen Seite, wenn Sie denken, dass wir das aus irgendeinem Grund nicht tun sollten, dann werfen Sie sie bitte als Kommentare/Antworten auch, weil dies etwas ist, das wir zum ersten Mal versuchen und ein wenig heraus zu sein scheint -of-Box, so Feedback willkommen!

Answer 1

Ich kann nicht das Beste sagen, aber eins: Schreiben Sie eine JavaScript SQLite-Reader-Bibliothek selbst. Das wird eine mühsame Aufgabe, aber ich bin mir sicher, dass es getan werden kann. Einige coole Leute haben pdf.js getan, das ist ein JavaScript-Renderer für PDF-Dateien, die auch binäre BLOBs wie SQLite files sind.

Sie werden höchstwahrscheinlich mit dem FileReader API starten, um durch die SQLite-Datei zu gehen, dann erstellen Sie einige In-Memory-Darstellung des Inhalts, die Ihr Diagramm-Tool verwenden kann.

Haftungsausschluss: Sie möchten wahrscheinlich Ihr erstes Problem mit einer anderen Lösung lösen, wie von anderen vorgeschlagen, aber das beantwortet Ihre Frage.

Answer 2

Es gibt eine Javascript-Bibliothek namens sql.js, die genau das tun kann, was Sie wollen. In Ihrem Fall würden Sie es so, dass bei http://lovasoa.github.io/sql.js/documentation

var xhr = new XMLHttpRequest(); 
xhr.open('GET', '/path/to/database.sqlite', true); 
xhr.responseType = 'arraybuffer'; 

xhr.onload = function(e) { 
    var uInt8Array = new Uint8Array(this.response); 
    var db = new SQL.Databse(uInt8Array); 
    var contents = db.exec("SELECT * FROM my_table"); 
    // contents is now [{columns:['col1','col2',...], values:[[first row], [second row], ...]}] 
}; 
xhr.send(); 

finden Sie in der Dokumentation