AWS, das große Modelldatei für maschinelles Lernen hostet

Question

Ich möchte ein Modell offenlegen, das ich lokal mit einigen Funktionen ausgestattet habe, die dabei helfen, Parameter zu bewerten. Das Modell ist ziemlich groß (10 GB). Ich dachte daran, einen Webdienst zu entwickeln, der die erforderliche Funktionalität bereitstellen würde. Allerdings weiß ich nicht, wie ich mein Modell hosten sollte (es ist eine sehr große Textdatei) und wie ich darauf zugreifen könnte. Und wenn ich einen Schritt nach vorne mache, lade ich das gesamte Modell in meinen EC2-Instance-Speicher? Was wäre der beste Weg, um eine solche Aufgabe zu bewältigen?

Answer 1

Sie können es immer in einem S3-Bucket speichern und beispielsweise in R laden. Ich kann jedoch keine Möglichkeit sehen, ein Modell teilweise zu laden. Ich würde sagen, Sie verlieren die Fähigkeit des Modells, Ihre Ergebnisse zu verallgemeinern. Ich fürchte, Sie müssen ein paar Dollars ausgeben und eine große Instanz nehmen, die das ganze Ding laden kann. Viel Glück!