Beim Lesen von ca. 120 GB Textdaten ist nicht genügend Speicher zum Lesen vorhanden.
Würden Sie mich bitte wissen lassen, ob es eine Möglichkeit gibt, damit umzugehen, wie z. B. Teilen und Lesen.
LoadTextFile kann das. ( @audrey_shull Der Skriptindex enthält zwei Versionen, eine ist vollständiger als die andere.)
Ungetesteter Code:
blob = loadtextfile("reallyBig.txt", blob( readLength( 1e9 ), readOffsetFromBegin( n * 1e9 ) ) );Es gibt die Daten als BLOB zurück, nicht als Text. Blobs können> 4 GB groß sein, JSL-Zeichenfolgen sind jedoch auf <2 GB beschränkt. 1e9 ist fast 1 GB. "n" kann 0, 1, 2, ... sein, um die Datei zu durchlaufen.
Der Grund, warum ein BLOB zurückgegeben wird: Multi-Byte-Zeichen können über die 1e9-Grenze aufgeteilt werden. Wenn es nur Einzelbyte-Zeichen gibt, großartig! Sie können den Blob wahrscheinlich in einen String konvertieren, indem Sie (erneut ungetesteten Code) verwenden.
jslString = blobToChar( blob, "utf-8" );
Lassen Sie uns wissen, wie das bei Ihnen funktioniert, danke!
