675615_de-DE

liliconcom

Import mehrerer Dateien: Das Erkennen von Dateien dauert zu lange

MFI ist großartig – ich liebe es wirklich.

 

Aber manchmal tut die geringe Geschwindigkeit der Dateisuche weh.
Wenn die Daten von einem Netzlaufwerk stammen und ich vom Homeoffice aus auf den Ordner zugreifen möchte, kann es > 10 Minuten dauern Dateien entdecken um meine 4 passenden Dateien aus Tausenden von Ordnern/Unterordnern/Dateien zu finden ...

 

Dann ist es schneller, Python parallel zu öffnen, schreiben Sie kurz GLOB Suchen und laden Sie die Dateien einzeln über für Schleife und öffnen(Dateiname).Viel schneller, als darauf zu warten, dass MFI die Dateiliste mit allen Dateien füllt, bei denen die Dateinamenübereinstimmung fehlschlägt.

 

Das Beispiel mit Python/glob zeigt, dass die Dateisuche um Größenordnungen schneller sein kann – Gibt es in Jmp/MFI einen Trick, um dies zu beschleunigen?

DatenzugriffBetreff: Import mehrerer Dateien: Das Erkennen von Dateien dauert zu lange

Die Glob-Suche ist wahrscheinlich schneller, da Datum und Größe nicht abgerufen werden.

https://stackoverflow.com/questions/23430395/glob-search-files-in-date-order

Es gibt keine Möglichkeit, MFI anzuweisen, das Abrufen von Datum und Größe zu überspringen (aber es könnte ein Wunsch sein).

 

Bearbeiten: Dies macht sich im lokalen Dateisystem der Maschine viel weniger bemerkbar; Die Netzwerkfestplattenkommunikation ist wahrscheinlich dreimal so groß, um den Namen, das Datum und die Größe zu erhalten, und nicht nur den Namen. Möglicherweise können Sie auch die rekursive Datei „filesInDirectory“ verwenden, die der Glob-Suchzeit ähneln sollte, und die gewünschten Dateien aus dieser vollständigen Liste mit einer Musterübereinstimmung auswählen. Und seien Sie beim Benchmarking vorsichtig; Das zweite Mal kann viel schneller sein, wenn Caching beteiligt ist – leicht 100X, wenn die Kommunikationszeit auf Null geht.

(Und ändern Sie Datum+Uhrzeit in Datum+Größe.)

Betreff: Import mehrerer Dateien: Das Erkennen von Dateien dauert zu lange

Ich habe einen Wunsch gepostet, die Geschwindigkeit von MFI zu optimieren:
Import mehrerer Dateien: Fügen Sie einen Schnellmodus hinzu

 

 

Betreff: Import mehrerer Dateien: Das Erkennen von Dateien dauert zu lange

Erstaunlich nützlich: der neue schnelle Modus von MFI in JMP18:)

Betreff: Import mehrerer Dateien: Das Erkennen von Dateien dauert zu lange

@hogi Ist das irgendwo ein Knopf?

Betreff: Import mehrerer Dateien: Dateierkennung dauert zu lange

Ich habe den Namensfilter in MFI häufig verwendet. Die Idee dahinter:
Der Benutzer wählt mit der Funktion „Dateien auswählen“ einige Dateien aus, anschließend importiert der Workflow die Dateien mithilfe von MFI.

Dies ist nun über „Dateien manuell auswählen“ möglich: