Entschuldigung, anscheinend eine Noob-Frage (wieder ...).
Wir arbeiten endlich daran, einige Analysen der Online-Sensordaten ("Tag") durchzuführen, die wir seit Jahren in unserer Produktionsstätte sammeln. Die Standard-Zeitauflösung für diese Tags ist 1'' und es gibt ungefähr 1400 Tags, die nach interessanten Informationen durchsucht werden müssen. Aber um zu diesem Stadium zu gelangen, muss ich unserem Digitalisierungsteam ein Datenformat vorschlagen. Ich glaube, sie erwarten, dass jeder, der nicht in ihrem Team ist (was ich nicht bin), mit CSV-Dateien arbeitet, aber mir ist klar, dass dieses Format nicht in der Lage wäre, ungefähr 30 Millionen Zeilen zu bewältigen, was ungefähr der Anzahl entspricht von Sekunden in einem Jahr. Nun, obwohl diese zeitliche Auflösung möglicherweise nicht erforderlich ist, denke ich, dass es sich dennoch lohnt, dies so anzugehen, als ob es so wäre. Außerdem würde die Verwendung von nur einer Granularität von 1 Minute ungefähr 0,5 Millionen Zeilen für jedes Jahr bedeuten, was immer noch unbequem zu handhaben ist, wenn CSV verwendet wird.
Ist JSON für den Umgang mit großen Tabellen, dh deren Import in JMP, der bevorzugte Ansatz?Oder wäre es vielleicht besser, eine Datenbank anzubinden und die Daten von dort direkt in JMP zu laden? Jedes Feedback und alle Kommentare, die ich unserem Digitalisierungsteam in Bezug auf dieses Problem mitteilen kann, sind sehr willkommen. Vielen Dank im Voraus, Kolleginnen und Kollegen von JMP!
