|
|
|
.txt mit 1,3 Mrd. Zeilen importieren bzw. downsamplen? |
|
| RockOn_23 |
Forum-Anfänger
|
 |
Beiträge: 11
|
|
|
|
Anmeldedatum: 23.09.11
|
|
|
|
Wohnort: ---
|
|
|
|
Version: ---
|
|
|
|
 |
|
Verfasst am: 04.04.2013, 12:10
Titel: .txt mit 1,3 Mrd. Zeilen importieren bzw. downsamplen?
|
 |
Hallo zusammen,
ich habe über etwa 36 h eine Messung auf 4 Kanälen aufgenommen, die in eine .txt (mit space als delimiter) gespeichert wurden.
Leider habe ich beim Starten der Messung versehentlich 100 Hz Samplefrequenz eingegeben  Jetzt hat die .txt 1.3 Mrd Zeilen und 4 Spalten.
Ich möchte diese mit Matlab auf 10 Hz downsamplen, also jede 10. Zeile entehmen. Der Rechner geht dabei leider in die Knie, Speicher voll.
Hat jemand evtl. einen Trick parat?
Grüße
RockOn
|
|
|
|
|
|
| Jan S |
Moderator
|
|
Beiträge: 11.057
|
|
|
|
Anmeldedatum: 08.07.10
|
|
|
|
Wohnort: Heidelberg
|
|
|
|
Version: 2009a, 2016b
|
|
|
|
|
|
|
Verfasst am: 04.04.2013, 13:09
Titel: Re: .txt mit 1,3 Mrd. Zeilen importieren bzw. downsamplen?
|
|
Hallo RockOn_23,
Ohne den Code zu sehen, können wir nicht erraten, wo das Problem liegt. Bitte poste als den relevanten Teil des Codes und eine Kopie der Fehlermeldung. Dann ist es viel einfacher einen Verbesserungsvorschlag zu machen. Vielleicht hast Du ja einfach nur die Pre-allocation vergessen und vergrößerst ein Array in jeder Iteration.
Insgesamt wird das Array 4.160 GigaByte belegen. Hast Du soviel zusammenhängenden freien Speicher?
Gruß, Jan
|
|
|
|
| markuman |
Forum-Guru
|
|
Beiträge: 320
|
|
|
|
Anmeldedatum: 14.12.12
|
|
|
|
Wohnort: ---
|
|
|
|
Version: 2013a/2013b, Octave 3.6.4, 3.7.7
|
|
|
|
|
|
|
Verfasst am: 04.04.2013, 15:26
Titel:
|
|
Mit load geladen oder mit fopen?
Ich würde es mit fopen und fgetl probieren, und 9/10 von fgetl einfach verwerfen.
_________________
DIY OR DIE 
entropie=char(floor(94*rand(1, round(100.*rand)) + 32))
https://github.com/markuman
|
|
|
|
|
|
|
Einstellungen und Berechtigungen
|
|
Du kannst Beiträge in dieses Forum schreiben.
Du kannst auf Beiträge in diesem Forum antworten.
Du kannst deine Beiträge in diesem Forum nicht bearbeiten.
Du kannst deine Beiträge in diesem Forum nicht löschen.
Du kannst an Umfragen in diesem Forum nicht mitmachen.
Du kannst Dateien in diesem Forum posten
Du kannst Dateien in diesem Forum herunterladen
|
|
Impressum
| Nutzungsbedingungen
| Datenschutz
| FAQ
|  RSS
Hosted by:
Copyright © 2007 - 2025
goMatlab.de | Dies ist keine offizielle Website der Firma The Mathworks
MATLAB, Simulink, Stateflow, Handle Graphics, Real-Time Workshop, SimBiology, SimHydraulics, SimEvents, and xPC TargetBox are registered trademarks and The MathWorks, the L-shaped membrane logo, and Embedded MATLAB are trademarks of The MathWorks, Inc.
|
|
