WICHTIG: Der Betrieb von goMatlab.de wird privat finanziert fortgesetzt. - Mehr Infos...

Mein MATLAB Forum - goMatlab.de

Mein MATLAB Forum

 
Gast > Registrieren       Autologin?   

Partner:




Forum
      Option
[Erweitert]
  • Diese Seite per Mail weiterempfehlen
     


Gehe zu:  
Neues Thema eröffnen Neue Antwort erstellen

Abspeichern Restbereich

 

cenit87
Forum-Newbie

Forum-Newbie


Beiträge: 7
Anmeldedatum: 02.01.13
Wohnort: ---
Version: ---
     Beitrag Verfasst am: 16.01.2013, 11:08     Titel: Abspeichern Restbereich
  Antworten mit Zitat      
Guten Morgen,
habe eine Variable "Koordinaten", diese hat 456976 Zeilen und 2 Spalten. Habe dazu eine For-Schleife erstellt, bei der auf "Koordinaten" zugegriffen wird. Das Programm speichert immer Bereichsweise ab ( alle 200.000 Berechnungen). Beispiel:

1 bis 200000 Berechnungen, speichern als ergebnisse_0001
200001 bis 400000 Berechnungen, speichern als ergebnisse_0002

Da er immer bei 200.000 Berechnungen ( ingesamt sind es aber 456976 ) Berechnungen )abspeichert, geht das am Ende nicht ganz auf. Es bleibt ein Restbetrag übrig, dieser wird nicht mehr gespeichert. Mein Wunsch wäre also sowas:

1 bis 200000 Berechnungen, speichern als ergebnisse_0001
200001 bis 400000 Berechnungen, speichern als ergebnisse_0002
400001 bis 456976 Berechnungen, speichern als ergebenisse_0003

Mein Code sieht derzeit so aus:
Code:

for I = 1:size(Koordinaten,1)      

  x_g = Koordinaten(I,1);
  y_g = Koordinaten(I,2);
 
% Haufen Berechnungen,
% Erstellung/Berechnung der Variable Kraft1, Kraft2 etc.

  idx = mod(I-1,200000)+1;
  Ergebnis1(idx,1)=single(Kraft1);
  Ergebnis2(idx,1)=single(Kraft2);

  if idx == 200000
    index = I/200000;
    save(sprintf('ergebnisse_%04d.mat',index),'Ergebnis1','Ergebnis2');
   clear Ergebnis1
   clear Ergebnis2
  end
end
 
Private Nachricht senden Benutzer-Profile anzeigen


Jan S
Moderator

Moderator


Beiträge: 11.057
Anmeldedatum: 08.07.10
Wohnort: Heidelberg
Version: 2009a, 2016b
     Beitrag Verfasst am: 16.01.2013, 12:03     Titel: Re: Abspeichern Restbereich
  Antworten mit Zitat      
Hallo cenit87,

Code:
idx = 0;
Ergebnis1 = zeros(200000, 1);  % Pre-allocate!!!
Ergebnis2 = zeros(200000, 1);  % Pre-allocate!!!
FileIndex = 0;
for I = 1:size(Koordinaten,1)      
  x_g = Koordinaten(I,1);
  y_g = Koordinaten(I,2);
 
  % Haufen Berechnungen,
  % Erstellung/Berechnung der Variable Kraft1, Kraft2 etc.

  idx = idx + 1;
  Ergebnis1(idx, 1) = single(Kraft1);
  Ergebnis2(idx, 1) = single(Kraft2);

  if idx == 200000
     FileIndex = FileIndex + 1;
     save(sprintf('ergebnisse_%04d.mat', FileIndex), 'Ergebnis1', 'Ergebnis2');
     idx = 0;
  end
end

% Flush remaining values in ErgebnisX:
if idx > 0
     Ergebnis1 = Ergebnis1(1:idx);
     Ergebnis2 = Ergebnis2(1:idx);
     FileIndex = FileIndex + 1;
     save(sprintf('ergebnisse_%04d.mat', FileIndex), 'Ergebnis1', 'Ergebnis2');
end

Es gibt noch einige andere Strategien, aber das wichtigste ist auf keinen Fall die Arrays "ErgebnisX" in jeder Iteration anwachsen zu lassen und auch das "clear" ist kontraproduktiv. Denn dann muss insgesamt vom Betriebssystem SUM(1:200000) * 8 * 2 Byte Speicher angefordert werden und genauso viele Daten kopiert, also mehr als 320 GigaByte.

Gruß, Jan
Private Nachricht senden Benutzer-Profile anzeigen
 
Neues Thema eröffnen Neue Antwort erstellen



Einstellungen und Berechtigungen
Beiträge der letzten Zeit anzeigen:

Du kannst Beiträge in dieses Forum schreiben.
Du kannst auf Beiträge in diesem Forum antworten.
Du kannst deine Beiträge in diesem Forum nicht bearbeiten.
Du kannst deine Beiträge in diesem Forum nicht löschen.
Du kannst an Umfragen in diesem Forum nicht mitmachen.
Du kannst Dateien in diesem Forum posten
Du kannst Dateien in diesem Forum herunterladen
.





 Impressum  | Nutzungsbedingungen  | Datenschutz | FAQ | goMatlab RSS Button RSS

Hosted by:


Copyright © 2007 - 2025 goMatlab.de | Dies ist keine offizielle Website der Firma The Mathworks

MATLAB, Simulink, Stateflow, Handle Graphics, Real-Time Workshop, SimBiology, SimHydraulics, SimEvents, and xPC TargetBox are registered trademarks and The MathWorks, the L-shaped membrane logo, and Embedded MATLAB are trademarks of The MathWorks, Inc.