Autor Beitrag
Sy-
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 177



BeitragVerfasst: Mi 05.04.06 15:17 
Hi all,

also ich habe ein 2d string-array welches den Inhalt aus einer Datei lädt.
Problem nun ist, dass diese fast 1 MB Große Datei im Array zu über 100 MB werden.

Da frage ich mich, ob und wie ich das optimieren kann.

Gruß
Christian S.
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 20451
Erhaltene Danke: 2264

Win 10
C# (VS 2019)
BeitragVerfasst: Mi 05.04.06 15:19 
Hallo!

Zeig doch mal bitte, wie Du die Daten lädst. Vergrößert Du vielleicht das Array in einer Schleife mittels SetLength? Das frisst durchaus sehr viel Speicher!

Grüße
Christian

_________________
Zwei Worte werden Dir im Leben viele Türen öffnen - "ziehen" und "drücken".
Sy- Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 177



BeitragVerfasst: Mi 05.04.06 15:25 
Ja richtig mit Setlength

Trotzdem mal der Script:
ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
  while not eof(F) do
  begin
    readln(F,line);
    line:=trim(line);
    if(line='')then continue;

    setlength(kfz,high(kfz)+2);
    kfz[high(kfz)]:=csvtoarray(line);

    progg.position:=progg.position+length(line)+1;
    application.processmessages;
  end;


Was soll ich denn in diesem Fall statt setlength nutzen?
Marc.
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 1876
Erhaltene Danke: 129

Win 8.1, Xubuntu 15.10

BeitragVerfasst: Mi 05.04.06 15:27 
hallo,

ich habe mich vor kurzem mit dem thema zeigern ein wenig auseinander gesetzt. ich möchte nichts falsches empfehlen, aber evlt könntest du zeiger verwenden um dir nur den speicher zu nehmen, den du auch brauchst :roll:
Christian S.
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 20451
Erhaltene Danke: 2264

Win 10
C# (VS 2019)
BeitragVerfasst: Mi 05.04.06 15:27 
Du hast verschiedene Möglichkeiten:

Entweder, Du vergrößerst das Array in größeren Schritten (also z.B. immer verdoppeln, wenn's zu klein geworden ist) und wenn's zuviel war, stutzt Du es nach Ende der Schleife wieder auf die richtige Größe zurecht.

Oder Du stellst vorher genau fest, wie groß das sein muss, was hieße, die Datei einmal einzulesen, um zu sehen wieviele Zeilen sie hat, dann das Array auf die richtige Größe setzen und die Datei nochmals einlesen. Wenn Du sagst, die Datei habe 1MB kann das nicht so ewig dauern.

_________________
Zwei Worte werden Dir im Leben viele Türen öffnen - "ziehen" und "drücken".
jasocul
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 6395
Erhaltene Danke: 149

Windows 7 + Windows 10
Sydney Prof + CE
BeitragVerfasst: Mi 05.04.06 15:35 
Evtl. bietet sich der Umweg über eine StringList an. Dann kannst du die Größe vorher einfach feststellen.
Christian S.
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 20451
Erhaltene Danke: 2264

Win 10
C# (VS 2019)
BeitragVerfasst: Mi 05.04.06 15:38 
Boah, Du hast ja recht :autsch:
<-- geht ins Bett

_________________
Zwei Worte werden Dir im Leben viele Türen öffnen - "ziehen" und "drücken".
Sy- Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 177



BeitragVerfasst: Mi 05.04.06 15:49 
Stimmt ;)

Wusste aber garnicht, dass jeder setlength speicher frisst :!:

Habe die variante mit dem Stringlist gewählt und man siehe da
Tausend mal schnelleres laden
und das Prog verbraucht nur noch 8.6 MB (Statt vorher 120)

Danke!

Gruß
Sy
matze
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 4613
Erhaltene Danke: 24

XP home, prof
Delphi 2009 Prof,
BeitragVerfasst: Mi 05.04.06 16:03 
hatten wir erst vor kurzen hier im forum.
Hier ein Link zum verständnis:

www.dsdt.info/inside.../speichermanager.php

_________________
In the beginning was the word.
And the word was content-type: text/plain.