Autor Beitrag
ub60
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 766
Erhaltene Danke: 130



BeitragVerfasst: Di 13.03.07 20:24 
Hallo Leute,

bei einem Testprogramm (Hash-Untersuchung, aber das tut nichts zu meinem Problem) habe ich festgestellt, dass der mit Create reservierte Speicher eines TStringList-Objektes nicht durch Free sofort, sondern erst bei Programmende freigegeben wird (Quelltextausschnitt s. u.).
Nun zu meiner Frage:
Gibt es einen API-Aufruf oder so, mit dem ich den Speicher sofort freigenen kann?
Eine Möglichkeit habe ich schon gefunden: Ich habe die Prozedur in ein eigenes Programm ausgelagert und rufe dann jeweils das andere Programm mit Parametern auf. Die Ideallösung ist das aber meiner Meinung nach nicht:-(

Danke schon mal,
ub60

ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
13:
14:
15:
16:
17:
18:
  
  for k:=Anfang to Ende do       
    begin
      HashSL:=TStringList.Create;
      ErgebnisSL:=TStringList.Create;
      for i:=k*131072 to (k+1)*131072-1 do  
        begin
          TextSL:=TStringList.Create;

          { .. do something .. }  


          TextSL.Free;
        end;
      HashSL.Free;
      ErgebnisSL.Free;
      Application.ProcessMessages;
    end;
HelgeLange
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 735
Erhaltene Danke: 6

Windows 7
Delphi7 - Delphi XE
BeitragVerfasst: Di 13.03.07 21:02 
ich glaube, der Speicher wird freigegeben, nur verwaltet ihn weiterhin der Delphi-Memory-Manager und wird nicht an Windows zurückgegeben. Forderst Du also Speicher kleiner als der von deiner Liste verbraucht wurde, an dürfte der MM Dir diesen anbieten, ist er grösser, sollte m.W. nach neuer von Windows angefordert werden.

_________________
"Ich bin bekannt für meine Ironie. Aber auf den Gedanken, im Hafen von New York eine Freiheitsstatue zu errichten, wäre selbst ich nicht gekommen." - George Bernhard Shaw
IngoD7
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 629


D7
BeitragVerfasst: Di 13.03.07 21:32 
Also mit einem Schnellversuch hier bei mir kann ich das gar nicht bestätigen.

- Taskmanager starten.
- Programm starten und Speicherangabe des Prozesses meines Programms anschauen.
- Per Button-Click ein array[1..10000] of TStringList füllen (Schleife mit 10000 x arr[i]:=TStringList.Create).
- Speicher des Prozesses angucken.
- Per Button-Click die Elemente des Arrays freigeben (Schleife mit 10000 x arr[i].Free).
- Speicher wieder angucken. ==> Bis auf einen kleinen Rest wieder da, wo er war.

Ein kleiner Rest bleibt nur beim ersten mal belegt.
Wiederholungen des Füllens und Leerens dieses Arrays lässt die Speicherbelegung nicht weiter anwachsen.
ub60 Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 766
Erhaltene Danke: 130



BeitragVerfasst: Mi 14.03.07 00:32 
Danke erst mal, hilft mir leider noch nicht weiter.

Also, der Speicher wird definitiv nicht vor Beendigung des Programms freigegeben.

Dazu ein kleines Bild vom Taskmanager:
user defined image
An den hier zu sehenden Stellen 1, 2 und 3 wird jeweils der Speicher frei gegeben, leider (siehe unterer Bildteil) passiert das nicht wirklich.

@IngoD7:
Hast Du auch mal Daten in die Stringlisten reingeschrieben? Oder sogar verändert? Ich glaube, dann ändert sich das Verhalten gewaltig!


@HelgeLanger:
Kann man den Delphi-Memory-Manager irgendwie manipulieren, ansprechen, Daten auslesen oder so?

ub60
Luckie
Ehemaliges Mitglied
Erhaltene Danke: 1



BeitragVerfasst: Mi 14.03.07 00:46 
Der Delphi Speichermanager ist daraufhin optimiert kleiner Speicherblöcke zu verwalten, wie es in der OOP Programmierung sehr häufig vorkommt. Da es immer einen großen Verwaltungaufwand bedeutet, auch für Windows, von Windows Speicher anzufordern und zu dem recht langsam ist, gibt der Delphispeichermanager angeforderten Speicher an Windows nicht zurück, denn dann kann er ihn einfach wiederverwenden ohne noch mal Speichr von Windows anfordern zu müssen, was, wie gesagt, aufwendig und langsam ist.

Du könntest dich nach alternativen Speichermanager umsehen. Wobei mir da nur Fastmem einfällt, ob der den Speicher an Windows zurückgibt oder nicht, kann ich allerdings nicht sagen.

Aber macht es denn Probleme, dass der Speicher nicht sofort wieder freigegeben wird?
Horst_H
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 1654
Erhaltene Danke: 244

WIN10,PuppyLinux
FreePascal,Lazarus
BeitragVerfasst: Mi 14.03.07 09:08 
Hallo,

kann es sein, dass Deine Strings in der Stringliste bei der Freigabe einen Referenzzähler >1 haben und damit die Liste mit den 2^17 Einträgen (~ 500 kByte) gelöscht wird, aber die zugeordneten Strings im Speicher bleiben?.
Vielleicht hilft auch, vorher die Anzahl der Strings anzugeben.
ausblenden Delphi-Quelltext
1:
2:
TextSL:=TStringList.Create;
TextSL.capacity :=131072;
, aber das dürfte nichts bringen ausser einem kleinen Geschwindigkeitvorteil.

Wie also füllst Du deine Strings in der Stringliste.
Siehe www.delphi-forum.de/...67939&highlight=

Gruß Horst
IngoD7
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 629


D7
BeitragVerfasst: Mi 14.03.07 10:18 
user profile iconub60 hat folgendes geschrieben:

Dazu ein kleines Bild vom Taskmanager:
user defined image
An den hier zu sehenden Stellen 1, 2 und 3 wird jeweils der Speicher frei gegeben, leider (siehe unterer Bildteil) passiert das nicht wirklich.

Das ist die Auslagerungsdatei. Warum sollte er die zurückfahren?
Ich sprach von dem vom Prozess angeforderten Speicher. :idea:

user profile iconub60 hat folgendes geschrieben:
@IngoD7:
Hast Du auch mal Daten in die Stringlisten reingeschrieben? Oder sogar verändert? Ich glaube, dann ändert sich das Verhalten gewaltig!

Ja, ich hatte die Stringlisten ...
a.) ... leer gelassen (--> mit dem beschriebenen Ergebnis) und ein anderes mal ...
b.) ... im Augenblick geistiger Umnachtung mit je einer 36kB großen Textdatei gefüllt (alle 10000 :cry:). Das war vielleicht ein Gerödel mit der Auslagerungsdatei. 8) Nach Freigabe der Stringlisten brauchte der Prozess nur noch die Hälfte des Speichers wie zu Programmstart. (Fragt mich ja nicht, warum!)
c.) ... erneut mit der Textdatei gefüllt, aber dieses mal nur 500 Stringlisten. Dadurch wurde die Auslagerungsdatei nicht involviert und der Speicher sank nach Freigabe der Listen - wie erwartet - auf das Anfangsniveau ab.
ub60 Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 766
Erhaltene Danke: 130



BeitragVerfasst: Mi 14.03.07 13:31 
Danke erst mal an alle Beteiligten!

Nach Anwendung aller Tipps konnte ich nun ausschließen, woran es nicht liegt und den Fehler einkreisen:
Offensichtlich scheint es an einer von mit verwendeten Komponente zu liegen und ein Ersetzen des Rückgabewerts der Komponente durch eine einfache Funktion mit einem String als Rückgabe ließ Delphi wieder in normale Verhaltensweisen zurückkehren.
Da werde ich mir wohl mal die Interna der Komponente zu Gemüte führen. Eventuell könnte mich dort der Tipp mit dem Referenzzähler weiterbringen. Ein ständiges Create und Destroy der Komponente brachte allerdings auch keine Verbesserung.

Aber danke erst mal für die Hilfe.

ub60

@IngoD7:
Die Auslagerungsdatei verändert meiner Meinung nach ihren Größe nicht wirklich, sondern es wird bis zum Wert von 1GB (mein Hauptspeicher) der verwendete Hauptspeicher angezeigt. Dann fängt der Rechner erst an, auszulagern und es geht nur noch sehr zähflüssig weiter. Im Bild sieht man das daran, dass der 4. Punkt noch lang nicht erreicht ist, aber die Prozessorbelastung sinkt (jeweils warten, bis das Schreiben auf die Festplatte beendet ist). Wenn dann alle Programme ausgelagert sind, das ist bei einer Größe der Auslagerungsdatei von ca. 1,3 GB, schmiert dann der Rechner ab, obwohl ich mehrere GB für die Datei freigegeben habe.