Autor Beitrag
Willie1
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 32

Win 98 SE, Win XP Home
Delphi 5 Prof., Delphi 6/7 Pers.
BeitragVerfasst: Sa 10.12.05 11:56 
Hallo Leute,
ich will meinen Hexeditor auch für Dateien, die größer als MAXINT sind, ausbauen. Dazu fehlen mir jedoch 2 Proc/Funct, die nur mit Integer arbeiten. Es handelt sich um SetLength() und Pos.
Ich will die Datei in einen einzigen String einlesen, dazu brauche ich die genannten Pr/Fu! Bis MAXINT läuft die Sache sehr gut!!!
Kennt jemand eine Lösung?

MfG
Willie1
BenBE
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 8721
Erhaltene Danke: 191

Win95, Win98SE, Win2K, WinXP
D1S, D3S, D4S, D5E, D6E, D7E, D9PE, D10E, D12P, DXEP, L0.9\FPC2.0
BeitragVerfasst: Sa 10.12.05 12:01 
Das wirst Du nicht hinbekommen, da das String-Format bei 2GB seine Grenzn hat. In diesem Zusammenhang würde ich Dir den Umstieg auf Streams empfehlen, die ab D6 auch Nativ >2GB unterstützen und außerdem nich allzu Speicherintensiv sind.

Speicher ist eine Ressource, die man nicht verschwendet!!!

_________________
Anyone who is capable of being elected president should on no account be allowed to do the job.
Ich code EdgeMonkey - In dubio pro Setting.
tommie-lie
ontopic starontopic starontopic starontopic starontopic starofftopic starofftopic starofftopic star
Beiträge: 4373

Ubuntu 7.10 "Gutsy Gibbon"

BeitragVerfasst: Sa 10.12.05 12:13 
user profile iconWillie1 hat folgendes geschrieben:
[...] größer als MAXINT [...] in einen einzigen String einlesen [...]
Aua!
Selbst wenn du eine Datenstruktur mit LongWords nimmst, die einen Wertebreich bis 4 Milliarden haben, kriegst du mehr nicht hin. Unter Win9x und unter einem "normalen" WinNT steht einem Prozess nicht mehr als 2GB Adressbereich zur Verfügung, da ab 2GB Windows prozessinterne Dinge verwatlet. Man kann mit einem Kernelparameter WinNT dazu bringen, 3GB freizuhalten, aber mehr ist nicht drin. Die nächste Grenze liegt bei 4GB, mehr gibt der Adressbereich von 32bit-Prozessoren und -Betriebssystemen nicht her. Aber selbst wenn du dir einen 64bit-Prozessor zulegen solltest und ein 64bit-fähiges Betriebssystem, kommst du mit Delphi nicht weiter, weil der Delphi-Compiler lediglich x86-Code erzeugen kann.
Soweit zu den praktischen Problemen.
Wer hat tatsächlich 2GB RAM? Und den willst du komplett für deinen einen Prozess verballern? Windows ist ein Multitasking-Betriebssystem, du bist nicht der einzige auf einem Computer. Mit anderen Worten, der restliche Speicher müsste komplett auf die Festplatte ausgelagert werden, nur weil sich ein Hexeditor so breit macht. Da macht ein Kontextwechsel richtig Spaß, wenn dann wieder der gesamte Speicher des Zielprozesses von der Platte in den RAM wandern muss. Und wenn man weniger als 2GB Speicher hat? Richtig, dann müssen nicht nur alle anderen Prozesse, sondern auch noch Teile deines Prozesses in die Auslagerungsdatei wandern. Das wird dann noch langsamer.
Bliebe noch das Laden des Strings selbst. Du versuchst beim Laden der Datei, 2GB in den Speicher zu laden (und beim Speichern wieder zurück). Selbst *wenn* die aktuellen Festplatten UDMA/100 mit 100MB/s Transferrate ausreitzen könnten, würde das 20 Sekunden dauern. Im Normalfall bei einer schnellen Festplatte schon doppelt so lange.
Es ist wirklich sinnvoller, wenn du nur den Teil der Datei im Speicher hältst, den du auch gerade anzeigst. Werden Daten geändert, kannst du die paar Änderungen meinetwegen auch im Speicher halten. Aber niemals eine komplette 2GB große Datei.

_________________
Your computer is designed to become slower and more unreliable over time, so you have to upgrade. But if you'd like some false hope, I can tell you how to defragment your disk. - Dilbert
delfiphan
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 2684
Erhaltene Danke: 32



BeitragVerfasst: Sa 10.12.05 13:30 
Ich empfehle dir, jeweils nur den angezeigten Bereich der Datei zu lesen. Die Ladezeit ist dadurch unabhängig von der Dateigrösse, was sicherlich wünschenswert ist.
Bei Änderungen würde ich diese separat in einer geschickten Datenstruktur speichern. In einem Hex-Editor werden sowieso nicht Megabyteweise Daten geändert.
Wenn du jeweils nur die Änderungen speicherst, kannst du dir dann auch ganz einfach eine Undo-Funktionalität basteln. Die sollte sowieso nie fehlen.
Willie1 Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 32

Win 98 SE, Win XP Home
Delphi 5 Prof., Delphi 6/7 Pers.
BeitragVerfasst: Sa 10.12.05 14:42 
Da habe ich ein Fass aufgemacht!
Ich habe bisher die Datei für meinen Hexeditor nur etappenweise eingelesen und das klappt. Die Idee mit dem dem String hatte ich im Delphi-Forum gefunden. Ich weiß aber dass es Hexeditoren gibt, die bis 2 GB Dateigröße gehen.

Ich werde wohl dabei belasssen.

SchöWoEnde
Willie1.