Autor Beitrag
stefandraeger28
Hält's aus hier
Beiträge: 11



BeitragVerfasst: Mo 01.09.08 20:07 
hi,

ich habe da noch probleme mit einem sehr großen array

also das array sieht so aus :

ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
type
 TBenutzer = record
   Zeile_Download : array of [0..30000] Integer;
   Zeile_Upload : array of [0..30000] Integer;
   Zeile_URL : array of [0..30000] String;
end;



var 
 my_benutzer : array of [0..1000] of TBenutzer;




also wenn ich das Array mit 760 Datensätze befülle ist alles I.O.,
aber wenn ich jetzt 820.000 möchte kommt eine Fehlermeldung.


Woran kann das liegen ?

Anmerkung : das Programm ließt eine Textdatei , Zeile für Zeile und sortiert diese dann in ein Array d.h. pro Benutzer wird ein Array erstellt und dieses dann mit den Zeilen befüllt.

Moderiert von user profile iconChristian S.: Delphi-Tags hinzugefügt
j.klugmann
Ehemaliges Mitglied
Erhaltene Danke: 1



BeitragVerfasst: Mo 01.09.08 20:10 
Gib deinem Thread bitte einen Titel ,der etwas über das Problem/die Frage aussagt!
Und du hast Delphi-Tags vergessen.

Welche fehlermeldung kommt denn?
stefandraeger28 Threadstarter
Hält's aus hier
Beiträge: 11



BeitragVerfasst: Mo 01.09.08 20:15 
Titel: Textdatei mit 820.000 Zeilen in Array laden
Die Fehlermeldung ist eine "Zugriffsverletzung bei Adresse ......."

Könnte mir vorstellen das es das Array gesprengt hat.
AXMD
ontopic starontopic starontopic starontopic starontopic starontopic starofftopic starofftopic star
Beiträge: 4006
Erhaltene Danke: 7

Windows 10 64 bit
C# (Visual Studio 2019 Express)
BeitragVerfasst: Mo 01.09.08 20:15 
user profile iconstefandraeger28 hat folgendes geschrieben:
ausblenden Delphi-Quelltext
1:
[..] my_benutzer : array of [0..1000] of TBenutzer;					

[..]
aber wenn ich jetzt 820.000 möchte kommt eine Fehlermeldung.


Nun, das wundert mich ehrlich gesagt nicht, wenn du mit 820 Mal mehr Datensätzen arbeiten willst als das Array fassen kann :gruebel:

AXMD
Yogu
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 2598
Erhaltene Danke: 156

Ubuntu 13.04, Win 7
C# (VS 2013)
BeitragVerfasst: Mo 01.09.08 20:16 
Welches Array meinst du denn? my_benutzer? Oder eines der Records?

Auf jeden Fall kann keines der Arrays 820.000 Datensätze beinhalten. Oder meinst du 820? :gruebel:

Und bist du dir sicher, dass dein Konzept richtig ist? Mit Suche in: Delphi-Forum, Delphi-Library DYNAMISCHEN ARRAYS brauchst du nicht unnötig viel Speicherplatz reservieren.
Hidden
ontopic starontopic starontopic starontopic starontopic starontopic starofftopic starofftopic star
Beiträge: 2242
Erhaltene Danke: 55

Win10
VS Code, Delphi 2010 Prof.
BeitragVerfasst: Mo 01.09.08 20:18 
Hi,

(diesmal komme ich aber voll auf meine Kosten mit den Entwürfen :mrgreen:)

Deine Problembeschreibung ist ziemlich präzise, da muss ich J. Klugmann recht geben.

Ich bin mir nicht ganz sicher, ob dein Konzept das richtige ist. Es gibt auch Suche in der Entwickler-Ecke DYNAMISCHE ARRAYS. Da kann ich aber aus deinen Infos nciht sehr viel rausziehen ;) Sieh dir am besten einfach mal diesen Crashkurs von Christian S. an, falls du davon noch nichts gehört hast oder noch nicht sehr lange mit Delphi arbeitest.

Zu den Tags, die J. Klugmann erwähnt hat: Deinen Quelltext packst du am besten in <span class="inlineSyntax"><span class="codecomment">{PROTECTTAG4030a1f5a987d4d42bb64077810c12ec}</span></span> Einzelne Stellen markierst du mit dem Highlight-Tag: [highlight ] markierte Stelle [/highlight]

Jetzt steht zwar die Hälfte schon wieder da, während ich den zweiten Teil getippt habe. Aber bitte, sei's drum :lol:

mfG,

_________________
Centaur spears can block many spells, but no one tries to block if they see that the spell is a certain shade of green. For this purpose it is useful to know some green stunning hexes. (HPMoR)
stefandraeger28 Threadstarter
Hält's aus hier
Beiträge: 11



BeitragVerfasst: Mo 01.09.08 20:20 
Titel: Antwort
nee,

also die 820.000 Zeilen sind gemischt und es gibt im Netzwerk maximal 560 Benutzer diese befüllen die 820.000 Zeilen also gibt es Benutzer mit 1000 Zeilen oder aber auch welche mit 29.000 Zeilen

Das Programm ist so auf gebaut das es pro Benutzer ein Array gibt, welches mit maximal 30.000 Zeilen befüllt werden.
Hidden
ontopic starontopic starontopic starontopic starontopic starontopic starofftopic starofftopic star
Beiträge: 2242
Erhaltene Danke: 55

Win10
VS Code, Delphi 2010 Prof.
BeitragVerfasst: Mo 01.09.08 20:24 
Titel: Re: Antwort
user profile iconstefandraeger28 hat folgendes geschrieben:
Das Programm ist so auf gebaut das es pro Benutzer ein Array gibt, welches mit maximal 30.000 Zeilen befüllt werden.

Dann eventuell ein dynamisches Array oder eine TStringlist. Was performanter ist, kann Yugo bestimmt sagen. Die Stringlist ist sicherlich sauberere, objektorientierte Programmierung.

mfG,

_________________
Centaur spears can block many spells, but no one tries to block if they see that the spell is a certain shade of green. For this purpose it is useful to know some green stunning hexes. (HPMoR)
Luckie
Ehemaliges Mitglied
Erhaltene Danke: 1



BeitragVerfasst: Mo 01.09.08 20:27 
Mach aus den Benutzer Record eine Klasse und nutze einen Container (TObjectList), um die Benutzer Objekte zu verwalten.
Yogu
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 2598
Erhaltene Danke: 156

Ubuntu 13.04, Win 7
C# (VS 2013)
BeitragVerfasst: Mo 01.09.08 20:40 
Eine StringList sollte nur für Strings verwendet werden, und das ist in diesem Fall nur eines der 4 Arrays. Wenn my_benutzer bearbeitet werden soll, also Einträge aus der Mitte gelöscht etc., dann wäre eine TList angebracht. Über Methoden wie Delete können da einfach Einträge rausgelöscht werden, und die restlichen rücken nach. Das ist bei Arrays nicht so einfach.

Ich könnte mir vorstellen, my_benutzer als TList zu definieren, weil es sich für mich so anhört, als ob da immer wieder Benutzer erstellt oder gelöscht würden.

Die einzelnen Einträge von TBenutzer sollten auf jeden Fall mal dynamische Arrays werden - dann bekommst du das mit der Fehlermeldung vielleicht auch geregelt. Wenn du auch mal Einträge aus den Listen löschen willst, solltest du Listen oder, im Letzten Fall, StringListen verwenden.

user profile iconLuckie hat folgendes geschrieben:
Mach aus den Benutzer Record eine Klasse und nutze einen Container (TObjectList), um die Benutzer Objekte zu verwalten.

Das wäre ohne Frage ein Schritt in Richtung OOP, aber bei 1000 Einträgen würde ich auch mal an Speicherplatz sparen denken. Klassen benötigen IMHO mehr Speicherplatz als Records. Bitte verbessert mich, wenn ich falsch liege. :?
alias5000
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 2145

WinXP Prof SP2, Ubuntu 9.04
C/C++(Code::Blocks, VS.NET),A51(Keil),Object Pascal(D2005PE, Turbo Delphi Explorer) C# (VS 2008 Express)
BeitragVerfasst: Mo 01.09.08 20:44 
Wenn du nur bis 30000 deklarierst, kannst du ab dem 30001. Datensatz mit Fehlern rechnen ;)
Sprich, mehr als deklariert kannst du nicht reinpacken.

Aber bei 820000 Datensätzen gibts sicher performantere Lösungen als alles in Arrays laden und dort zu sortieren (dbs, oder zumindest Listen, um das Sortieren zu beschleunigen)

Gruß
alias5000

_________________
Programmers never die, they just GOSUB without RETURN
Grenzgaenger
Ehemaliges Mitglied
Erhaltene Danke: 1



BeitragVerfasst: Mo 01.09.08 21:38 
denke, du solltest dein konzept mal überdenken.. für die 1'000 user reservierst du ca. 400 MB... bei 820'000 user eben 820'000 x 400 MB ... hast du denn so viel hauptspeicher (325 GB)?

ausserdem kann ich mir nicht vorstellen, das irgend ein user 325 GB daten mit einem blick erfassen kann.. das ganze kannst doch sequentiell darstellen... da reichen dir doch 4 KB (statt den 325 GB) dafür :-)


und bei dieser Rechnung sind deine strings noch leer ... ;-)