Autor Beitrag
BingoBongo
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 09:31 
Ich habe da ein blödes Problem, welches meiner Meinung nach auf die Art der in Textdateien möglichen Zeichen zurückzuführen ist und mir gehen langsam die Ideen aus, wie ich das lösen kann.

Folgender Teil einer Funktion soll nur die Zeichen drin lassen in einem übergebenen String, die in einer Konstante BUCHSTABEN, als Menge, deklariert sind und alles andere durch ein Leerzeichen ersetzen. Darin enthalten sind alle Buchstaben des Alphabets und die Umlaute sowie "ß".

ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
  for i:= 1 to length(instr) do
  begin
    if not (instr[i] in BUCHSTABEN) then
    begin
      instr[i]:= ' ';
    end;
  end;


Dass im weiteren Verlauf der Funktion dann diese Leerzeichen noch "behandelt werden ist vermutlich unwichtig für mein Problem.

Nun habe ich die Funktionalität mit verschiedenen Textdateien ausprobiert und bei einer bestimmten, vermutlich sogar mehrere, hängt sich das Programm auf und läßt sich praktisch nicht mehr schließen.
Ich konnte das Problem insoweit eingrenzen, dass wohl in der besagten Textdatei, aus welcher die kopierten Strings stammen, scheinbar eine Reihe von nicht grad gebräuchlichen Zeichen enthalten sind, die diesen Fehler nachweislich verursachen. Ich bin mir deshalb so sicher damit, weil ein löschen besagter Textteile in dieser Datei das Problem behob. Nun stellt sich mir freilich die Frage, wieso diese Zeichen nicht auch durch Leerzeichen ersetzt werden wie es ja eigentlich vorgesehen ist.

Kann mir da jemand einen Tipp geben?

Bingo
Narses
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Administrator
Beiträge: 10185
Erhaltene Danke: 1261

W11x64
TP3 .. D7pro .. D10.2CE
BeitragVerfasst: Mo 17.10.05 10:55 
Moin!

Dein Code-Teil ist IMHO fehlerfrei, allerdings aber auch so kurz, dass man keine "Seiteneffekte" diagnostizieren kann (könnte).

Fazit: Mehr Code, den relevanten Textteil als Dateianhang, dann könnte man mehr dazu sagen.

cu
Narses
Kroko
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 1284

W98 W2k WXP
Turbo D
BeitragVerfasst: Mo 17.10.05 11:04 
in diesem Teil liegt kein Fehler, aber es fehlt ein Menge Quelltext :!:

_________________
Die F1-Taste steht nicht unter Naturschutz und darf somit regelmäßig und oft benutzt werden! oder Wer lesen kann, ist klar im Vorteil!
Narses
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Administrator
Beiträge: 10185
Erhaltene Danke: 1261

W11x64
TP3 .. D7pro .. D10.2CE
BeitragVerfasst: Mo 17.10.05 11:16 
Gibt´s hier ein Echo... :gruebel:
Kroko
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 1284

W98 W2k WXP
Turbo D
BeitragVerfasst: Mo 17.10.05 11:20 
Sorry, ich hatte angefangen zu antworten, musste dann weg und dann ist es passiert :cry:

_________________
Die F1-Taste steht nicht unter Naturschutz und darf somit regelmäßig und oft benutzt werden! oder Wer lesen kann, ist klar im Vorteil!
BingoBongo Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 11:31 
So, dann will ich auch mal den Quelltext liefern, auf dass mein Problem vielleicht gefunden werde :-)

ausblenden volle Höhe Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
13:
14:
15:
16:
17:
18:
19:
20:
21:
22:
23:
24:
25:
26:
27:
28:
29:
30:
31:
32:
33:
34:
35:
36:
37:
38:
39:
40:
41:
42:
43:
44:
45:
46:
47:
48:
49:
50:
51:
52:
function linefilter(iString:string): string;
// entfernt alle Sonderzeichen und Satzzeichen und doppelte Leerzeichen
// aus dem übergebenen String und liefert einen davon gesäuberten String zurück
// mit Leerzeichen am Anfang, Ende und zwischen den einzelnen Wörtern

const
  BUCHSTABEN = ['a'..'z','A'..'Z','ü','ö','ä','Ü','Ö','Ä','ß',' '];
  
var
  inStr: string;
  i,j: integer;
  enthalten: boolean;

begin
  instr:= iString;
// bearbeitet leere Strings   ????? scheint nicht zu funzen, später testen
  if length(instr) < 1 then
  begin
  setlength(instr,3);
  for i:= 1 to 3 do
  instr[i]:= ' ';
  end;

// Suche nach ungültigen Zeichen
// werden durch Leerzeichen ersetzt
  for i:= 1 to length(instr) do
  begin
    if not (instr[i] in BUCHSTABEN) then
    begin
      instr[i]:= ' ';
    end;
  end;
  
// Suche nach sinnlosen Doppeln und Ersetzung selbiger
  while Pos('ää',instr) > 0 do
    instr[Pos('ää',instr)] := 'ä';
  while Pos('öö',instr) > 0 do
    instr[Pos('öö',instr)] := 'ö';
  while Pos('üü',instr) > 0 do
    instr[Pos('üü',instr)] := 'ü';
  while Pos('ßß',instr) > 0 do
    instr[Pos('ßß',instr)] := 'ß';
    
//Bearbeitung der übriggebliebenen Leerzeichen
  while Pos('  ',instr) > 0 do
    delete(inStr,Pos('  ',instr),1);

  if instr[length(instr)+1] <> ' ' then
  insert(' ',instr,length(instr)+1);
  result:=instr;
  instr:= '';
end;


Als Anhang noch die Textdatei, die mir meinen wunderschönen Tag so versaut hat.

Bingo
Einloggen, um Attachments anzusehen!
jasocul
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 6395
Erhaltene Danke: 149

Windows 7 + Windows 10
Sydney Prof + CE
BeitragVerfasst: Mo 17.10.05 11:42 
ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
// Suche nach sinnlosen Doppeln und Ersetzung selbiger
  while Pos('ää',instr) > 0 do
    instr[Pos('ää',instr)] := 'ä';
  while Pos('öö',instr) > 0 do
    instr[Pos('öö',instr)] := 'ö';
  while Pos('üü',instr) > 0 do
    instr[Pos('üü',instr)] := 'ü';
  while Pos('ßß',instr) > 0 do
    instr[Pos('ßß',instr)] := 'ß';

Das ist tödlich. Und führt zu Endlossschleifen wenn der Fall wirklich existiert!
Benutze hier bitte Delete und Insert.
Noch besser wäre StringReplace.
BingoBongo Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 11:47 
das verstehe ich nicht, wieso das zu Endlosschleifen führen sollte. Irgendwann würden doch die Doppelten alle eliminiert, und die Schleife wird verlassen.

Bingo
jasocul
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 6395
Erhaltene Danke: 149

Windows 7 + Windows 10
Sydney Prof + CE
BeitragVerfasst: Mo 17.10.05 11:49 
Beispiel:
"määh"
ausblenden Delphi-Quelltext
1:
2:
while Pos('ää',instr) > 0 do
    instr[Pos('ää',instr)] := 'ä';

1. Schleife passt.
2. Pos von "ää" ist 2
3. an Stelle 2 schreibst du ein "ä".
4. Ergebnis: "määh"
5. gehe zu 1.

Du ersetzt also nur das erste "ä" und nicht beide.
BingoBongo Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 11:53 
So ein Mist, du hattest doch Recht, habe den Teil mal auskommentiert, und nun scheints zu funktionieren.
Werde wohl doch ne andere Methode anwenden müssen, um diese sinnlosen Doppel zu eliminieren.

Bingo
Kroko
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 1284

W98 W2k WXP
Turbo D
BeitragVerfasst: Mo 17.10.05 11:53 
hier habe ich mal ein paar Teile überarbeitet -> BITTE selbeer testen!
//EDIT : Quellen entfernt, da falsch

_________________
Die F1-Taste steht nicht unter Naturschutz und darf somit regelmäßig und oft benutzt werden! oder Wer lesen kann, ist klar im Vorteil!


Zuletzt bearbeitet von Kroko am Mo 17.10.05 12:07, insgesamt 2-mal bearbeitet
jasocul
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 6395
Erhaltene Danke: 149

Windows 7 + Windows 10
Sydney Prof + CE
BeitragVerfasst: Mo 17.10.05 11:56 
user profile iconBingoBongo hat folgendes geschrieben:
So ein Mist, du hattest doch Recht, habe den Teil mal auskommentiert, und nun scheints zu funktionieren.
Werde wohl doch ne andere Methode anwenden müssen, um diese sinnlosen Doppel zu eliminieren.

Bingo

StringReplace hilft da ganz enorm.
Horst_H
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 1654
Erhaltene Danke: 244

WIN10,PuppyLinux
FreePascal,Lazarus
BeitragVerfasst: Mo 17.10.05 11:58 
Hallo,

@Kroko:
das scheint mir nicht ganz koscher.
Es sieht so aus, als würde eine einziges Wort ohne Leeryeichen entstehen.

@alle :-)
eine kleine Abwandlung des Original's um sich wiederzuerkennen.
ausblenden volle Höhe Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
13:
14:
15:
16:
17:
18:
19:
20:
21:
22:
23:
24:
25:
26:
27:
28:
29:
30:
31:
32:
33:
34:
35:
36:
37:
38:
39:
40:
41:
42:
function linefilter(iString:string): string;
// entfernt alle Sonderzeichen und Satzzeichen und doppelte Leerzeichen
// aus dem übergebenen String und liefert einen davon gesäuberten String zurück
// mit Leerzeichen am Anfang, Ende und zwischen den einzelnen Wörtern
const
  BUCHSTABEN = ['a'..'z','A'..'Z','ü','ö','ä','Ü','Ö','Ä','ß',' '];

var
  inStr: string;
  i,j: integer;
  enthalten: boolean;

begin
  instr:= iString;
// bearbeitet leere Strings   ????? scheint nicht zu funzen, später testen
  if length(instr) < 1 then
    instr:= '   ';

// Suche nach ungültigen Zeichen
// werden durch Leerzeichen ersetzt
  for i:= 1 to length(instr) do
    if not (instr[i] in BUCHSTABEN) then
      instr[i]:= ' ';
// Suche nach sinnlosen Doppeln und Ersetzung selbiger

  while Pos('ää',instr) > 0 do
    delete(instr,Pos('ää',instr),1);
  while Pos('öö',instr) > 0 do
    delete(instr,Pos('öö',instr),1);
  while Pos('üü',instr) > 0 do
    delete(instr,Pos('üü',instr),1);
  while Pos('ßß',instr) > 0 do
    delete(instr,Pos('ßß',instr),1);

//Bearbeitung der übriggebliebenen Leerzeichen
  while Pos('  ',instr) > 0 do
    delete(inStr,Pos('  ',instr),1);
  if instr[length(instr)] <> ' ' then
    instr:= instr+' ';
  result:=instr;
  instr:= '';
end;


Gruss Horst
Kroko
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Beiträge: 1284

W98 W2k WXP
Turbo D
BeitragVerfasst: Mo 17.10.05 12:05 
Oh Sorry, ich habe übersehen, dass es hier
ausblenden Delphi-Quelltext
1:
2:
3:
//Bearbeitung der übriggebliebenen Leerzeichen
  while Pos('  ',instr) > 0 do
    delete(inStr,Pos('  ',instr),1);

um zwei Leerzeichen geht.
ausblenden volle Höhe Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
13:
14:
15:
16:
17:
18:
19:
20:
21:
22:
23:
24:
25:
26:
27:
28:
29:
30:
31:
32:
33:
34:
35:
36:
37:
38:
39:
40:
41:
42:
43:
44:
function linefilter(iString:string): string;
// entfernt alle Sonderzeichen und Satzzeichen und doppelte Leerzeichen
// aus dem übergebenen String und liefert einen davon gesäuberten String zurück
// mit Leerzeichen am Anfang, Ende und zwischen den einzelnen Wörtern
const
  BUCHSTABEN = ['a'..'z','A'..'Z','ü','ö','ä','Ü','Ö','Ä','ß'];

var
  ATxt: string;
  i: integer;
  procedure _Check (AStr: String);
  var
    P: Integer;
  begin
    P := Pos (AStr,ATxt);
    while P>0 do
    begin
      Delete (ATxt,P,1);
      P := Pos (AStr,ATxt);
    end;
  end;
begin
  ATxt := iString;
// bearbeitet leere Strings   ????? scheint nicht zu funzen, später testen
// Suche nach ungültigen Zeichen
// werden durch Leerzeichen ersetzt
  if Length(ATxt)>0 then
    for I := 1 to Length (ATxt) do
      if not (ATxt[I] in BUCHSTABEN) then ATxt[I] := ' ';
  _Check ('  ';
// Suche nach sinnlosen Doppeln und Ersetzung selbiger
  _Check('ää');
  _Check ('öö');
  _Check ('üü');
  _Check ('ßß');

//Bearbeitung der übriggebliebenen Leerzeichen
  // entfällt

  //if instr[length(instr)+1] <> ' ' then
  //insert(' ',instr,length(instr)+1);
  // ??????????????????????????
  result:=ATxt;
end;

_________________
Die F1-Taste steht nicht unter Naturschutz und darf somit regelmäßig und oft benutzt werden! oder Wer lesen kann, ist klar im Vorteil!
BingoBongo Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 12:06 
ausblenden Delphi-Quelltext
1:
2:
  while Pos('ää',instr) > 0 do
    stringreplace(instr,'ää','ä ',rfReplaceAll);


Irgend ne Kleinigkeit muß da falsch sein, da kommt der Fehler "Inkompatible Typen: TReplaceFlags und Enumeration "

Ich dachte das Flag wäre korrekt :-(

Bingo
Narses
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic star
Administrator
Beiträge: 10185
Erhaltene Danke: 1261

W11x64
TP3 .. D7pro .. D10.2CE
BeitragVerfasst: Mo 17.10.05 12:11 
Moin!

Mach eckige Klammern drum, ist ne Menge. :wink:

cu
Narses
BingoBongo Threadstarter
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starontopic star
Beiträge: 50

Linux Mint
Lazarus, Pascal
BeitragVerfasst: Mo 17.10.05 12:23 
*vorfreudeaufundabhüpf*

jetzt funktionierts, nachdem ich auch noch die While Schleife entfernt habe.

Danke euch allen.

Bingo

//Edit: noch nicht ganz, aber nun mit folgendem Code:

ausblenden Delphi-Quelltext
1:
2:
3:
4:
5:
6:
7:
8:
9:
10:
11:
12:
13:
14:
15:
// Suche nach sinnlosen Doppeln und Ersetzung selbiger
  while Pos('ää',instr) > 0 do
    delete(inStr,Pos('ää',instr),1);
  while Pos('öö',instr) > 0 do
    delete(inStr,Pos('öö',instr),1);
  while Pos('üü',instr) > 0 do
    delete(inStr,Pos('üü',instr),1);
  while Pos('ÄÄ',instr) > 0 do
    delete(inStr,Pos('ÄÄ',instr),1);
  while Pos('ÖÖ',instr) > 0 do
    delete(inStr,Pos('ÖÖ',instr),1);
  while Pos('ÜÜ',instr) > 0 do
    delete(inStr,Pos('ÜÜ',instr),1);
  while Pos('ßß',instr) > 0 do
    delete(inStr,Pos('ßß',instr),1);
Amateur
ontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic starofftopic star
Beiträge: 777

(Win98, WinMe) WinXP Prof
D3 Prof, D6 Pers, D2k5 Pers., Turbo C++ Explorer
BeitragVerfasst: Mo 17.10.05 12:49 
wieso benutzt du keine if abfrage? oder ne case of abfrage?

_________________
"Kein dummes Gerede. Kein Rumrätseln. Denkt an nichts anderes mehr, nur noch an das, was vor euch liegt. Das ist die wahre Herausforderung. Ihr müßt euch vor euch selbst schützen, Leute." (Rennes in "Cube")
Beiträge: >700
jasocul
ontopic starontopic starontopic starontopic starontopic starontopic starhalf ontopic starofftopic star
Beiträge: 6395
Erhaltene Danke: 149

Windows 7 + Windows 10
Sydney Prof + CE
BeitragVerfasst: Mo 17.10.05 14:02 
while z.B. "ää" auch mehrfach in einem String vorkommen kann.
alzaimar
ontopic starontopic starontopic starontopic starontopic starontopic starontopic starofftopic star
Beiträge: 2889
Erhaltene Danke: 13

W2000, XP
D6E, BDS2006A, DevExpress
BeitragVerfasst: Mo 17.10.05 14:07 
Gibts dafür nicht strReplace ?

_________________
Na denn, dann. Bis dann, denn.