Volltextsuche und Relationale datenbak

[northernstar]

Hallo an alle;

hat jemand bitte etwas Erfahrung mit Volltextsuche in grossen Datenmengen? Hat jemand vielleicht Rat hinsichtlich einer guten Vorgehensweise:

- Einem faellt natuerlich zunaechst die Variante ein, jegliches Dateiformat in *txt zu verwandeln und dann mit grep zu durchsuchen.

- Ich sage ja nicht, dass es besser ist, unter Windoofs gibt es eine Datenbank namens AskSam, die integriert fuer die Volltextsuche alle moeglichen Formate.

- Wie handhabt man nun das Problem in grossen Datenmengen bestmoeglich suchen zu koennen? Was empfiehlt Ihr? Gibt es DIE Optimalloesung? Volltextsuche ist mir das Wichtigste.

Und als relationale Datenbank, kann da auch eine Bestloesung empfohlen werden?

Vielen, herzlichen Dank fuer alle Ratschlaege im voraus.

Gruss, Dirk

[ckoepp]

Volltextsuche an sich ist unheimlich schlecht und wird daher so gut wie nie eingesetzt.

Und genau aus diesem Grund ist Google auch so erfolgreich
Die haben die weltweit besten Algorithmen um genau diese Volltextsuche zu vermeiden und die Suche damit effizient zu machen.

Schau dir mal die Datenbankstruktur von wbb und phpbb (oder beliebige Forensoftware) an, die lösen das ja - zugegeben nicht sehr schön, aber immerhin ohne Volltextsuche - im Umfeld relationaler Datenbanken.

[northernstar]

Vielen Dank ! Ich werde mir das mal genauer anschauen. Thanxxxx!!

[Macks]

wäre beagle bzw. strigi nix für dich?

[startx]

in grossen Datenmengen

was sind grosse Datenmengen fuer dich? Ein paar Megabyte? Oder Terabyte?

[Dirk1]

Hallo Northerstar,

es gibt leistungsfähige Produkte zur Volltextsuche.
Schau dich mal im Bereich des Dokumentenmanagement um.

Verity ist einer der Klassiker (inzwischen von Autonomy übernommen).
Aber auch Oracle hat seit fast 10 Jahren eine Volltextfunktionalität.
Da du auch nach relationalen Datenbanken gefragt hattest daher vielleicht ein Hinweis wert.

Ich persönlich benutze MySql

@ckoepp,

Die haben die weltweit besten Algorithmen um genau diese Volltextsuche zu vermeiden und die Suche damit effizient zu machen.

Bitte definiere Volltextsuche!

Gruß
Dirk

[northernstar]

Hallo an alle!

Ich freue mich sehr ueber Eure schoenen Antworten. Sehr vielen Dank!

- Tja, ich denke wir reden ueber Terabyte, ich stelle mir die Datenmenge in der Datenbank einer ueberregionalen Zeitung oder die eines BKA z.B. vor. Und, wenn ich mich richtig erinnere, war die Loesung der Windoofs Welt fuer die Beispiele oben die Ask Sam Datenbank. In der konnte man z.B. eine Boolsche Suche starten fuer Begriffe "in einem Text", ich meine auch "in einem Absatz" oder "in einem Satz". Und ich frage mich nun vor allem, ob jemand mit exzellenter Beherrschung des Betriebssystems, hier insbes. ein Debian-Linux, die Aufgabe besser erledigen koennte, vielleicht mit einer besseren/anderen Datenbank. Ob derjenige die Aufgabe besser erledigen koennte als eine "Fertigloesung" wie Ask Sam, aus der Windoofs Welt.

Aber die Antworten von Euch helfen mir garantiert sehr weiter. Ich muss mich da in die Sache einarbeiten. Es ist nicht leider so, dass ich die Begriffe immer kenne, und wenn ich einen kenne, wie Oracle, dann kenne ich die Datenbank eben nicht genau... also hier muss jemand ein wenig arbeiten

Nochmals, sehr herzlichen Dank und viele Gruesse an alle!

Dirk