Ziel: Informationen ähnlich wie in einem Peer2Peer System abzulegen.


Anfang mit einem kleinem Dummy-System welches die Fortune Daten sammelt und in eine eigene Datenbank speichert. Diese sollte aber dann auch schon vorsehen, Informationen zu verlinkten anderen Objekten zu liefern.

{{{
Cite: { *ID, author, content, date }
CrossRef: { *REF, objectid }
Categories: { *ID, name }
reference:  {*ID, *REF, type }
categorie: { *CITE_ID, *CATEGORIE_ID }
}}}


== Kommunikation/Protokolle ==

Ein HTTP basiertes Protokoll.
{{{
PROTOCOL/VERSION PARAMETERS
HEADERS
\n
DATA
}}}


=== Schichten ===

# Provider/Network (e.g. ~ServerSocket)
# Protocol (e.g. HTTP)
# Service routing (e.g. forward the request to the right peer.)
# Session (should use a token to allow switching protocol and application with no session lost)
# Handler (each Service/request will be registrated and handelt.)

== Sync-ansatz ==>>
<<So fremd sind mir die Denkansätze aus dem unterem Kommentar nicht. Ich wollte als Oberziel tatsächlich eine Personen Datenbank, jedoch ist hier auch ein Schwerpunkt auf synchronisieren von Kalenderdaten gelegt.  Hier soll ein Protokoll die Arbeit im Hintergrund automatisch machen, ein Peer kann erst benutzt werden, wenn alle Informationen ausgetauscht wurden. D.h. die Datenbank Synchron ist. Bringt er neue Daten mit müssen diese Erst verteilt sein bevor sein Service angeboten wird. Mein Ansatz ist keine echte 'bekannte' Peer2Peer Lösung. Aber ein selbst-lernendes System was Routen kann. Also anfragen von jedem Peer annimmt und an die Richtige stelle sendet. Ergebnisse sendet oder wenn Änderungen erkannt werden Daten abgleicht und dann die Lösung sendet. Defekte Peer vom System nimmt. (Mehrheitsentscheidung sofern Speicherfehler erkannt werden.)>>
<<
* Da es je nach Daten evtl. ein kleines bzw. großes Problem geben kann was die Menge angeht so wie auch private Daten nicht verteilt werden sollen also auch ein Rechtesystem vorhanden sein muss wird das hier noch eine menge Arbeit [ABER ich hab ja nun ein wenig Zeit zum forschen].  


>>== <<Abfragesprache ==
Ich hab schon ein wenig mit antlr 'herum-gespielt' und mir einen eigenen mini-compiler gebaut. Es ist zwar nicht einfach Suchen zu parsen jedoch gibt es auch index Server die die Anfragen dann Annehmen und Ergebnisse liefern sollten (Solr scheint mir da ein guter Ansatz zu sein. Es ist zwar kein SQL aber das Finden in Indexdaten ist schnell.)
   

------

== >>Kommentare ==

Habe die Seite gerade gesehen und wollte auch mal meinen Senf dazugeben. :-) Leider habe ich nicht so richtig verstanden, wozu Du das benötigst, vielleicht schreibst Du das noch etwas konkreter. Also erstmal eine Bemerkung zu dem Anwendungsszenario, wie ich das aus Deinem Text herauslese: Du willst eine Fortune-Datenbank über das ganze Internet verteilen. Bei normalem Peer2Peer geht es nach meinem Verständnis darum, daß man sehr große Dateien hat, die dann durch einen Hashkey identifiziert werden. Es gibt zentrale Server (ich bin kein wirklicher p2p-Freak, also berichtige mich) bzw. andere Verteilungsmechanismen, durch die ich an eine Liste komme, die die verfügbaren Hashes enthält. In jeder Zeile steht dann dazu noch einer Beschreibung der Datei wie z.B. ein Dateiname.

Wenn ich Dich richtig verstanden habe, willst Du keine Fortune-Dateien austauschen, sondern einzelne Zitate. Um das p2p-System umzusetzen, benötigst Du also eine Indexdatei, in der ein Hash für jeden Datensatz steht. Wenn Du in den Daten suchen willst (was ja der Sinn einer Datenbank ist) musst Du in der Indexdatei immer einen Hash sowie einen Suchschlüssel stehen haben. Da die Zitat-Einträge sehr kurz sind (im Vergleich zu einer Videodatei), dürfte jedoch die Indexdatei nur unwesentlich kleiner als die gesamte Datenbank sein, was das ganze sehr uneffektiv macht.

Alternativ würde man es eben nicht wie bei p2p mit einer überall verfügbaren Indexdatei machen, sondern die Abfrage durchs Netz jagen und die Ergebnisse jeweils weiterreichen oder einsammeln. Da stellt sich die Frage nach einem Timeout oder auch die Frage, ob man eine Vorabfrage startet, die die Daten schonmal vorsammelt, auf daß man dann erst später das Ergebnis abholt, wenn das Netz Zeit gehabt hat, die Lösung zu suchen. -- ThomasBayen



Jetzt mal zu einem anderen Anwendungsszenario, über das ich mir schon seit ein paar Monaten den Kopf zermartere: Ich habe in meinem Unternehmen verschiedene Quellen von Telefonnummern, die alle Ihre eigenen Daten haben. Manche dieser Quellen sind immer verfügbar, andere nicht (Handys). Manche sollten miteinander synchronisiert werden, andere nicht. Schön wäre es, wenn es ein System gäbe, diese Daten dennoch zu durchsuchen und eine Ausgabe zu erhalten, mit der man was anfangen kann. Dabei sollte am besten auch die Quelle der Daten angegeben werden können. Sagen wir mal so:

 SELECT name, nummer, datasource FROM telefonbuch WHERE name LIKE 'Schmitz'

Ergebnis:

 Karl Schmitz       12345       Warenwirtschaft
 Hubert Schmitz     4711        Warenwirtschaft
 Schmitz & Backes   454554      Warenwirtschaft
 Hilde Schmitz      2435234     Telefonbuch von Krefeld
 Karl Schmitz       12345       Maemo-Handy Thomas Bayen
 Karl Schmitz       12345       MySQL-Datenbank Telefonnummernliste
 Hubert Schmitz     4711        Backup Handy Außendienstler 1

Ist es sowas, was Dir da vorschwebt?!? -- ThomasBayen
<<:: evtl. mal Treffen am 15.3.2010?


Noch eine allgemeine Anmerkung: Eine interessante Frage ist die nach der Anwendungs-API. Da bietet sich aus Anwendersicht natürlich SQL an, aber das will ja keiner selber implementieren. Bei MySQL kann man die Database-Engine austauschen. Sowas wäre natürlich die aller-eleganteste Lösung, weil es den kompletten Befehlsumfang von MySQL erlauben würde. (geht aber wohl nur in C). Gibt es eine Java-Datenbank (HSQLDB oder Derby oder so), die sowas erlaubt? Oder möchtest Du für Deine Anwendung gar kein SQL? -- ThomasBayen
<<
:: Hmm  leider ist das Wiki nicht so geeignet meine Denkansätze mal eben hier in die richtige Reihenfolge zu bringen. U.a. fange ich ja gerade erstmal mit den ersten Prototypen an. Als Datenbank nutze ich in Java H2 (mit OpenJPA) auf jedem Peer. Diese Sollen aber XML untereinander Reden und Übersetzer bereitstellen um die Informationen auch auf andere Plattformen und Sprachen zu bekommen.