Chord: Difference between revisions

From
Jump to navigation Jump to search
Line 41: Line 41:


== Skalierbare Suche ==
== Skalierbare Suche ==
[[Image:ChordFinger.jpg|thumb|right|250px]]
[[Image:ChordFinger.jpg|thumb|right|250px|''Finger'' im Chord Ring ]]
Um die Suche effizienter gestalten zu können, sind weitere Informationen über den Chord-Ring nötig. Deshalb hat jeder Knoten zusätzlich eine Tabelle mit Verweisen auf ''m'' weitere Knoten, wobei ''m'' die Anzahl der Bits der verwendeten IDs ist. Diese Verweise werden in Chord ''Finger'' genannt. Die Tabelle heisst daher ''Fingertable''
Um die Suche effizienter gestalten zu können, sind weitere Informationen über den Chord-Ring nötig. Deshalb hat jeder Knoten zusätzlich eine Tabelle mit Verweisen auf ''m'' weitere Knoten, wobei ''m'' die Anzahl der Bits der verwendeten IDs ist. Diese Verweise werden in Chord ''Finger'' genannt. Die Tabelle heisst daher ''Fingertable''


Die ''Fingertable'' ist wie folgt augebaut:<br>
Die ''Fingertable'' ist wie folgt augebaut:<br>
Der ''i''-te Eintrag der Tabelle auf Knoten ''n'' zeigt auf den ersten Knoten, der auf ''n'' in einem Abstand von mindestens 2<sup>i-1</sup> folgt. Damit zeigt der letzte Eintrag der Tabelle auf einen Knoten, der mindestens eine halbe Umrundung des Chord-Rings entfernt liegt, der vorletzte auf einen Knoten, der mindestens eine viertel Umrundung entfernt ist, usw. Diese Eigenschaft sichert, dass die maximale Pfadlänge einer Suchanfrage ''O(log N)'' Hops beträgt, weil mit jedem Hop die Distanz zum Ziel halbiert werden kann.
Der ''i''-te Eintrag der Tabelle auf Knoten ''n'' zeigt auf den ersten Knoten, der auf ''n'' in einem Abstand von mindestens 2<sup>i-1</sup> folgt.Damit zeigt der letzte Eintrag der Tabelle auf einen Knoten, der mindestens eine halbe Umrundung des Chord-Rings entfernt liegt, der vorletzte auf einen Knoten, der mindestens eine viertel Umrundung entfernt ist, usw. Diese Eigenschaft sichert, dass die maximale Pfadlänge einer Suchanfrage ''O(log N)'' Hops beträgt, weil mit jedem Hop die Distanz zum Ziel halbiert werden kann.
{| cellspacing="10" |
{| align="right" cellspacing="10" |
|- valign="top" |
|- valign="top" |
|
|
Line 71: Line 71:
| 5|| 24 || 1
| 5|| 24 || 1
|}
|}
|}
{| align="right"
|+ '''Pseudo Code für die Suche mit Fingertable'''
|- valign="top"
|
n.find_successor(id)
n' = find_predecessor(id);
return n'.successor;
n.find_predecessor(id)
n' = n;
while (id &notin; (n', n'.successor])
n' = n'.closest_preceding_finger(id);
return n';
||
n.closest_preceding_finger(id)
for i = m downto 1
if (finger[i].Knoten ∈ (n, id))
return finger[i].Knoten;
return n;
|}
|}
Bei einer Suchanfrage an Knoten ''n'' nach Schlüssel ''k'' wird nun zunächst der nächstgelegene ''Vorgänger'' des Schlüssels gesucht, den Knoten ''n'' kennt. Dabei wird die ''Fingertable'' so lange von '''unten nach oben''' durchsucht, bis der erste Eintrag ''i'' gefunden wird, dessen Knoten '''nicht''' zwischen ''n'' und ''k'' liegt. Der Eintrag ''i+1'' ist damit der nächstgelegene Vorgänger von ''k'', den ''n'' kennt. Die Suche wird dann mit Hilfe dieses Knotens fortgesetzt. Das wiederholt sich, bis der Knoten gefunden ist, dessen ''Successor'' für ''k'' zuständig ist.<br>
Bei einer Suchanfrage an Knoten ''n'' nach Schlüssel ''k'' wird nun zunächst der nächstgelegene ''Vorgänger'' des Schlüssels gesucht, den Knoten ''n'' kennt. Dabei wird die ''Fingertable'' so lange von '''unten nach oben''' durchsucht, bis der erste Eintrag ''i'' gefunden wird, dessen Knoten '''nicht''' zwischen ''n'' und ''k'' liegt. Der Eintrag ''i+1'' ist damit der nächstgelegene Vorgänger von ''k'', den ''n'' kennt. Die Suche wird dann mit Hilfe dieses Knotens fortgesetzt. Das wiederholt sich, bis der Knoten gefunden ist, dessen ''Successor'' für ''k'' zuständig ist.<br>
Wenn zum Beispiel in dem Chord Ring, der auf dem Bild hier zu sehen ist, eine Suchanfrage nach einem Schlüssel mit ID 3 an Knoten 8 gerichtet wird, such dieser zunächst den ihm nächstgelegenen bekannten Vorgängerknoten von 3, nämlich Knoten 1 und richtet die Anfrage an diesen. Knoten 1 stellt fest, dass sein Nachfolgeknoten, Knoten 4, zuständig ist für Schlüssel mit ID 3 und die Suche ist beendet.

<br style="clear:both" />
<br style="clear:both" />



Revision as of 15:49, 3 March 2006

Überblick

Chord ist ein einfaches, verteiltes Suchprotokoll für Peer-To-Peer Systeme, das Schlüssel auf Knoten abbildet. Dabei passt es sich effizient an Strukturveränderungen, wie das Ausfallen oder Hinzukommen von Knoten an und sichert die Funktionalität auch während dieser Anpassung.
Das Protokoll skaliert sowohl in Bezug auf Speicherbedarf, als auch in Bezug auf Kommunikationsaufwand logarithmisch zur Anzahl der Knoten im System.

Chord wird von der Parallel and Distributed Operating Systems Gruppe am MIT Laboratory for Computer Science entwickelt. Hier sind auch Dokumentationen zu den dort durchgeführten Experimenten und Benchmarks, sowie eine Referenzimplementierung erhältlich.

Aufbau von Chord

System Modell

Lastbalanzierung
Chord nutzt Consistent Hashing für eine hinreichend gleichmässige Verteilung der Schlüssel im System.
Dezentralisierung
Alle Knoten im System sind gleichberechtigt.
Skalierbarkeit
Eine Suche benötigt O(log N) Hops, wobei N die Anzahl aller Knoten im System ist.
Verfügbarkeit
Das System passt sich Strukturänderungen an, garantiert dabei aber, dass der für einen Schlüssel zuständige Knoten zu jeder Zeit gefunden wird.
Flexible Namenswahl
Es gibt keine Einschränkungen bezüglich der Struktur bzw. Gestalt der verwendeten Schlüssel.

Topologie

Schlüsselverteilung im Chord Ring

Jedem Knoten und Schlüssel wird eine m-Bit lange ID zugeordnet. Damit können sich maximal 2m Knoten im System befinden. Diese ID wird mittels einer Basishashfunktion, wie zum Beispiel SHA-1 (hier ist i.A. m=160) berechnet, indem die Hashfunktion auf die IP-Adresse des Knotens bzw. den Schlüssel selbst angewendet wird.
Die Knoten sind in einem Ring modulo 2m angeordnet. (Chord Ring)
Ein Schlüssel k wird dem Knoten n zugewiesen, dessen ID grösser oder gleich der ID des Schlüssels k ist. Dieser Knoten wird Successor Knoten von k genannt.
Chord bietet nun eine einzige Funktion: Finde den für einen gegebenen Schlüssel k zuständigen Knoten n. Chord bietet keine Funktionalität zur tatsächlichen Speicherung der Daten auf dem zuständigen Knoten.

Einfache Suche

Eine einfache Möglichkeit der Suche nach einem Knoten im Chord Ring, ist die lineare Suche. Jeder Knoten n kennt dabei nur seinen Nachfolgeknoten n' (Successor). Mehr Informationen sind nicht nötig.

Wird nun eine Suchanfrage an einen Knoten gerichtet, prüft dieser, ob sein Nachfolgeknoten für den angefragten Schlüssel zuständig ist. Falls ja, ist die Suche beendet. Falls nicht, wird die Anfrage so lange an den jeweils nachfolgenden Knoten weitergereicht, bis das Ziel erreicht ist.

n.find_successor(id)
  if ( id ∈ (n, successor] )
    return successor;
  else
    return successor.find_successor(id);
Pseudo Code für eine einfache Suche

Diese Form der Suche ist zwar nicht besonders effizient, da die Länge des Suchpfades linear zur Anzahl der Knoten im System wächst. Aber sie kann jederzeit als Fallback-Variante dienen. Die minimale Vorraussetzung für die lineare Suche, dass jeder Knoten seinen Nachfolgeknoten kennt, ist damit auch die minimale Vorraussetzung für die Korrektheit des Chord Protokolls.

Einfache Suche im Chord Ring

Skalierbare Suche

Finger im Chord Ring

Um die Suche effizienter gestalten zu können, sind weitere Informationen über den Chord-Ring nötig. Deshalb hat jeder Knoten zusätzlich eine Tabelle mit Verweisen auf m weitere Knoten, wobei m die Anzahl der Bits der verwendeten IDs ist. Diese Verweise werden in Chord Finger genannt. Die Tabelle heisst daher Fingertable

Die Fingertable ist wie folgt augebaut:
Der i-te Eintrag der Tabelle auf Knoten n zeigt auf den ersten Knoten, der auf n in einem Abstand von mindestens 2i-1 folgt.Damit zeigt der letzte Eintrag der Tabelle auf einen Knoten, der mindestens eine halbe Umrundung des Chord-Rings entfernt liegt, der vorletzte auf einen Knoten, der mindestens eine viertel Umrundung entfernt ist, usw. Diese Eigenschaft sichert, dass die maximale Pfadlänge einer Suchanfrage O(log N) Hops beträgt, weil mit jedem Hop die Distanz zum Ziel halbiert werden kann.

Aufbau der Fingertable von Knoten n=8
finger[k].Start = (n+2k – 1) mod 2m;  (1 ≤ k ≤ m)
finger[k].Knoten = erster Knoten ≥ finger[k].Start;
successor = finger[1].Knoten;
# Start Knoten
1 9 11
2 10 11
3 12 14
4 16 17
5 24 1
Pseudo Code für die Suche mit Fingertable
n.find_successor(id)
  n' = find_predecessor(id);
  return n'.successor;

n.find_predecessor(id)
  n' = n;
  while (id ∉ (n', n'.successor])
    n' = n'.closest_preceding_finger(id);
  return n';
n.closest_preceding_finger(id)
  for i = m downto 1
    if (finger[i].Knoten ∈ (n, id))
      return finger[i].Knoten;
  return n;
 



Bei einer Suchanfrage an Knoten n nach Schlüssel k wird nun zunächst der nächstgelegene Vorgänger des Schlüssels gesucht, den Knoten n kennt. Dabei wird die Fingertable so lange von unten nach oben durchsucht, bis der erste Eintrag i gefunden wird, dessen Knoten nicht zwischen n und k liegt. Der Eintrag i+1 ist damit der nächstgelegene Vorgänger von k, den n kennt. Die Suche wird dann mit Hilfe dieses Knotens fortgesetzt. Das wiederholt sich, bis der Knoten gefunden ist, dessen Successor für k zuständig ist.
Wenn zum Beispiel in dem Chord Ring, der auf dem Bild hier zu sehen ist, eine Suchanfrage nach einem Schlüssel mit ID 3 an Knoten 8 gerichtet wird, such dieser zunächst den ihm nächstgelegenen bekannten Vorgängerknoten von 3, nämlich Knoten 1 und richtet die Anfrage an diesen. Knoten 1 stellt fest, dass sein Nachfolgeknoten, Knoten 4, zuständig ist für Schlüssel mit ID 3 und die Suche ist beendet.

Eintritt neuer Knoten

Stabilisierung

Ausfall & Replikation

Erweiterungen

Anwendungen

Referenzen