DasOpen Directory Project (ODP), auch bekannt alsdmoz (für „Directory Mozilla“), war das größte von Menschen gepflegteWebverzeichnis desWorld Wide Web.[2] Die Inhalte des Projekts sindfrei und wurden von ehrenamtlichenRedakteuren, den so genannten Editoren, bearbeitet und aktualisiert.
Am 28. Februar 2017 wurde bekannt, dass der Domaininhaber Verizon (AOL) die Domain dmoz.org zum 14. März 2017 abschalten werde und entzog dem Verzeichnis damit die technische Grundlage.[3] Dies geschah tatsächlich am 17. März 2017.[4] Über die Gründe wurde nichts verlautet.[5]
Das Nachfolgeprojekt wurde unter dem NamenCurlie entwickelt und ist seit Ende 2017 online.[6]
Das ODP wurde ursprünglich unter dem NamenGnuhoo gegründet und ging am 5. Juni 1998 online. Der Name wurde später inNewhoo geändert, nachdem einSlashdot-Artikel darauf hinwies, dassGnuhoo nicht auffreier Software basiert und dass Gnuhoo dasMarkenzeichen desGNU-Projektes ohne Erlaubnis benutzte.[7]
Newhoo wurde zumOpen Directory Project, nachdem es im Oktober 1998 vonNetscape gekauft wurde und seinen Inhalt unter einerOpen-Content-Lizenz veröffentlichte. Im November 1998 wurde Netscape inklusive des ODP vonAOL gekauft, welches im Jahre 2000 mitTime Warner fusionierte. Abgeleitet von der ersten Hostingadresse directory.mozilla.org entstand die Kurzform „Dmoz“ bzw. „dmoz.org“.
Am 20. Oktober 2006 erfuhr das ODP schwerwiegende technische Probleme. Die Funktionen für das Vorschlagen von Links und Änderungen sowie die internen Bearbeitungsfunktionen zum Ändern von Katalogeinträgen waren gesperrt. Am 18. Dezember 2006 wurde der Zugang für Editoren wieder freigegeben; am 13. Januar 2007 das öffentliche Interface für das Vorschlagen von Sites und Änderungen und am 23. Februar 2007 die Möglichkeit, sich als neuer Editor zu bewerben.
Die Motivation zur Gründung des ODP war die Frustration über die mangelhafte Aktualität, d. h. die lange Verzögerung bei der Aufnahme neuer Sites und der hohe Anteiltoter Links in redaktionell betreuten Verzeichnissen. Aber auch Kritik daran, das Internet immer weiter zu kommerzialisieren und auf einen Werbeträger zu reduzieren, statt dem freien Zugang zu Informationen eine höhere Priorität einzuräumen.
Davon ausgehend, dass der Mensch automatisierten Katalog- und Suchsystemen überlegen ist, sollte dem Nutzer ein qualitativ besseres, verdichtetes Suchergebnis zur Verfügung gestellt werden. Ausdruck dafür war der SloganHumans do it better zur Abgrenzung von automatisierten Suchmaschinenkonzepten.
Allerdings wurde auch beim ODP die mangelhafte Aktualität und lange Bearbeitungsdauer kritisiert. Die Verzögerung bei der Aufnahme ähnelte in vielen Kategorien jener, die früher beiYahoo üblich war. Die Editorengemeinschaft konnte mit dem Wachstum desInternets nur mühsam Schritt halten und es fehlten in zahlreichen Kategoriezweigen Editoren, um die Vielzahl der Anmeldungen zu bearbeiten.
Die Idee inspirierte mindestens zwei weitereWebverzeichnisse, welche ebenfalls von privaten Unternehmen finanziert und von freiwilligen Editoren bearbeitet wurden: Das Go-Verzeichnis (ehemals betrieben vonDisney) und Zeal (gekauft vonLookSmart). Beide sind mittlerweile eingestellt. Keines dieser Verzeichnisse veröffentlichte seine Daten jedoch alsOpen Content.
Das Open Directory Project baute auf einerklassifizierten Baumstruktur im Hypertext-System auf. Vom Ursprung aus gesehen wurden Kategorien thematisch oder regional abgeleitet und bis in die Unterkategorien in 89 Sprachen und Dialekten (Stand Juni 2014) vererbt. Jeder Eintrag konnte so nach der höchsten Relevanz für ein Thema oder eine Region in einer passenden Kategorie zugeordnet werden. Auch Mehrfacheinträge waren möglich, wenn sie an mehreren Stellen relevant waren.
Die ODP-Inhalte waren kostenlos und ungehindert öffentlich zugänglich. Zusätzlich wurde ein kostenfreies Nutzungsrecht zur Weiterverbreitung als komplette oder auszugsweise Veröffentlichung gewährt.[8] Die Daten standen dafür in einer frühen Form desRDF-Formats zum Download zur Verfügung. Es erschien in der Regel wöchentlich eine neue Version. Die Daten des in sich abgeschlossenen ODP Sets (Dump) enthielten sowohl die URL-Einträge als auch die Verzeichnisstruktur inklusive der Verlinkung zwischen Kategorien.
Die Weiterverbreitung der Daten erfolgte zu Open-Directory-Project-Lizenzbedingungen. Diese sahen eine sichtbare ODP-Quellenangabe mit Links für das Vorschlagen neuer Einträge und für die Bewerbung zur Mitarbeit beim ODP auf jeder einzelnen Seite vor, die Inhalte des ODP beinhaltet.[9] Aufgrund dieser Regelung wurden die Inhalte vielfach von anderen Seiten übernommen. Unter anderem nutzte auch Google bis 2011 die Daten des Dmoz für sein eigenes Webverzeichnis.[10]
Das ODP bezeichnete sich als ein Projekt ehrenamtlicher Redakteure, die im Internet veröffentlichte Informationen systematisch katalogisieren und öffentlich zur Verfügung stellen. Editoren sind immer nur für bestimmte Kategorien und Zweige zuständig. Hierzu wurden möglichst viele verschiedene Editoren, mit jeweils besten Kenntnissen auf einem Spezial- und Interessengebiet, im Konsens betraut.
Trotz der Möglichkeit, Seiten vorzuschlagen, wuchs das Verzeichnis überwiegend durch eigene Recherchen von Editoren. Dazu gehörten auch Querschnittstätigkeiten, wie die Anlage neuer Unterkategorien, das Verschieben von Einträgen in passendere Kategorien und die Aktualisierung von Einträgen und Kommentaren.
Die Editorengemeinschaft baute auf
den öffentlich zugänglichen Richtlinien
Vertrauen auf Kompetenz, Verantwortung und Zuverlässigkeit des Einzelnen
einem Mehraugenprinzip, mit gegenseitiger Abstimmung von Zweifelsfällen und bei der Einarbeitung neuer Editoren
Hilfestellung von übergeordneten Editoren (Metaeditoren) und Administratoren
auf.Neben der Pflege des bestehenden Datenbestandes umfasste die Tätigkeit von Editoren vornehmlich die Veröffentlichung neuer Einträge in der von ihnen bearbeiteten Kategorie. Die Mitarbeit in der Freizeit war nicht verpflichtend und nicht an feste Zeiten gebunden.
Das Bewerbungsverfahren als neuer Editor oder um neue Kategorien und Erweiterung der Editierrechte umfasste drei Beispiellinks und Beschreibungen sowie Fragen zum Themenbezug.[11] Qualität und Verhinderung von Missbrauch spielen, auch wegen der Abgabe der Daten in offener Lizenz an weitere Datennutzer, eine übergeordnete Rolle. Eine Mindestvorbildung oder Referenzen o. ä. waren nicht erforderlich.
So wie Editoren auch von ihren Rechten zurücktreten und das ODP verlassen konnten, konnten aktive Editoren bei Verstößen gegen die Richtlinien wegen Missbrauch, Unzuverlässigkeit und unverantwortlichem Verhalten kurzfristig aus dem Projekt ausgeschlossen werden.
DMOZ-Einträge umfassten einen kurzen Titel (in der Regel Bezeichnung der Website oder Firma) und eine Kurzbeschreibung zu Inhalt, Angebot und Besonderheiten einer Website.
Die Aufnahmekriterien waren seit Beginn des Verzeichnisses unverändert. Zum Eintrag sollte ein informatives, zuordnungsfähiges, seriöses und relevantes Informationsangebot mit eigenen Inhalten einer Website kommen. Der Informationsgehalt einer Website bestimmte sich nach dem Grad eigener Inhalte im Verhältnis zu Werbung (Banner, Adwords, Adlinks), fremd eingebundenen Seiten und kopierten Informationen aus anderen Seiten. Gewaltverherrlichende, rassistische, pornografische und zu kriminellen Handlungen auffordernde Websites wurden nicht aufgenommen bzw. aus dem Datenbestand entfernt.[12]
Zusätzlich gab es eine Reihe von Mechanismen und Werkzeugen, die auf eine Verbesserung von Datenqualität und Relevanz von Kategorien sowie Ausschluss von Missbrauch einwirken sollen. Dafür stand in jeder Kategorie ein Formular für externe Aufnahmevorschläge, eines für Aktualisierungswünsche bestehender Einträge und eines zur Überprüfung eines Missbrauchsverdachts (durch Metaeditoren) zur Verfügung.
Ergänzend zur Arbeit der Editoren wurde der eigeneWebcrawler namens Robozilla in Zeitabständen über alle im Verzeichnis gelisteten Einträge geschickt, um tote, beeinträchtigte oder verdächtige Links zu finden. Robozilla entfernte sie vorübergehend aus dem Verzeichnis und markierte sie zur Prüfung durch Editoren, die weitergehende Maßnahmen ergreifen können.
Einträge abgelaufener Domains wurden weitgehend automatisch aus dem Verzeichnis entfernt, um die Aktualität zu gewährleisten und falsche oder irreführende Inhalte durchHijacking und „Parking“ von Internetadressen zu verhindern.
Im Laufe der Zeit nahm die Zahl der von Netscape bzw. AOL kontinuierlich für das Projekt abgestellten festen Mitarbeiter ab. Dies wurde kompensiert durch eine Reihe Tools, die von Editoren geschaffen und qualifiziert in Absprache mit der Administration eingeführt wurden. Um sich die Arbeit zu vereinfachen, wurden Linkprüfer, spezialisierteWebcrawler, Rechtschreibprüfer, verbesserte Suchmaschinen und eine Reihe vonBookmarklets für Bearbeiter erstellt.
Im Laufe der Jahre haben Editoren eine Reihe verwandter Projekte autonom gestartet, die teilweise auf der auch vom ODP genutzten Software basieren. Keines davon war jedoch bislang so erfolgreich wie das ODP selbst.
Eines dieser Projekte war als Verzeichnis im Verzeichnis direkt ins ODP integriert: Der Zweig für Kinder und Jugendliche,kidmoz. Dort wurden ausgewählte Sites speziell für die ZielgruppeKinder undJugendliche mit passenden Beschreibungen sowie Altersangaben versehen und gelistet. Organisatorisch war dieser Teil des Verzeichnisses relativ unabhängig, auch wenn die Richtlinien für beide Verzeichnisse galten und eine Reihe von Editoren in beiden Verzeichnissen aktiv waren. Gegründet wurde es im November 2000.[13]
Ein weiteres, auf das Sammeln aller mit Musik und Musikern zusammenhängenden Daten spezialisiertes Projekt istMusicMoz. Dieses existiert derzeit nur auf Englisch, ein deutschsprachiger Zweig ist jedoch in Vorbereitung.
Anzahl der Einträge im deutschsprachigen Teil des ODP
Am 31. Januar 2014 verzeichnete das ODP über 4,2 Millionen Einträge (knapp 500.000 davon im deutschsprachigen Teil des Katalogs) in über 1.000.000 Kategorien sortiert.Im Januar 2016 gab es noch knapp 4 Millionen Einträge, die Gesamtzahl der Editoren lag bei über 90.000.Im Juli 2016 gab es 3.938.044 Einträge von insgesamt 91.441 Editoren.
Grundlage für die Aufnahme und Pflege von Einträgen waren die öffentlich zugänglichen Richtlinien und Hinweise und ob eine Seiteninformation für das Thema sinnvoll und eine wertvolle Ergänzung ist.[12]
Curlie.org verzeichnete im September 2019 3.444.397 Seiten (426.509 davon im deutschsprachigen Teil des Katalogs) in 91 Sprachen und 1.033.965 Kategorien von insgesamt 92.019 Editoren.[14]
↑Herbert Braun: Google schließt seine Labs. In: Heise Developer. 21. Juli 2011, abgerufen am 30. Juli 2011: „Zugleich machte Google seinen Webkatalog Google Verzeichnis stillschweigend dicht. Dieser bereits vor elf Jahren als Konkurrenz zum Yahoo-Katalog gestartete Dienst wertete Daten aus Netscapes dmoz-Verzeichnis mit einem Ranking innerhalb der Rubriken auf.“
