Descarrega les dades del directori Curlie
Curlie.org és el directori web editat per humans més gran del món. El nostre directori mantingut per la comunitat està curat per editors apassionats i només conté llocs web d'alta qualitat sense correu brossa.
Cada lloc web es classifica en una o més categories, i les categories en si mateixes s'organitzen en forma d'arbre per cobrir tots els temes que preocupen a la humanitat. En conseqüència, Curlie consta de la friolera de 2,9 milions d'entrades ben estructurades!
Podeu descarregar les dades del directori Curlie sota una llicència de codi obert. Utilitzeu les dades, per exemple, per crear el vostre propi directori web de nínxol sense correu brossa, motor de cerca o expert en intelligència artificial!
Descarrega les dades del directori Curlie
Socis
Per tal que la descàrrega del directori Curlie es pugui fer, ens hem associat amb el Leibniz Supercomputing Centre (LRZ) i OpenWebSearch.eu.
Llicència
La llicència de codi obert i les condicions d'atribució per a la descàrrega de dades del directori Curlie es detallen a la pàgina de llicències.
Dades a la descàrrega
La descàrrega conté la jerarquia de categories, les categories i els llocs web. Per als llocs web, hi ha l'URL, el títol i la descripció editorial. Per a cada categoria, hi ha el seu títol, descripció i lloc a l'arbre de categories. 45.000 categories (ciutats, per exemple) també tenen coordenades geogràfiques.
Format de fitxer
L'arxiu de descàrrega està comprimit amb tar/gzip, utilitzeu una eina com tar o 7zip per descomprimir-lo.
El format de fitxer (conjunt de caràcters UTF8) són simplement valors separats per tabulacions (TSV, una variant de CSV). Per familiaritzar-vos amb les dades, podeu visualitzar els fitxers amb un editor de text. També és fàcil carregar-los a les columnes del vostre programa de fulls de càlcul. La coincidència d'entrades de llocs web (fitxers *-c.tsv) amb categories (fitxers *-s.tsv) es realitza mitjançant identificadors.
Obteniu més informació sobre el format del fitxer al fitxer Readme que s'inclou a la descàrrega.