nutch

5Hitze

2Antwort

Nutch crawlt nicht alle Links in Formular

Ich habe Probleme beim Crawlen meiner Website ... Es gibt ein Formular mit zwei Dropdown-Listen .... und wenn ich Crawl starte, ruft der Crawler nur einen Teil der Links aus dem Formular ab .... von d

0Hitze

1Antwort

Suche mit allen gefundenen Dokumenten

Ich habe nutch 1.4 zum Crawlen von Webseiten und indizierten Daten zu solr 3.5 verwendet. das war erfolgreich. Ich habe Luke benutzt, um die Indexdaten zu überprüfen und fand heraus, dass 1678 Dokumen

1Hitze

2Antwort

Blockieren Sie einen Teil der zu indizierenden Webseite

Ich kroch eine Website. Es gibt eine Menge gemeinsamer Inhalte auf den Seiten, wie Dropdown-Menü, Navigation. Wie verhindert man, dass diese Inhalte indexiert werden?

2Hitze

1Antwort

Nutch Raw Html Speichern

Ich versuche, Roh-HTML von gecrawlten Seiten in verschiedenen Dateien zu erhalten, benannt als URL der Seite. Ist es mit Nutch möglich, die rohen HTML-Seiten in verschiedenen Dateien zu speichern, ind

6Hitze

2Antwort

Verwenden von Nutch solrindex zum Indexieren auf mehrere Kerne?

Gibt es im Befehl bin/nutch solrindex einen Parameter, der angibt, auf welchen Solr-Kern indexiert werden soll?

6Hitze

1Antwort

mit Nutch Crawling ... Zeigt eine IOException

ich angefangen habe mit Nutch und alles war in Ordnung, bis ich eine IOException Ausnahme, $ ./nutch crawl urls -dir myCrawl -depth 2 -topN 4 cygpath: can't convert empty path solrUrl is not set, in

1Hitze

1Antwort

Nutch konnte bestimmte Site nicht crawlen

Ich benutze Nutch 1.4, um Websites zu crawlen. Zu Demonstrationszwecken begann ich mit jabong.com zu crawlen, aber ich bemerkte, dass nutch nicht alle Links auf der Site abrufen konnte. Nach dem Besuc

1Hitze

1Antwort

Kann jemand kurz über die Link-Analyse in Nutch erklären

Kann jemand kurz erklären, die Link-Analyse in Nutch und geben Sie einige vollständige Links in Bezug auf Link-Analyse.

5Hitze

1Antwort

Nutch: Daten lesen und Metadaten hinzufügen

Ich habe vor kurzem begonnen, Apache Nutch zu suchen. Ich könnte einrichten und in der Lage sein, Webseiten von Interesse mit Nutch zu crawlen. Ich verstehe nicht recht, wie man diese Daten liest. Ich

0Hitze

1Antwort

Gibt es eine Möglichkeit, die Aufgabe "Nutch Crawl" fortzusetzen, die unerwartet beendet wurde?

Ich habe eine Nutch-Crawl-Aufgabe, die einen ganzen Tag lang läuft, bis ich den Prozess durch einen Fehler beendet habe. Ich möchte nicht die Samen neu crawlen (kostet zu viel Zeit), also frage ich mi