Welche Werkzeuge sind gut für Web Scraping und Textanalyse?

Question

Mein Ziel ist es, das Internet nach Webseiten zu durchsuchen, die das Stichwort "Inflammatory Bowl Disease" enthalten. Dann möchte ich Textanalyse auf der gesammelten Liste anwenden und Informationen wie Symptome oder Behandlungen extrahieren.

Ist das möglich? Wenn ja, welche Tools werden empfohlen? Wenn nicht, was ist der richtige Weg, um dieses Problem anzugehen?

Answer 1

Es gibt ein paar Web-Scraping-Tools, die Ihre Anforderungen erfüllen können, aber ich würde davon abraten mit DIY-Scraping-Tools zu gehen, wenn Ihr Unternehmen auf die Daten für kritische Geschäftsentscheidungen verlässt. Werkzeuge sind gut genug für Studenten und Hobbyisten.