intelligente Web-Crawler mit maschinellem Lernen

Question

Ich baue E-Commerce-Website

Problemstellung:

I Web-Seiten get product name, images and product specifications/features durchsuchen wollen, und speichern Sie es in meinem database

Eingang zur Maschine Lernalgorithmus:

Webseite mit HTML-Inhalt

Ausgabe von maschinellem Lernen erwartet algo:

• Es sollte automatisch erkennen, ob es Produktdetailseite oder nicht

• Wenn es Details Produktseite dann sollte es Produktkategorie

• erkennen ist

  Dann sollte es Produktname, Spezifikationen

analysieren

Frage

Welcher Algorithmus für diese Problemstellung geeignet wäre?

Kann jemand vorschlagen richtigen Ansatz zu folgen?

Answer 1

Ich bin kein Experte in Machine Learning/Naturel Language Processing, aber mein Bauchgefühl sagt, es ist sehr schwierig, dies als ein ML-Produkt vollständig zu implementieren. Sehen Sie sich zunächst an, ob Ihre eCommercise-Websites eine Art API zum Extrahieren von Daten bereitstellen. Wenn solche APIs verfügbar sind, verwenden Sie diese, und das wird einfacher als ML sein.