2013-09-23 6 views
16

Ich versuche mit BeautifulSoup einen Tischkratzen zu erstellen. Ich schrieb diesen Python-Code:Python BeautifulSoup Scrape Tische

import urllib2 
from bs4 import BeautifulSoup 

url = "http://dofollow.netsons.org/table1.htm" # change to whatever your url is 

page = urllib2.urlopen(url).read() 
soup = BeautifulSoup(page) 

for i in soup.find_all('form'): 
    print i.attrs['class'] 

Ich brauche Nome, Cognome, E-Mail kratzen.

Antwort

21

Schleife über Tabellenzeilen (tr-Tag) und den Text von Zellen (td-Tag) nach innen erhalten:

for tr in soup.find_all('tr')[2:]: 
    tds = tr.find_all('td') 
    print "Nome: %s, Cognome: %s, Email: %s" % \ 
      (tds[0].text, tds[1].text, tds[2].text) 

druckt:

Nome:  Massimo, Cognome:  Allegri, Email:  [email protected] 
Nome:  Alessandra, Cognome:  Anastasia, Email:  [email protected] 
... 

FYI, [2:] Scheibe hier zwei Header überspringen Reihen.

UPD, hier ist, wie Sie die Ergebnisse in txt-Datei speichern:

with open('output.txt', 'w') as f: 
    for tr in soup.find_all('tr')[2:]: 
     tds = tr.find_all('td') 
     f.write("Nome: %s, Cognome: %s, Email: %s\n" % \ 
       (tds[0].text, tds[1].text, tds[2].text)) 
+0

können Sie erklären, warum Sie die Notwendigkeit [2:] in Ihrer ersten Zeile? – AZhao

+0

@AZhao sicher, es ist da in der Antwort - um die 2 Kopfzeilen zu überspringen. – alecxe