import requests
from pandas import Series

infolist =[]
infolist.append({
'url':' https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.DataFrame.html', 

'name':"DataFrame",
'index':[1,2]
})
infolist.append({
'url':' https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.Series.html', 

'name':"Series",
'index':[1,3] #Seriesのページはemptyの表があるのでそれをスキップするため、1,3とした
})

for info in infolist:
print(info['url'])
result = requests.get(info['url'])
c = result.content
processed =bs4.BeautifulSoup(c,'lxml')

print(info['name'])
id_name = 'pandas-' + info['name'].lower()

summary = processed.find_all('div',{'class':'section','id':id_name})

tables = summary[0].find_all('table')

cat = Series(info['index'], index={"Attribute", "Methods"})

for index in cat.index:
rows = tables[cat[index]].find_all('tr')

data = []

for row in rows:
cells = row.find_all('td')
t = cells[0].find(text=True)
data.append(t)

print("{} : count:{}".format(index,len(data)))
for i in data:
print(i)

print("")

このコースへのリンク
【世界で5万人が受講】実践 Python データサイエンス







全般ランキング