Python 抓取网页tag操作
1. 获取操作tag
- 获取操作tag的接种方式:
<span>soup.find_all(name=None, attrs={}, recursive=True,</span> <span>text=None, limit=None, **kwargs)</span>
,返回符合条件的所有标签,查找不到则返回[],可以传递标签名,标签属性,关键字参数,函数,True等<span>soup.find(name=None, attrs={},</span> <span>recursive=True, text=None, **kwargs)</span>
,返回第一个符合条件的标签,查找不到则返回None<span>soup.select(selector,</span> <span>_candidate_generator=None, limit=None)</span>
,根据css选择器返回所有符合条件的标签<span>soup.select_one(selector)</span>
,返回符合css选择器的第一个标签
2. 操作tag
- tag.name ,获取标签名,例如:‘div‘
- tag[‘attr_name‘] , 获取标签的某个属性的值,string类型
- tag[‘class‘] ,获取标签的class属性值,list类型,例如:[‘orange‘, ‘login‘]
- tag.attrs ,获取标签的所有属性,dict类型
- tag.get_text() ,返回标签的内容,或者 tag.text