8040 - python库【parsel】网页解析模块[爬虫相关]

admin

1. import requests
   0 i9 T( j) }, y* M: d# N
2. import parsel
   0 ^* c/ X; w( G# r) b, f
3. response = requests.get(url)
   6 `* U) C) D5 c' Q+ \% _) F5 A- ]
4. sel = parsel.Selector(response.text)  #注意这里的S要大写
   
5. # re正则
   " M' j0 V# a- c
6. # print(sel.re('正则匹配格式'))
   - i1 G- U( r% [, u) f$ Z; P) {- B
7. # xpath
     S- k0 p" R" [6 {
8. # print(sel.xpath('xpath').getall()) #getall获取所有
   # q8 Z6 w% w$ n0 o2 ?
9. # css选择器
   $ S9 a( r7 E- T( X
10. # print(sel.css('css选择器 ::text').extract_first())#获取第一个

复制代码

xpath课程讲义 https://www.runoob.com/xpath/xpath-syntax.html