国产片侵犯亲女视频播放_亚洲精品二区_在线免费国产视频_欧美精品一区二区三区在线_少妇久久久_在线观看av不卡

腳本之家，腳本語言編程技術及教程分享平臺！
分類導航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|

服務器之家 - 腳本之家 - Python - Python打印scrapy蜘蛛抓取樹結構的方法

Python打印scrapy蜘蛛抓取樹結構的方法

2020-06-01 10:44pythoner Python

這篇文章主要介紹了Python打印scrapy蜘蛛抓取樹結構的方法,實例分析了打印scrapy蜘蛛抓取樹結構的技巧,非常具有實用價值,需要的朋友可以參考下

本文實例講述了Python打印scrapy蜘蛛抓取樹結構的方法。分享給大家供大家參考。具體如下：

通過下面這段代碼可以一目了然的知道scrapy的抓取頁面結構，調用也非常簡單

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
#!/usr/bin/env python
import fileinput, re
from collections import defaultdict
def print_urls(allurls, referer, indent=0):
  urls = allurls[referer]
  for url in urls:
    print ' '*indent + referer
    if url in allurls:
      print_urls(allurls, url, indent+2)
def main():
  log_re = re.compile(r'<GET (.*?)> \(referer: (.*?)\)')
  allurls = defaultdict(list)
  for l in fileinput.input():
    m = log_re.search(l)
    if m:
      url, ref = m.groups()
      allurls[ref] += [url]
  print_urls(allurls, 'None')
main()

希望本文所述對大家的Python程序設計有所幫助。

延伸 · 閱讀

精彩推薦
Weibo Article 1 Weibo Article 2 Weibo Article 3 Weibo Article 4 Weibo Article 5 Weibo Article 6 Weibo Article 7 Weibo Article 8 Weibo Article 9 Weibo Article 10 Weibo Article 11 Weibo Article 12 Weibo Article 13 Weibo Article 14 Weibo Article 15 Weibo Article 16 Weibo Article 17 Weibo Article 18 Weibo Article 19 Weibo Article 20 Weibo Article 21 Weibo Article 22 Weibo Article 23 Weibo Article 24 Weibo Article 25 Weibo Article 26 Weibo Article 27 Weibo Article 28 Weibo Article 29 Weibo Article 30 Weibo Article 31 Weibo Article 32 Weibo Article 33 Weibo Article 34 Weibo Article 35 Weibo Article 36 Weibo Article 37 Weibo Article 38 Weibo Article 39 Weibo Article 40
主站蜘蛛池模板： 91色在线视频 | 一区视频 | 国产精品ssss在线亚洲 | 亚洲国产精品99久久久久久久久 | 中文字幕一二三区 | 亚洲成人高清 | 国产成人精品一区二区三区四区 | 亚洲天堂一区二区 | 国产精品三级久久久久久电影 | 九九国产 | 日本特黄特色aaa大片免费 | 中文字幕国产一区 | 美日韩一区 | 一级做a爰片性色毛片精油 欧美中文字幕在线观看 | 成人在线视频一区 | 一区二区影视 | 久久中文字幕一区二区三区 | 亚洲黄色高清 | 国产一区二区欧美 | 中文字幕2019 | 亚洲+变态+欧美+另类+精品 | 久久久久国产精品午夜一区 | 日本99精品 | 免费网站在线 | 久久国产一区 | 欧美精品一二三 | 日韩国产一区二区三区 | 正在播放国产精品 | 日韩av视屏 | 91色在线观看 | 国产中文字幕一区 | 国产精品久久久久久久久久久久 | 91天堂网 | 久章操| jlzzjlzz国产精品久久 | 国产日韩欧美综合 | 高清国产一区二区三区 | 亚州成人 | 在线免费观看黄色 | 国产精品99久久 | 羞羞网站 |