首页 > Web开发 > 详细

伯乐在线文章URL

时间:2018-06-18 16:40:21      阅读:200      评论:0      收藏:0      [点我收藏+]
  • 一段代码,可以跑出所有文章的url
  • # encoding: utf-8             
    import requests               
    from bs4 import BeautifulSoup 
                                  
    base_url = http://blog.jobbol
                                  
    session = requests.session()  
    i=0                           
    for i in range(559):          
        url = base_url+str(i)+"/" 
        # print(url)              
        res = session.get(url=url)
        soup = BeautifulSoup(res.t
        post_nodes = soup.select("
        for post_node in post_node
            post_url = post_node.g
            i+=1                  
            print(i,post_url)     

     

伯乐在线文章URL

原文:https://www.cnblogs.com/longbigbeard/p/9195405.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!