python爬虫穷游网

本文主要是介绍python爬虫穷游网，对大家解决编程问题具有一定的参考价值，需要的程序猿们随着小编来一起学习吧！

python爬取穷游网城市名称和去过的人数

import requests
from lxml import etree
def info(url):
    headers={
        'user-agent': ''
    }
    response=requests.get(url,headers=headers)
    soup=etree.HTML(response.text)
    place=soup.xpath('/html/body/div[5]/div/div[1]/ul/li')
    for i in place:
        local=i.xpath('./h3/a/text()')[0].strip()
        count=''.join(i.xpath('./p[2]/text()'))
        f = open('穷游网.csv', 'a', encoding='utf8')
        f.write('{},{}\n'.format(local,count))
        f.close()
if __name__ == '__main__':
    for i in range(4):
        url='https://place.qyer.com/china/citylist-0-0-{}/'.format(i)
        info(url)

这篇关于python爬虫穷游网的文章就介绍到这儿，希望我们推荐的文章对大家有所帮助，也希望大家多多支持为之网！