Python教程

【Python爬虫】 学习笔记 -- ajax下爬取豆瓣请求第一页

本文主要是介绍【Python爬虫】 学习笔记 -- ajax下爬取豆瓣请求第一页，对大家解决编程问题具有一定的参考价值，需要的程序猿们随着小编来一起学习吧！ 
import urllib.request
import urllib.parse

url = 'https://movie.douban.com/j/chart/top_list?type=5&interval_id=100%3A90&action=&start=0&limit=20'
headers ={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.81 Safari/537.36'
}

# 请求对象的定制
request = urllib.request.Request(url=url,headers=headers)
# 获取响应的数据
response = urllib.request.urlopen(request)
content = response.read().decode('utf-8')
# 数据下载到本地
# open方法默认情况下gbk的编码，若有中文需手工定义utf-8
fp = open('douban.js','w',encoding='utf-8')
fp.write(content)

 

这篇关于【Python爬虫】 学习笔记 -- ajax下爬取豆瓣请求第一页的文章就介绍到这儿，希望我们推荐的文章对大家有所帮助，也希望大家多多支持为之网！
您可能喜欢
栏目导航