1、环境配置
你需要一个pycharm和requests第三方库，在安装完成之后即可继续浏览。
2、操作流程
（2）可以看到鼠标每次下移，都会出现新的电影，所以该页面属于局部刷新，返回数据为json格式数据，得到url，并且得到type参数
“”如何查看此处不演示，主要是不敢””
import json
import requests
if __name__ == "__main__":
get_url = "https://movie.douban.com/j/chart/top_list"
get_param = {
"type": "24",
"interval_id": "100:90",
"action": "",
# start代表从豆瓣电影库中第120部电影获取
"start": "1",
# 每次请求去除的数量是limit
"limit": "20",
}
get_headers = {
'User-Agent': "Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Mobile Safari/537.36"
}
# 响应
response = requests.get(url=get_url, params=get_param, headers=get_headers)
# 获取响应数据
list_data = response.json()
# 持久化存储
fp = open('./html/douban.json', 'w', encoding='UTF-8')
json.dump(list_data, fp=fp, ensure_ascii=False)
print("over")3、爬取结果
原文地址:https://blog.csdn.net/2301_79149013/article/details/134564045
本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如若转载，请注明出处：http://www.7code.cn/show_5381.html
如若内容造成侵权/违法违规/事实不符，请联系代码007邮箱：suwngjj01@126.com进行投诉反馈，一经查实，立即删除！
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
