基于Python的豆瓣电影爬虫分析系统 课程论文+项目源码
目录环境与版本 1爬虫 1网站 4统计两个演员合作的次数 22环境与版本1.python 版本:3.8.52.Django 版本:3.0.33.网站已在 Safari、Opera、Chrome 浏览器中测试兼容爬虫爬虫以豆瓣电影为源网站爬取影视、演员和影评数据,共爬到 1066 部影视、5327 条影评以及 6596 位相关演员。数据与存储对于每部影视,从豆瓣网中爬取了影视标题、海报图片、影视简介、演员列表、5 条短评以及包括语言、发行时间等在内的其他信息。爬取下来的文字图片分别以 JSON 和 jpg 的格式保存在文件夹中。文件标题为影视的题目。以下文件为例,title、actors、brief、other、comment 分别储存了影视的标题、爬取的相关演员、影视简介、其他信息以及 5 条评论。{"title": "2001太空漫游 2001: A Space Odyssey","actors": ["凯尔・杜拉","加里・洛克伍德","威廉姆・西尔维斯特","丹尼尔・里希特","雷纳德・洛塞特","罗伯特・比提","肖恩・沙利文","艾德・毕肖普","格伦・贝克","艾伦・吉福德"],"brief": "\n 这部影片是库布里克花了四年时间制作的充满哲学命题的鸿篇巨制。一块大黑石树立在史前人类的面前,他们刚刚开始认识工具,进入到进化的里程碑。同样的黑石还在宇宙多处出现,它们矗立在月球上,漂浮在太空中,带着某种神秘的寓意。\n \n 现在的时间是2001年,为了寻找黑石的根源,人类开展一项木星登陆计划。飞船上有冬眠的三名宇航员,大卫船长(凯尔・杜拉 Keir Dullea饰)、富兰克飞行员(加里・洛克伍德 Gary Lockwood饰),还有一部叫“HAL9000”的高智能电脑。HAL在宇宙飞行过程中发生错乱,令到富兰克和三名冬眠人员相继丧命,剩下波曼和这台电脑作战。\n \n 从死亡线上回来的大卫一气之下关掉主脑系统,HAL彻底失效。现在,茫茫宇宙中只剩大卫一人,向木星进发。穿越瑰异壮观的星门,大卫仿佛去到一个奇特的时空,那里有人类无尽的生死轮回和宇宙的终极知识……\n ",