欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  后端开发

javascript - python写网页爬虫爬取 登录后可见 信息

程序员文章站 2022-05-13 20:44:33
...
  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

回复内容:

  1. 一个网页上的源代码如图:javascript - python写网页爬虫爬取 登录后可见 信息

2.用 phantomJS selenium 获取后用BeautifulSoup 解析后的代码如图:
javascript - python写网页爬虫爬取 登录后可见 信息

3.曾尝试用session获取cookies:
在登录页面获得的cookies都不一样:
javascript - python写网页爬虫爬取 登录后可见 信息

请问各位神应该如何将在源代码里看到的信息爬下来?
谢谢!!!

已经解决啦~
是我的登录窗口没找到。。
初学爬虫,问题没什么价值,请大家见谅!