如何抓取带有用户名密码的网页
用前嗅的ForeSpider数据采集软件可以采集登录后才能采集的数据。在ForeSpider里有一个内置浏览器,在里边打开这个网站,和在浏览器上一样输入用户名密码,登录上去后就可以了。可以设置自动登录,下次爬虫还会自动登录这个网站。
可以下载个免费版的试试,软件里有一些免费的模板,里边有一个登录的案例。帮助文档里也有登录的配置步骤。
上一篇:如何让网页保存以前输入的用户名
用前嗅的ForeSpider数据采集软件可以采集登录后才能采集的数据。在ForeSpider里有一个内置浏览器,在里边打开这个网站,和在浏览器上一样输入用户名密码,登录上去后就可以了。可以设置自动登录,下次爬虫还会自动登录这个网站。
可以下载个免费版的试试,软件里有一些免费的模板,里边有一个登录的案例。帮助文档里也有登录的配置步骤。
多重随机标签