1. 如何抓取带登录账户和密码的网页数据
用前嗅的ForeSpider数据采集软件可以采集登录后才能采集的数据。在ForeSpider里有一个内置浏览器,在里边打开这个网站,和在浏览器上一样输入用户名密码,登录上去后就可以了。可以设置自动登录,下次爬虫还会自动登录这个网站。
可以下载个免费版的试试,软件里有一些免费的模板,里边有一个登录的案例。帮助文档里也有登录的配置步骤。
1. 如何抓取带登录账户和密码的网页数据
用前嗅的ForeSpider数据采集软件可以采集登录后才能采集的数据。在ForeSpider里有一个内置浏览器,在里边打开这个网站,和在浏览器上一样输入用户名密码,登录上去后就可以了。可以设置自动登录,下次爬虫还会自动登录这个网站。
可以下载个免费版的试试,软件里有一些免费的模板,里边有一个登录的案例。帮助文档里也有登录的配置步骤。