前端之家收集整理的这篇文章主要介绍了
如何使用用户代理使用Wget下载网页,
前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
我正在尝试使用Wget下载此
页面。这是
页面链接:
07000
这是我的cmd:
wget -O ebay.html –user-agent=”Mozilla/5.0 (Windows NT 5.2; rv:2.0.1) Gecko/20100101 Firefox/4.0.1″ “07000”
当我使用它访问页面使用浏览器工作正常。当我使用Wget,它会下载另一个页面,而不是原来的页面。我认为问题是用户代理。有什么解决方案?
问题不是
用户代理,它是一个丢失的cookie或cookie。
解决方案是
>使用wget –save-cookies = ebay-cookies检索正常的产品页面,
>从该HTML文件中取出“打印”链接URL。 (我手工做了,你应该明白地写一个脚本去做)
>使用wget –load-cookies = ebay-cookies检索“打印”URL
我试过一个随机产品页面;有效。
原文链接:https://www.f2er.com/html/232840.html