如何使用用户代理使用Wget下载网页

前端之家收集整理的这篇文章主要介绍了如何使用用户代理使用Wget下载网页前端之家小编觉得挺不错的,现在分享给大家,也给大家做个参考。
我正在尝试使用Wget下载此页面。这是页面链接

07000

这是我的cmd:

wget -O ebay.html –user-agent=”Mozilla/5.0 (Windows NT 5.2; rv:2.0.1) Gecko/20100101 Firefox/4.0.1″ “07000”

当我使用它访问页面使用浏览器工作正常。当我使用Wget,它会下载另一个页面,而不是原来的页面。我认为问题是用户代理。有什么解决方案?

解决方法

问题不是用户代理,它是一个丢失的cookie或cookie。解决方案是

>使用wget –save-cookies = ebay-cookies检索正常的产品页面
>从该HTML文件中取出“打印”链接URL。 (我手工做了,你应该明白地写一个脚本去做)
>使用wget –load-cookies = ebay-cookies检索“打印”URL

我试过一个随机产品页面;有效。

原文链接:https://www.f2er.com/html/232840.html

猜你在找的HTML相关文章