频道导航

如何使用用户代理使用Wget下载网页

2019-11-26 HTML 前端之家

前端之家收集整理的这篇文章主要介绍了如何使用用户代理使用Wget下载网页，前端之家小编觉得挺不错的，现在分享给大家，也给大家做个参考。

我正在尝试使用Wget下载此页面。这是页面链接：

07000

这是我的cmd：

wget -O ebay.html –user-agent=”Mozilla/5.0 (Windows NT 5.2; rv:2.0.1) Gecko/20100101 Firefox/4.0.1″ “07000”

当我使用它访问页面使用浏览器工作正常。当我使用Wget，它会下载另一个页面，而不是原来的页面。我认为问题是用户代理。有什么解决方案？

解决方法

问题不是用户代理，它是一个丢失的cookie或cookie。解决方案是

>使用wget –save-cookies = ebay-cookies检索正常的产品页面，
>从该HTML文件中取出“打印”链接URL。 (我手工做了，你应该明白地写一个脚本去做)
>使用wget –load-cookies = ebay-cookies检索“打印”URL

我试过一个随机产品页面;有效。

上一篇：正常表单提交与JSON 下一篇：html – 拖放* FROM *浏览器？

猜你在找的HTML相关文章

elasticsearch扩展ik分词器词库

操作步骤 1、进入elasticsearch的plugin，进入ik。进入config。 2、在config下面建立以.di...

作者：前端之家时间：2021-02-13

echarts中legend如何换行

lengend data数据中若存在''，则表示换行，用''切割。

作者：前端之家时间：2021-02-13

Echart常用效果（一）

代码实现 option = { backgroundColor: &#39;#080b30&#39;, tooltip: { t...

作者：前端之家时间：2021-02-13

freemarker中js里面取字符串，换行导致报错的解决办法

问题原因原因在于直接在js中取的变量并复制给var变量。于是就变成这样。解决办法 var d...

作者：前端之家时间：2021-02-13

Freemarker + xml 实现Java导出word

前言最近做了一个调查问卷导出的功能，需求是将维护的题目，答案，导出成word，参考了几种...

作者：前端之家时间：2021-02-13

【前端JSP思考】JSP中#{},${}和%{}的区别

JSP中#{},${}和%{}的区别： # #{}：对语句进行预编译，此语句解析的是占位符?，可以防止SQ...

作者：前端之家时间：2021-02-10

【前端HTML】常用标签及属性

对于很多人来说，用HTML标签都是熟能生巧，而不清楚为什么是那样的标签，所以我在这列了一...

作者：前端之家时间：2021-02-10

[前端]GOFLY项目-响应式登录页的设计和实现

登录界面如果要实现响应式 , 需要注意宽度的设置和media query的使用宽度一般都是按百分比...

作者：前端之家时间：2021-02-05

[前端] 设定为disabled的表单域值不能被提交

表单中的某个表单域被设定为disabled，则该表单域的值就不会被提交。但是我们需要提交这个...

作者：前端之家时间：2021-02-05

[前端] 代码中执行绑定元素的指定事件trigger方法

前面业务里有个搜索功能 , 入口比较深 , 现在想要把入口挪到有公共header的地方 , 在不想完...

作者：前端之家时间：2021-02-05

最新文章