怎样使用代理服务器 代理服务器使用方法

  curl是一个命令行下的web客户端,可以在命令行下执行常见的web访问、自动web请求等操作,下面小编就给大家来详细介绍一下怎样使用代理服务器  代理服务器使用方法这一块的相关内容,希望能帮助到大家。

怎样使用代理服务器  代理服务器使用方法

怎样使用代理服务器

  curl(cURL)是一个用于传输数据的命令行工具,其诞生于20多年前,最早版本是在1998年。

怎样使用代理服务器  代理服务器使用方法

  curl支持以多种方式检索和发送数据,并输出到标准输出,可以无缝衔接标准unix管道使用。在绝大多数的*nix操作系统上都默认安装。curl支持各种协议,包括 HTTP/HTTPS、FTP和SCP。

怎样使用代理服务器  代理服务器使用方法

  Web代理服务器充当客户端和目标服务器之间的中介。客户端首先访问代理,然后代理执行它并将结果返回给客户端。

怎样使用代理服务器  代理服务器使用方法

  有些Web站点是有限制的,我们无法直接通过当前IP直接访问目标站点;还有一些站点对访问请求是有一定限制,而我们在请求数据时候为了请求速度也需要突破IP限制。通过使用代理服务,我们就可以突破上述限制。

  curl代理设置

  为演示需要,本文中示例中使用的代理将设置为本地机器上,使用端口5000。默认情况下,代理语句中唯一需要的部分是主机,默认端口80。我们将通过HTTP将数据传输到它,我们将明确指定完整性。为了方便,我们请求服务为httpbin。 Httpbin是一个开源的标准http服务显示,在请求/ip接口时候可以查看请求IP地址。

  方法一:命令行参数

  使用代理的第一个也是最简单的选项是使用命令行参数。Curl代理参数为-x(或者--proxy)。基本格式为:

  -x, --proxy [protocol://]host[:port]

  因此,要使用代理访问,可以使用:

怎样使用代理服务器  代理服务器使用方法

其中,代理服务器的协议头,默认为http可以省略掉:

  curl -x 127.0.0.1:5000 httpbin/ip

  身份验证

  此外,如果HTTP代理服务器也需要身份验证,可以使用 -U标志来指定它。

  curl -U user:password --proxy 127.0.0.1:5000 httpbin/ip

  某些代理服务器可能需要不同的身份验证方案。可以通过--proxy-anyauth指定curl以确定身份验证方案

  curl -U user:password --proxy 127.0.0.1:5000 httpbin/ip --proxy-anyauth

  如果认证密码中包含特殊字符,需要对其添加加上双引号("")。

  curl -U "user:p@assword" --proxy 127.0.0.1:5000 httpbin/ip

  上面命令中直接用密码容易被泄露并且会被记录在history日志中,在命令行中通过只提供用户名,然后可以交互式的,根据curl提示输入密码。

  curl -U user --proxy 127.0.0.1:5000 httpbin/ip> Enter proxy password for user 'user':

  方法二:使用环境变量

  可以使用环境变量配置实现curl使用代理服务器。curl允许通过设置变量为它支持的每个协议使用环境变量[scheme]_proxy。如果设置了这些,那么当使用对应协议时,curl将默认引入。对http和https协议:

  export http_proxy="127.0.0.1:5000"export https_proxy="127.0.0.1:5000"

  同样可以添加认证参数:

怎样使用代理服务器  代理服务器使用方法

  然后所有,curl http和https请求就会自动使用代理。

  与以这种方式设置的所有环境变量一样,这些只是临时变量,shell会话结束或重新启动系统时删除。但是,为了使其在所有会话中可用,可以将其附加到profile文件中,或者对于个人可以在.bashrc 或 .zshrc文件添加,实现持久化的代理设置。

  方法三:使用别名

  配置代理的另一种更持久的方法是shell别名,如果总是需要以这种方式定期连接,这很有用。通过别名可以cur将调用替换为使用代理的版本,这其实和上面的方法二同理。

  alias curl="curl -x 127.0.0.1:5000"

  方法四:使用.curlrc 配置

  其实curl也支持个性化的配置参数配置,配置文件默认情况下在个人目录 ~/.curlrc(Windows上为 _curlrc),也可以指定其他文件路径。

  在.curlrc配置文件中添加代理支持的方法为:

  proxy = "http://127.0.0.1:5000"

  实例:使用curl 提取网页的标题

  最后举个更复杂的,我们使用unix管道将结合grep正则提取站点标题。

  curl curl –silent baidu |grep -Eo ''

  --silent参数可以去掉curl输出进度信息,对响应的内容用grep正则表达式中捕获标题。

怎样使用代理服务器  代理服务器使用方法

上面就是关于怎样使用代理服务器  代理服务器使用方法的全部内容介绍,希望上面的内容能帮助到大家啊,更多的关于代理服务器的相关内容欢迎咨询万商云集,

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/331811.html

(0)

相关推荐

  • 嘴唇上长水泡是什么原因,嘴唇上长水泡是什么原因有点痒

    嘴唇上长水泡是什么原因,嘴唇上长水泡是什么原因有点痒肝脏被称之为是“将军器官”,乃人体最大的解毒的器官,主宰代谢、分解、氧化、储存、分泌等作用。肝脏是我们身体健康息息相关,可以将体内的毒素和垃圾进行排出,维持身心的健康发

    趣活 2021年11月30日
  • 怎么日入100(如何日入1000)

    聚创咖:专注资源对接和项目分享,熟悉并不断开发各类最新项目,持续分享聚创咖(ID:聚创66)各类最新网络项目、引流/现金流技巧等赚钱方式。欢迎光临。 如果你喜欢,就点上来看。 版权...

    生活 2021年12月29日
  • 低答的意思(字义,诗词)

    词组低答的意思(字义,诗词)基本解释详细字义 低答拼音:dī dá注音:ㄉ一 ㄉㄚˊㄉㄚ解释:无能,不中用。古代诗词明代.王彦泓.闺人礼佛词 其五:「窗外相邀低答应,待人明日浣裙来。」 基本字义
    低d

    阅读 2021年11月7日
  • 遁阴匿景的意思(字义,诗词)

    词组遁阴匿景的意思(字义,诗词)基本解释详细字义 遁阴匿景拼音:dùn yīn nì jǐng注音:ㄉㄨㄣˋ 一ㄣ ㄋ一ˋ ㄐ一ㄥˇ一ㄥˇ解释:指隐藏形迹。成语解释典故出处:晋·陆云《南征赋》遁阴匿景,静言勿哗。

    阅读 2021年11月11日
  • 注册公司在哪里查名字有没有被注册,怎么查询有没有注册公司

    有注册公司买吗敬请查看有注册公司买吗事项对于投资者非常重要,这篇文章讲解相关有注册公司买吗的知识,如果您需要清楚有注册公司买吗的信息,请快看看本篇文章。一、登记企业要的材料:注册公司需要的资料包含:1、公司字号。2、创业

    测评 2021年12月10日
  • 边食的意思是什么(边食的意思和含义)

    词组边食的意思,边食是什么意思-词组(字义,诗词)基本解释详细字义 边食拼音:biān shí注音:ㄅ一ㄢ ㄕˊㄙˋ一ˋ解释:边粮;边饷。古代诗词唐代.王建.水运行:「远征海稻供边食,岂如多种边头地。」明代.萧鎡

    阅读 2021年12月14日