换ip软件,代理ip软件,更改ip地址-智游代理
首页 IP软件套餐 HTTP代理套餐 API提取 使用帮助 新闻资讯 长效IP 注册 登录 实名验证

在线咨询

800819380 售前客服
在线客服,实时响应

客户经理:
13326404693

473197630 QQ群
473197630

微信客服

您的位置: 首页 > 新闻资讯 > 爬虫代理 > 正文

有关IP和网络代理的几个概念介绍

发布时间:2018年11月14日 来源:智游代理 www.zhiyoudaili.com

今天小编给大家分享一点干货,就关于服务端获取 IP 以及客户端 IP 代理的几个概念简单介绍下。


REMOTE_ADDR

没有使用代理时,就是客户端 IP

使用一层代理时,就是代理 IP

使用多层代理时,就是最终访问服务器的代理 IP

HTTP_VIA

没有使用代理时,没有值

使用代理时,就是代理 IP 

HTTP_X_FORWARDED_FOR

没有使用代理时,没有值

使用一层代理时,就是客户端 IP

使用N层代理时,就是“客户端 IP,第1层代理 IP,...,第(N-1)层代理 IP”,但不包括第N层代理 

透明代理 - Transparent Proxy

REMOTE_ADDR = Proxy IP HTTP_VIA = Proxy IP HTTP_X_FORWARDED_FOR = Your IP

该代理方式只是将信息转发给访问对象,无法达到隐藏真实身份的目的,服务端只需要通过 HTTP_X_FORWARDED_FOR,就可以知道你的真实身份。

匿名代理 - Anonymous Proxy

REMOTE_ADDR = Proxy IP HTTP_VIA = Proxy IP HTTP_X_FORWARDED_FOR = Proxy IP

该代理方式隐藏了您的真实 IP,但是服务端依然知道客户端是通过代理服务访问他们的。

混淆代理 - Distorting Proxy

REMOTE_ADDR = Proxy IP HTTP_VIA = Proxy IP HTTP_X_FORWARDED_FOR = Random IP Address

服务端依然知道客户端是通过代理服务访问他们的,但是通过 HTTP_X_FORWARDED_FOR 获取到的IP地址是一个虚假的随机 IP 地址。

高匿代理 - High Anonymity Proxy

REMOTE_ADDR = Proxy IP HTTP_VIA = Not Determined HTTP_X_FORWARDED_FOR = Not Determined

很明显,采用这种代理方式,服务端如果没有做进一步的校验处理,很容易被客户端欺骗。


这些就是小编的分享了,对于新手是非常有用的,大家记住了吗?

转载注明来自:智游代理IP http://www.zhiyoudaili.com/

相关文章内容简介

1 怎么解决爬虫资源问题

在大数据的时间,爬虫业务大家都不再陌生。随着网络的发展,反爬虫也在不断的优化。想突破反爬虫的限制,好的代理IP资源是非常重要的。那么,怎么解决爬虫资源问题呢?解决爬虫资源问题,最常见的就是用代理IP,一个是免费的资源,一个是购买专业的代理IP。免费成本低,但不稳定,大部分代理IP根本都不能用的,质量很差。对于爬虫工作者来说,任务量大,分布式爬虫也是提高工作效率的好办法,所以就更需要专业代理IP的帮助了。智游代理拥有国内很多城市的IP资源,可以满足爬虫的需求,质量高是很好的选择。所以,解决爬虫资源问题,是离不开代理IP的帮助的。挑选代理的时候要注意,找到质量好的代理才是好帮手。... [阅读全文]

2 爬虫用的代理IP不够用怎么办

爬虫在抓取数据的时候,被目标网站禁止是很常见的,这是因为网站都有反爬虫策略,反爬虫就是根据IP识别的。访问网站的IP地址是会被记录的,如果频繁访问就会被认为是爬虫,会进行限制或者禁止IP。被限制最主要的原因就是爬虫的抓取频率太快,远远超过了网址的设定,被服务器禁止访问。所以,爬虫工作要用代理IP来帮忙。但在用代理IP过程中,还有可能有IP不够用的情况,还需要继续购买。但成本就会有所上升,而且高效代理IP也并不是想买就有的。这种问题,可以通过两个方法来解决。首要就是要把爬虫的抓取速度降低,减少抓取量,但是可能会影响到工作进度。二是要优化爬虫程序,减少不必要的程序,提高工作效率。如果以上两个办法都解决不了问题,那就只有继续购买高效代理IP了。智游代理可以提供高质量的IP,并且数量多,帮助爬虫工作高效、稳定的进行。... [阅读全文]

热门标签

推荐阅读

  1. 19

    2018-11

    爬虫代理IP是什么意思?

    对于这个互联网大数据时代,爬虫和代理IP这两个词单独拿出来哪一个,相信大多数网络用户们都很熟悉,那么爬虫代理IP该怎样理解呢?请看下面的介绍。

  2. 16

    2019-10

    为什么有些爬虫代理ip重复率很高?

    为什么有些爬虫代理ip重复率很高?做爬虫的久了,会接触到很多很多爬虫代理ip提供商家,也会发现不同提供商的http代理质量差别非常大,有些代理商的重复率非常高,导致爬虫被封,这是为

  3. 06

    2020-08

    用就用最好用的HTTP代理

    随着网络的迅速发展大家逐渐知道了IP代理这个名词,而对很多网络工作人员来说更是必不可少的工具,提高了工作效率。虽然IP代理有着很多优势,但是很多人还是对HTTP代理不是很了解,还保

  4. 29

    2020-06

    哪种代理ip适合网络爬虫

    现时代大数据兴起,网络成为了重要的部分,线上运营就有了大量的信息数据。网商竞争,市场调查,数据分析,如何获取?成就网络爬虫问世,通过网络爬虫采集才能获取到大量的数据信息。

  5. 09

    2019-09

    python爬虫需要了解的代理IP知识

    大家都说现在是大数据时代,是python爬虫的天下,但python爬虫也是有天敌的,随着网络爬虫的日渐壮大,反爬虫也在不断进化,若想顺应时代发展,更好的突破网站反爬虫机制,拥有一款好的代

  6. 21

    2019-05

    爬虫加代理的三种方式

    爬虫的时候,我们用同一个ip反复爬一个网站有可能会被封,这时候就需要使用到代理,下面为大家介绍爬虫加代理的三种方式,一起来了解看看吧!1.Selenium调用代理 from selenium import webdriver