APP下载
报价宝  ›  科技  › 

如何从技术上绞杀盗链者?

报价宝 来源:baojiabao.com 发布时间:2019-11-15 15:51:00 09月29日更新
报价宝综合消息如何从技术上绞杀盗链者?

作者 | 阿文

责编 | 郭芮

很多站长都会遇到一个很头疼的问题,那就是自己网站的资源经常被盗用,有文字、图片、视讯、和二进位制或压缩档案,这些资源被盗用后除了导致网站流量丢失之外、还会带来一些经济上的损失。

除了相关法律,例如《中华人民共和国著作权法》可以使版权或著作权所有者通过法律途径来约束和限制一些未经授权非法使用网站多媒体资源,我们还可以通过一些技术手段来约束访问者,使其无法随意盗取相关资源,下面我们就介绍下网站常用的防盗措施和其优势和劣势。

User-agent 防盗

User-Agent 首部包含了一个特征字串,用来让网络协议的对端来识别发起请求的使用者代理软件的应用型别、操作系统、软件开发商以及版本号。不同的浏览器客户端都会携带自己的 user-agent,例如 Chrome 浏览器的 user-agent 是:

user-agent:Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.90 Safari/537.36

在比如 curl 命令去访问一个 url,其带的 user-agent 如下:

User-Agent: curl/7.54.0

亦或者使用一些程式语言的库,例如 Python 的 request 库,其 user-agent 为:

r.request.headers {\'User-Agent\': \'python-requests/2.18.4\',……}

既然如此,我们可以限制一些 user-agent 的请求,以 nginx 为例,我们判断 httpuseragent 来禁止其访问资源。例如下面的,如果 user-agent 等于 Java|python-urllib 等就返回 403,从而来拒绝这些客户端访问资源。

if ($http_user_agent ~ "Mozilla/4.0$|Mozilla/5.0$|Java|ApacheBench|Python-urllib|^$") { return 403; }

但是这种办法并不能完全禁止掉一些请求,因为 user-agent 是客户定义的,以 curl 为例,如下所示。通过 -H 指定 user-agent 的请求头资讯,如果对方恰好指定你的黑名单规则,则可以很轻松的绕过限制。

curl -H "User-Agent:xxxx"

referer 防盗链

Referer 首部包含了当前请求页面的来源页面的地址,即表示当前页面是通过此来源页面里的连结进入的。如下所示的 request headers 中,其 referer 为https://www.google.com/ 则说明其来源是Google。

:authority: developer.mozilla.org :method: GET :path: /zh-CN/docs/Web/HTTP/Headers/Referer :scheme: https accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3 accept-encoding: gzip, deflate, br accept-language: zh-CN,zh;q=0.9,en;q=0.8 cookie: dwf_sg_task_completion=False dnt: 1 referer: https://www.google.com/ upgrade-insecure-requests: 1 user-agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.90 Safari/537.36

以 nginx 为例,我们可以对指定域名的 referer 进行限制:

if ($http_referer ~* www. xxx.com ) { return 403; }

但是这种办法也并不能完全禁止掉一些域名请求,因为 referer 客户也是可以自定义的。以 curl 为例,如下所示,通过 -H 指定 referer:XXXXX 的请求头资讯,就可以很轻松的绕过限制。

IP 防盗链

顾名思义,即对指定 IP 或 IP 段进行限制访问。例如一些爬虫经常频繁爬取网站资源,我们可以对其 IP 进行限制。

以 nginx 为例,nginx 的ngxhttpaccess_module 模组可以用来设定允许/禁止哪些IP或IP段访问:

allow 1.1.1.1/24 # 允许IP段访问

deny all # 禁止所有 IP 访问

token 防盗链

上述的三种原生 HTTP 首部字段都能防止使用者随意盗取资源,但是其劣势相当明显,比如都极容易被伪造。

以 nginx 为例安装secure_link模组,预设是没有安装的,要使用这个模组必须在编译时指定下列编译引数:

--with-http_secure_link_module

secure link 防盗链原理:

使用者访问资源;

服务器根据secret金钥、过期时间、档案uri生成加密串;

将加密串与过期时间作为引数跟到档案下载地址的后面;

nginx下载服务器接收到了过期时间,也使用过期时间、配置里金钥、档案uri生成加密串;

将使用者传进来的加密串与自己生成的加密串进行对比,一致允许下载,不一致403。

具体的配置和使用可以参考 https://nginx.org/en/docs/http/ngxhttpsecurelinkmodule.html。

当然除了这种方式,你也可以使用 nginx lua 来自行实现一些自定义的防盗链措施。

【End】

热 文 推 荐

点选阅读原文,输入关键词,即可搜寻您想要的 CSDN 文章。

你点的每个“在看”,我都认真当成了喜欢