您的位置：首页 > 编程学习 > > 正文

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

更多时间：2022-01-22 01:19:44 类别：编程学习浏览量：139

颜色识别模块抓取物体

Referer原理与图片防盗链实现方法详解

本文实例讲述了referer原理与图片防盗链实现方法。分享给大家供大家参考，具体如下：

1、图片防盗链

在一些大型网站中，比如百度贴吧，该站点的图片采用了防盗链的规则，以至于使用下面代码会发生错误。

简单代码：

1

2

3

4

5

6

7

8

9

10

11

12

13 <!doctype html>

<html>

<head>

<meta charset="utf-8">

<meta http-equiv="x-ua-compatible" content="ie=edge">

<title></title>

<link rel="stylesheet" href="">

</head>

<body>



<img src="http://imgsrc.baidu.com/forum/pic/item/03a4462309f79052204229be04f3d7ca7acbd5d5.jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" />/>
</body> </html>

出现的问题：

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

出错的原因

主要是该站点的图片采用了防盗链的规则，其实这个规则也比较简单，和大家一说就知道啦，主要是该站点在得知有请求时，会先判断请求头中的信息，如果请求头中有referer信息，然后根据自己的规则来判断referer头信息是否符合要求，referer 信息是请求该图片的来源地址。

浏览器中的请求头信息：

（1）正常使用百度贴吧查看图片的请求头信息

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

（2）我的代码的头信息

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

相信读者看到这，也就明白了，为什么我的代码不能访问到图片，而是显示一张警告盗链图片，因为我们的referer头信息和百度贴吧的不同，当我的请求发出去时，该站点查看referer头信息，一看来源不是本站，就重定向到另外一张图片了。

给自己的站点配置图片防盗链：

（1）在web服务器中开启mod_rewrite模块

#loadmodule rewrite_module modules/mod_rewrite.so，//将前面的#给去掉，然后重新启动服务器

（2）在需要防盗的网站或目录中，写.htaccess文件，并指定防盗链规则

步骤：

新建一个.htaccess文件，在windows中使用另存为的方式来新建此文件
查找手册，在.htaccess文件中利用正则判断

指定规则：

如果是图片资源且referer头信息是来自于本站，则通过

重写规则如下：

假定我的服务器是localhost,规则的意思是，如果请求的是图片资源，但是请求来源不是本站的话，就重定向到当前目录的一张no.jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" />

rewriteengine on
rewritecond %{script_filename} .*\..jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" /> rewritecond %{http_referer} !localhost [nc]
rewriterule .* no.jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" />

来自localhost的访问：

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

来自于其他站点的访问：

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

至此，关于防盗链的知识我们学完了，但是不急，既然是一个请求头，当然是可以伪造的，下面我们来说一下反防盗链的规则。

2、反防盗链

上面我的服务器配置了图片防盗链，现在以它来讲解反防盗链，如果我们在采集图片的时候，遇到使用防盗链技术的站点，我们可以在采集图片的时候伪造一个referer头信息。

下面的代码是从一个配置了图片防盗链的站点下载一张图片。

1

2

3

4

5

6

7

8

9

10

11

12

13 <?php

/**

* 下载图片

* @author webbc

*/

require './http.class.php';//这个类是我自己封装的一个用于http请求的类

$http = new http("http://localhost/booledu/http/apple.jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" />);
//$http->setheader('referer:http://tieba.baidu.com/');//设置referer头 $res = $http->get(); $content = strstr($res,"\r\n\r\n"); file_put_contents('./toutupian.jpg" alt="颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）" border="0" />,substr($content,4)); echo "ok"; ?>

不加referer头信息下载的结果：

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

加referer头信息下载的结果：

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

相应大家看到这，应该能看出来如何反防盗链吧，其实就是加上一个referer头信息，那么，每个站点的referer头信息从哪里找呢？这个应该抓包分析就可以得出来了！

3、封装的http请求类

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99 <?php

/**

* http请求类

* @author webbc

*/

class http{

const crtf = "\r\n";

private $errno = -1;

private $errstr = '';

private $timeout = 5;

private $url = null;//解析后的url数组

private $version = 'http/1.1';//http版本

private $requestline = array();//请求行信息

private $header = array();//请求头信息

private $body = array();//请求实体信息

private $fh = null;//连接端口后返回的资源

private $response = '';//返回的结果

//构造函数

public function __construct($url){

$this->connect($url);

$this->setheader('host:'.$this->url['host']);//设置头信息

}

//通过url进行连接

public function connect($url){

$this->url = parse_url($url);//解析url

if(!isset($this->url['port'])){

$this->url['port'] = 80;

}

$this->fh = fsockopen($this->url['host'],$this->url['port'],$this->errno,$this->errstr,$this->timeout);

}

//设置请求行信息

public function setrequestline($method){

$this->requestline[0] = $method.' '.$this->url['path'].' '.$this->version;

}

//设置请求头信息

public function setheader($headerline){

$this->header[] = $headerline;

}

//设置请求实体信息

public function setbody($body){

$this->body[] = http_build_query($body);

}

//发送get请求

public function get(){

$this->setrequestline('get');//设置请求行

$this->request();//发送请求

$this->close();//关闭连接

return $this->response;

}

//发送请求

private function request(){

//拼接请求的全部信息

$reqestarr = array_merge($this->requestline,$this->header,array(''),$this->body,array(''));

$req = implode(self::crtf,$reqestarr);

//print_r($req);die;

fwrite($this->fh,$req);//写入信息

//读取

while(!feof($this->fh)){

$this->response .= fread($this->fh,1024);

}

}

//发送post请求

public function post($body = array()){

//设置请求行

$this->setrequestline("post");

//设置实体信息

$this->setbody($body);

//设置content-type

$this->setheader('content-type:application/x-www-form-urlencoded');

//设置content-length

$this->setheader('content-length:'.strlen($this->body[0]));

//请求

$this->request();

$this->close();//关闭连接

return $this->response;

}

//关闭连接

public function close(){

fclose($this->fh);

}

}

//测试get

// $http = new http("http://news.163.com/16/0915/10/c10es2ha00014prf.html");

// $result = $http->get();

// echo $result;

//测试post

/*set_time_limit(0);

$str = 'abcdefghijklmnopqrstuvwxyz0123456789';

while(true){

$http = new http("http://211.70.176.138/yjhx/message.php");

$str = str_shuffle($str);

$username = substr($str,0,5);

$email = substr($str,5,10).'@qq.com';

$content = substr($str,10);

$message = "发表";

$http->post(array('username'=>$username,'email'=>$email,'content'=>$content,'message'=>$message));

//sleep(0.1);

}*/

?>

希望本文所述对大家PHP程序设计有所帮助。
原文链接：https://blog.csdn.net/baochao95/article/details/52673314

标签：Referer 图片防盗链

上一篇：php模块使用方法（PHP操作XML中XPath的应用示例）

下一篇：python中if条件语句如何使用（Python中如何使用if语句处理列表实例代码）

您可能感兴趣

排行榜

1
颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

颜色识别模块抓取物体（Referer原理与图片防盗链实现方法详解）

颜色识别模块抓取物体

热门推荐

排行榜