LMLPHP后院

扫码查看  原文链接 : https://blog.lmlphp.com/archives/628/Found_a_huge_bug_in_a_search  来自 : LMLPHP后院

世界很复杂，屁民是局外人，不会明白的。最近的 Tesla 事件，有多少人看不明白，有多少人看的明白，若是按照外媒的分析，G J 怎么那么多阴谋啊，那么闲的？也不至于吧！！！

可见搜索引擎内部错的离谱。。。

1，爬虫抓取的内容窜台了，一定是把不同网站的内容搞混了，而产生了严重错误的统计。。。

后台显示，屏蔽了某度 100 多个 ip，估计 ip 池都被屏蔽了，站长发现系统自动屏蔽了搜索引擎，第一时间进行检查，发现的的确确是请求了大量 404 页面所致，不知道某度为什么要无中生有的请求大量 404 页面，并且是新的 ip 段，所以被系统自动屏蔽。后来就急急忙忙的清理了这些 ip，没有进行保存，只留下了几个，如下：

id : 6457300
uri : https://news.cctv.com/2018/03/20/VIDEoo9Q84OMEMHyX441p6eK180320.shtml
remote_addr : 116.179.37.176
http_user_agent : Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
http_accept : image/webp,image/apng,image/*,*/*;q=0.8
http_accept_language : zh-CN,zh;q=0.9;q=0.9,en;q=0.8;q=0.8,en-GB;q=0.7;q=0.7,en-US;q=0.6;q=0.6,fr;q=0.5;q=0.5
http_accept_encoding : gzip
timestamp : 1620751469117
screen : 1600x1600
location :
statistic_id : 74464410
milli_consumed : 1798
createtime : 1620751469
uri_decode : https://news.cctv.com/2018/03/20/VIDEoo9Q84OMEMHyX441p6eK180320.shtml
_http_referer : https://news.cctv.com/2018/03/20/VIDEoo9Q84OMEMHyX441p6eK180320.shtml
_createtime : 2021-05-12 00:44:29

上面是统计错误，真是奇了怪了。唯一的一次统计机会，uri 确是 CCTV。

2，Big Mistake，请求了完全不存在的地址，这种情况应该也是内部错误把，导致后台封杀了大量的 IP。

id : 75435437
http_host : www.lmlphp.com
request_uri : /View/Newdates.aspx/id=20210512cvBFsXdM
remote_addr : 116.179.32.194
request_method : GET
http_x_forward_for :
http_user_agent : Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
http_accept : */*
http_accept_language : zh-cn,zh-tw
http_accept_encoding :
request_time_float : 1620830865.891
createtime : 1620830865
http_referer :
_request_uri : /View/Newdates.aspx/id=20210512cvBFsXdM
_http_referer :

3，一样乱来

id : 75450967
http_host : www.lmlphp.com
request_uri : /Zhan/Zhannews.aspx/type=5id=20210512PwDOkNTQ
remote_addr : 220.181.108.100
request_method : GET
http_x_forward_for :
http_user_agent : Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
http_accept : */*
http_accept_language : zh-cn,zh-tw
http_accept_encoding :
request_time_float : 1620832090.951
createtime : 1620832090
http_referer :
_request_uri : /Zhan/Zhannews.aspx/type=5id=20210512PwDOkNTQ
_http_referer :

可见内部糟透了！现在的投资人估计也不管公司内部了吧，看的都是人口红利和意识形态，你乱搜关我毛事，只要能放广告赚钱就可以。