我想网-原创GIF动图网站,以GIF看世界,不一样的科普平台!

小红书已屏蔽百度抓取,百度好日子到头了

我想网官网 2024-01-18 09:55:03全网优质搞笑GIF领域创作者

小红书已屏蔽百度抓取,截止到2024年1月18日,小红书网站共有 7亿9807万 个网页被百度收录,估计百度爬虫太消耗小红书服务器资源了,这样下去,百度优质内容和好日子就快到头了,还有百度app专门为小红书开的tab笔记,将何去何从?

www.xiaohongshu.com站点信息

备案方:行吟信息科技(上海)有限公司,该网站共有 7亿9807万 个网页被百度收录,更多到搜索资源平台分析收录量

小红书robots.txt文件内容如下:

通过https://www.xiaohongshu.com/robots.txt来看,已全部屏蔽百度蜘蛛抓取,Disallow代表禁止抓取任何网页内容,同时还包括google、搜狗、360、必应等。

User-agent:Googlebot

Disallow:/

User-agent:Baiduspider

Disallow:/

User-agent:bingbot

Disallow:/

User-agent:Sogou web spider

Disallow:/

User-agent:Sogou wap spider

Disallow:/

User-agent:YisouSpider

Disallow:/

User-agent:BaiduSpider-ads

Disallow:/

User-agent:*

Disallow:/

目前,淘宝很早就屏蔽百度了

大站不需要百度,小站百度看不上,这百度非百度了,但还是可以收录并搜到淘宝,因为淘宝品牌大,很多网站会分享。但搜索收录到的大部分是首页,且描述显示的是被屏蔽,内容页则是大部分搜不到。

温馨提示:© 转载注明来源《我想网》特此声明:本文由想友提供,观点仅代表本人,如若侵权请告知。
打赏
10,398位想友已打赏,部分“大名”未获取

热搜榜

100张极品GIF,不看遗憾! 1娶国外媳妇,她前夫养? 2一个人从穷变富,是有迹可循的 3KTV的陪酒女干净么 4东北阿姨搓澡,掰开腿? 5这个世界,其实就你一个人 6做“离婚搭子”靠谱么 7我想网(wogif.com)网址是什么? 8一天一棵葱,从春立到冬 9程兵和苗苗说,你姑娘腿真白! 10古代女人“舒服”的一种刑罚是什么

想网百科

电车为什么不如油车保值?全网最通俗答案,新手看完再买车 “红影影胎”是什么意思?刚冒头又走了 动图GIF和短视频比起来,有哪些优势? 《我想网》网站怎么样 搜索引擎喜欢它的内容吗? PCR丙肝CV-RNA报告单怎么看?

搞笑图片

马上2027了,追女生,看透女生,依旧是一个世纪难题 小姐姐是真扑:我叫李子璇,看到你的迈巴赫S480,很有品味。 北京麦当劳,有这么粉,这么漂亮的"女员工"? 你家搓澡师傅是GAY——来自商家的委屈 搞笑生活瞬间猜图,这是身体哪个部位? ​

动图GIF

夕季千岁(七草ちとせ),躺在沙发上,大体格子! 越南人跳电锯,会是什么结果?(警示GIF) 森彩美老师,长得像汤加丽,裸身高172,被人当场撩了 出行攻略:体型肥胖的女生,不要坐A、F靠窗(GIF图) 黄裤女生,哨兵模式下的"随地大小便",二者不可兼得

新段子

麻豆传媒都能倒闭,是演员丑吗? 给了她800彩礼,她开心地说:当晚就洞房——帽子叔叔 感觉2027年老师要失业了,小学招不到生源... 我爸做了30页"不带套生活的危害"PPT 别和女人讲理,但这次“好像赢了”

无话不说

找“异性影子”的人结婚,婚姻是无有效期的 我的硕博圈导师,是一个“土皇帝”怎么办? 李世民灰色的地方:用肮脏的手段上台,做干净的事情 婚外的情,这个东西,不是谁都能玩的——情感的流浪记 追女生之前,先翻她的朋友圈,不行就撤!
追女生之前,先翻她的朋友圈,不行就撤!
关注《我想网》公众号

百万GIF动图,免费看!下载地址>>