- 當前位置：首頁 > 知識 > 小紅書禁止所有搜索引擎抓取其內容 所以只能通過站內手動搜索了 – 藍點網
游客發表
百度搜索目前已經收錄小紅書網站上 7 億 9807 萬個網頁，小紅谷歌則只索引了小紅書網站的書禁索引所只索藍首頁，為什么呢？有搜大連金州上課工作室（品茶喝茶）vx《189=4143》提供外圍女上門服務快速選照片快速安排不收定金面到付款30分鐘可到達因為小紅書早已禁止所有搜索引擎抓取小紅書的內容。
藍點網接到網友提醒稱小紅書的擎抓 robots.txt 文件已經明確禁止所有搜索引擎抓取內容，不過藍點網檢索后發現實際上小紅書是內容能通內手在 2023 年 4 月 2 日修改 robots.txt 文件的，轉眼間這都修改了 1 年。過站
目前并不清楚小紅書為什么禁止搜索引擎抓取內容，動搜點網從 SEO 角度來說，小紅允許搜索引擎抓取有助于給小紅書帶來更多流量，書禁索引所只索藍畢竟現在百度都索引了 7 億多個網頁。有搜大連金州上課工作室（品茶喝茶）vx《189=4143》提供外圍女上門服務快速選照片快速安排不收定金面到付款30分鐘可到達
而且小紅書是擎抓去年 4 月修改的，所以估計也不是內容能通內手因為防止被抓取內容訓練 AI 吧？但小紅書目前的內容庫拿去訓練 AI 確實很有價值，畢竟巨量文字和圖片內容。過站
不過 robots.txt 文件只是動搜點網君子協定，屬于防君子不妨小人的小紅那種，除了會導致用戶無法從搜索引擎直接查詢小紅書內容外，其實幫助也不大，畢竟其他非搜索引擎的爬蟲也會繼續抓取內容，小紅書肯定也做了反爬措施了。
現在國內的網站禁止搜索引擎抓取已經是個很常見的事情，或者專門預留一些層級目錄供搜索引擎抓取想要獲得一些流量，更有甚者甚至別說搜索引擎了，就連正常的用戶訪問也會被攔截，必須注冊賬號登錄后才能繼續訪問，這顯然不是一個好事情。
附小紅書 2023 年 4 月 2 日的 robots.txt 信息：
User-agent:GooglebotAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:BaiduspiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:bingbotDisallow:/User-agent:Sogou web spiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:Sogou wap spiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:YisouSpiderDisallow:/User-agent:BaiduSpider-adsAllow:/activity/sem/kratosAllow:/activity/sem/walleUser-agent:*Disallow:/
下面是小紅書最新的 robots.txt 信息：
User-agent:GooglebotDisallow:/User-agent:BaiduspiderDisallow:/User-agent:bingbotDisallow:/User-agent:Sogou web spiderDisallow:/User-agent:Sogou wap spiderDisallow:/User-agent:YisouSpiderDisallow:/User-agent:BaiduSpider-adsDisallow:/User-agent:*Disallow:/
隨機閱讀
- Steam12月第二周銷量 咒語力量3新晉榜單
- 一線｜“活雷鋒”雪村演笑劇 《一起瘋顛》存眷空巢白叟笑中帶淚
- 北京秋季周邊游景面保舉
- 青島天鐵四周的景面有哪些
- 《最終幻想》VR設施1月中旬開放 進入FF的世界
- 桐廬旅游必往十大年夜景面有哪些 桐廬哪個景面最值得往
- 2022國慶節上海躲書樓開放時候匯總
- 2023上海車展：iCAR 03/GT概念車發布
- 恐怖游戲新作《KLETKA》Steam推出體驗版可以4名玩家聯機
- 小教斷念靈感悟人逝世勵志感悟句子條人逝世感悟心語簡短
- 韓版禁毒令更寬格！好籍韓裔藝人Amy被勒令出國
- 京鄉名媛趙欣瑜斥小三：睹到您便挨逝世您 會給大年夜家交代
- 【天下貳】你還不知道這些“性價比之王”？只要3元寶，新坐騎帶回家！
- 楊紫瓊赴僧泊我賑災：與僧泊我豪情深薄 存眷災后救濟
熱門排行