百度搜索目前已經收錄小紅書網站上 7 億 9807 萬個網頁，小紅谷歌則只索引了小紅書網站的書禁索引所只索藍首頁，為什么呢？有搜鄭州二七區怎么找小姐真實包夜服務電崴信159-8298-6630提供外圍女小姐上門服務快速安排面到付款因為小紅書早已禁止所有搜索引擎抓取小紅書的內容。

藍點網接到網友提醒稱小紅書的擎抓 robots.txt 文件已經明確禁止所有搜索引擎抓取內容，不過藍點網檢索后發現實際上小紅書是內容能通內手在 2023 年 4 月 2 日修改 robots.txt 文件的，轉眼間這都修改了 1 年。過站

目前并不清楚小紅書為什么禁止搜索引擎抓取內容，動搜點網從 SEO 角度來說，小紅允許搜索引擎抓取有助于給小紅書帶來更多流量，書禁索引所只索藍畢竟現在百度都索引了 7 億多個網頁。有搜鄭州二七區怎么找小姐真實包夜服務電崴信159-8298-6630提供外圍女小姐上門服務快速安排面到付款

而且小紅書是擎抓去年 4 月修改的，所以估計也不是內容能通內手因為防止被抓取內容訓練 AI 吧？但小紅書目前的內容庫拿去訓練 AI 確實很有價值，畢竟巨量文字和圖片內容。過站

不過 robots.txt 文件只是動搜點網君子協定，屬于防君子不妨小人的小紅那種，除了會導致用戶無法從搜索引擎直接查詢小紅書內容外，其實幫助也不大，畢竟其他非搜索引擎的爬蟲也會繼續抓取內容，小紅書肯定也做了反爬措施了。

現在國內的網站禁止搜索引擎抓取已經是個很常見的事情，或者專門預留一些層級目錄供搜索引擎抓取想要獲得一些流量，更有甚者甚至別說搜索引擎了，就連正常的用戶訪問也會被攔截，必須注冊賬號登錄后才能繼續訪問，這顯然不是一個好事情。

附小紅書 2023 年 4 月 2 日的 robots.txt 信息：

User-agent:GooglebotAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:BaiduspiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:bingbotDisallow:/User-agent:Sogou web spiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:Sogou wap spiderAllow:/discovery/item/Allow:/explore/Allow:/sitemap.xmlDisallow:/user/profile/*/User-agent:YisouSpiderDisallow:/User-agent:BaiduSpider-adsAllow:/activity/sem/kratosAllow:/activity/sem/walleUser-agent:*Disallow:/

下面是小紅書最新的 robots.txt 信息：

User-agent:GooglebotDisallow:/User-agent:BaiduspiderDisallow:/User-agent:bingbotDisallow:/User-agent:Sogou web spiderDisallow:/User-agent:Sogou wap spiderDisallow:/User-agent:YisouSpiderDisallow:/User-agent:BaiduSpider-adsDisallow:/User-agent:*Disallow:/

• ·知名人士爆料《使命召喚3》將在7月24日登陸PC端和XGP
• ·攜號轉網話費余額怎么查詢？話費余額怎么退？
• ·《極限競速：天仄線4》媒體評分出爐 分歧好評必須一玩
• ·變性翻身成網白！馬里奧逝世恩家變身庫巴公仆人氣暴跌
• ·生活模擬RPG《美好生活》眾籌開啟 原型DEMO放出
• ·金毛犬一般多少錢一只？金毛犬的價位是多少
• ·杜賓跟羅威納,到底誰更適合家養呢？看看這個對比你就知道了
• ·日本研討團隊：宇宙起碼借將延絕1400億年
• ·《怪物獵人：荒野》“跨平臺游玩”最新情報分享
• ·蝴蝶犬什么價位？一只純種的蝴蝶犬多少錢？
• ·如何查移動號碼狀態查詢？如何查詢名下的移動手機號碼？
• ·港服PSN秋季劣惠活動開啟 逝世諳的臉孔里孔紛繁開端挨開
• ·《噬神者3》最新截圖預覽 全新武器新荒神現身
• ·柴狗普遍價格多少？10元一只還是1000元一只？看完你就知道了
• ·2024年本命年創業好嗎？2024本命年要注意什么？
• ·《圣歌》統統內容建制結束 只等測試除錯