聯系官方銷售客服
1835022288
028-61286886
投訴
已解決 搜索設置集成欄目頁后，是否需要禁止爬蟲訪問欄目頁
3 0
模塊搜索設置集成欄目頁后，是否需要禁止爬蟲訪問欄目頁？
因為集成欄目頁后，訪問欄目頁會定向到搜索頁面。還看到要盡量屏蔽蜘蛛爬蟲訪問搜索頁面。
所以就有了這個問題。
過濾防火墻
蜘蛛防火墻過濾，IP防火墻過濾，攔截指定IP，攔截不常用的蜘蛛，不浪費流量
我用這個屏蔽的蜘蛛
rebox.txt
我知道使用這個方式可以屏蔽，但是不知道這種情況需不需要屏蔽。
回復@帥不過十秒