迅睿CMS框架是一款PHP8高性能·簡單易用的CMS開源開發框架,基于MIT開源許可協議發布,免費且不限制商業使用,是免費開源的產品,以萬端互聯為設計理念,支持的微信公眾號、小程序、APP客戶端、移動端網站、PC網站等多終端式管理系統。
聯系官方銷售客服
1835022288
028-61286886
/index.php?s=api&c=module&siteid=1&app=news&m=hits&id=238 這種地址 是禁止搜索引擎抓取的 請問 這個抓取是在哪個文件里面改啊!我想變通改一下 禁止他還抓一些其他頁面! 如廣告頁 如 css等
告訴網絡搜索引擎的漫游器(又稱網絡蜘蛛),此網站中的哪些內容是不應被搜索引擎蜘蛛獲取的,...
如果不會寫,可以考慮使用插件
robots.txt文件中添加禁止:
User-agent: * Disallow: /index.php
禁止抓取index.php文件
Disallow: /index.php*
禁止抓取以index.php開頭的所有鏈接
Disallow: /index.php*禁止抓取這個的文件,但是這個只是禁止,你訪問還是可以訪問的
Robots爬蟲協議生成器
告訴網絡搜索引擎的漫游器(又稱網絡蜘蛛),此網站中的哪些內容是不應被搜索引擎蜘蛛獲取的,...
如果不會寫,可以考慮使用插件
robots.txt文件中添加禁止:
禁止抓取index.php文件
禁止抓取以index.php開頭的所有鏈接