迅睿開源框架是一款PHP8高性能·簡單易用的PHP開源開發(fā)框架, 基于MIT開源許可協(xié)議發(fā)布,不限制商業(yè)使用,以多端互聯(lián)為設計理念, 支持的微信公眾號、小程序、APP客戶端、移動端網(wǎng)站、PC網(wǎng)站等多終端式管理系統(tǒng)。
業(yè)務經(jīng)理
微信掃描以上二維碼
028-61286886
技術咨詢
有些欄目不希望被蜘蛛抓取,怎么設置才能顯示為不可點擊
有沒有什么解決辦法,
還有友情鏈接模塊也生成出來的,蜘蛛全都抓取了友情鏈接
很頭疼
蜘蛛txt文件控制
回復@湖邊小伙 這個只是一種權宜之計,但是希望還是不要直接被抓取,不要顯示,感覺怪怪的
通過 robots.txt文件設置 Disallow:這里是不希望被蜘蛛抓取的目錄
如果不知道怎么設置,可以通過網(wǎng)站https://tool.chinaz.com/robots?qq-pf-to=pcqq.group生成后放到網(wǎng)站根目錄
回復@開心果 這個方法我知道,我的意思是怎么能讓這些鏈接不出現(xiàn)在文件里面
安裝官方的sitemap工具。
然后寫對應的sql屏蔽欄目id
比如:就是屏蔽欄目id為8
蜘蛛txt文件控制
回復@湖邊小伙 這個只是一種權宜之計,但是希望還是不要直接被抓取,不要顯示,感覺怪怪的
通過 robots.txt文件設置 Disallow:這里是不希望被蜘蛛抓取的目錄
如果不知道怎么設置,可以通過網(wǎng)站https://tool.chinaz.com/robots?qq-pf-to=pcqq.group生成后放到網(wǎng)站根目錄
回復@開心果 這個方法我知道,我的意思是怎么能讓這些鏈接不出現(xiàn)在文件里面
安裝官方的sitemap工具。
然后寫對應的sql屏蔽欄目id
比如:

就是屏蔽欄目id為8