單項選擇題Robots.txt文件是搜索引擎抓取網(wǎng)站第一個需要查看的文件,網(wǎng)站通過Robots協(xié)議告訴搜索引擎哪些頁面可以抓取,哪些頁面不能抓取。在www.domain.com中,如禁止所有搜索引擎程序抓取www.domain.com/A下所有內(nèi)容,Robots文件應(yīng)如何設(shè)置?()

A."User-agent:*Disallow:/A"
B."User-agent:Allow:/A"
C."User-agent:Disallow:/"
D."User-agent:*Allow:/"


您可能感興趣的試卷

你可能感興趣的試題

1.多項選擇題robots.txt支持的代碼為()。

A.Allow
B.Disallow
C.sitemap
D.nofollow

2.單項選擇題Robots文件中,以下哪個指令為禁止抓取某些內(nèi)容?()

A.Allow
B.Disallow
C.nofollow
D.noodp

3.多項選擇題SEO常用工具包括()。

A.百度推廣助手
B.關(guān)鍵詞拓展工具
C.流量預(yù)估工具
D.日志分析工具

4.多項選擇題SEO的3大考核指標(biāo)是什么()。

A.SEO流量
B.轉(zhuǎn)化率
C.銷售與意向量
D.排名名次

5.單項選擇題SEO的核心是什么?()

A.文章更新
B.鏈接交換
C.外鏈建設(shè)
D.用戶體驗度