robots.txt不支持的代码为（）
A: Allow
B: Disallow
C: Crawl-delay
D: noindex
A: Allow
B: Disallow
C: Crawl-delay
D: noindex
D
举一反三
- robots.txt支持的代码为（）。 A: Allow B: Disallow C: sitemap D: nofollow
- 在 robots.txt 文件中,不允许访问以“.asp”结尾的 URL 的代码是( )。 A: Allow:/*.asp$ B: Disallow:/*.asp$ C: Allow:/*.asp D: Disallow:/*.asp
- robots.txt不支持的代码为（）
- 下列选项中,用于在robots.txt文件中描述搜索引擎名字的是()。 A: User-agent B: Disallow C: Allow D: accept
- 关于网络爬虫协议文件robots.txt，说法错误的是（） A: 一个网站可以放多个不同robots文件 B: robots文件不可以用xml格式命名 C: disallow用来描述不希望被访问到的一个URL D: robots文件可以放在任何位置
内容
- 0
robots.txt与meta robots html在使用过程中的区别，以下说法正确的是（ ） A: robots.txt文件这个方式下页面会被抓取 B: robots.txt文件这个方式下页面不会被抓取 C: robots.txt文件这个方式下页面会被收录 D: meta robots html页面会被抓取但不会被索引
- 1
智慧校园平台可云定制，个性化定制，远程部署（） A: 支持，支持 B: 支持，不支持 C: 不支持，支持 D: 不支持，不支持
- 2
大额存单认购（）冲正，大额存单兑付（）冲正。 A: 支持、支持 B: 支持、不支持 C: 不支持、不支持 D: 不支持、支持
- 3
目前红人点点APP上（）资源认证，（）公众号及新闻媒体资源的绑定 A: 支持；支持 B: 支持；不支持 C: 不支持；支持 D: 不支持；不支持
- 4
音频使用了什么效果？浏览器不支持音频 A: Flanger B: Delay C: Distortion D: Fegnalf