robots.txt文件主要放在网站根目录下。
正确
举一反三
- robots.txt文件放在哪里() A: 网站根目录下 B: 网站子栏目下 C: 网站内容页面 D: 网站图片文件
- 关于网络爬虫协议文件robots.txt,说法错误的是() A: 一个网站可以放多个不同robots文件 B: robots文件不可以用xml格式命名 C: disallow用来描述不希望被访问到的一个URL D: robots文件可以放在任何位置
- 当前目录为根目录,要删除C:盘根目录下WS子目录中后缀为.TXT的所有文件,可使用()。
- 当前目录为根目录,要删除C:盘根目录下WS子目录中后缀为.TXT的所有文件,可使用()。 A: DELC:*.TXT B: DELWS*.TXT C: DELWS*.TXT D: DELC:WS*.TXT
- 下列哪个文件应存放在网站根目录下()。 A: robots.txt B: config.php C: backup.zip D: logo.jpg
内容
- 0
web.xml文件位于Web项目目录结构中的哪个目录下? A: src目录 B: META-INF目录 C: WEB-INF目录 D: 文件根目录
- 1
Dir命令显示() A: 根目录下的文件 B: Windows目录下的文件 C: 当前目录下的文件 D: 所有目录的文件
- 2
切换到根目录,用ls命令列出此目录下的文件和目录,用-a选项列出此目录下包括隐藏文件在内的所有文件和目录。
- 3
robots.txt与meta robots html在使用过程中的区别,以下说法正确的是( ) A: robots.txt文件这个方式下页面会被抓取 B: robots.txt文件这个方式下页面不会被抓取 C: robots.txt文件这个方式下页面会被收录 D: meta robots html页面会被抓取但不会被索引
- 4
#ls *.txt 命令可以显示当前目录下所有的文件及目录()