分布式爬虫只能动态地获取爬虫可搜索的域名范围。( )
举一反三
- 对于爬虫描述错误的是 A: 分布式爬虫和对等式分布爬虫主要是存储物理位置有区别 B: 对于主从式分布爬虫,不同的服务器承担不同的角色分工 C: 对于对等式分布爬虫,每台服务器承担相同的功能 D: 一个大型分布式爬虫的3个等级:分布式数据中心、分布式抓取服务器、分布式爬虫程序
- 网络爬虫包括以下()类型。 A: 通用网络爬虫 B: 聚焦网络爬虫 C: 增量式网络爬虫 D: 深层网络爬虫
- 下列属于常见爬虫类型的是( )。 A: 增量式网络爬虫 B: 通用网络爬虫 C: 浅层网络爬虫 D: 聚焦网络爬虫
- 【名词解释】搜索引擎蜘蛛、通用网络爬虫、聚焦网络爬虫、增量式网络爬虫
- 以下关于网络爬虫的描述中,错误的一项是()。 A: 在爬虫开始的时候,需要给爬虫输送一个URL列表,作为爬虫的起始位置 B: 根据某种抓取策略爬行新发现的URL,如此重复下去 C: 爬虫程序会抓取所有网页,以保证搜索正确性 D: 对于商业搜索引擎来说,分布式爬虫是必须采用的技术