搜索引擎蜘蛛又称为()，是一种按照一定的规则。自动地抓取万维网信息的程序或脚本。

A．全文搜索引擎缺点是信息更新不及时

B．全文搜索引擎是真正的搜索引擎

C．全文搜索引擎是在从互联网上提取的各个网站的信息而建立的数据库中，检索与用户查询条件匹配的相关记录，然后按一定的排列顺序将结果返回给用户

D．全文搜索引擎通常是由一个称为蜘蛛（Spider）的机器人程序以某种策略自动地在互联网中搜集和发现信息，由索引器为搜集到的信息建立索引，由检索器根据用户的查询输入检索索引库，并将查询结果返回给用户

搜索引擎定期自动搜索信息的功能是指，每隔一段时间（比如Google一般是28天)，搜索引擎主动派出蜘蛛程序，对一定（)范围内的互联网站进行检索。

A、数量

B、地区

C、IP地址

D、时间

大站优先，顾名思义就是对互联网中（)的页面进行优先抓取，是搜索引擎中的一种信息抓取策略。

A.小型网站

B.中小型网站

C.大型网站

D.大中型网站

定期抓取又称为（)。

A.定量抓取

B.周期性抓取

C.定时抓取

D.定向抓取

WWW称为（)，有时简写为Web。严格的说，WWW并不是一种网络，而是一种信息组织方式。

A.互联网

B.互连网

C.万维网

D.因特网

A.蜘蛛就是搜索引擎的网络爬虫

B.每个搜索引擎蜘蛛名称不同

C.网站被搜索引擎降权后蜘蛛永远不会光临此网站

D.站长可以通过技术等优化来吸引蜘蛛爬行抓取

在为禁止搜索引擎抓取网页设计的Robots.txt文件中，哪些指令标示禁止抓取？（)

A.Allow

B.Disallow

C.index

D.noindex