在为禁止搜索引擎抓取网页设计的Robots.txt文件中，哪些指令标示禁止抓取（）

搜索引擎可以分成全文搜索引擎、 和元搜索引擎。 符合什么特点的网站容易被搜索引擎抓取（） 什么因素影响搜索引擎抓取一个网站？ 搜索引擎返回抓取正常的HTTP状态码是（）。   按搜索引擎的内容分，搜索引擎可以分为综合类搜索引擎和专业类搜索引擎。 常用的搜索引擎类型有全文搜索引擎、元搜索引擎和（）。 搜索引擎可分为全文搜索引擎、目录索引和元搜索引擎。 常用的搜索引擎类型有目录式搜索引擎、元搜索引擎和（）。 简述全文索引搜索引擎和目录索引搜索引擎的区别。简述全文索引搜索引擎和目录索引搜索引擎的区别。 常见中文搜索引擎有：Google中文搜索引擎、百度（baidu）中文搜索引擎、北大天网中英文搜索引擎和新浪搜索引擎等。 常见中文搜索引擎有：Google中文搜索引擎、百度（baidu）中文搜索引擎、北大天网中英文搜索引擎和新浪搜索引擎等（） 下列搜索引擎中,()属于专业搜索引擎 搜索引擎的搜索器负责把抓取的网页进行结构化,然后把结构化后的数据存储到索引库中 搜索引擎营销方法主要分为登录搜索引擎、搜索引擎付费营销、3大类 搜索引擎的搜索器实际上是信息抓取程序，又称为（） 下列的搜索引擎工具中______属于索引式搜索引擎。 GOOGLE 搜索引擎是被动式搜索引擎。 GOOGLE搜索引擎是被动式搜索引擎。() 元搜索引擎是名副其实的搜索引擎。()   搜索引擎按其工作方式的不同，可以分为全文搜索引擎、目录索引类搜索引擎和（　　）