欧洲杯-米乐M6官方网站儿童“萝莉资源”已被远程主机强行关闭

　　记者查询发现，robots.txt是搜索引擎访问网站时查看的第一个文件欧洲杯-米乐M6官方网站，这个文件用于指定spider在该网站上的抓取范围。部分网站由于存在不想被搜索引擎收录的内容，会使用robots.txt文件来屏蔽网站的部分内容或者全部内容。若网站对百度spider设置了robots.txt文件，欧洲杯-米乐M6官方网站百度会遵循robots协议，不抓取封禁的结果，但考虑到用户在搜索引擎中有搜索该网站地址的需求，搜索结果中会根据搜索需求展示网站的标题及网址，但不会显示网站摘要。