判断蜘蛛有没有来过自己的网站可以查看IIS日志代码。
或者联系空间商开通了蜘蛛访问记录也可以。如果你的空间商给你的空间支持查询蜘蛛访问记录的话。可以在ftp找到WebLog的文件夹，具体步骤如下：
1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹
(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)
2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.
3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.
4.解压后,打开日志文件.Ctrl+F查找baidu.com/search
特征字符(这里以百度蜘蛛为例)
通过分析蜘蛛来访纪录,可以了解本站的大体情况,而不用再为百度不放出内页或者不收录的问题而苦恼了.
蜘蛛来访正常,可以确切的说,搜索引擎对你的站很友好的,坚持更新自己的网站,会有不错的收录的.注:有些共享IP空间可能不支持日志功能.对于独立ip虚拟主机则提供每天的日志下载.而实在没有可以日志功能的空间可以参考使用
蜘蛛爬行插件
的一些方法进行分析.希望看在我说了这么多的份上，给个采纳！！谢谢追问
或者联系空间商开通了蜘蛛访问记录也可以。如果你的空间商给你的空间支持查询蜘蛛访问记录的话。可以在ftp找到WebLog的文件夹，具体步骤如下：
1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹
(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)
2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.
3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.
4.解压后,打开日志文件.Ctrl+F查找baidu.com/search
特征字符(这里以百度蜘蛛为例)
通过分析蜘蛛来访纪录,可以了解本站的大体情况,而不用再为百度不放出内页或者不收录的问题而苦恼了.
蜘蛛来访正常,可以确切的说,搜索引擎对你的站很友好的,坚持更新自己的网站,会有不错的收录的.注:有些共享IP空间可能不支持日志功能.对于独立ip虚拟主机则提供每天的日志下载.而实在没有可以日志功能的空间可以参考使用
蜘蛛爬行插件
的一些方法进行分析.希望看在我说了这么多的份上，给个采纳！！谢谢追问
能不能简单点？还有更简单的办法吗？
追答查看日志文件
温馨提示：答案为网友推荐，仅供参考
第1个回答 推荐于2016-12-01
百度蜘蛛，是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容，然后分门别类建立索引数据库， 使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。
1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹
(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)
2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.
3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.
4.解压后,打开日志文件.Ctrl+F查找baidu.com/search
1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹
(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)
2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.
3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.
4.解压后,打开日志文件.Ctrl+F查找baidu.com/search
第2个回答 2014-10-21
蜘蛛挂机吧，现在不能用了，有时间限制的
第3个回答 2017-10-31
这还是很简单的嘛，IIS日志可以查看的
相似回答