如何知道百度蜘蛛，怎么判断百度蜘蛛是否来过自己的网站

来源：整理时间：2024-07-31 02:19:58 编辑：网络营销手机版

本文目录一览

1，怎么判断百度蜘蛛是否来过自己的网站
2，如何判断来访的IP是否是百度蜘蛛ip
3，怎样才能知道百度蜘蛛来过呢
4，百度蜘蛛是什么常见百度爬虫有那些问题
5，如何查看百度蜘蛛路径
6，如何识别百度蜘蛛如何识别百度蜘蛛网
7，怎么分辨百度蜘蛛用工具查假的蜘蛛分辨出不来
8，如何判断百度蜘蛛真假baiducom百度蜘蛛真假查询
9，如何看百度蜘蛛是否有来过
10，怎样知道百度蜘蛛是否来过

1，怎么判断百度蜘蛛是否来过自己的网站

蜘蛛的爬行可以通过你空间的IIS日志查看，一般网站的根目录下都有LOG这样的文件夹。日志就保存在里面。不知道你的是不是win的系统，我用过wordpress的一个插件，是可以统计到机器人的访问记录

怎么判断百度蜘蛛是否来过自己的网站

2，如何判断来访的IP是否是百度蜘蛛ip

对于网站运营人员而言会特别关注搜索引擎蜘蛛抓取网站的频率，一旦发现SEO出现问题时运营人员就需要分析网站访问日志来分析原因。一个网站每天产生的日志是比较多的，如何从日志里辨别是否是百度蜘蛛的请求呢？主要有以下几种方式。通过UA来辨别百度蜘蛛UA头信息指的是用户代理信息，里面会记录客户端系统及浏览器的一些信息，如果UA头信息里出现了Baiduspider则代表是百度蜘蛛程序发起的请求。通过来源IP段来辨别百度蜘蛛百度蜘蛛它是一个综合性蜘蛛程序，它有IP段范围的（如：220.181.108.75~220.181.108.123），比如抓取首页的蜘蛛程序用到的IP和抓取内页用到的IP可能是不同的。网络上有百度蜘蛛的IP段分布表，大家可以去查下资料，但为了准确性建议向百度官方咨询具体的IP段范围。查询来访IP绑定的域名我们可以通过技术手段查询某个IP与域名的绑定关系，在Windows上可通过nslookup命令来查询。比如我们从日志里定位到了百度蜘蛛的IP地址，则可以直接以下命令确认是否绑定的是百度的域名：总结：无论是通过UA头信息还是IP段来判断某个IP是否是百度蜘蛛所使用的IP，都存在风险，因为UA头和来源IP都是可以伪造的！以上就是我的观点，对于这个问题大家是怎么看待的呢？欢迎在下方评论区交流~我是科技领域创作者，十年互联网从业经验，欢迎在线咨询

如何判断来访的IP是否是百度蜘蛛ip

3，怎样才能知道百度蜘蛛来过呢

查看网站日志，一般都在空间的log文件夹里，反正根目录有3个文件夹，除了一个放程序的另外2个一个是放程序压缩包的，一个就是放日志的，如果没有可以找空间服务商开启网站日志。

看服务器日志看是否有个叫Baiduspider的东西

怎样才能知道百度蜘蛛来过呢

4，百度蜘蛛是什么常见百度爬虫有那些问题

简单理解，百度蜘蛛又名百度爬虫，主要的工作职能是抓取互联网上现有的URL，并对页面质量进行评估，给出基础性的判断。通常百度蜘蛛抓取规则是：种子URL->待抓取页面->提取URL->过滤重复URL->解析网页链接特征->进入链接总库->等待提取。1、如何识别百度蜘蛛快速识别百度蜘蛛的方式有两种：① 网站<a href=网址>蜘蛛日志分析，可以通过识别百度蜘蛛UA，来判断蜘蛛来访记录，相对便捷的方式是利用<a href=网址>SEO软件</a>去自动识别。关于百度UA的识别，你也可以查看官方文档：<a href=网址② CMS程序插件，自动嵌入识别百度爬虫，当蜘蛛来访的时候，它会记录相关访问轨迹。2、百度蜘蛛收录网站规则有那些?并不是每一个网站的蜘蛛来爬寻抓取就会被收录的，这样就会形成一个搜索引擎主要流程，这个流程主要分为，抓取、筛选、对比、索引最后就是释放，也技术展现出来的页面。抓取：爬虫是根据网站URL连接来爬寻的，它的主要目的是抓取网站上所以文字连接，一层一层有规则的爬寻。筛选：当抓取完成后，筛选这个步骤主要是筛选出垃圾文章，比如翻译、近义词替换、伪原创文章等，搜索引擎都能够识别出来，而是通过这一步骤识别。对比：对比主要是实行百度的星火计划，保持文章的原创度。通常情况下，经过对比的步骤的时候，搜索引擎会对你站点进行下载，一来对比，二来创建快照，所以搜索引擎蜘蛛已经访问你的网站，所以网站日志中会有百度的IP。索引：通过确定你网站没有问题的时候，才会对你网站创建索引，如果创建索引了，这也说明你的站点被收录了，有时候我们在百度搜索还是不出来，可能原因是还没有被释放出来，需要等待。3、关于百度爬虫一些常见问题：① 如何提高百度抓取频率，抓取频率暴涨是什么原因早期，由于收录相对困难，大家非常重视百度抓取频率，但随着百度战略方向的调整，从目前来看，我们并不需要刻意追求抓取频率的提升，当然影响抓取频次的因素主要包括：网站速度、安全性、内容质量、社会影响力等内容。如果你发现站点抓取频率突然暴涨，可能是因为：存在链接陷阱，蜘蛛不能很好抓取页面，或者内容质量过低，需要从新抓取，也可能是网站不稳定，遭遇负面SEO攻击。② 如何判断，百度蜘蛛是否正常抓取很多站长新站上线，总是所发布的文章不收录，于是担心百度爬虫是否可以正常抓取，这里官方提供两个简单的工具：百度抓取诊断：百度Robots.txt检测：你可以根据这两个页面，检测网页的连通性，以及是否屏蔽了百度蜘蛛抓取。③ 百度爬虫持续抓取，为什么百度快照不更新快照长时间不更新并没有代表任何问题，你只需要关注是否网站流量突然下降，如果各方面指标都正常，蜘蛛频繁来访，只能代表你的页面质量较高，外部链接非常理想。④ 网站防止侵权，禁止右键，百度蜘蛛是否可以识别内容如果你在查看网页源代码的时候，可以很好的看到页面内容，理论上百度蜘蛛就是可以正常抓取页面的，这个你同样可以利用百度抓取诊断去解析一下看看。⑤ 百度蜘蛛，真的有降权蜘蛛吗？早期，很多SEO人员喜欢分析百度蜘蛛IP段，实际上官方已经明确表示，并没有说明哪些蜘蛛的爬行代表降权，所以这个问题不攻自破。⑥屏蔽百度蜘蛛,还会收录吗？常规来说屏蔽百度蜘蛛是没办法收录，虽然会收录首页，但是内页却不能收录的，就好比“淘宝”基本上都是屏蔽了百度蜘蛛，只有首页但是依然排名很好。总结：很多市面上就会出现一个蜘蛛池这样的字眼呈现，这是一种并不好的一种变现的方式，搜外seo并不建议大家使用，上述仅供大家参考。

5，如何查看百度蜘蛛路径

查看百度蜘蛛爬行记录的方法：第一，前往空间服务器，下载网站日志。第二，打开网站日志文件，搜索：baiduspider。百度（baidu）爬虫名称：baiduspider第三，鉴别百度蜘蛛的真伪。由于很多站长工具会模拟百度蜘蛛的名称来爬抓网站，因此，需要我们鉴别百度蜘蛛的真伪。鉴别方法：开始—运行—输入 cmd ，用命令nslookup +ip只要是百度的ip段，代码中会有出现：name：baiduspider，如果没有出现，那就不说不是真的百度ip段第四，可以通过日志工具来查看网站日志。例如：光年日志。

6，如何识别百度蜘蛛如何识别百度蜘蛛网

seo如何正确识别百度蜘蛛一、如何正确识别Baiduspider手机ua新的移动ua:Mozilla/5.0(Linux；u；安卓4.2.2；zh-cn；)AppleWebKit/534.46(KHTML，像壁虎一样)版本/5.1手机Safari/10600.6.3(兼容；baiduspider/2.0；)PCua:Mozilla/5.0(兼容；baiduspider/2.0；)之前用“”标识的网站请注意！您需要修改识别方法。识别Baiduspider的移动ua的新的正确方法如下:1.通过关键词“安卓”或“移动”识别，判断为移动接入或抓取。2.通过关键词“Baiduspider/2.0”判断为百度爬虫。另外需要强调的是，对于要禁用的机器人，如果禁用的代理是Baiduspider，那么在PC端和移动端都会生效。也就是PC和移动Baiduspider都不会抓取被禁对象。之所以要强调这一点，是因为我发现了一些代码适配站点(同一个url，PCua打开时是PC页面，移动ua打开时是移动页面)，想通过设置机器人的代理禁令，只让移动Baiduspider抓取。但是由于PC端和移动端Baiduspider的代理都是百度蜘蛛，所以这种方式非常不可取。二、如何识别百度蜘蛛百度蜘蛛可谓是站长的座上宾，但我们曾经遇到过这样提问的站长:我们如何判断疯狂抓取我们网站内容的蜘蛛是不是百度的？其实站长可以通过DNS查IP来判断一个蜘蛛是否来自百度搜索引擎。根据linux/windows/os等不同平台上验证方法的不同，验证方法如下:1.在linux平台下，可以使用hostip命令解密ip，判断是否来自Baiduspider。Baiduspider的主机名以*.baidu.com或*.baidu.jp的格式命名，如果不是*.baidu.com或*.baidu.jp，就是冒名顶替。2.在windows平台或IBMOS/2平台下，可以使用nslookupip命令来逆向ip解决方案，以确定它是否来自Baiduspider。打开命令处理器，输入nslookupxxx.xxx.xxx(ip地址)解析ip，从而确定是否被Baiduspider抓取。Baiduspider的主机名以*.baidu.com或者*.baidu.jp的格式命名，如果不是*.baidu.com或者*.baidu.jp就是冒名顶替。3.在macos平台下，可以使用dig命令解析ip来判断是否来自Baiduspider。打开命令处理器，输入digxxx.xxx.xxx.xxx(ip地址)解析ip，确定是否被Baiduspider抓取。Baiduspider的主机名以*.baidu.com或者*.baidu.jp的格式命名，如果不是*.baidu.com或者*.baidu.jp就是冒名顶替。3.什么是BaiduspiderIP？很多站长即使知道如何判断百度蜘蛛，还是会不停的问“百度蜘蛛IP多少钱”。我们理解站长的意思，就是想把百度蜘蛛的IP加入白名单，只允许白名单下的IP抓取网站，避免被收录。但是我们不建议站长这么做。虽然百度蜘蛛确实有切换真实IP的IP池，但我们不能保证整个IP池不变。所以我们建议站长经常阅读日志，发现恶意蜘蛛后将其列入黑名单，保证百度的正常抓取。同时我们再次强调，通过IP来区分百度蜘蛛的属性是很可笑的。所谓的“沙盒蜘蛛”和“降权蜘蛛”从来就不存在。搜索引擎蜘蛛是怎样抓取网页的呢？搜索引擎用来爬行和访问页面的程序被称为蜘蛛，也叫爬虫。搜索引擎命令它到互联网上浏览网页，从而得到互联网的大部分数据(因为还有一部分暗网，他是很难抓取到的)然后把这些数据存到搜索引擎自己的数据库中。自己发帖或者外推产生的URL如果没有搜索引擎蜘蛛爬行，那么该搜索引擎就不会收录该页面，更不用说排名了。r而蜘蛛池程序的原理，就是将进入变量模板生成大量的网页内容，从而吸大批的蜘蛛，让其不停地在这些页面中抓取，而将我们需要收录的URL添加在蜘蛛站开发的一个特定版块中。这样就能使用我们需要收录的URL有大量的蜘蛛抓取爬行，大大提升了页面收录的可能性。所谓日发百万外链就是这样来的，一个普通的蜘蛛池也需要至少数百个域名。而据我所知高酷蜘蛛池大概有2000个独立域名，日均蜘蛛200W。是比较庞大的一个蜘蛛池了。r以上就是蜘蛛池的原理，那么如何搭建蜘蛛池?1.多IP的VPS或服务器(根据要求而定)r多IP服务器，建议美国服务器，最好是高配配，配置方面(具体看域名数量)不推荐使用香港服务器，带宽小，容易被蜘蛛爬满。重要的是服务器内存一定要大，之前我们就遇到过，前期刚做的时候，用的内存比较小，蜘蛛量一大的话，立马就崩了。r2.一定数量的域名(根据数量而定)r可购买闲置的二手的域名，域名便宜的就好，好点的蜘蛛池，至少准备1000个域名吧，蜘蛛池目的为吸引蜘蛛，建议使用后缀为CNCOMNET之类的域名，域名计费以年为计费，成本不算太大，域名根据效果以及您的链接数量逐渐增加，效果会翻倍增长。也可在之前购买的域名上解析一部分域名出来，继续增加网站，扩大池子，增加蜘蛛量。r3.变量模版程序(成本一般千元左右)r可自己开发，如果不会的，也可在市场上购买程序变量模版,灵活文章以及完整的网站元素引外链,CSS/JS/超链接等独特的技巧吸引蜘蛛爬取!让每个域名下内容都变的不一样!都知道百度对于网站重复内容的打击态度，所以必须保持每个站的内容不要出现重复，所以变量程序就显得尤为重要。r4.程序员(实力稍好点的)r需满足，网站内容的采集以及自动生成，我们前期采集了不少词条，自动组合文章，前期阶段，一天五十万文章的生成量，所以对服务器是一个很大的压力。最好程序员要懂服务器管理维护之类的知识，很重要。r可以看出，蜘蛛池的成本其实不算低，数千个域名，大的服务器，程序员，对于一般站长来说，搭建蜘蛛池成本偏高，性价比不高。建议租用蜘蛛池服务，网上也有高酷蜘蛛池、超级蜘蛛池等在线的蜘蛛池。SEO、外推、个人站长可以关注一下。r蜘蛛池的作用?1.蜘蛛池的效果有哪些r答：可以快速让你的站的连接得到搜索引擎的爬行r2.蜘蛛池可以提高网站权重吗?r答：本身搜索引擎爬行和给予权重需要N天，因为第一个的原因，他可以快速的给予带回数据中心，也就是说本来应该需要N天爬行的页面，现在快速爬行了。但是是否会接着进行计算要看很多因素，比如你网站自身权重、页面质量、页面推荐??r3.蜘蛛池的效果增加新站收录吗r答：一定程度上抓取的页面多了，收录会有一定比例的增加。r

7，怎么分辨百度蜘蛛用工具查假的蜘蛛分辨出不来

百度蜘蛛一般分析要根据你的实际情况在来分辨，如果你是一个企业站，那么你的日志就很少，这样可以直接手工分析手工分析的方法:1.打开日志，按ctrl+f，搜索Baiduspider2.在运行中输入CMD3.输入 nslookup空格你搜索出来的baiduspider中这条的ip，回车4.如果出现名称:baiduspider-xxx.xxx.xxx.xxx.crawl.baidu.comaddress:xxx.xxx.xxx.xxx这样就是真实的百度蜘蛛工具分析使用我们常用的日志分析工具，比如说光年，金花之类的。但是这样的工具不能分辨出蜘蛛的真假(假蜘蛛往往是站长工具，爱站这样的工具，查询的时候留下来的)。如果我们的日志比较大，那么就要用工具查询了，查询出来的结果，在使用第一步的方法，分析出百度的蜘蛛其实百度的蜘蛛大多数就几个网段，如123.125.71.1xx，这样的ip一般都是百度的蜘蛛，看多了也就知道了

8，如何判断百度蜘蛛真假baiducom百度蜘蛛真假查询

如何识别百度蜘蛛1。在linux平台下，可以使用hostip命令解析ip来判断是否来自Baiduspider。Baiduspider的主机名以*.baidu.com或*.baidu.jp的格式命名，如果不是*.baidu.com或*.baidu.jp，就是冒名顶替。2.在windows平台或IBMOS/2平台下，可以使用nslookupip命令来逆向ip解决方案，以确定它是否来自Baiduspider。打开命令处理器，输入nslookupxxx.xxx.xxx(ip地址)解析ip，从而确定是否被Baiduspider抓取。Baiduspider的主机名以*.baidu.com或者*.baidu.jp的格式命名，如果不是*.baidu.com或者*.baidu.jp就是冒名顶替。3.在macos平台下，可以使用dig命令解析ip来判断是否来自Baiduspider。打开命令处理器，输入digxxx.xxx.xxx.xxx(ip地址)解析ip，确定是否被Baiduspider抓取。Baiduspider的主机名以*.baidu.com或者*.baidu.jp的格式命名，如果不是*.baidu.com或者*.baidu.jp就是冒名顶替。蜘蛛王正品鞋怎样辨别？蜘蛛王皮鞋淘宝专卖价格如何辨别蜘蛛王皮鞋真假蜘蛛王皮鞋官方网站蜘蛛王皮鞋于2000年9月获得中国皮革工业协会颁发的“中国真皮标志”；2002年9月被温州市人民政府认定为“温州知名商标”；2003年1月获得国家质量监督检验检疫总局颁发的“产品质量免检证书”；2003年10月被温州市人民政府认定为“温州名牌产品证书”；2004年1月被浙江省工商行政管理局认定为“浙江著名商标”；2004年9月被浙江名牌产品认定委员会认定为“浙江省名牌产品”；2005年9月被浙江省工商行政管理局认定为“浙江知名商号”；同时2005年9月被国家质量监督检验检疫总局授予“中国名牌产品”；2005年12月被国家工商行政管理总局商标评审委员会认定为“驰名商标”；2006年2月荣获中国皮革协会颁发的“中国真皮名鞋”等多项荣誉和称号，是中国鞋都功勋企业、永嘉县历年的“纳税大户”和“巨龙企业”。皮鞋的真假怎么样判断有几种方法首先从商标来看,品牌鞋都会有好几个标志,鞋舌.鞋头.鞋面.鞋后蹲.鞋垫.鞋底.还有鞋带原装的都印有标志.然后从鞋的做工来看,正品的做工都会精细些,仿的都比较粗造.再者就是鞋的材料,有的淘友都会很纳闷,有的鞋材料写有光面PU.反绒皮.三层皮.超纤.RB.TPU,MD.EVA.等等等(太多咯,偶怕写到明天也写不完)淘友要根据自己买鞋的用途来参考,用什么材料做的,例如登山鞋首先鞋面用料通常户外鞋有几种皮革，一种是整张皮，从里到外没有经过切薄的。其实，大家知道，皮鞋的面料多数是一张牛皮切好几层的，通常里面的皮就差了，所以光说牛皮没用的。前面说的从里到外的，防水性好，牢固，就是比较重。还有就是将翻毛的，象工作鞋的那种，好处是柔软，透气，强度也不错，只是防水性不及前者。多用在Hiking上。现在很多再加入Gore-tex涂层，防水性也可以了。真品的皮革质量绝对好，手感好，结实，但是不发硬。如果是前面那种皮的，通常采用油浸处理，有一种淡淡的光泽，增加防水性，脏东西用水擦擦就可以了。一般用鞋蜡保养。翻毛皮也有专门的鞋蜡，中国没见到。Nikwax这个牌子最有名了。最重要的是鞋底，真的鞋子鞋底做工考究，通常分外底和内底英文叫Outsole,Midsole。外底通常用比较好的硬的橡胶底，橡胶又以意大利的Viabrem为最好。橡胶,强度好，耐磨，弹性好。内底，也有几种，有发泡材料，轻弹性好，但是强度不好，还有用弹性橡胶的，较重，强度好。各有利弊。通常用途不同会有不同的选择。鞋底除了材料外，上面的纹路也很讲究，如果上面的纹路就象解放鞋之类，那多半是假的.除了外底和内底，鞋子里面的鞋垫通常用发泡材料作，所以非常有弹性，个位如果比较过正牌NewBalance和满大街的假牌子，就知道这鞋垫，鞋底的差别。一个硬，一个结实而有弹性。感觉一个象老头的硬骨头，一个象棒小伙的肌肉。买户外鞋主要都是要用得，不是穿着秀的，所以内在质量最重要.(百度学的)假鞋用的材料肯定会与真鞋有所不同这点是很关键的因为真鞋之所以卖的贵除了他要做自己的品牌广告和开发费用之外鞋子本身用的材料也确实很贵这一点假鞋是绝对不会照仿的一般假鞋的开发人员会找来与真鞋所用材料质感和属性相同的但档次却差很多的材料来充当仿做真鞋的材料.不懂材料的可以去查查..NIKE鞋面的材料,在篮球鞋上一般都会用人造皮跑鞋上一般都是用超纤PU虽然都不是真皮但是它们所含的纤维密度比真皮要高韧性和透气性比真皮还要好也不易变形所以好的人造皮材料比真皮的价钱还要贵还要好一般仿真鞋就不会用上等的人造皮或超纤PU来做鞋分辨方法是看材料的光泽度材料比较有光泽度的就是真鞋还有就是用手挤按或者是拉伸鞋面皮料感觉一下是否很有韧性和弹性.鞋面的一些工艺如热切微量射出等等真鞋用的材料肯定都是TPU而假鞋大多数都是用的PVC这两者在外型方面是相同的但TPU的材料造价较高柔软度和材料的拉伸性很好PVC则不是这样这种材质没有什么弹性柔软度也不好冬天穿还易发生断裂.真鞋和假鞋在鞋的鞋型和一些线条的走向上也是有区别的.由于做真鞋和做价鞋的版师是不同的开发人员也是不同的所以鞋子用的楦头和所开的版肯定也就和真鞋是不同的所以用真鞋的鞋型与假鞋的鞋型相比就肯定是有差异的而且在鞋子的一些线条走向上由于版师所开的版不同真鞋和假鞋也会有很多不同点.鞋子成型过程中的的贴底鞋子都是先把面都车好后在套上楦头去贴底的所以贴底也是鞋子成型里的最后一道工序由于给大牌加工的工厂贴底工人水平和工厂的水平都很高所以贴完底的鞋大都比较工整胶水不会攀爬到鞋面上很多让人看了很舒服如果出现了鞋底贴的不平整或是胶水爬到鞋面上这种情况大牌通常是不会检验合格的一般就会打上B品卖给自己的员工而假鞋由于做的不是自己的品牌所以底贴成什么样都会拿出去卖的.网上不和专卖店一样,因为价格差异太大,不可能和专卖店卖的一模一样,因为通过个别的渠道,可以拿到一些正品鞋,但是数量肯定不是特大.只是一批批的.(有时候有个别淘友,问我撒时间会在进那款鞋的时候,我只能摇头,因为不是和别的批发市场一样,如果正品鞋那么好拿,还要那些专卖店做什么呢?)还有是吊牌和鞋盒的问题,假如您是NIKE或者ADIDAS的老总,您会把您库存的鞋连盒子和吊牌一起卖给别人吗?(不是卖给代理,如果鞋都卖给代理,那么网上百分之八十的鞋都是仿的咯)有些公司管理的不是很严格,也可以拿到原盒和吊牌,但是那是少数的.所以买家不要相信,没吊牌没盒子就是假的,有盒子有吊牌就是真的.

9，如何看百度蜘蛛是否有来过

判断蜘蛛有没有来过自己的网站可以查看IIS日志代码。或者联系空间商开通了蜘蛛访问记录也可以。如果你的空间商给你的空间支持查询蜘蛛访问记录的话。可以在ftp找到WebLog的文件夹，具体步骤如下：1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.4.解压后,打开日志文件.Ctrl+F查找baidu.com/search特征字符(这里以百度蜘蛛为例)通过分析蜘蛛来访纪录,可以了解本站的大体情况,而不用再为百度不放出内页或者不收录的问题而苦恼了.蜘蛛来访正常,可以确切的说,搜索引擎对你的站很友好的,坚持更新自己的网站,会有不错的收录的.注:有些共享IP空间可能不支持日志功能.对于独立ip虚拟主机则提供每天的日志下载.而实在没有可以日志功能的空间可以参考使用蜘蛛爬行插件的一些方法进行分析.希望看在我说了这么多的份上，给个采纳！！谢谢

这还是很简单的嘛，IIS日志可以查看的

百度蜘蛛，是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容，然后分门别类建立索引数据库，使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。1.打开FTP登陆软件(这里以FlashFxp为例),登陆你的空间FTP。登陆进FTP后,你会发现在根目录下有一个WebLog的文件夹(注:不同的IDC空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含Log字符的都是日志文件夹)2.打开WebLog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.4.解压后,打开日志文件.Ctrl+F查找baidu.com/search

蜘蛛挂机吧，现在不能用了，有时间限制的

10，怎样知道百度蜘蛛是否来过

通过查看网站日志，可以了解搜索引擎蜘蛛的访问情况。通过FTP访问网站的根目录。可以看到一个log的文件夹，这是存放日志的地方。可以压缩（日志文件一般很大）后通过下载到本地电脑上解压缩后打开日志文件。1、网站刚上线，看搜索引擎蜘蛛的抓取情况；如果网站提交给搜索引擎2天后，发现日志里蜘蛛不少，并都返回200，则说明已经可以正常。只是Google展示的时间比较快，而百度则需要20天左右（经验平均值）展示出来。2、网站异常，对比日志中蜘蛛的行为情况；正常增加时和现在异常时的日志，进行对比分析。如果没有异常，则应该是搜索引擎展示数据库出问题所致。如果蜘蛛爬取量明显减少，是否突然减少很多。如果日志依然，则认为是搜索引擎的展示问题。3、解决网站被封问题时，日志情况。网站被封时，往往日志里有百度蜘蛛，但很少，而且往往只访问robots.txt文件和首页。经过站长检查修改一切不符合搜索引擎的优化行为后，再将自己网站提交给百度，之后的2天日志情况如果一直只是百度蜘蛛很少光临，而且往往只访问robots.txt文件和首页。这样的情况维持1个月，可以考虑放弃该域名。如果蜘蛛明显增加，而且返回200代码居多，则被百度重新收录的希望很大，只是时间问题，需要站长更加努力。

判断蜘蛛有没有来过自己的网站可以查看iis日志代码。或者联系空间商开通了蜘蛛访问记录也可以。如果你的空间商给你的空间支持查询蜘蛛访问记录的话。可以在ftp找到weblog的文件夹，具体步骤如下：1.打开ftp登陆软件(这里以flashfxp为例),登陆你的空间ftp。登陆进ftp后,你会发现在根目录下有一个weblog的文件夹(注:不同的idc空间生成的日志文件目录名称不一样,仅供参考.一般文件夹中包含log字符的都是日志文件夹)2.打开weblog目录后,里面有一些以日期格式特征为文件名的.gz后缀结尾的文件.这些就是我们需要下载到本地的日志文件.3.打开压缩文件,发现里面只有一个以.log结尾的日志文件,我们需要的就是这个文件了.4.解压后,打开日志文件.ctrl+f查找baidu.com/search特征字符(这里以百度蜘蛛为例)通过分析蜘蛛来访纪录,可以了解本站的大体情况,而不用再为百度不放出内页或者不收录的问题而苦恼了.蜘蛛来访正常,可以确切的说,搜索引擎对你的站很友好的,坚持更新自己的网站,会有不错的收录的.注:有些共享ip空间可能不支持日志功能.对于独立ip虚拟主机则提供每天的日志下载.而实在没有可以日志功能的空间可以参考使用蜘蛛爬行插件的一些方法进行分析.希望看在我说了这么多的份上，给个采纳！！谢谢