设为首页
收藏本站
切换到宽版
用户名
Email
自动登录
找回密码
密码
登录
注册
快捷导航
论坛
BBS
排行榜
Ranklist
搜索
搜索
热搜:
香港vps
香港VPS
amh
机柜
vps
分销
VPS
域名出售
火车头
云主机
不限流量
香港服务器
美国服务器
香港
全能空间
whmcs
digitalocean
本版
帖子
用户
MJJ论坛
»
论坛
›
主机综合交流
›
美国VPS综合讨论
›
你会在robots.txt禁止360搜索的蜘蛛吗
1
2
3
/ 3 页
下一页
返回列表
查看:
6857
|
回复:
25
你会在robots.txt禁止360搜索的蜘蛛吗
[复制链接]
dstwhk
dstwhk
当前离线
积分
1058
发表于 2012-9-1 12:33:05
|
显示全部楼层
|
阅读模式
本帖最后由 dstwhk 于 2012-9-1 14:23 编辑
先不讨论 搜索引擎的蜘蛛是否遵守robots.txt规则
单选投票
, 共有 86 人参与投票
1. 会
6.98%
(6)
2. 不会
65.12%
(56)
3. MJJ的打酱油
27.91%
(24)
您所在的用户组没有投票权限
蜘蛛
评分
参与人数
1
威望
+1
收起
理由
zt1993
+ 1
360绝对不鸟http://nhce.njut.edu.cn/robot.
查看全部评分
相关帖子
•
36.99.136.*和111.7.100.*这两个IP段疯狂爬
•
你们有屏蔽搜狗的蜘蛛吗?天天爬,可是一个多月不收录~~
•
我认为搞个外链吸引下蜘蛛还是不错的
•
为什么会导致蜘蛛全爆掉了
•
网站链接 是不是发到 蜘蛛频繁去的网站 就会收录了?
•
网站不利于蜘蛛爬行
•
怎么勾引蜘蛛来爬?
•
谈外贸站(英文)如何发外链勾引google蜘蛛
•
蜘蛛太猛,受不了了
•
求垃圾蜘蛛IP列表
回复
举报
苁林老鬼
苁林老鬼
当前离线
积分
19790
发表于 2012-9-1 12:37:01
|
显示全部楼层
360 不鸟这个啊 鸟的话 直接屏蔽掉
回复
举报
用户名
用户名
当前离线
积分
11610
发表于 2012-9-1 12:37:11
|
显示全部楼层
MJJ 通道
回复
举报
老白
老白
当前离线
积分
2544
发表于 2012-9-1 12:38:00
|
显示全部楼层
提示:
作者被禁止或删除 内容自动屏蔽
回复
举报
韬韬
韬韬
当前离线
积分
4136
发表于 2012-9-1 12:40:35
|
显示全部楼层
流量为王
回复
举报
lovettww
lovettww
当前离线
积分
14959
发表于 2012-9-1 12:46:09
|
显示全部楼层
你觉得360会鸟这个文件吗?
回复
举报
z79254
z79254
当前离线
积分
5507
发表于 2012-9-1 12:47:15
|
显示全部楼层
不会!
回复
举报
完美
完美
当前离线
积分
4473
发表于 2012-9-1 13:09:50
|
显示全部楼层
360估计是直接无视。。。
回复
举报
小陈
小陈
当前离线
积分
1837
发表于 2012-9-1 13:15:04
|
显示全部楼层
它如果真要抓你,这文件还能有效?
回复
举报
哎呀
哎呀
当前离线
积分
9327
发表于 2012-9-1 13:19:58
|
显示全部楼层
表示每天从360来的流量 超过 谷歌 SOSO 搜狗 为什么要封 LZ 不是认真做站的
回复
举报
下一页 »
1
2
3
/ 3 页
下一页
返回列表
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
注册
本版积分规则
发表回复
回帖后跳转到最后一页
Archiver
|
手机版
|
小黑屋
|
MJJ论坛
Copyright
MJJ论坛
© 2022 All Rights Reserved.
快速回复
返回顶部
返回列表