AWS哪些目录是可以禁止搜索引擎爬行的？ - WeCenter 社交化知识问答社区程序

该问题已被锁定！

2: 关注

2574: 浏览

AWS哪些目录是可以禁止搜索引擎爬行的？

想写个robots.txt文件，不知道AWS哪些目录是可以禁止搜索引擎爬行的？

好问题 0 评论收藏举报

AI智能回复搜索中，请稍后...

1 回答

zhengqiang 超级管理员用户来自于: 广东省深圳市
2012-10-12 12:55

只要服务器把列目录的功能关闭，不能爬行的都不会被爬。

赞同 0 2评论

关于作者

: yangunbo 初级会员
这家伙很懒，还没有设置简介

136: 回答

0: 文章

61: 问题

问题动态

发布时间: 2012-10-12 12:08

更新时间: 2012-10-12 12:55

关注人数: 2 人关注

相关问题

谁可以提供个自问自答的插件？: 2024 浏览 2 关注 1 回答 0 评论

略晓有一点值得借鉴，某个领域的专家可以开个专属的问题楼，一对多的解决别人的问题: 1700 浏览 1 关注 0 回答 0 评论

看到ANWSION的首页就喜欢，如果论坛可以这样，就太高兴了！: 2057 浏览 3 关注 2 回答 0 评论

网站程序可以这样复位吗: 2111 浏览 3 关注 2 回答 0 评论

后台可以增加设置，回复的评论自动展开么？: 1275 浏览 3 关注 1 回答 0 评论

一个建议，分类（全部）里的分类可以有个收缩的按钮: 2239 浏览 1 关注 0 回答 2 评论

一个小建议：未登录情况下点击赞同等按钮时可以自动跳到登陆页面: 1396 浏览 3 关注 1 回答 0 评论

个人主页里的现居地址其实可以发挥更好的作用: 2067 浏览 4 关注 1 回答 0 评论

在微信浏览器里登录，不能绑定微信号，但是通过发指令可以绑定，大家能说下为什么吗？: 2139 浏览 2 关注 1 回答 0 评论

邀请回答的问题太多，提示一个个删除比较麻烦，可以批量清空或批量选择删除么？: 1497 浏览 2 关注 1 回答 0 评论

推荐内容

问 Wecenter的robots这样写是否更好一些？: 2635 浏览 3 关注 2 回答 0 评论

问 Google Webmaster 总是提示我Robots.txt无法访问，大家遇到吗？: 3163 浏览 5 关注 3 回答 0 评论

问终于明白百度为啥不收录了，看看这怎么办？: 3418 浏览 7 关注 4 回答 0 评论

问 facebook推搜索引擎会有机会么？: 3170 浏览 3 关注 3 回答 0 评论

问怎么用robots屏蔽分类列表和推荐、热门、待回复: 2101 浏览 1 关注 0 回答 0 评论

问 anwsion搜索是怎样的原理？: 2471 浏览 2 关注 1 回答 0 评论

问从dz转过来后，怎样应对搜索引擎？以前的收录怎么办？: 2622 浏览 2 关注 3 回答 2 评论

问 wecenter的robots规则: 1468 浏览 1 关注 0 回答 0 评论

问如何看待周鸿祎对360搜索的定位？: 2873 浏览 3 关注 2 回答 0 评论

问 wecenter 采用的是那种搜索技术: 2204 浏览 3 关注 1 回答 1 评论

All Rights Reserved Powered BY WeCenter V4.1.0 © 2024 皖公网安备 34019202000400号