logo
  2. 首页
  3. 编程教程
  4. nginx
  5. Nginx 配置robots.txt禁止收录
  6. 详情

Nginx 配置robots.txt禁止收录

编程教程 > nginx (557) 2024-11-26 14:39:04

Nginx 配置robots.txt禁止收录，在对应的server里面添加以下配置

    location =/robots.txt {
       default_type text/html;
       add_header Content-Type "text/plain; charset=UTF-8";
       return 200 "User-Agent: *\nDisallow: /";
   }

不用单独添加一个文件，比较方便。

https://blog.xqlee.com/article/2408200957514654.html
评论
User Image
提示：请评论与当前内容相关的回复，广告、推广或无关内容将被删除。
相关文章
Nginx 配置robots.txt禁止收录
Nginx 配置robots.txt禁止收录
Nginx 配置robots.txt禁止收录，在对应的server里面添加以下配置 location =/robots.txt { default_type t
Nginx Nginx robots.txt robots.txt
Gitea 禁止搜索引擎索引搜录robots.txt配置
Gitea 禁止搜索引擎索引搜录robots.txt配置
为了使 Gitea 为顶级安装提供自定义的robots.txt（默认为空的 404），请在 [custom文件夹或CustomPath]（administrat
gitea git robots.txt
Nginx SSL HTTPS证书配置
Nginx SSL HTTPS证书配置
Nginx 安装Nginx 安装参考：Linux yum nginx安装和nginx入门配置方法-XQLEE'BlogAlpine Linux nginx安装配
nginx配置SSL Nginx配置HTTPS Nginx SSL Nginx
Nginx 日志配置说明
Nginx 日志配置说明
Nginx 配置日志nginx默认的日志配置在nginx.conf配置文件。
Nginx日志配置 Nginx日志 nginx日志http头部参数
Linux yum nginx安装和nginx入门配置方法
Linux yum nginx安装和nginx入门配置方法
Linux(centos) nginx安装和nginx入门配置方法1.切换至root用户$su - 2.执行在线安装命令#yum install nginx -y 如果上面提示以下内容[root...
linux系统教程 nginx安装 nginx配置
nginx 配置文件检查
nginx 配置文件检查
nginx配置文件检查命令正确命令：nginx -t -c /etc/nginx/nginx.conf错误命令：nginx -t -c /etc/nginx/conf.d/example.con...
nginx nginx配置 nginx检查
Alpine Linux nginx安装配置
Alpine Linux nginx安装配置
alpineLinux安装nginx更新软件apkupdate安装nginxapkaddnginx查看nginx版本nginx-vnginx启停启动停止servicenginxstop重启ser...
alpine linux alpine nginx
nginx window 版本配置文件nginx.conf不生效解决
nginx window 版本配置文件nginx.conf不生效解决
打开任务管理器发现一大堆nginx进程
nginx windows 10
Nginx 缓存静态资源到硬盘
Nginx 缓存静态资源到硬盘
需求将静态资源如css/js/图片缓存到不用每次都到后端服务去拿取，减少性能消耗。 配置nginx缓存配置缓存文件存放信息在nginx配置文件，httpd内部配
Nginx缓存 Nginx静态资源缓存 Nginx
Nginx全局禁用某些User-Agent访问
Nginx全局禁用某些User-Agent访问
最近网站被恶意访问了，了解了一些基础防护手段，nginx屏蔽ua访问 编写文件agent_deany.conf #使用方法 #创建目录 /etc/nginx/conf.d/deny...
nginx禁用UA nginx禁用user-agent访问
nginx自定义Java项目502页面
nginx自定义Java项目502页面
最近博客升级总是nginx原生的502页面，感觉有些不友好，特此研究了下502页面的配置nginx 502配置502页面核心配置 #502 page error_...
nginx 502页面配置 nginx
nginx 反向代理Mysql 3306端口
nginx 反向代理Mysql 3306端口
nginx常规使用时作为http协议的反向代理，这里要讲的是非http的Mysql端口代理，理论支持其他协议nginx.conf配置如下：user nginx; worker_process...
nginx tcp端口代理
Nginx 负载均衡upstream配置/说明
Nginx 负载均衡upstream配置/说明
Nginx的upstream支持5种 分配方式，其中 轮询、权重、IP散列这三种为Nginx原生支持的分配方式，fair 和 url_hash 为第三方支持的分
nginx nginx负载均衡 负载均衡
nginx 开启gzip压缩配置
nginx 开启gzip压缩配置
nginx开启gzip压缩配置配置参考：server{listen443ssl;server_namet.example.com;#charsetkoi8-r;#access_log/var/l...
nginx gzip 压缩
nginx 跨域配置
nginx 跨域配置
nginx 跨域头统一配置 location / { add_header Access-Control-Allow-Origin *; add_header Acces...
nginx 跨域