主机运维 第46页

老蒋 发布于 2021-12-01 14:42:24

今天早上老蒋收到一封来自腾讯云的安全邮件提醒。提示是有检测到存在待处理的应用漏洞Sudo 本地提权漏洞 (CVE-2021-3156)。遇到这个问题我们肯定是要去解决的，我大概率估计是可能镜像用的比较久没有升级导致的，这台服务器我已经有用到将近三年。 出现这样的问题如何解决呢？这...

老蒋 发布于 2021-11-30 15:47:04

今天老蒋收到一封来自HOSTUS服务商的续费提醒邮件，这个应该是我一直在使用有三四年的年付10美元的洛杉矶VPS主机，虽然一直在续费，但是我好像都没有用到。他们家算是比较小众，但是活动不多的商家。但是商家还是比较稳定的，如果有需要便宜年付VPS主机的可以看看这家。 考虑到后续可能...

老蒋 发布于 2021-11-30 14:55:56

今天早上老蒋在打开一个网站的时候发现免费的Let's Encrypt证书28日过期的没有自动更新，这个可能是系统比较老有关系，这个网站采用的是SugarHosts糖果主机VPS云服务器，镜像是比较早的CentOS6，这个镜像目前已经不在更新，商家也都取消，所以我直接升级系统和脚本...

老蒋 发布于 2021-11-22 11:17:41

日常我们看到的存储单位是多少？KB、MB、GB 和TB，反正老蒋目前用到的存储单位也就最大是TB。不过有些朋友的数据比较大，比如有朋友在较大的公司做运维的话，他们的数据盘和存储就不是用TB作为单位的，而是用PB。甚至还有EB和ZB。那这些我们估计没有看到的单位和我们知道的单位之间...

老蒋 发布于 2021-11-19 15:32:12

如果我们深入研究Nginx的功能还是蛮有意思的，比如我们前面有聊到UA可以控制爬虫限制和放行访问。我们也可以利用Nginx进行控制和限制URL、目录，以及IP地址的访问。比如有一些运维的时候，需要用到屏蔽某些IP地址，或者是我们某个目录只能某个IP地址访问或者限制访问。 在这篇文...

老蒋 发布于 2021-11-19 15:14:37

有些细心的网友会发现，我们的网站可能还没有流量或者流量不大的时候，但是有些时候会负载比较大，甚至可以通过日志看到很多无用的爬虫抓取。比如有国外搜索蜘蛛爬取，有些是采集蜘蛛爬取。我们是否可以通过一些技术手段屏蔽呢？这里我们使用较多的还是Nginx，通过user_agent屏蔽和限制...

老蒋 发布于 2021-11-19 14:57:56

这里老蒋看到一个业务需求是将Nginx环境中将蜘蛛和爬虫的请求和用户的请求分离不同的后端。比如我们可以预先设定爬虫的记录，然后在符合要求的爬虫和不属于的时候进行分离。这里简单的记录如下。 1、用map来匹配变现 map $http_user_agent $is_bot { def...

老蒋 发布于 2021-11-19 14:41:43

这里简单记录下用户需求，看到网站的分页页面有蜘蛛爬虫在抓取导致服务器的负载变大。于是希望将这些分类没用的目录禁止抓取，但是用户是可以翻页显示的。本来开始是用rebots.txt进行屏蔽的，但是效果不大。 User-agent: * Disallow: /*/*/page/ 屏蔽后...

老蒋 发布于 2021-11-19 14:21:20

今天老蒋遇到网友一个网站负载比较大，然后通过日志看到有乱七八糟的爬虫在抓取。如果我们需要设置的话，可以通过一些CDN前端过滤也是可以的，同时，我们可以用Nginx设置过滤爬虫，比如用到user_agent（UA）进行过滤。在这里简单的整理几个常用的UA过滤办法。 #禁止Scrap...

老蒋 发布于 2021-11-17 13:18:59

今天上午老蒋帮助一个客户处理网站HTTP更换HTTPS SSL证书的问题。其中我们需要将原来网站的HTTP更换成HTTPS，这个是需要直接在数据库中修改两处网址的。如果我们有使用过WordPress程序的朋友应该是知道的，但是我在登录他的宝塔面板后台的PHPMYADMIN的时候发...