1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
718 11 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3074 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3062 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3711 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3508 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5330 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2427 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1837 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3541 11 0
10月11日 · 2014年
百度Sitemap工具升级版内测，附移动sitemap.xml的php代码(支持响应式)
6226 2 39
1月7日 · 2014年
WordPress插件居然导致服务器卡死
3684 6 3
1月23日 · 2016年
WordPress针对百度星火计划2.0原创保护的优化措施
6346 37 80
脚本编程阅读更多最近在跟一个自动化发布平台的建设事项，其中Linux系统的远程控制通道则由我独立开发完成，其中涉及到了Linux系统远程命令和文件传输操作。因为之前写Linux系统密码管理系统的时候，用的是Paramiko的SSHClient。所以，我这次依然采用Paramiko来做实现，代码虽短，说起其中的坑，我也是一把辛酸一把泪的填上了。先上完整代码：# -*- coding: utf-8... ![]()
一开始搭建中国博客联盟，既有博友提醒我，做网址大全这类网站维护很麻烦，需要大量的精力去Debug一些已夭折的网站，更是拿松哥的博客大全举例。当然，我也是深以为然。前些时间，看到梦轩丽人的boke123网址大全的维护记录，好像是纯手工检查，张戈实在是佩服的五体投地，太有毅力了。现在博客联盟也收录的博客也已破200了，全部来自自主提交，不管你是草博还是名博，张戈不会强买强卖。由于大部分都是建站... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 
上次写到《服务器日志备份超节省空间的思路》，压缩后磁盘占用由93%降到了62%，效果还是不错的！为什么不直接删除呢？其实是因为这些日志涉及到支付等重要业务，保存半年以上也算是保守的做法。今早，又发现几例磁盘空间报警，占用率都在90%+，关键居然是根分区！这要是日志突然暴涨，把根分区撑爆了，那就可以体验到“菊花一紧”的快感了吧？索性利用CRT的全局命令把磁盘空间占用率超过75%的服务... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 
难得今天晚上9点前赶回家，而且最近草稿箱也压了不少“湿货”，就挑一篇发出来好了！不过在发文章之前先吐槽一下那个从昨天攻击张戈博客到现在还在继续的无聊蛋疼之人！本来就算开启了云加速全缓存也是扛不住的，因为静态中混着动态请求，比如浏览计数。还好灵机一动，对这些动态做了点小手脚，现在基本毫无压力了！粗略分析一下这个攻击博客的小人，无外乎是2种人：①、最近张戈博客流量大涨，估计遭人... ![]()
今天上午，同事叫我帮他看下他正在写的脚本到底哪里出了问题，执行总是达不到预期功能。于是ssh连过去看能否发现问题，经过多次Debug定位与排除，问题终于得到解决。 同事在网上down了一个脚本菜单模板，想把我们已经存在的功能脚本整合到一起，做成多功能的Linux运维工具。目前已经添加了挺多功能，而早上才添加的一个抓取高占用CPU的Java线程功能时出现了无法出现交互界面的问题... 
多年没写过批处理了，来新公司的第一个case却是需要写一个bat脚本，批量更新采集agent的配置文件，其中就涉及到远程IP的端口检测。本以为会和Linux一样可以简单判断：echo q|telnet -e \'q\' $ip $port && echo "$ip:port 通"||echo "$ip:port 不通"结果发现Windows下面telnet退出并没有执行...
5月7日 · 2017年
分享一个自写的Python远程命令和文件（夹）传输类
8416 40 37
8月22日 · 2014年
Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点
6728 8 12
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
6234 31 12
7月21日 · 2014年
nginx日志切割及7天前的历史日志删除脚本
7829 16 16
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
4475 2 14
3月24日 · 2015年
bat/cmd批处理连接SqlServer数据库查询脚本
2563 12 10
2月26日 · 2014年
菜单式Shell运维脚本调试小记
3753 10 7
7月1日 · 2015年
Windows下bat批处理脚本使用telnet批量检测远程端口小记
12256 23 21
操作系统阅读更多
根据Websense安全实验室最新的研究报告指出消费者PC端递交给微软的错误报告有可能被黑客截取，并依据这些信息帮助黑客制定相关攻击策略。当系统出现崩溃的时候会弹出相应的对话框，这些信息中详细包含了设备的运行状态，Windows的版本信息，应用等信息，而这些信息都有可能被黑客监听到。 虽然当系统或者应用程序崩溃的时候会弹出错误报告，通常需要用户的确认才是否将这些错... 
最近一直很忙很忙，完全没时间打理博客，回家后基本上就是洗洗睡的节奏，我之前真的从未想过，我会有回到家不想碰电脑的情况。。。不但不想碰电脑，而且失眠症也消失无遗，因为实在是太疲劳了，总算是有了些好处。这几天实际上也有一些可以记录的工作经验，无奈一直没有头绪也没时间，刚好趁着今天午休间隔，先整理出一小部分好了，不然博客就真废了。。。一、故障案例①今天上午在给测试组的IIS新增https... 
昨天在部署zabbix监控的时候，遇到一个问题：监控服务器处于无外网状态，在线安装不可用。而某些依赖包度娘或谷姐搜索起来也挺呛人的！于是想到一个办法，利用有外网的服务器的yum命令来安装这些软件，并自动保留安装包即可。于是就有了以下的转载教程：一、让yum命令下载RPM包，而不安装。yum是一个优秀的软件获取与系统更新的工具，主要应用于redhat系列的发行版本上。但是这样一个优秀... 
这也是一个老方法了，只是今天用到了，就过来记录下。总觉得公司服务器磁盘不给力，有时候vim编辑的时候都会卡顿，IO经常90%+，很纳闷，就测试了一下磁盘的读写速度。一、测试写速度：time dd if=/dev/zero of=/tmp/test bs=8k count=1000000测试结果：565 MB/s二、测试读速度：time dd if=/tmp/te... 这次给博客添加了纯代码缓存之后，发现缓存文件竟然达到了50多MB！而我的服务器每次还需要同步至七牛，文件体积的增加都会增加文件远程同步备份的时间。因此，我第一想到的办法就是在网站ZIP压缩打包的时候排除缓存文件夹。下面是从网上找来的ZIP命令参数：zip Linux上适用的参数:-1 : 最快压缩，压缩率最差。-9 : 最大压缩，压缩率最佳。-b : 暂存文件的路径。这个参... ![]()
最近，公司新推了一个电商项目，IIS+ASP。而上面大大规划了要用LVS负载均衡集群，在这个技术陈旧的企业，LVS项目还是去年才真正推行。由于最开始是由我测试的，所以这次的部署又落到了我头上了。 之前一直是在RHEL上做的LVS+Keepalived，现在换成Windows主机，虽然在集群架构上的理解没啥问题，但是这Win主机做RealServer具体该如何设置还真没弄过。不过，万能的搜索引擎很快... ![]()
今天，在站长交流群里面，又一个站长抱怨服务器每星期都必须手动重启一次，否则QQ登陆功能无法使用，原因是服务器时间快了5分钟以上，腾讯服务器拒绝提供API服务。本以为只要加一个简单的linux时间同步任务计划即可，结果我拿到root后，发现并不是那么一回事。在我正确添加了ntpdate 任务计划之后，手动执行了时间同步命令，发现时间依然没有变化。手动执行 date -s 16:00:... 
用户发来反馈，使用部门Windows跳板机报错：The remote session was disconnected because there are no Remote Desktop License Servers available to provide a license.Please contact the server administrator，最后发现是微软RDP远程桌面套件的一个BUG，可通过安装微软补丁或修改注册表来解决，本文简单记录分享下解决过程...... 
本系列文章一共三篇，分别为《脚本编程与Linux命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试Linux运维的同学有所帮助。$1 入参，空值时默认赋值技巧variable=${1:-"default value"} # 当未传参时，赋默认值。echo... 
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这个是在安装完StartOS发现的问题，我第一个安装的是Linux Deepin 2013,发现自带...
12月31日 · 2013年
用户需当心：Windows崩溃信息有可能被黑客截取
2304 2 2
3月18日 · 2015年
解决mstsc无法连接问题：由于没有远程桌面授权服务器可以提供许可证…
4842 26 3
8月7日 · 2014年
Linux系统yum命令安装软件时保留(下载)rpm包
9211 17 4
7月24日 · 2014年
Linux下用dd命令测试硬盘的读写速度
4525 14 17
12月9日 · 2014年
Linux系统zip压缩命令详细参数，附文件排除选项的正确用法
2701 17 7
5月19日 · 2014年
LVS中Windows作为真实主机(RealServer)时的设置方法
2231 3 22
8月27日 · 2014年
Linux系统date命令无法修改或同步时间的解决办法
7715 7 7
4月6日 · 2017年
远程桌面报错解决：No Remote Desktop License Servers Available
9658 25 26
10月26日 · 2018年
Linux运维基础技能： 脚本编程与Linux命令
4490 15 16
3月3日 · 2014年
Linux中的完美截图工具：Deepin-ScreenShot
9490 3 48
WEB应用阅读更多在实际业务场景中，APISIX限速太笼统，达不到业务要求，最终，我们自己在limit-count插件基础上进行改造，重新设计一个限速机制，能够针对不同的服务给不同的Consumer设置差异化的访问限速，满足生产环境更精细化的限速需求。... 
昨天一个网友通过QQ联系我，说按照我博客之前分享的http2配置教程不能生效，想请我帮忙看看。经过测试，使用谷歌浏览器访问他的测试站点，确实没有开启http2，但他的配置和编译参数都正确的，这有点奇怪了。不过昨天太忙就没有继续帮他分析，他只好将服务器账号和密码都留言给了我。今天中午我抽空在他服务器重新编译测试了一把，才发现原来是这么一个梗！他在编译Nginx之前，使用的是yum... 
4月27日，有幸参加了由Aftership组织、CloudFlare的大牛孟鑫主讲的《CloudFlare 最新边缘API，打造无服务器(Serverless)架构》课程，感觉收获颇丰。因为这个课程非常接地气，大部分内容都在实战，而不像有些分享一味的讲理论、拼PPT，听得云里雾里，分享的时候是一个样子，真正你去尝试的时候却是另外的样子，duang~，当然，还有一个原因就是张戈博客目前也在用Clo... 最近一直在帮一个购买了张戈博客付费服务的朋友做网站防护，为了简单抵挡一下竞争对手的DDoS攻击，他给网站开启了Incapsula的免费CDN服务。开启CDN之后，我之前给他写的Shell防护脚本也就宣告无效了，因为不管是正常访问还是攻击访问，脚本拿到的IP都是CDN节点的，而我不可能把CDN的节点IP也给禁用了，那就都不能访问了。为了解决这个窘迫，我想到了以前看过的Nginx访问限... Configmap的方式来配置APISIX。最开始我们就采用 Configmap的方式在腾讯云TKE上部署APISIX，当网络区域越开越多时，每个TKE集群都需要去定义一套config.yaml对应的Configmap，管理非常繁琐。因此，这里我们利用Python的Jinja2插件来自动化渲染APISIX的配置文件，整体非常方便！... 
我负责的几个公司内部网站，仅集成了php原生memcache组件，不支持memcached分片存储的自动容灾方案，近期出现过几例因memcache服务器故障引起WEB爆卡的尴尬事，所以接到了一个给现网php集成memcached模块的需求。内部的个别系统有多老、多难用我就不吐槽了，slackware、suse用过的人都知道。。。不说了，总之老老实实的编译安装吧。memcached这... 
好久没打理博客，突然收到CDN流量预警，发现平均每天40G流量消耗！what？就现在这个访问量，不存在的。看了下CDN日志发现有小人一直在请求博客页面，其中被请求最多的就是CCkiller防御工具那个文章地址。呵呵，我就写一个简单的防御小工具，惹着你啦？实际上我用了CDN，也并没有安装这个工具，所以想试探、想测试效果的麻烦自己去安装使用，攻击我博客毫无意义，挂了又能怎么样？废话就扯... 
盼望以久的PHP 7.0正式版，终于在今天发布了！官方给出的新特性如下：PHP 7.0.0 comes with new version of the Zend Engine with features such as (incomplete list): Improved performance: PHP 7 is up to twice as fast as PHP 5.6... 某日，组内后台开发找到我，问我们的WEB服务器超时设置是多少。他反馈的问题是，有一个VLAN切换任务cgi接口经常返回504网关超时错误，要我分析解决下。我问了一下，得知这个请求遇到网络设备对象较多的时候，需要小半个小时才能完成，也就是要用到长连接才行。老规矩，从开发那拿到接口地址，得到接入层服务器IP，是一台Haproxy代理，看了一下Haproxy的超时设置：# 设置成功连... APISIX的高级路由非常厉害，可以基于任意变量来做转发路由，比如可以基于Header、cookie、querystring参数等。而我们这里历史上有个非常变态的用法：基于Body里面某个参数的值来路由，即不同的值要转发到不同的后端IP:PORT（这个问题主要是因为服务拆分时偷懒，没有推动客户端修改请求留下的尾巴）。... 
上周有一个站长问到我一个问题，问fastcgi_cache和pagespeed加速有没有冲突。略微想了下，2个都是比较原生的主，应该不存在兼容问题。至于这个朋友问到这2个机制处理的先后问题，我思考了下。既然fastcgi_cache已经是缓存到本地的文件，那么pagespeed肯定是后处理的。通俗来说，就是当用户访问WEB时，Nginx 应该是先调用 fastcgi缓存，然后再进行page... 
最近在配置Haproxy代理的时候发现一个很有意思的事情：Haproxy在代理http请求会无脑加一个X-Forwarded-For（后文简称XFF），而不是将自身的IP地址加到已存在的XFF列表之后，WTF！还有这种神操作？确认无误之后，我到Haproxy的github开了一个issue反馈了这个BUG（issue地址），最终了解到了Haproxy就是这样设计的，并得到了解决方案，而且这个is...
11月3日 · 2021年
APISIX插件开发之精细化限速插件
3404 10 0
11月11日 · 2016年
解决Nginx配置http2不生效，谷歌浏览器仍然采用http1.1协议问题
3175 28 30
7月7日 · 2019年
CloudFlare边缘计算Workers尝鲜初探：博客跳转中间页
3849 62 42
12月29日 · 2014年
Nginx在CDN加速之后，获取用户真实IP做并发访问限制的方法
18592 24 12
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
3941 5 1
3月5日 · 2017年
libmemcached编译安装报错解决记录
4417 18 27
9月8日 · 2018年
解决网站404页面返回200状态码问题
7050 20 14
12月2日 · 2015年
PHP7.0正式版编译安装升级及WordPress问题解决分享
8256 17 30
8月13日 · 2016年
修改Apache的超时设置，解决长连接请求超时问题
5231 25 47
10月28日 · 2021年
APISIX高级路由之通过Body参数转发请求
4990 9 0
9月10日 · 2015年
实测Nginx服务器开启pagespeed加速效果
11734 20 21
4月12日 · 2019年
惊现Haproxy重复添加X-Forwarded-For问题（附官方解决办法）
5002 10 7
