7月9日 · 2026年
Beggar：让 CodeBuddy 多 Agent 协作研发成本直降 90% 的开源套件
226 0 0
1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
1148 12 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3728 41 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3496 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
4266 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
4341 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5947 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
3112 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
2509 27 4
12月2日 · 2015年
PHP7.0正式版编译安装升级及WordPress问题解决分享
10622 17 30
3月18日 · 2015年
解决mstsc无法连接问题：由于没有远程桌面授权服务器可以提供许可证…
5645 26 3
11月28日 · 2015年
借助腾讯云CDN开启全站https及问题解决分享
10099 66 60
脚本编程阅读更多
最近在折腾博客主题，通常来说大多数人认为换主题会影响SEO，实际上只要你把工作都做到位了，是没有任何问题的。比如，换主题后你得仔细检查标题和描述等内容是否发生改变、换主题后是否带来了大量的404页面等。当然，更细微的可能是换主题之后，网站的内链网络也发生了微妙的改变，但是整体的影响较小。总之，张戈博客这次更换主题基本上没有看到明显的SEO影响，反而出现几个新的关键词。好了，题外话到... 
上次写到《服务器日志备份超节省空间的思路》，压缩后磁盘占用由93%降到了62%，效果还是不错的！为什么不直接删除呢？其实是因为这些日志涉及到支付等重要业务，保存半年以上也算是保守的做法。今早，又发现几例磁盘空间报警，占用率都在90%+，关键居然是根分区！这要是日志突然暴涨，把根分区撑爆了，那就可以体验到“菊花一紧”的快感了吧？索性利用CRT的全局命令把磁盘空间占用率超过75%的服务... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 最近在跟一个自动化发布平台的建设事项，其中Linux系统的远程控制通道则由我独立开发完成，其中涉及到了Linux系统远程命令和文件传输操作。因为之前写Linux系统密码管理系统的时候，用的是Paramiko的SSHClient。所以，我这次依然采用Paramiko来做实现，代码虽短，说起其中的坑，我也是一把辛酸一把泪的填上了。先上完整代码：# -*- coding: utf-8... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... 最近一直在开发自动化运维发布平台，底层命令行、文件通道主要基于paramiko模块，使用过程中遇到各种各样的问题，本文主要用于收集问题及解决记录，以备后续使用。一、Error reading SSH protocol banner连接错误这个关键词，在百度、谷歌一搜一大把的提问，也有少部分给出了解决方案，但是最终都无法解决，我经过不断尝试和解读paramiko源码，终于搞定了这个问题，在此... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 
一、起因昨天，开发组兄弟发现resin日志出现不少支付宝业务报错信息，用户用支付宝购买了产品，钱到账后公司系统却未返回支付成功状态！这还得了？用户明明支付成功了，结果却显示未到账！！！必须赶紧解决，用户投诉是小，用户流失就大了！仔细分析日志后，发现是解析支付宝接口域名（mapi.alipay.com）时出现延时，导致获取不到支付成功的返回信息！检查发现OpenSUSE的name... ![]()
昨天，发布了《完美实现移动主题在360网站卫士缓存全开情况下的切换》一文，通过JS实现了主题在移动端访问时的自动切换，最后提到了可以在电脑版和移动版的footer里面加上手动切换链接，实现手动版本切换功能。今早发现，电脑版切换到移动版是没问题了，但是移动版切换到电脑版，JS将会再次工作uaredirect.js会再次做UA判断，然后由又跳回了电脑版！ 也就是说，手机上浏览无法手动切换到电脑... 
导读：2个月前，张戈博客分享了一篇Python+Shell定时备份网站到阿里云OSS的教程，已经有非常多的站长朋友用上了，反馈还不错，也有不少朋友提出了很多优化建议，比如上传完成后能否删除本地压缩包之类的，本文将继续分享另一种云端备份方案。一、优点分析内网传输：和阿里云OSS一样，腾讯云COS同样支持内网和外网文件传输，对于腾讯云服务器，使用内网传输绝对是最快、最稳定的备...
5月3日 · 2015年
SEO技巧：Shell脚本自动提交网站404死链到搜索引擎
17098 67 74
7月21日 · 2014年
nginx日志切割及7天前的历史日志删除脚本
9231 16 16
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5947 6 1
5月7日 · 2017年
分享一个自写的Python远程命令和文件（夹）传输类
10106 40 37
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
7145 31 12
6月16日 · 2017年
Python远程控制模块paramiko遇到的问题及解决记录
6582 32 17
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
5397 2 14
6月26日 · 2014年
Linux操作系统DNS解析(nameserver)监控脚本
8923 6 20
5月26日 · 2014年
js获取url中?后的参数，修复移动版无法切换到电脑版的BUG
5848 3 18
1月2日 · 2017年
利用腾讯云COS云对象存储定时远程备份网站
11781 94 81
操作系统阅读更多朋友弄了一个小项目，要我帮忙做下Linux系统运维，上线一段时间后，发现项目偶尔会挂掉导致服务不可用。开发朋友一时之间也没空去研究项目奔溃的根因，只好由我这个运维先写一个项目进程自拉起脚本，通过Linux任务计划每分钟检查一下进程是否存在来避免项目挂了没人管的情况。自拉起脚本很简单，随便写几行就搞定了：#!/bin/bashprocesscount=$(pgrep my_app|w... 这是一个Linux系统常见的故障，网络上也能轻易的找到解决办法，我也只是在工作中遇到了这个问题，所以在博客记录下，以备不时之需。一、报错截图：图为resin的报错日志，很明显提示了Too many open files： 二、临时解决临时的解决办法很简单，先执行ulimit -n 65535，然后重启resin即可。Ps：请注意启动环境是否生效：... 之前博客分享过一篇《Linux/vps本地七天循环备份和七牛远程备份脚本》，我自己也一直在用。某天检查备份的时候，突然发现数据库的备份的压缩包是空的！看了下crontab的日志，发现有如下错误：Access denied for user \'dbuser\'@\'localhost\' to database \'db\' when using LOCK TABLES原来，我在计划任务中备份... ![]()
记得博主以前被问到CPU负载如何才算高的时候，出过一次糗，具体就不记录了。。。在网上找了一篇比较详细的Linux下的CPU负载算法教程，科普一下。不感兴趣，或看不懂的朋友无视即可，不必浪费时间哈。昨天查看Nagios警报信息，发现其中一台服务器CPU负载过重，机器为CentOS系统。信息如下：2011-2-15 (星期二) 17:50 WARNING - load av... ![]()
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这些发行版和ubuntu一样，root帐号都是停用的，在我安装完后，发现进行一些操作时，提示权限不... 
这两天，监控频繁发来服务器磁盘空间90%+的报警，打扰睡觉不说，塞得满满的总是不舒服的。刚来公司才20天，对于部分细节上的运维了解得还不是很到位，比如这备份机制是怎样的？于是，将几台空间老报警的服务器的文件及任务计划仔细看了下，总算是摸清楚了这新公司的重要日志的备份机制了：由于最终存储备份的2台机器用的是增量同步备份，从而越来越大。而日志要留着以备查验，只好考虑做压缩备份了。... 最近接到一个 case：大数据分析那边反馈我们这边推送的数据同比去年同期少了很多。这是很不正常的，因为业务一直在增长。于是，我开始顺藤摸瓜的跟进。一开始就发现一个小问题：scp 推送文件脚本执行后居然会报错：[root@netdata :/data]# sh pushdata.shdos2unix: converting file pushdata.log to UNI... 这两天工作是用几台PC机给开发组搭建本地测试环境：CentOS-6.4-x86_64 + ant + svn。为了操作简单及系统稳定，全部系统采用最小化安装方法。又出于拓展考虑，决定给每台测试机建立一个本地yum仓库，方便安装缺失组件，而不再受到依赖性的困扰。下面分享一下利用iso镜像搭建本地yum仓库的简单步骤：一、准备工作下载或拷贝CentOS或RedHat的iso镜像... 
上次张戈博客刚公布了RHEL7的最新资讯及下载地址，并且在文章结尾也猜测centos7也会即将发布，于是一直持续关注着Centos 7的最新动态，前些天centos发布了一个预览版，而非正式版，张戈也就没分享出来。今天，刚从厦门旅游回来，突然发现Centos在7/8号就已经发布了！好吧，我也奥特曼了。下面转载一段来自【太平洋电脑网】的相关介绍，就懒得另行码字了。7月8日，Cen...
4月5日 · 2016年
分享一次Linux任务计划crontab不执行的问题排查过程
5552 72 23
10月15日 · 2014年
Linux系统最大文件打开数优化，解决Too many open files报错
1740 5 3
11月18日 · 2014年
Linux系统crontab备份数据库执行不成功？可能是百分号%在作怪！
4518 3 4
4月29日 · 2014年
教你如何查看Linux的CPU负载
2029 34 6
3月2日 · 2014年
启用某些Linux发行版的root帐号
1859 2 12
7月10日 · 2014年
服务器日志备份超节省空间的思路
1887 5 11
8月19日 · 2015年
解决dos2unix/unix2dos报错，并在家目录下生成u2dtmp*文件问题
5807 5 3
7月4日 · 2014年
利用Centos或RedHat的iso镜像搭建本地yum仓库
2087 5 16
7月14日 · 2014年
CentOS 7.0.1406正式版发布，附更新记录及CentOS7 iso镜像文件下载地址
19452 18 12
WEB应用阅读更多最近我在负责一个统一接入层的建设项目，涉及到Haproxy和ospf的运维部署，本文分享一下我在部署Haproxy之后整理的运维部署规范，并实现了Haproxy的多配置文件管理方案。一、部署安装1、下载源码包最新stable版本下载地址：http://www.haproxy.org/download/1.7/src/haproxy-1.7.9.tar.gz2、编译安装tar z... ![]()
上午共享的那个varnish安装手册，个人看了下，有点不知所云，好吧~看来还是先安装玩玩！苦逼公司服务器没法连外网，不能用什么wget或yum命令直接下载安装，每每看到别人博客贴出的在线安装代码时，总有一股羡慕嫉妒“恨”冒了出来。。。好吧，既然没法上外网，那只能麻烦点通过下载源码来编译安装了！Varnish 3.0.4下载地址： http://repo.varnish-cache.... 
这是我上一家公司的案例总结，发现躺在草稿箱好几个月了，今天得空就整理发布一下。先说一下开发那边提来的2个case：①、同一个域名需要反向代理到前台和后台（不同机器和端口）；②、需要采用IP+端口的模式，嵌入到APP作为DNS污染后的备选方案。对于第①个问题，很好解决：通过区分二级目录来反代不同的节点即可，所以代码类似如下：server { li... 
将2个网站搬到阿里云，一个是因为阿里云稳定，另一个就是牛逼轰轰的云盾了。之前在博客联盟群里模拟CC攻击过搭建在阿里云ECS上的博客，结果云盾毫无反应，而网站已经挂了。这次特意细看了一下云盾上的CC防护功能，发现有部分朋友估计并未正确使用WAF。所以，我在本文就简单的分享一下阿里云盾-WAF网站防御的正确使用方法。一、域名解析大部分朋友，只是开启了云盾就不管了，这也就是很多朋友受到C... 
最近在配置Haproxy代理的时候发现一个很有意思的事情：Haproxy在代理http请求会无脑加一个X-Forwarded-For（后文简称XFF），而不是将自身的IP地址加到已存在的XFF列表之后，WTF！还有这种神操作？确认无误之后，我到Haproxy的github开了一个issue反馈了这个BUG（issue地址），最终了解到了Haproxy就是这样设计的，并得到了解决方案，而且这个is... 
上周有一个站长问到我一个问题，问fastcgi_cache和pagespeed加速有没有冲突。略微想了下，2个都是比较原生的主，应该不存在兼容问题。至于这个朋友问到这2个机制处理的先后问题，我思考了下。既然fastcgi_cache已经是缓存到本地的文件，那么pagespeed肯定是后处理的。通俗来说，就是当用户访问WEB时，Nginx 应该是先调用 fastcgi缓存，然后再进行page... 在以前的公司曾安装过Varnish，可惜还没摸热就离职了，这次接着倒腾了下Varnish，并搭建成功，特来记录下，以备后用。一、测试环境系统版本：CentOS 6.4 x64WEB环境：Nginx+PHP+MySQLVarnish：3.0工作原理：简单的说，在本次测试中，Varnish将来自80的请求转发到后端的nginx8080端口，当匹配到请求是jpg、css、... 最近在给开发同事折腾开发测试环境，其中就有php的编译安装。由于每个人的需求不一致，所以也接触到了各种模块编译和集成，中间不乏各种编译依赖报错。正好，搜了几次都是下面2篇文章内容，干脆就转到自己博客，以备后用，后续有相关内容再继续补充。 checking for BZip2 support… yes checking for BZip2 in default path... ![]()
近段时间，公司的检测中心报表系统(SMC)的开发人员时不时找到我，说用户老是出现无法登录的情况。前些日子因为手头上有Jboss集群的测试工作，发现用户不能登录时，都是在Tomcat中将这个项目Reload一下就好了，不过只是治标而已，因为大概几个小时之后又会再次出现无法登录的情况。今天上午，开发人员小毛又找到我，要我协助将这个问题根治一下，拖太久用户难保不投诉。简单分析了一... 
张戈博客目前用的是Nginx的fastcgi缓存方案，属于纯净态缓存模式，所以前台登录态什么的基本都没了。如果要兼顾前台登录态，又想速度快，有没有解决方案？之前在分享张戈博客优化方案时提到，要实现网站轻度缓存，方案还是有的，比如 DB Cache Reloaded、Redis、memcached等。最近恰好遇到一个数据缓存需求，因此尝试了下memcached方案，下面简单分享下我的... 上上篇文章《nginx平滑升级&新增模块》提到了公司的https访问需求。当我新增了SSL模块之后，却发现以前还真没部署过https访问。下面整理我的部署过程，并收集了一下Apache和Tomcat这2种Linux下常用的WEB软件配置SSL的简单简单步骤，以便回头翻阅。一、下载证书成功申请SSL证书之后，就可以下载到配置SSL的证书了！一般情况下，都可以选择下载相应WEB... 张戈博客曾分享过不少关于七牛云存储的一些经验技巧，对七牛感兴趣或者遇到相关问题的朋友可以看一看以前的相关文章： 七牛&又拍云CDN云存储节省GET次数的小技巧 WordPress简单代码开启七牛CDN及集成七牛缩略图的方法 浅谈网站使用七牛云存储之后的robots.txt该如何设置？ Linux/vps本地七天循环备份和七牛远程备份脚本前段时间，百度云加...
9月2日 · 2017年
Haproxy安装部署文档及多配置文件管理方案
4897 21 8
3月13日 · 2014年
HTTP加速器varnish安装小记(1)
6075 3 32
7月22日 · 2015年
Nginx通过二级目录（路径）映射不同的反向代理，规避IP+端口访问
8573 81 9
2月28日 · 2015年
阿里云盾网站安全防御(WAF)的正确使用方法
6084 43 23
4月12日 · 2019年
惊现Haproxy重复添加X-Forwarded-For问题（附官方解决办法）
5722 10 7
9月10日 · 2015年
实测Nginx服务器开启pagespeed加速效果
13071 20 21
9月22日 · 2014年
http加速器Varnish的vcl配置小记(lnmp环境)
1485 2 2
11月22日 · 2015年
php5编译安装常见错误和解决办法集锦
2037 6 10
2月27日 · 2014年
解决Tomcat数据连接池无法释放
10682 10 12
5月2日 · 2016年
WordPress启用memcached动态缓存以及报错解决
21478 38 87
12月27日 · 2014年
Linux+Nginx/Apache/Tomcat新增SSL证书，开启https访问教程
26718 51 24
5月10日 · 2015年
为WordPress开启Nginx缩略图功能，七牛从此陌路
7176 20 31
