1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
733 11 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3092 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3081 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3726 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3524 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5348 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2441 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1846 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3570 11 0
8月26日 · 2014年
谷歌被墙后的各种处理办法小结
1701 31 25
5月10日 · 2014年
张戈+博客的百度指数怎么这么高？
4784 6 80
6月25日 · 2016年
巧用echo命令解决Samba批量添加用户难题
6135 35 19
脚本编程阅读更多
最近在折腾博客主题，通常来说大多数人认为换主题会影响SEO，实际上只要你把工作都做到位了，是没有任何问题的。比如，换主题后你得仔细检查标题和描述等内容是否发生改变、换主题后是否带来了大量的404页面等。当然，更细微的可能是换主题之后，网站的内链网络也发生了微妙的改变，但是整体的影响较小。总之，张戈博客这次更换主题基本上没有看到明显的SEO影响，反而出现几个新的关键词。好了，题外话到... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 
这次生产环境上线了多台Linux服务器，需要全部纳入Zabbix监控范畴，一台一台的去装Zabbix Agentd插件那就太苦逼了，所幸Zabbix客户端插件是支持绿色安装的，就写了个简单的一键安装脚本，然后配合 Secure CRT 的多窗口交互命令一次性就可以搞定了。正常启动Zabbix客户端服务其实只需要2个文件： zabbix_agentd 和 zabbix_agentd.... 
博客前些时间分享过一次vps远程备份到七牛的工具，全傻瓜式交互操作，但也有一个很大的缺憾，那就是不够灵活，在无人干预的情况下，无法完成对多个站点的远程备份设置。这次博客搬家到vps后，张戈花了点时间完善了下，实现了多站点，多数据库的本地七天循环备份和同步备份至七牛云存储的脚本。一、类型说明①、七天循环备份受服务器空间制约，我们不可能在VPS上每天都备份一份新的网站数据，... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 由于电信宽带和谐了443端口，近期我花了不少时间折腾了下近半年都没瞅一眼的博客。经过一番折腾（详见前文），博客总算可以运行在家里的NAS上，整体部署方案如下：图1. 张戈博客部署架构图一、预缓存从上图可以看到，由于中间用于代理转发的腾讯云CDN和阿里云CDN都是没有缓存的，如果CloudFlare的缓存过期，将需要绕过多层链路回源获取网页内容，相比速度就会慢很多。所以，需... 最近一直在开发自动化运维发布平台，底层命令行、文件通道主要基于paramiko模块，使用过程中遇到各种各样的问题，本文主要用于收集问题及解决记录，以备后续使用。一、Error reading SSH protocol banner连接错误这个关键词，在百度、谷歌一搜一大把的提问，也有少部分给出了解决方案，但是最终都无法解决，我经过不断尝试和解读paramiko源码，终于搞定了这个问题，在此... 最近新来的实习生小伙子在重构一个我入职时开发的老系统，这个系统之前用的是Python twisted框架开发的，这次重构希望可以换到FastAPI，也就是我上一篇文章分享的Flyer开发框架。小伙子很给力，花了几天自学了下FastAPI和Flyer就开始开发了，结果用Flyer框架的时候，连接MySQL报错如下：sqlalchemy.exc.OperationalError: (... 
多年没写过批处理了，来新公司的第一个case却是需要写一个bat脚本，批量更新采集agent的配置文件，其中就涉及到远程IP的端口检测。本以为会和Linux一样可以简单判断：echo q|telnet -e \'q\' $ip $port && echo "$ip:port 通"||echo "$ip:port 不通"结果发现Windows下面telnet退出并没有执行...
5月3日 · 2015年
SEO技巧：Shell脚本自动提交网站404死链到搜索引擎
16277 67 74
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
4487 2 14
4月8日 · 2015年
zabbix agentd客户端插件Shell一键自动安装脚本
1130 9 5
8月31日 · 2014年
Linux/vps本地七天循环备份和七牛远程备份脚本
10483 14 45
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5348 6 1
2月8日 · 2020年
网站预缓存工具，提升网站整体加载速度
6744 73 0
6月16日 · 2017年
Python远程控制模块paramiko遇到的问题及解决记录
5929 32 17
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3081 14 0
7月1日 · 2015年
Windows下bat批处理脚本使用telnet批量检测远程端口小记
12262 23 21
操作系统阅读更多本系列文章一共三篇，分别为《脚本编程与Linux命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试Linux运维的同学有所帮助。$1 入参，空值时默认赋值技巧variable=${1:-"default value"} # 当未传参时，赋默认值。echo... 本文列出了10个基础的每个Linux用户都应该知道的网络和监控命令。网络和监控命令类似于这些： hostname, ping, ifconfig, iwconfig, netstat, nslookup, traceroute, finger, telnet, ethtool 用于查看linux服务器ip地址，管理服务器网络配置，通过 telnet 和ethernet建立与linux之间的网络链接... 
昨天在部署zabbix监控的时候，遇到一个问题：监控服务器处于无外网状态，在线安装不可用。而某些依赖包度娘或谷姐搜索起来也挺呛人的！于是想到一个办法，利用有外网的服务器的yum命令来安装这些软件，并自动保留安装包即可。于是就有了以下的转载教程：一、让yum命令下载RPM包，而不安装。yum是一个优秀的软件获取与系统更新的工具，主要应用于redhat系列的发行版本上。但是这样一个优秀... 1. 简介sed是非交互式的编辑器。它不会修改文件，除非使用shell重定向来保存结果。默认情况下，所有的输出行都被打印到屏幕上。sed编辑器逐行处理文件（或输入），并将结果发送到屏幕。具体过程如下：首先sed把当前正在处理的行保存在一个临时缓存区中（也称为模式空间），然后处理临时缓冲区中的行，完成后把该行发送到屏幕上。sed每处理完一行就将其从临时缓冲区删除，然后将下一行读入，进行处理和... 
Linux系统安装软件，不管是从性能还是从稳定考虑，优先推荐编译安装的方式都是无可厚非的。不过在编译安装的时候，偶尔会提示缺失一些依赖组件，比如curl-devel、libevent等。这时候，要去找相应的编译包或者rpm包又要耗费时间！而且，往往当你找到并开始安装的时候，很有可能又有新的依赖组件缺失提示！！郁闷死你。。。这时候，在线安装功能就可以出马了，比如Centos下的yum、ubunt... ![]()
从2006年毕业至今，从事IT行业已经接近8个年头。一路走来有很多心路历程和技术心得都写在了51CTO的博客中，不少文字现在看来已显稚嫩，但是这正是我真实的成长之路。这八年，从最基础的网络管理员开始，从最下层的IT工作比如说做水晶头做起，慢慢的走过国企、干过外企，做过网络管理员、系统工程师、项目经理、Linux讲师，经历过众多重大的项目（包括政府部门、国家重要民生相关项目），流过汗熬过夜，... 
作为一个大公司的运维，手头管理了成百上千的服务器是家常便饭，甚至更多。而我们一般都是用跳板机登陆，由于这些机器一般都是克隆或者虚拟化出来的，所以登陆后的命令行提示符几乎是一个模子刻出来的，比如都是：[root@localhost ~]#这时，我们肯定会经常遇到这样一个困扰：操作服务器时因某事中断，回头继续操作的时候肯定会ifconfg确认下是否是我要操作的服务器，因为无法从表象识别... 
今天第一天上班，发现新公司也是用的最熟悉的SecureCRT终端。领到自己的办公电脑后，第一件事就是下载并安装了SecureCRT 7.1。并设置了以前最喜欢的配色（下文会有介绍）。公司的web软件用的是rensin，以前还真没怎么接触过，仔细拜读了前辈写的超级精简的一套部署教程，发现完全可以写一个懒人脚本一键搞定，于是动手写脚本，顺便进一步熟悉下resin。写了一半发现以前熟悉的... 
用户发来反馈，使用部门Windows跳板机报错：The remote session was disconnected because there are no Remote Desktop License Servers available to provide a license.Please contact the server administrator，最后发现是微软RDP远程桌面套件的一个BUG，可通过安装微软补丁或修改注册表来解决，本文简单记录分享下解决过程......
10月26日 · 2018年
Linux运维基础技能： 脚本编程与Linux命令
4512 15 16
3月24日 · 2014年
Linux：10个实用的网络和监控命令
4353 8 13
8月7日 · 2014年
Linux系统yum命令安装软件时保留(下载)rpm包
9214 17 4
3月6日 · 2014年
Linux：sed命令详解
4164 6 34
8月13日 · 2014年
SUSE Linux系统在线安装软件命令zypper参数详解
11305 22 4
12月30日 · 2013年
Linux从零到高手的进阶心得
968 9 2
8月13日 · 2015年
Linux在批量服务器管理中实用的PS1命令提示符格式
4389 5 5
6月16日 · 2014年
解决SecureCRT的vim中为下划线而无高亮问题，附最佳护眼配色方案。
11639 7 23
4月6日 · 2017年
远程桌面报错解决：No Remote Desktop License Servers Available
9672 25 26
WEB应用阅读更多自从APISIX网关推广使用以来，在我们部门已经有很多生产业务接入使用。有一天被拉进了一个问题群，被告知APISIX网关性能有问题，整体表现还不如之前的ZUUL网关。纳尼？APISIX性能再怎么不济也不至于比ZUUL差吧？废话少说，直接上手弄了个串行请求对比测试了一下生产环境的APISIX网关和ZUUL网关，结果大跌眼镜！正常情况下，APISIX的耗时都优于ZUUL网关，但是AP... ![]()
网站加载速度越快，访客互动性、留住率和转换率就越高，这早已不是什么秘密。网站每延迟100毫秒，亚马逊的销售额就会减少1%；延迟增加500毫秒，这意味着谷歌的流量和收入就会减少20%。要是有一个办法可以为你的网站服务器提速，又不必升级到功能更强大的服务器，就没有理由不试一试这个办法。我在本教程中将介绍如何优化Nginx网站服务器，以提升其性能。虽然Nginx网站服务器本身已俨然成为运行速度最... 
说到Nginx的内容替换功能，大部分人应该都听说过Nginx内置的的subs_filter替换模块，但是这个模块有个缺憾，就是只能替换一次，而且还不支持正则表达式，这就有些鸡肋了。不过，我们可以集成一个第三方的替换模块：ngx_http_substitutions_filter_module，来实现我们的各种需求。经过测试，这个模块至少有如下实用功能：①、支持多次替换②... ![]()
今天，不知道写什么，就找来一篇很详细的Nginx安装教程，“滥竽充数”了，另外后面附上马哥关于nginx讲解的核心视频教程。Nginx（发音同 engine x）是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，并在一个BSD-like 协议下发行。由俄罗斯的程序设计师Igor Sysoev所开发，供俄国大型的入口网站及搜索引擎Rambler（俄文：Рам... 
我负责的几个公司内部网站，仅集成了php原生memcache组件，不支持memcached分片存储的自动容灾方案，近期出现过几例因memcache服务器故障引起WEB爆卡的尴尬事，所以接到了一个给现网php集成memcached模块的需求。内部的个别系统有多老、多难用我就不吐槽了，slackware、suse用过的人都知道。。。不说了，总之老老实实的编译安装吧。memcached这... ![]()
最近在复习运维常见的监控告警软件的时候，想起了zabbix，于是先用军哥的lnmp一键安装包快速搭建了lnmp环境，然后成功编译安装了zabbix，特地将安装过程和遇到的问题记录在此，以便自己或有需要的人来参考翻阅。由于已有php运行环境，所以只需要编译安装zabbix即可。一、安装依赖组件yum -y install net-snmp net-snmp-devel perl-DB... 上上篇文章《nginx平滑升级&新增模块》提到了公司的https访问需求。当我新增了SSL模块之后，却发现以前还真没部署过https访问。下面整理我的部署过程，并收集了一下Apache和Tomcat这2种Linux下常用的WEB软件配置SSL的简单简单步骤，以便回头翻阅。一、下载证书成功申请SSL证书之后，就可以下载到配置SSL的证书了！一般情况下，都可以选择下载相应WEB... 
最近在给开发同事折腾开发测试环境，其中就有php的编译安装。由于每个人的需求不一致，所以也接触到了各种模块编译和集成，中间不乏各种编译依赖报错。正好，搜了几次都是下面2篇文章内容，干脆就转到自己博客，以备后用，后续有相关内容再继续补充。 checking for BZip2 support… yes checking for BZip2 in default path... 在以前的公司曾安装过Varnish，可惜还没摸热就离职了，这次接着倒腾了下Varnish，并搭建成功，特来记录下，以备后用。一、测试环境系统版本：CentOS 6.4 x64WEB环境：Nginx+PHP+MySQLVarnish：3.0工作原理：简单的说，在本次测试中，Varnish将来自80的请求转发到后端的nginx8080端口，当匹配到请求是jpg、css、... APISIX的高级路由非常厉害，可以基于任意变量来做转发路由，比如可以基于Header、cookie、querystring参数等。而我们这里历史上有个非常变态的用法：基于Body里面某个参数的值来路由，即不同的值要转发到不同的后端IP:PORT（这个问题主要是因为服务拆分时偷懒，没有推动客户端修改请求留下的尾巴）。... 
最近在配置Haproxy代理的时候发现一个很有意思的事情：Haproxy在代理http请求会无脑加一个X-Forwarded-For（后文简称XFF），而不是将自身的IP地址加到已存在的XFF列表之后，WTF！还有这种神操作？确认无误之后，我到Haproxy的github开了一个issue反馈了这个BUG（issue地址），最终了解到了Haproxy就是这样设计的，并得到了解决方案，而且这个is... 记录ipvsadm 启动报错的解决办法，并附上详细的ipvsadm参数说明报错信息：[root@localhost ~]# service ipvsadm start Clearing the current IPVS table: [确定] Applying IPVS configuration: /etc/init.d/ipvsadm: line 62: /etc/sysconfig/ipvsadm: 没有那个文件或目录...
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3570 11 0
2月11日 · 2014年
借助PageSpeed,为Nginx网站服务器提速
4604 6 8
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
2810 25 28
5月23日 · 2014年
菜鸟教程：Ngnix安装详解
4750 7 9
3月5日 · 2017年
libmemcached编译安装报错解决记录
4421 18 27
1月28日 · 2015年
zabbix监控在lnmp环境下编译安装小记
4306 5 9
12月27日 · 2014年
Linux+Nginx/Apache/Tomcat新增SSL证书，开启https访问教程
25243 51 24
11月22日 · 2015年
php5编译安装常见错误和解决办法集锦
1510 6 10
9月22日 · 2014年
http加速器Varnish的vcl配置小记(lnmp环境)
1154 2 2
10月28日 · 2021年
APISIX高级路由之通过Body参数转发请求
4999 9 0
4月12日 · 2019年
惊现Haproxy重复添加X-Forwarded-For问题（附官方解决办法）
5017 10 7
4月2日 · 2014年
ipvsadm启动报错解决办法,另附ipvsadm详细参数
6284 8 10
