1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
693 11 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3064 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3043 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3694 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3497 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5312 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2414 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1822 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3528 11 0
5月17日 · 2016年
MySQL错误修复记录：Table xx is marked as crashed and should be repaired
1318 11 32
6月18日 · 2014年
超简单的MySQL主从复制配置步骤
4567 12 24
7月14日 · 2014年
CentOS 7.0.1406正式版发布，附更新记录及CentOS7 iso镜像文件下载地址
18863 18 12
脚本编程阅读更多
难得今天晚上9点前赶回家，而且最近草稿箱也压了不少“湿货”，就挑一篇发出来好了！不过在发文章之前先吐槽一下那个从昨天攻击张戈博客到现在还在继续的无聊蛋疼之人！本来就算开启了云加速全缓存也是扛不住的，因为静态中混着动态请求，比如浏览计数。还好灵机一动，对这些动态做了点小手脚，现在基本毫无压力了！粗略分析一下这个攻击博客的小人，无外乎是2种人：①、最近张戈博客流量大涨，估计遭人... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 最近新来的实习生小伙子在重构一个我入职时开发的老系统，这个系统之前用的是Python twisted框架开发的，这次重构希望可以换到FastAPI，也就是我上一篇文章分享的Flyer开发框架。小伙子很给力，花了几天自学了下FastAPI和Flyer就开始开发了，结果用Flyer框架的时候，连接MySQL报错如下：sqlalchemy.exc.OperationalError: (... ![]()
申明：以下内容大部分搜集于网络，由个人整理成更容易理解的简明教程！一、原理阐述在linux下可以用几个最基本的命令制作一个自解压的程序。其原理是：利用cat 命令可以将两个文件连起来（用>>追加也能达到同样效果），前一个文件是shell脚本，负责执行解压和安装；后一个文件是一个压缩包。把这两个文件通过cat连接成一个新的可执行文件，前面是解压程序,后面是压缩包，当你执行... 
上一篇文章发布了备份网站到七牛的第一版，这次应回复要求先公布同步原理及shell源码，让喜欢折腾的人有力可使。其实，这个备份工具的原理非常简单，就是借用了官方的同步工具，配合简单的shell语句即可完成。一、备份原理简介qrsync 是一个根据七牛云存储API实现的简易命令行辅助上传同步工具，支持断点续上传，增量同步，它可将用户本地的某目录的文件同步到七牛云存储中，同步或上传几百GB甚... 最近我在改造手头负责的一个HTTP Restful API服务，集成对gRPC协议（在鹅厂叫tRPC，是gRPC的本土衍生版本）的支持。由于是从0学习这个协议，因此也踩了不少坑，这里用一篇文章来记录下，希望可以帮助到同样从0学习gRPC的朋友。列表参数赋值老的Rest接口中，大量用到了列表参数，看了下pb协议，给这个参数定义如下：message Foo { rep... ![]()
最近老是有用户申请开通某网站的访问权限，我接手之前浏览权限的设置方法是修改tomcat下的server.xml配置文件，通过定义allow="IP.."的访问规则来控制浏览权限。这种方法有个很不好的地方，每加一次权限，你就得重启一次tomcat，用户老是挤牙膏一样，一次一两个IP的发邮件来申请开通，不但很烦人，而且对正在使用的用户体验也非常的糟糕！于是我决定要改善这个糟糕的局面。在Linu... 
此工具可将标准版的sitemap.xml转换成电脑版—移动版的对应关系sitemap，用于百度开放适配&360移动适配的文件提交。工具用批处理制作，仅起到批量转换的辅助功效，免去手动制作的麻烦！可以用于移动适配的提交测试！张戈不会php，而shell又不能普遍适用，所以只能挑了自己比较拿手的批处理来制作这个辅助工具！因为批处理的局限性，做出来的工具只能用于尝鲜测试使用！或长期不更新的CMS企业网站来提交移动适配sitemap。另外，响应式站点亦无需提交适配！...
3月24日 · 2015年
bat/cmd批处理连接SqlServer数据库查询脚本
2559 12 10
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5312 6 1
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3043 14 0
12月23日 · 2013年
Shell下制作自解压安装包,实现脚本的简单加密
5626 5 1
8月5日 · 2014年
VPS服务器备份网站到七牛云存储的shell脚本（第二版）
4467 2 14
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3064 39 4
1月10日 · 2014年
Win平台Web访问白名单设置脚本(IP安全性原则)
3974 0 0
5月16日 · 2014年
百度开放适配&360移动适配专用Sitemap格式转换工具
8741 13 52
操作系统阅读更多![]()
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这些发行版和ubuntu一样，root帐号都是停用的，在我安装完后，发现进行一些操作时，提示权限不... ![]()
今天，在站长交流群里面，又一个站长抱怨服务器每星期都必须手动重启一次，否则QQ登陆功能无法使用，原因是服务器时间快了5分钟以上，腾讯服务器拒绝提供API服务。本以为只要加一个简单的linux时间同步任务计划即可，结果我拿到root后，发现并不是那么一回事。在我正确添加了ntpdate 任务计划之后，手动执行了时间同步命令，发现时间依然没有变化。手动执行 date -s 16:00:... ![]()
昨天在给服务器做年终“大扫除”整理时，发现有个目录下因为文件过多而删除失败，最终使用xargs才搞定，于是顺便来记录下。在执行某些命令时，当Linux某个目录下文件过多就会因为“参数列表过长”而报错无法执行。比如，我要清空/var/spool/clientmqueue/下的庞大数量的临时文件，如果直接执行 rm -f *，有时就会会出现“参数列表过长”的错误提示，因为linux下一般的... 
重量网络最近买了一个腾讯云的VPS，一直在折腾着，偶然请我帮忙敲几行命令解决一些小问题。这不，今天他通过yum在线安装了一个vsftp后，发现不太会用，就按照网上的教程东搞西搞。最后发现无法上传文件了，就给我操作了一把。用SecureCRT远程登录后，我做了如下检查：①、打开了vsftp配置文件（/etc/vsftpd/vsftpd.conf）检查write_enable状... 
最近在上海新建机房的时候，给了我2台M2机型服务器，在做初始化的时候发现有一堆磁盘：[root@Centos64:~]# fdisk -l | grep \'300.1 GB\' | sortDisk /dev/sda: 300.1 GB, 300069052416 bytesDisk /dev/sdb: 300.1 GB, 300069052416 bytesDisk /dev/sdc: 3... 朋友弄了一个小项目，要我帮忙做下Linux系统运维，上线一段时间后，发现项目偶尔会挂掉导致服务不可用。开发朋友一时之间也没空去研究项目奔溃的根因，只好由我这个运维先写一个项目进程自拉起脚本，通过Linux任务计划每分钟检查一下进程是否存在来避免项目挂了没人管的情况。自拉起脚本很简单，随便写几行就搞定了：#!/bin/bashprocesscount=$(pgrep my_app|w... 最近接到一个运维开发任务，需要开发一个帐号管理系统，对手头三千多台Linux服务器的root帐号进行批量系统的管理，实现定期修改root为随机密码并加密存储，并向运维管理WEB前台提供密码查询解密接口等功能。刚开始，我基于php+ssh2_exec开发了一套雏形。基本功能都实现了，结果老大说这里的运维就我稍微会点php，后面可不好维护。本来也被我说服了，因为写都写好了，难道要重构？... 
前面，张戈博客在折腾Nginx的SSL优化时，注意到前人在Nginx的listen配置中，添加了 fastopen=3 reuseport 这2个参数。于是脑补了下，原来是启用Nginx对TCP_FASTOPEN和TCP_SO_REUSEPORT新特性的支持，至于有什么好处，请自行脑补下-->传送门一、必要环境当我依葫芦画瓢也添加这2个参数时，报错了：nginx: [em... 这次给博客添加了纯代码缓存之后，发现缓存文件竟然达到了50多MB！而我的服务器每次还需要同步至七牛，文件体积的增加都会增加文件远程同步备份的时间。因此，我第一想到的办法就是在网站ZIP压缩打包的时候排除缓存文件夹。下面是从网上找来的ZIP命令参数：zip Linux上适用的参数:-1 : 最快压缩，压缩率最差。-9 : 最大压缩，压缩率最佳。-b : 暂存文件的路径。这个参... 
嗨，我正在写一个简单的程序，我要让这个程序打印出一个整数。 #include <stdio.h> int main() { int linux = 701; printf("%d", linux); return 0; } 够简单吧。真的吗？我把它存成了code.c现在我...
3月2日 · 2014年
启用某些Linux发行版的root帐号
1463 2 12
8月27日 · 2014年
Linux系统date命令无法修改或同步时间的解决办法
7710 7 7
1月17日 · 2014年
Linux基础知识之xargs命令
4860 12 18
6月12日 · 2014年
解决Centos下vsftp无法上传文件的问题，附vsftp配置详解
30005 47 22
9月3日 · 2016年
Linux系统LVM逻辑卷创建过程以及自动化脚本
7172 54 27
4月5日 · 2016年
分享一次Linux任务计划crontab不执行的问题排查过程
4081 72 23
12月12日 · 2015年
解决Linux修改密码报PAM authentication failed错误
12557 28 25
5月7日 · 2016年
升级CentOS6.5内核，开启Nginx的fastopen和reuseport特性
2332 8 29
12月9日 · 2014年
Linux系统zip压缩命令详细参数，附文件排除选项的正确用法
2686 17 7
1月13日 · 2014年
事实证明Linux永远是NO.1
3154 6 3
WEB应用阅读更多
做过面向公网WEB运维的苦逼们肯定见识过各种恶意扫描、拉取、注入等图谋不轨行为吧？对于直接对外的WEB服务器，我们可以直接通过 iptables 、 Nginx 的deny指令或者是程序来ban掉这些恶意请求。而对于套了一层 CDN 或代理的网站，这些方法可能就失效了。尤其是个人网站，可能就一台VPS，然后套一个免费的CDN就行走在互联网了。并不是每个CDN都能精准的拦截各种恶意请求的，更... 
在以前的公司曾安装过Varnish，可惜还没摸热就离职了，这次接着倒腾了下Varnish，并搭建成功，特来记录下，以备后用。一、测试环境系统版本：CentOS 6.4 x64WEB环境：Nginx+PHP+MySQLVarnish：3.0工作原理：简单的说，在本次测试中，Varnish将来自80的请求转发到后端的nginx8080端口，当匹配到请求是jpg、css、... ![]()
这年头原创技术博文真心难写，不可能每天都有灵感，也不可能每天都出问题。而且技术教程也非常全面，不管是百度一下，你就知道，还是谷歌一把，你就找到，基本要啥有啥，只有你想得到，没有你搜不到。。。如果突然发现搜不到了，那恭喜你，你又可以来个原创研究项目了！之所以开篇吐槽这么多，也是因为张戈今天确实没东西写，又不想转载， 就来点伪原创吧！主要是更换域名之后，确实需要很长一段时间的原创文章来取得搜索... 在实际业务场景中，APISIX限速太笼统，达不到业务要求，最终，我们自己在limit-count插件基础上进行改造，重新设计一个限速机制，能够针对不同的服务给不同的Consumer设置差异化的访问限速，满足生产环境更精细化的限速需求。... 
上周有一个站长问到我一个问题，问fastcgi_cache和pagespeed加速有没有冲突。略微想了下，2个都是比较原生的主，应该不存在兼容问题。至于这个朋友问到这2个机制处理的先后问题，我思考了下。既然fastcgi_cache已经是缓存到本地的文件，那么pagespeed肯定是后处理的。通俗来说，就是当用户访问WEB时，Nginx 应该是先调用 fastcgi缓存，然后再进行page... 
每一次分享技术文章，都是基于自己的痛点，基于自己的需求。这次也一样，所以分享具体方法之前，我先说一下我这次的需求与痛点：一、需求痛点在博客集成了代码版缓存功能之后，为了方便在前台清理页面缓存，我特意写了ajax清理缓存的功能（相关文章）。这个功能写好之后确实可以正常工作。但是，为了让网站加载速度提升到极致，我还在nginx里面加了类似于WP Super Cache的mod_rewr... 张戈博客分享过很多关于缓存加速的教程，自己也是不断的在摸索，追求最佳的网站静态缓存加速方案。在这里简单的总结一下：1、使用虚拟主机的朋友推荐使用缓存插件或php 代码版缓存方案=>点此直达2、使用独立主机的朋友推荐使用Nginx的Fastcgi纯静态缓存方案=>点此直达在我分享了Nginx的Fastcgi缓存之后，有不少朋友已折腾成功。不过有朋友反馈，不知道在多... 
这是我上一家公司的案例总结，发现躺在草稿箱好几个月了，今天得空就整理发布一下。先说一下开发那边提来的2个case：①、同一个域名需要反向代理到前台和后台（不同机器和端口）；②、需要采用IP+端口的模式，嵌入到APP作为DNS污染后的备选方案。对于第①个问题，很好解决：通过区分二级目录来反代不同的节点即可，所以代码类似如下：server { li... ![]()
近段时间，公司的检测中心报表系统(SMC)的开发人员时不时找到我，说用户老是出现无法登录的情况。前些日子因为手头上有Jboss集群的测试工作，发现用户不能登录时，都是在Tomcat中将这个项目Reload一下就好了，不过只是治标而已，因为大概几个小时之后又会再次出现无法登录的情况。今天上午，开发人员小毛又找到我，要我协助将这个问题根治一下，拖太久用户难保不投诉。简单分析了一... ![]()
上午共享的那个varnish安装手册，个人看了下，有点不知所云，好吧~看来还是先安装玩玩！苦逼公司服务器没法连外网，不能用什么wget或yum命令直接下载安装，每每看到别人博客贴出的在线安装代码时，总有一股羡慕嫉妒“恨”冒了出来。。。好吧，既然没法上外网，那只能麻烦点通过下载源码来编译安装了！Varnish 3.0.4下载地址： http://repo.varnish-cache.... 
很久没写文章了，博客已经长草了，今天挤点时间分享一些小干货，也是回应一下不少站长朋友的留言问题。有不少站长朋友问张戈博客的静态文件为啥是另外一个域名？有啥好处？如何实现？其实这算是一种动静分离的做法，不过我这里用了偷懒的办法实现，而非彻底的动静分离，不过最终效果的区别并不大。先啰嗦一下动静分离的概念和好处。一、动静分离我们的网站简单来说分为2种数据... 在决定全面铺开使用APISIX之前，Kong网关在我们的生产环境已经试用了将近一年，因此存在大量的生产环境API接口使用的是Kong HMAC鉴权。此次迁移到APISIX网关，为了减少客户端的改造工作，我们决定将Kong网关的HMAC鉴权插件移植到APISIX，同时将Kong的HMAC认证作为后续API接口的统一鉴权方案。...
4月24日 · 2016年
Nginx网站使用CDN之后禁止用户真实IP访问的方法
14533 24 49
9月22日 · 2014年
http加速器Varnish的vcl配置小记(lnmp环境)
1139 2 2
5月18日 · 2014年
nginx配置文件参数详解
1845 7 32
11月3日 · 2021年
APISIX插件开发之精细化限速插件
3386 10 0
9月10日 · 2015年
实测Nginx服务器开启pagespeed加速效果
11723 20 21
12月6日 · 2014年
php平滑重启nginx，彻底清除WordPress的静态缓存
7007 5 9
10月6日 · 2015年
Nginx配置多站点下的Proxy_cache或Fastcgi_cache缓存加速
7869 15 19
7月22日 · 2015年
Nginx通过二级目录（路径）映射不同的反向代理，规避IP+端口访问
7455 81 9
2月27日 · 2014年
解决Tomcat数据连接池无法释放
9863 10 12
3月13日 · 2014年
HTTP加速器varnish安装小记(1)
3998 3 32
2月3日 · 2018年
小网站最简单实用的动静分离优化方案
13050 48 45
11月7日 · 2021年
APISIX插件开发之Kong网关HMAC鉴权插件（附客户端SDK）
2101 7 0
