1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
682 11 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3056 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3016 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3687 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3488 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5295 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2405 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1809 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3508 11 0
2月10日 · 2014年
国内外流行的Linux发行版
690 0 12
10月31日 · 2014年
解决启用wp super cache缓存后，页面追加多个斜杠仍然可以访问的隐患
3620 1 4
5月29日 · 2014年
百度分享无法抓取图片及摘要的折中解决办法
8401 23 0
脚本编程阅读更多最近我在改造手头负责的一个HTTP Restful API服务，集成对gRPC协议（在鹅厂叫tRPC，是gRPC的本土衍生版本）的支持。由于是从0学习这个协议，因此也踩了不少坑，这里用一篇文章来记录下，希望可以帮助到同样从0学习gRPC的朋友。列表参数赋值老的Rest接口中，大量用到了列表参数，看了下pb协议，给这个参数定义如下：message Foo { rep... 
张戈博客很久以前分享过一个CC攻击的防御脚本，写得不怎么样，不过被51CTO意外转载了。博客从此走上了经常被人拿来练手的不归之路。当然，还是有不少朋友在生产环境使用，并且会留言询问相关问题。根据这些问题的需求，我花了一些时间重新写了一个比较满意的轻量级CC攻击防御脚本，我给它取了一个比较形象的名字：CCKiller，译为CC终结者。一、功能申明分享之前我必须先申明... 上次写到《服务器日志备份超节省空间的思路》，压缩后磁盘占用由93%降到了62%，效果还是不错的！为什么不直接删除呢？其实是因为这些日志涉及到支付等重要业务，保存半年以上也算是保守的做法。今早，又发现几例磁盘空间报警，占用率都在90%+，关键居然是根分区！这要是日志突然暴涨，把根分区撑爆了，那就可以体验到“菊花一紧”的快感了吧？索性利用CRT的全局命令把磁盘空间占用率超过75%的服务... ![]()
最近老是有用户申请开通某网站的访问权限，我接手之前浏览权限的设置方法是修改tomcat下的server.xml配置文件，通过定义allow="IP.."的访问规则来控制浏览权限。这种方法有个很不好的地方，每加一次权限，你就得重启一次tomcat，用户老是挤牙膏一样，一次一两个IP的发邮件来申请开通，不但很烦人，而且对正在使用的用户体验也非常的糟糕！于是我决定要改善这个糟糕的局面。在Linu... ![]()
今天上午，同事叫我帮他看下他正在写的脚本到底哪里出了问题，执行总是达不到预期功能。于是ssh连过去看能否发现问题，经过多次Debug定位与排除，问题终于得到解决。 同事在网上down了一个脚本菜单模板，想把我们已经存在的功能脚本整合到一起，做成多功能的Linux运维工具。目前已经添加了挺多功能，而早上才添加的一个抓取高占用CPU的Java线程功能时出现了无法出现交互界面的问题... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 
多年没写过批处理了，来新公司的第一个case却是需要写一个bat脚本，批量更新采集agent的配置文件，其中就涉及到远程IP的端口检测。本以为会和Linux一样可以简单判断：echo q|telnet -e \'q\' $ip $port && echo "$ip:port 通"||echo "$ip:port 不通"结果发现Windows下面telnet退出并没有执行... 
导读：2个月前，张戈博客分享了一篇Python+Shell定时备份网站到阿里云OSS的教程，已经有非常多的站长朋友用上了，反馈还不错，也有不少朋友提出了很多优化建议，比如上传完成后能否删除本地压缩包之类的，本文将继续分享另一种云端备份方案。一、优点分析内网传输：和阿里云OSS一样，腾讯云COS同样支持内网和外网文件传输，对于腾讯云服务器，使用内网传输绝对是最快、最稳定的备... ![]()
昨天，发布了《完美实现移动主题在360网站卫士缓存全开情况下的切换》一文，通过JS实现了主题在移动端访问时的自动切换，最后提到了可以在电脑版和移动版的footer里面加上手动切换链接，实现手动版本切换功能。今早发现，电脑版切换到移动版是没问题了，但是移动版切换到电脑版，JS将会再次工作uaredirect.js会再次做UA判断，然后由又跳回了电脑版！ 也就是说，手机上浏览无法手动切换到电脑... 
一直想写一篇关于网站本地备份和远程备份的文章，相关草稿其实在6.12号就写好了，一直因为没有测试环境，没发布出来。时间久了，也就忘了，回头找个时间测试下再发布好了。今天分享的工具也和备份有关，而且是远程备份，这个工具算是我的无聊之作吧，虽说WordPress已经有wp2pcs这类备份插件了。相信折腾VPS的站长会喜欢我这个工具的，因为它不会常驻占用资源。一、工具档案工具名称：Bac...
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3056 39 4
9月28日 · 2015年
CCKiller：Linux轻量级CC攻击防御工具，秒级检查、自动拉黑和释放
21399 228 259
7月21日 · 2014年
nginx日志切割及7天前的历史日志删除脚本
7817 16 16
1月10日 · 2014年
Win平台Web访问白名单设置脚本(IP安全性原则)
3967 0 0
2月26日 · 2014年
菜单式Shell运维脚本调试小记
3733 10 7
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5295 6 1
7月1日 · 2015年
Windows下bat批处理脚本使用telnet批量检测远程端口小记
12238 23 21
1月2日 · 2017年
利用腾讯云COS云对象存储定时远程备份网站
9216 94 81
5月26日 · 2014年
js获取url中?后的参数，修复移动版无法切换到电脑版的BUG
4540 3 18
7月31日 · 2014年
VPS服务器备份网站文件和数据库到七牛云存储的shell脚本工具
4832 1 33
操作系统阅读更多![]()
今天发现一个疑难杂症：发现批量发布一个新版本程序时，发现有一台没有成功。亲自登陆上去看了下，发现原来是发布帐号在某个目录下创建目录失败了！人工 touch 试了下，发现提示没有权限。然后 ls -l 看了下，发现一切正常：[root@10.12.212.132:/data/TNM2/release]# ll 36240-rw-r--r-- 1 publish user... ![]()
跟了我5年多的本本已步入花甲，CPU严重老化，运行Windows异常吃力，于是考虑换成Linux试试。忙活了一天，测试了2个“家用”Linux发行版,一个是深度的Linux Deepin 2013,另一个是雨林木风的StartOS 5.1。在测试过程中也遇到一些有用的经验，现在就一一记录一下。这是在安装完StartOS后进行的记录，因为是安装在以前的C盘，就没继续分区来新增挂载点，直接挂了... 
本系列文章一共三篇，分别为《脚本编程与Linux命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试Linux运维的同学有所帮助。$1 入参，空值时默认赋值技巧variable=${1:-"default value"} # 当未传参时，赋默认值。echo... 
Redis的安装配置很简单，而且很早之前就装过Redis，可这几天再次安装时居然又遗忘了一些细节，看来好记性不如烂笔头，还是在博客记录一下比较好，至少不用总是抱度娘大腿了。今天编译安装了几次，发现居然没在prefix指定目录生成文件？？看了半天结果发现PREFIX我用了小写字母。。。看来还是得记录一次正确的操作步骤，免得再次出现这种窘迫。一、选择版本前往官方网站：h... ![]()
从2006年毕业至今，从事IT行业已经接近8个年头。一路走来有很多心路历程和技术心得都写在了51CTO的博客中，不少文字现在看来已显稚嫩，但是这正是我真实的成长之路。这八年，从最基础的网络管理员开始，从最下层的IT工作比如说做水晶头做起，慢慢的走过国企、干过外企，做过网络管理员、系统工程师、项目经理、Linux讲师，经历过众多重大的项目（包括政府部门、国家重要民生相关项目），流过汗熬过夜，... 
最近一直很忙很忙，完全没时间打理博客，回家后基本上就是洗洗睡的节奏，我之前真的从未想过，我会有回到家不想碰电脑的情况。。。不但不想碰电脑，而且失眠症也消失无遗，因为实在是太疲劳了，总算是有了些好处。这几天实际上也有一些可以记录的工作经验，无奈一直没有头绪也没时间，刚好趁着今天午休间隔，先整理出一小部分好了，不然博客就真废了。。。一、故障案例①今天上午在给测试组的IIS新增https... ![]()
Linux下出现IP冲突，是不会像Windows那样，在右下角弹出冲突提示的。博主就出过一次糗，记得当时是在VM虚拟机里面安装了4个redhat，测试LVS集群。结果发现其中一台RealServer老是掉线，重启network服务后能正常几分钟，然后又掉线了。。。4个Redhat都是VM克隆出来的、完全一致的系统，仅其中一台出问题，所以博主觉得匪夷所思！直到，后来我的办公电脑（宿主）网线直接没... 
这是一个Linux系统常见的故障，网络上也能轻易的找到解决办法，我也只是在工作中遇到了这个问题，所以在博客记录下，以备不时之需。一、报错截图：图为resin的报错日志，很明显提示了Too many open files： 二、临时解决临时的解决办法很简单，先执行ulimit -n 65535，然后重启resin即可。Ps：请注意启动环境是否生效：... 这两天接到的任务是给JAVA开发项目组部署【JAVA+MySQL主从+Redis主从】运行环境。部署过程中大问题倒没有，小问题却不少，因此也涨了不少经验值。后续有时间我会一一整理记录下来，沉淀而不忘分享。今天，装完一台redis，并配置好redis.conf后，想偷懒直接用scp传到另一台redis，省去全部重新编辑的麻烦。结果一执行就出现下面这个错误：bash: scp: c... ![]()
昨天在给服务器做年终“大扫除”整理时，发现有个目录下因为文件过多而删除失败，最终使用xargs才搞定，于是顺便来记录下。在执行某些命令时，当Linux某个目录下文件过多就会因为“参数列表过长”而报错无法执行。比如，我要清空/var/spool/clientmqueue/下的庞大数量的临时文件，如果直接执行 rm -f *，有时就会会出现“参数列表过长”的错误提示，因为linux下一般的...
12月19日 · 2013年
分享一个Linux无法创建文件夹，但是目录权限却显示正常的问题和解决
7605 5 0
3月2日 · 2014年
给已安装的Linux新增Swap交换分区
1482 1 28
10月26日 · 2018年
Linux运维基础技能： 脚本编程与Linux命令
4466 15 16
4月17日 · 2015年
Linux系统编译安装Redis以及主从复制配置小记
1127 16 6
12月30日 · 2013年
Linux从零到高手的进阶心得
955 9 2
3月18日 · 2015年
解决mstsc无法连接问题：由于没有远程桌面授权服务器可以提供许可证…
4794 26 3
5月4日 · 2014年
在Linux中发现IP地址冲突的方法
4937 3 8
10月15日 · 2014年
Linux系统最大文件打开数优化，解决Too many open files报错
1535 5 3
3月27日 · 2015年
linux/scp命令报“bash: scp: command not found lost connection”错误的解决办法
1833 14 3
1月17日 · 2014年
Linux基础知识之xargs命令
4856 12 18
WEB应用阅读更多
这是我上一家公司的案例总结，发现躺在草稿箱好几个月了，今天得空就整理发布一下。先说一下开发那边提来的2个case：①、同一个域名需要反向代理到前台和后台（不同机器和端口）；②、需要采用IP+端口的模式，嵌入到APP作为DNS污染后的备选方案。对于第①个问题，很好解决：通过区分二级目录来反代不同的节点即可，所以代码类似如下：server { li... ![]()
今天，不知道写什么，就找来一篇很详细的Nginx安装教程，“滥竽充数”了，另外后面附上马哥关于nginx讲解的核心视频教程。Nginx（发音同 engine x）是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，并在一个BSD-like 协议下发行。由俄罗斯的程序设计师Igor Sysoev所开发，供俄国大型的入口网站及搜索引擎Rambler（俄文：Рам... 某日，组内后台开发找到我，问我们的WEB服务器超时设置是多少。他反馈的问题是，有一个VLAN切换任务cgi接口经常返回504网关超时错误，要我分析解决下。我问了一下，得知这个请求遇到网络设备对象较多的时候，需要小半个小时才能完成，也就是要用到长连接才行。老规矩，从开发那拿到接口地址，得到接入层服务器IP，是一台Haproxy代理，看了一下Haproxy的超时设置：# 设置成功连... 记录ipvsadm 启动报错的解决办法，并附上详细的ipvsadm参数说明报错信息：[root@localhost ~]# service ipvsadm start Clearing the current IPVS table: [确定] Applying IPVS configuration: /etc/init.d/ipvsadm: line 62: /etc/sysconfig/ipvsadm: 没有那个文件或目录... 
我们都知道网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider）（最新补充：宜搜蜘蛛已被UC神马搜索收购！所以本文已去掉宜搜蜘蛛的禁封！==>相关文章)。最近张戈发现nginx日志中出现了好多宜搜等垃圾的抓取记录，于是整理收集了网络上各种禁止垃圾蜘蛛... 
昨天一个网友通过QQ联系我，说按照我博客之前分享的http2配置教程不能生效，想请我帮忙看看。经过测试，使用谷歌浏览器访问他的测试站点，确实没有开启http2，但他的配置和编译参数都正确的，这有点奇怪了。不过昨天太忙就没有继续帮他分析，他只好将服务器账号和密码都留言给了我。今天中午我抽空在他服务器重新编译测试了一把，才发现原来是这么一个梗！他在编译Nginx之前，使用的是yum... 上上篇文章《nginx平滑升级&新增模块》提到了公司的https访问需求。当我新增了SSL模块之后，却发现以前还真没部署过https访问。下面整理我的部署过程，并收集了一下Apache和Tomcat这2种Linux下常用的WEB软件配置SSL的简单简单步骤，以便回头翻阅。一、下载证书成功申请SSL证书之后，就可以下载到配置SSL的证书了！一般情况下，都可以选择下载相应WEB... 
很多业务系统都用到了Haproxy这个高性能反向代理负载均衡器。在日常运维当中，Haproxy后端节点的上（接入）、下（剔除）线操作绝对是家常便饭，而且人工重启的时候经常有胆颤心惊的感觉。下面分享一种命令行操作Haproxy后端节点平滑上下线的技巧。一、新增配置Haproxy自带了一个非常实用的管理页面，我们可以在harpxoy.cfg新增如下配置，开启Haproxy监控管理页面功... 我负责的几个公司内部网站，仅集成了php原生memcache组件，不支持memcached分片存储的自动容灾方案，近期出现过几例因memcache服务器故障引起WEB爆卡的尴尬事，所以接到了一个给现网php集成memcached模块的需求。内部的个别系统有多老、多难用我就不吐槽了，slackware、suse用过的人都知道。。。不说了，总之老老实实的编译安装吧。memcached这... ![]()
最近在复习运维常见的监控告警软件的时候，想起了zabbix，于是先用军哥的lnmp一键安装包快速搭建了lnmp环境，然后成功编译安装了zabbix，特地将安装过程和遇到的问题记录在此，以便自己或有需要的人来参考翻阅。由于已有php运行环境，所以只需要编译安装zabbix即可。一、安装依赖组件yum -y install net-snmp net-snmp-devel perl-DB... 
张戈博客目前用的是Nginx的fastcgi缓存方案，属于纯净态缓存模式，所以前台登录态什么的基本都没了。如果要兼顾前台登录态，又想速度快，有没有解决方案？之前在分享张戈博客优化方案时提到，要实现网站轻度缓存，方案还是有的，比如 DB Cache Reloaded、Redis、memcached等。最近恰好遇到一个数据缓存需求，因此尝试了下memcached方案，下面简单分享下我的... 在决定全面铺开使用APISIX之前，Kong网关在我们的生产环境已经试用了将近一年，因此存在大量的生产环境API接口使用的是Kong HMAC鉴权。此次迁移到APISIX网关，为了减少客户端的改造工作，我们决定将Kong网关的HMAC鉴权插件移植到APISIX，同时将Kong的HMAC认证作为后续API接口的统一鉴权方案。...
7月22日 · 2015年
Nginx通过二级目录（路径）映射不同的反向代理，规避IP+端口访问
7426 81 9
5月23日 · 2014年
菜鸟教程：Ngnix安装详解
4733 7 9
8月13日 · 2016年
修改Apache的超时设置，解决长连接请求超时问题
5200 25 47
4月2日 · 2014年
ipvsadm启动报错解决办法,另附ipvsadm详细参数
6252 8 10
9月25日 · 2014年
服务器反爬虫攻略：Apache/Nginx/PHP禁止某些User Agent抓取网站
4391 39 67
11月11日 · 2016年
解决Nginx配置http2不生效，谷歌浏览器仍然采用http1.1协议问题
3157 28 30
12月27日 · 2014年
Linux+Nginx/Apache/Tomcat新增SSL证书，开启https访问教程
25204 51 24
2月24日 · 2018年
Haproxy进阶管理：命令行控制后端节点上下线
1805 11 11
3月5日 · 2017年
libmemcached编译安装报错解决记录
4406 18 27
1月28日 · 2015年
zabbix监控在lnmp环境下编译安装小记
4287 5 9
5月2日 · 2016年
WordPress启用memcached动态缓存以及报错解决
20241 38 87
11月7日 · 2021年
APISIX插件开发之Kong网关HMAC鉴权插件（附客户端SDK）
2091 7 0
