1月16日 · 2025年
FastTTS：支持私有化部署和源阅读无缝对接的语音合成服务
798 12 0
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3186 39 4
8月3日 · 2022年
SQLAlchemy因密码含有@符号连接MySQL失败
3145 14 0
6月17日 · 2022年
Flyer：基于FastAPI的轻量级API开发框架
3836 6 0
3月18日 · 2022年
APISIX高级路由之301/302跳转配置
3570 10 0
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5425 6 1
2月25日 · 2022年
分享一个APISIX网关返回502的典型案例
2525 7 1
12月23日 · 2021年
解决百度搜索出现安全中心提醒
1879 27 4
12月12日 · 2021年
APISIX运维优化之解决长尾请求（耗时抖动）问题
3643 11 0
12月18日 · 2016年
Nginx内容替换模块http_substitutions_filter_module及实用案例分享
2829 25 28
5月15日 · 2014年
10个超有趣的Linux命令
4555 1 23
1月6日 · 2015年
利用placeholder属性来添加输入框默认文字提示，提高用户体验
1693 14 17
脚本编程阅读更多
多年没写过批处理了，来新公司的第一个case却是需要写一个bat脚本，批量更新采集agent的配置文件，其中就涉及到远程IP的端口检测。本以为会和Linux一样可以简单判断：echo q|telnet -e \'q\' $ip $port && echo "$ip:port 通"||echo "$ip:port 不通"结果发现Windows下面telnet退出并没有执行... 
最近实在太忙，没时间研究和折腾，所以也没有什么可以分享到博客的。果然，个人博客坚持原创太不不容易了。张戈博客上线2年多，从1天多更，到一天1更、一周一更，直到现在2星期可能有一更的节奏。。。好了，废话不说了。翻了翻在工作上的印象笔记，发现还是有一些存货可以分享的。挺久之前，组内新申请了一批开发测试机，需要部署环境。除了一些常见的软件要安装之外，还有一个我之前很少用到的Samba。... 最近我在改造手头负责的一个HTTP Restful API服务，集成对gRPC协议（在鹅厂叫tRPC，是gRPC的本土衍生版本）的支持。由于是从0学习这个协议，因此也踩了不少坑，这里用一篇文章来记录下，希望可以帮助到同样从0学习gRPC的朋友。列表参数赋值老的Rest接口中，大量用到了列表参数，看了下pb协议，给这个参数定义如下：message Foo { rep... 一、起因昨天，开发组兄弟发现resin日志出现不少支付宝业务报错信息，用户用支付宝购买了产品，钱到账后公司系统却未返回支付成功状态！这还得了？用户明明支付成功了，结果却显示未到账！！！必须赶紧解决，用户投诉是小，用户流失就大了！仔细分析日志后，发现是解析支付宝接口域名（mapi.alipay.com）时出现延时，导致获取不到支付成功的返回信息！检查发现OpenSUSE的name... 最近手头有个业务是基于Apache Karaf开发的，运行在K8S里面，跑了一堆的bundle，偶尔里面挂一两个bundle容器是没什么感知的，但是业务可能会局部异常。要推动业务优化的话，周期就会拉得很长，因此先弄个定时拨测来监控下bundle是不是都在正常运行的。看了下要查看Karaf里面的bundle需要ssh进去执行bundle list命令，因此基于之前的经验利用Python p... 
此文将整理一些简单实用、有趣易学的shell练习脚本，希望可以帮到一些想学习shell的初学者。张戈也会在闲暇时间不定期更新此文，对已有实例进行改进和注释，增强可读性和易懂性。当然我也会不定期的添加更多简单、有趣且实用的shell练习脚本，帮助一些有需要的入门学习者。一、编写一个脚本使我们在写一个脚本时自动生成”#!/bin/bash”这一行和注释信息。原文代码为：#!/bin/bas... 最近在跟一个自动化发布平台的建设事项，其中Linux系统的远程控制通道则由我独立开发完成，其中涉及到了Linux系统远程命令和文件传输操作。因为之前写Linux系统密码管理系统的时候，用的是Paramiko的SSHClient。所以，我这次依然采用Paramiko来做实现，代码虽短，说起其中的坑，我也是一把辛酸一把泪的填上了。先上完整代码：# -*- coding: utf-8... 
说到shell可控多线程，网上分享的大部分是管道控制的方案。这种方案，张戈博客也曾经实战并分享过一次：《Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点》，感兴趣的朋友可以看看。下面张戈博客再分享另一种更容易理解的入门级可控多线程shell脚本方案：任务切割、各个击破。先来 1 段场景描述：某日，在鹅厂接到了这个任务，需要在Linux服务器中，对几... ![]()
昨天，发布了《完美实现移动主题在360网站卫士缓存全开情况下的切换》一文，通过JS实现了主题在移动端访问时的自动切换，最后提到了可以在电脑版和移动版的footer里面加上手动切换链接，实现手动版本切换功能。今早发现，电脑版切换到移动版是没问题了，但是移动版切换到电脑版，JS将会再次工作uaredirect.js会再次做UA判断，然后由又跳回了电脑版！ 也就是说，手机上浏览无法手动切换到电脑...
7月1日 · 2015年
Windows下bat批处理脚本使用telnet批量检测远程端口小记
12317 23 21
6月25日 · 2016年
巧用echo命令解决Samba批量添加用户难题
6155 35 19
8月17日 · 2022年
gRPC开发过程中遇到的问题记录
3186 39 4
6月26日 · 2014年
Linux操作系统DNS解析(nameserver)监控脚本
8057 6 20
3月1日 · 2022年
解决paramiko使用invoke_shell交互式命令超时问题
5425 6 1
6月19日 · 2014年
[不定期更新]简单的shell脚本练习实例
1686 162 24
5月7日 · 2017年
分享一个自写的Python远程命令和文件（夹）传输类
8544 40 37
11月8日 · 2015年
分享一个入门级可控多线程shell脚本方案
6318 31 12
5月26日 · 2014年
js获取url中?后的参数，修复移动版无法切换到电脑版的BUG
4640 3 18
操作系统阅读更多本系列文章一共三篇，分别为《脚本编程与Linux命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试Linux运维的同学有所帮助。$1 入参，空值时默认赋值技巧variable=${1:-"default value"} # 当未传参时，赋默认值。echo... 最近接到一个 case：大数据分析那边反馈我们这边推送的数据同比去年同期少了很多。这是很不正常的，因为业务一直在增长。于是，我开始顺藤摸瓜的跟进。一开始就发现一个小问题：scp 推送文件脚本执行后居然会报错：[root@netdata :/data]# sh pushdata.shdos2unix: converting file pushdata.log to UNI... 
昨天下午，RTX群里面公司负责游戏运营的MM发来求助：我还真是孤陋寡闻，以前还真没见过这个问题，赶紧度了度，很快就帮MM解决了问题。 解决办法也很简单：方法①、 关闭所有浏览器，右键点击“网络邻居”，选择“属性”，在“本地连接”上点击右键，选择“修复”即可。方法②、在DOS窗口下（如果是XP，点击屏幕左下角的“开始”，“运行”，输入“cmd”回车）输入：ip... ![]()
本人是Linux运维工程师，对这方面有点心得，现在我说说要掌握哪方面的工具吧。说到工具，在行外可以说是技能，在行内我们一般称为工具，就是运维必须要掌握的工具。我就大概列出这几方面，这样入门就基本没问题了。Linux系统如果是学习可以选用Redhat或CentOS，特别是CentOS在企业中用得最多，当然还会有其它版本的，但学习者还是以这2个版本学习就行，因为这两个版本都是兄... 
公司推Win7了，作为IT部门，铁定是先行测试的小白鼠。于是先给我们安装了Win7工作环境。一直以来，除了服务器，普通办公PC的管理员都是被桌面运维部收管的，其他IT部门使用的都是普通AD账号。对于我这样喜欢折腾测试软件的人来说，没有管理员权限是很痛苦的一件事情！还未推广Win7时，我就用了这个获取System权限的办法，变相的取得管理员权限，而网域监测系统却不会报警。废话不多说，直接上菜... ![]()
时常，某个程序或软件并没有语法错误，并且你检查它的相关内容也确实没有发现问题。这是因为你用普通文本编辑器软件来查看的时候，有许多字符没有显示出来，但在终端使用cat命令可以很容易地检测出是否存在这些字符。首先，我们创建一个简单的文本文件，写入一些特殊字符。打开终端，运行命令：printf \'testing\012\011\011testing\014\010\012more tes... 
本系列文章一共三篇，分别为《脚本编程与 Linux 命令》、《接入层与网络基础》和《 MySQL 与 SQL 优化》，由腾讯高级工程师 luaruan(阮永顺) 原创、张戈博客整理分享，如有勘误请在博客留言。希望对需要学习、面试 Linux 运维的同学有所帮助。MSS与MTU的区别，默认大小各是多少？ 标准以太网接口缺省的MTU（最大传输单元）为1500 字节，是最大帧151... ![]()
初识nfs还是在测试lvs负载均衡的时候，为了保证代码的一致性，将一台Realserver作为nfs服务器，而其他Realserver均以nfs将代码挂载过来。这样就保证了代码的一致性，但也是由很大隐患的，一旦那台Realserver宕机，那就全军覆没了...好了，废话不多说，进入nfs挂载简单步骤。一、安装nfs一般redhat是默认安装了nfs服务的，如果非默认安装且取消勾选nfs的话... 
用户发来反馈，使用部门Windows跳板机报错：The remote session was disconnected because there are no Remote Desktop License Servers available to provide a license.Please contact the server administrator，最后发现是微软RDP远程桌面套件的一个BUG，可通过安装微软补丁或修改注册表来解决，本文简单记录分享下解决过程......
10月26日 · 2018年
Linux运维基础技能： 脚本编程与Linux命令
4588 15 16
8月19日 · 2015年
解决dos2unix/unix2dos报错，并在家目录下生成u2dtmp*文件问题
5615 5 3
7月25日 · 2014年
解决ping域名时出现“TTL传输中过期”的问题
11587 160 14
12月18日 · 2013年
详解Linux运维工程师必备技能
3569 13 1
3月10日 · 2014年
Windows 7下获取System权限
1858 2 0
12月30日 · 2013年
Linux终端：用cat命令查看不可见字符
1259 0 1
11月29日 · 2018年
Linux运维基础技能： 接入层与网络基础
2008 20 18
1月23日 · 2014年
Redhat设置NFS挂载的简单步骤
7627 2 0
4月6日 · 2017年
远程桌面报错解决：No Remote Desktop License Servers Available
9706 25 26
WEB应用阅读更多在决定全面铺开使用APISIX之前，Kong网关在我们的生产环境已经试用了将近一年，因此存在大量的生产环境API接口使用的是Kong HMAC鉴权。此次迁移到APISIX网关，为了减少客户端的改造工作，我们决定将Kong网关的HMAC鉴权插件移植到APISIX，同时将Kong的HMAC认证作为后续API接口的统一鉴权方案。... APISIX的高级路由非常厉害，可以基于任意变量来做转发路由，比如可以基于Header、cookie、querystring参数等。而我们这里历史上有个非常变态的用法：基于Body里面某个参数的值来路由，即不同的值要转发到不同的后端IP:PORT（这个问题主要是因为服务拆分时偷懒，没有推动客户端修改请求留下的尾巴）。... 
我们都知道网络上的爬虫非常多，有对网站收录有益的，比如百度蜘蛛（Baiduspider），也有不但不遵守robots规则对服务器造成压力，还不能为网站带来流量的无用爬虫，比如宜搜蜘蛛（YisouSpider）（最新补充：宜搜蜘蛛已被UC神马搜索收购！所以本文已去掉宜搜蜘蛛的禁封！==>相关文章)。最近张戈发现nginx日志中出现了好多宜搜等垃圾的抓取记录，于是整理收集了网络上各种禁止垃圾蜘蛛... 
最近给张戈博客全站开启了https，所以对这块关注比较多。昨天脑补的时候发现http2.0只支持SSL加密的网站，即https。于是心血来潮，给张戈博客开启了http 2.0，尝尝鲜。查了下资料，发现Nginx不久前发布的 1.9.5版本支持http2.0，而1.8.x时代只是对SPDY进行了支持。一直用的1.62稳定版，此次为了测试http2.0，直接进行了版本跳跃，升级到了1.9.5版... Configmap的方式来配置APISIX。最开始我们就采用 Configmap的方式在腾讯云TKE上部署APISIX，当网络区域越开越多时，每个TKE集群都需要去定义一套config.yaml对应的Configmap，管理非常繁琐。因此，这里我们利用Python的Jinja2插件来自动化渲染APISIX的配置文件，整体非常方便！... ![]()
今天，不知道写什么，就找来一篇很详细的Nginx安装教程，“滥竽充数”了，另外后面附上马哥关于nginx讲解的核心视频教程。Nginx（发音同 engine x）是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，并在一个BSD-like 协议下发行。由俄罗斯的程序设计师Igor Sysoev所开发，供俄国大型的入口网站及搜索引擎Rambler（俄文：Рам... 
年前，终于迎来了期待已久的php7正式版，我也在第一时间就给博客用上了。性能确实有了质的飞跃，问题还是有不少的。比如鱼叔的微信插件在php7下面自动回复异常等。为了继续使用微信插件，我只好将php5.6又开了起来，下面简单分享一下多个版本php共存的方法。一、编译路径多个版本php要共存，必须使用不同的安装路径。比如，之前php5.6安装在/usr/local/php，那么我们安装... 
最近我在负责一个统一接入层的建设项目，涉及到Haproxy和ospf的运维部署，本文分享一下我在部署Haproxy之后整理的运维部署规范，并实现了Haproxy的多配置文件管理方案。一、部署安装1、下载源码包最新stable版本下载地址：http://www.haproxy.org/download/1.7/src/haproxy-1.7.9.tar.gz2、编译安装tar z... 
将2个网站搬到阿里云，一个是因为阿里云稳定，另一个就是牛逼轰轰的云盾了。之前在博客联盟群里模拟CC攻击过搭建在阿里云ECS上的博客，结果云盾毫无反应，而网站已经挂了。这次特意细看了一下云盾上的CC防护功能，发现有部分朋友估计并未正确使用WAF。所以，我在本文就简单的分享一下阿里云盾-WAF网站防御的正确使用方法。一、域名解析大部分朋友，只是开启了云盾就不管了，这也就是很多朋友受到C... 最近一直在帮一个购买了张戈博客付费服务的朋友做网站防护，为了简单抵挡一下竞争对手的DDoS攻击，他给网站开启了Incapsula的免费CDN服务。开启CDN之后，我之前给他写的Shell防护脚本也就宣告无效了，因为不管是正常访问还是攻击访问，脚本拿到的IP都是CDN节点的，而我不可能把CDN的节点IP也给禁用了，那就都不能访问了。为了解决这个窘迫，我想到了以前看过的Nginx访问限... 
做过面向公网WEB运维的苦逼们肯定见识过各种恶意扫描、拉取、注入等图谋不轨行为吧？对于直接对外的WEB服务器，我们可以直接通过 iptables 、 Nginx 的deny指令或者是程序来ban掉这些恶意请求。而对于套了一层 CDN 或代理的网站，这些方法可能就失效了。尤其是个人网站，可能就一台VPS，然后套一个免费的CDN就行走在互联网了。并不是每个CDN都能精准的拦截各种恶意请求的，更... ![]()
最近在复习运维常见的监控告警软件的时候，想起了zabbix，于是先用军哥的lnmp一键安装包快速搭建了lnmp环境，然后成功编译安装了zabbix，特地将安装过程和遇到的问题记录在此，以便自己或有需要的人来参考翻阅。由于已有php运行环境，所以只需要编译安装zabbix即可。一、安装依赖组件yum -y install net-snmp net-snmp-devel perl-DB...
11月7日 · 2021年
APISIX插件开发之Kong网关HMAC鉴权插件（附客户端SDK）
2202 7 0
10月28日 · 2021年
APISIX高级路由之通过Body参数转发请求
5034 9 0
9月25日 · 2014年
服务器反爬虫攻略：Apache/Nginx/PHP禁止某些User Agent抓取网站
4615 39 67
12月8日 · 2015年
升级Nginx1.9.5以上版本，开启博客网站http2.0时代
7765 17 18
11月14日 · 2021年
APISIX运维优化之配置文件自动化生成方案
3992 5 1
5月23日 · 2014年
菜鸟教程：Ngnix安装详解
4804 7 9
2月27日 · 2016年
分享一下php7和其他php多版本共存的配置教程
9211 33 15
9月2日 · 2017年
Haproxy安装部署文档及多配置文件管理方案
4367 21 8
2月28日 · 2015年
阿里云盾网站安全防御(WAF)的正确使用方法
4440 43 23
12月29日 · 2014年
Nginx在CDN加速之后，获取用户真实IP做并发访问限制的方法
18648 24 12
4月24日 · 2016年
Nginx网站使用CDN之后禁止用户真实IP访问的方法
14646 24 49
1月28日 · 2015年
zabbix监控在lnmp环境下编译安装小记
4357 5 9
