admin的文章

2020-04-23admin阅读(1134)评论(0)赞(0)

切片是 引用类型，底层指向是同一片地址 切片是 引用类型，底层指向是同一片地址 切片是 引用类型，底层指向是同一片地址 slice表示切片(分片)，例如对一个数组进行切片，取出数组中的一部分值。在现代编程语言中，slice(切片)几乎成为一...

2020-04-23admin阅读(1468)评论(0)赞(0)

背景 我们在某客户生产环境中发现，应用服务器启动并与后端数据库建立连接池时，有概率发生部分连接建立失败的情况。经过排查发现，这种情况与ARP相关的内核参数unres_qlen有关。这篇文章将通过测试手段复现连接超时的情况，并详尽解析其底层的...

2020-04-23admin阅读(1369)评论(0)赞(0)

如今各种高大上的监控工具早已经让人目不暇接了，但是熟悉基础的 Linux 监控命令依然是必要的，就好比 IDE 再好用，我们也得学会 vi 或者 emacs 才行。如果让我选一个必须学会的 Linux 监控命令的话，那么我想我一定会选 sa...

2020-04-23admin阅读(1306)评论(0)赞(0)

我对 ElasticStack 可以说是既熟悉又陌生，说熟悉是因为很久以前就已经开始使用 ELK 来分析日志了，说陌生是因为以前的 ELK 环境都是同事搭建的，我主要是看看 Kibana 面板而已。随着 V5 的发布，ELK 全面进化为 E...

2020-04-23admin阅读(1169)评论(0)赞(2)

通常修改了 PHP 的配置后，为了让修改生效会执行 reload，而不是 restart，因为有很多前辈告诫过我们，reload 能保证整个过程的平滑性，所谓平滑性指的是在 reload 的过程中，旧的进程在处理完当前请求前不会提前终止。很...

2020-04-23admin阅读(980)评论(0)赞(0)

相信很多人看了标题后都会纳闷：设置 CRON 定时任务有什么难的？不过请相信我，正确设置 CRON 真的不是一件简单的事情！各位看官不妨听我慢慢道来。   关于 CRON，出镜率最高的一个问题莫过于：为什么手动执行一切正常，放到 ...

2020-04-23admin阅读(999)评论(0)赞(3)

很多公司都禁止程序员在 SQL 中使用 JOIN，至于原因则出奇的一致：用 JOIN 慢。不过我从没见过谁来论证为什么用 JOIN 慢，结果这个人云亦云的结论越传越广，让我觉得是时候来讨论一下这个看似正确的结论了。   举个例子：...

2020-04-23admin阅读(1702)评论(0)赞(0)

老实说，Dropwatch 并不是什么新鲜玩意，很多年前霸爷就专门撰文介绍过它，通过它可以大概找出系统为什么会丢包，其原理就是跟踪 kfree_skb 的调用行为。不过虽然很多人知道它的存在，但是却并不知道如何具体使用它，所以我写下了这篇文...

2020-04-23admin阅读(1212)评论(0)赞(0)

给一段文字标记 Tag 是一个很常见的需求，比如我每篇博客下面都有对应的 Tag，不过一般说来，Tag 是数据录入者人为手动添加的，但是对大量用户产生的数据而言，我们不能指望他们能够主动添加合适的 Tag，于是乎就产生了这样的需求：自动打 ...

2020-04-23admin阅读(1588)评论(0)赞(1)

之所以要实现 Schemaless，主要是因为在线 DDL 有很多痛点，关于这一点，我在以前已经写过文章，没看过的不妨看看「史上最LOW的在线DDL解决方案」，不过那篇文章主要以介绍为主，并没有涉及具体的实现，所以我写了一个 Laravel...

2020-04-23admin阅读(1181)评论(0)赞(0)

虽然百度的口碑并不好，但是不可否认的是，它一直是中文搜索中的霸主，所以对大多数中小型商业公司而言，都对百度蜘蛛的抓取行为予以放行，不过还有很多非法的蜘蛛，它们会通过 User-Agent 把自己伪装成百度蜘蛛，此时如果单纯以 User-Ag...

2020-04-23admin阅读(1248)评论(0)赞(0)

对于服务端开发者来说，通过抓包分析接口是必备技能之一，常见工具有 Charles 和 Fiddler 等等，不过 Charles 是收费的，Fiddler 虽然是免费的，但是其 Mac 版还不稳定，本文使用另一个工具：Mitmproxy。 ...

2020-04-23admin阅读(1385)评论(0)赞(1)

实际上，关于「如何抓取汽车之家的车型库」，我已经在「使用 Mitmproxy 分析接口」一文中给出了方法，不过那篇文章里讲的是利用 API 接口来抓取数据，一般来说，因为接口不会频繁改动，相对 WEB 页面而言更稳定，所以通常这是数据抓取的...

2020-04-23admin阅读(1583)评论(0)赞(0)

对于码畜而言，如果使用 Mac 笔记本的话，那么 Alfred 和 Dash 基本属于必装软件，其中 Alfred 可以免费使用，但是高级的 Powerpack 功能需要付费，而 Dash 则更进一步，不仅要付费购买，连后续升级也要花钱。这...

2020-04-23admin阅读(1080)评论(0)赞(3)

本文说的排序并不是指「冒泡」之类的技术概念，而是一个业务相关的问题。   举例来说：某个网站，每天都能产生很多数据，需要一个推荐列表页面来展示数据。最初是完全按照时间倒序来排序的，但是这样就产生了一个问题：新鲜的数据不一定是有价值...

2020-04-23admin阅读(1101)评论(0)赞(0)

系统写好了，能不能顺利上线？一般来说我们需要做一些压力测试来判断。比如系统预计每天一百万的接口访问量，并且访问时段主要集中在早八点到晚八点，那么平均下来 RPS 大约是 22 次左右，不过用户的访问量通常不会很平均，假设峰值流量是平均流量的...

2020-04-23admin阅读(1129)评论(0)赞(2)

如果想学会一门新语言，不仅要多读文档，还要多看别人写的代码，更要强迫自己用新语言多写代码。我在学习 Golang 之前，读过好几本相关的书籍，不过总感觉没真正学会，于是我决定动手用 Golang 写一个能用的工具试试，因为 Golang 最...

2020-04-23admin阅读(1033)评论(0)赞(0)

最近使用 pip 的时候感觉速度太慢了，感觉有必要改成豆瓣的豆瓣的镜像，可我记不清 pip 的配置文件路径了，当然可以用搜索引擎查询一下，不过还有更快的方法：strace！ shell> strace -eopen pip 2>...

2020-04-23admin阅读(2180)评论(0)赞(0)

起因 事情的起因是我们给线上的一个服务新加了30台服务器，然后就有用户反馈说我们的查询性能开始变得不稳定，一些平时很快的请求经常要卡好久才能返回。照理说加机器服务应该变得更快才是，怎么会变得更不稳定呢，这让我们一开始也不是很愿意相信这个事实...

2020-04-22admin阅读(1718)评论(0)赞(1)

概述：本文讨论主机在发送一个TCP数据包后，如果迟迟没有收到ACK，主机多久后会重传这个数据包。主机从发出数据包到第一次TCP重传开始，RFC中这段时间间隔称为retransmission timeout，缩写做RTO。本文会先看看RFC中...

2020-04-22admin阅读(1505)评论(0)赞(2)

iostat(1)是在Linux系统上查看I/O性能最基本的工具，然而对于那些熟悉其它UNIX系统的人来说它是很容易被误读的。比如在HP-UX上 avserv（相当于Linux上的 svctm）是最重要的I/O指标，反映了硬盘设备的性能，它...

2020-04-22admin阅读(1179)评论(0)赞(0)

前两天，我在微博上推荐了一篇朝花夕拾的文章：The story of one latency spike，文章中介绍了 cloudflare 工程师如何一步一步 debug 网络延迟问题，细细读来受益良多，不过我并不打算详细介绍那篇文章的细...

2020-04-22admin阅读(1760)评论(0)赞(1)

虽然早就知道很多人用 Guzzle 爬数据，但是我却从来没有真正实践过，因为在我的潜意识里，抓取是 Python 的地盘。不过前段时间，当我抓汽车之家数据的时候，好心人跟我提起 Goutte 搭配 Guzzle 是最好的爬虫，让我一直记挂在...

2020-04-22admin阅读(1298)评论(0)赞(0)

如果出现 SYN 丢包，那么将导致严重的性能问题，如果没有严重到完全连不上，那么在延迟时间上会表现出明显的时间特征，比如：1秒，3秒，7秒，15秒，31秒，具体可以参考：「SYN和RTO」，本文不说这个，就说说哪些情况会出现 SYN 丢包。...

2020-04-22admin阅读(1225)评论(0)赞(1)

如果你有几房姨太太的话，那么想让她们和平共处，多半是痴人说梦。对程序员而言，虽然他们不会有娶几个老婆的好运气，但是很可能会遇到在同一个系统里使用多个版本的软件的情况，一旦处理不好，同样会焦头烂额。   下面通过一个例子来说明如何解...

2020-04-22admin阅读(1153)评论(0)赞(4)

现在服务端程序员的主要工作已经不再是套模版，而是编写基于 JSON 的 API 接口。可惜大家编写接口的风格往往迥异，这就给系统集成带来了很多不必要的沟通成本，如果你有类似的困扰，那么不妨关注一下 JSONAPI，它是一个基于 JSON 构...

2020-04-22admin阅读(1081)评论(0)赞(1)

同事在使用 sftp 连接服务器的时候出现错误信息：session is down，已经自行检查了服务器地址，端口，用户名，密码等种种可能出现低级失误的地方，结果找不到原因。   同事找到我时，开始我觉得仅凭直觉并不好下手，不过但...

2020-04-22admin阅读(1209)评论(0)赞(3)

运营反馈某个功能速度很慢，查了一下，定位到如下 SQL： select id from user where name like ‘%foobar%’ order by created_at limit 10; 业务需要，LIKE 的时候必...

2020-04-22admin阅读(1147)评论(0)赞(1)

群里一位大佬上午说了一句箴言：「 世界上没有什么故障是重启解决不了的，如果有，再重启一次。」，结果下午群里就有一位朋友遇到了一个诡异的老版本 PHP 问题：当使用 file_get_contents 抓取网页内容的时候，总是返回空字符串，奇...