[TOC]

计算机存储体系结构

Read More

本文翻译自：http://coding-geek.com/how-databases-work/

当谈及到关系型数据库时，我不禁会以为有些东西被遗忘了。它们无处不在。有各式各样的数据库：从麻雀虽小五脏俱全的 SQLite 到强大的Teradata。但是，鲜有文章解释数据库是如何工作的。你可以自己google下“how does a relational database work”看看有多少搜索结果。而且，那些文章还都很简短。如果你现在再找找看最时髦的技术（大数据，NoSQL 或者 JavaScript），你会发现一大堆有深度的文章来解释它们是如何工作的。

Read More

索引就是为了能快速查找到对应的数据，大学里肯定学过hash表这种key-value形式的查找结构。mysql的b+树索引也是key-value形式的查找结构，只是它还对key进行了排序像红黑树一样，而且能适应磁盘这种block存储的速度慢吞吐量大的特性。

从线性表的二分查找说起

Read More

这篇文章拆解自我的知乎回答：https://www.zhihu.com/question/451313635/answer/1849701932

有大佬说让我讲一讲消息系统，流批处理还有k8s调度，istio，这些我也还在学习中，我先挑一个稍微熟悉一点的消息系统讲一下吧，希望整理的过程中自己也能有些收获。有什么不对的地方希望路过的大佬指正。

Read More

• 文件读取：cat、head、tail
• 字符处理：tr、sed、awk
• 字符截取：cut
• 搜索过滤：grep、egrep、fgrep、zgrep、zegrep、zfgrep
• 统计聚合：sort、uniq、wc

OpenBSD源码地址：https://github.com/openbsd/src
GNU项目的coreutils源码地址：https://github.com/coreutils/coreutils

Read More

我们项目准备用clickhouse来做数据统计，当前(2021-04-18)使用的是clickhouse官方最新发布的0.3.0版jdbc驱动，使用过程中碰到了几个问题：

1、javacc解析器导致大文本sql语句的解析性能损耗严重

Read More

大厂这段时间学到的最有价值的两个技术除了大数据，另一个就是基于CDC和消息队列的实时同步技术。

去年的一篇文章大致地讲了我对MQ的一些认识，事实上Kafka在内的现代MQ，功能远不止这些。后面整理好自己的思路，肯定会再写一篇文章来讲讲。这篇文章的主角就是与MQ息息相关的CDC技术。

Read More

查公网ip可以用curl ifconfig.me，这个我们也可以在nginx上通过简短的指令实现：

1
2
3
4
5
6
7
8

server {
    listen 80;
    server_name ip.hufeifei.cn;
    location / {
        default_type text/plain;
        return 200 "$remote_addr\n";
    }
}

Read More

前几天新买了台机器想用来做日志分析，发现两台机器用内网地址死活连不上，腾讯云文档上都说同一VPC下不同子网默认是互通的。最后向腾讯云提了个工单才发现是自己服务器docker网段和内网网段冲突导致的。这里记录一下整个过程的始末。

1、 申请了台新机器

Read More

记得n年前刚接触Linux，用ssh远程登陆的时候有配置过sshd进程的几个参数

其实ssh的功能还是很强大的，可以玩出各种花儿来。

Read More