命令行与文本处理 / 知识点

grep / sed / awk 文本处理速查手册

awk:聚合、数组与统计

CODE
awk '!seen[$N]++{n++} END{print n}' <FILE>

统计字段中不同值的数量。

统计唯一值数量

统计字段中不同值的数量。

基本语法

bash
awk '!seen[$N]++{n++} END{print n}' <FILE>

推荐用法

bash
awk '!seen[$1]++{n++} END{print n}' access.log

预期结果

text
输出 unique count。

关键边界

需要把所有 key 保存在内存中,大数据需关注内存。

awk:字符串、数值与函数

grep / sed / awk 组合实战

目录与阅读设置

记录一个想法

grep / sed / awk 文本处理速查手册

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通