有时候，你需要一个轻量级、无依赖的解决方案，能够在任何类Unix系统上运行。这就是 sed 和 awk 发挥作用的地方：

  • 它们几乎在每个类Unix系统上都可用
  • 无需额外安装或依赖
  • 快速执行，适合即时更改
  • 足够强大，可以处理复杂的转换

动态二人组的实际应用

让我们从一个实际场景开始：你需要根据环境变量和模板动态生成一个 Nginx 配置文件。以下是一个模板：


server {
    listen 80;
    server_name {{SERVER_NAME}};
    
    location / {
        proxy_pass {{UPSTREAM_URL}};
    }
}

现在，让我们使用 sed 将这些占位符替换为实际值：


#!/bin/bash

SERVER_NAME="example.com"
UPSTREAM_URL="http://backend:8080"

sed -e "s/{{SERVER_NAME}}/$SERVER_NAME/g" \
    -e "s|{{UPSTREAM_URL}}|$UPSTREAM_URL|g" \
    nginx.template > nginx.conf

这个脚本读取模板，替换占位符，并输出一个新的配置文件。简单吧？但如果我们需要更复杂的东西呢？

升级：多服务器配置

假设你有一个后端服务器列表，并希望动态生成一个上游块。这是 awk 真正大显身手的地方：


#!/bin/bash

SERVERS="server1:8080 server2:8081 server3:8082"

echo "upstream backend {"
echo "$SERVERS" | awk '{
    split($0, servers, " ")
    for (i in servers) {
        split(servers[i], parts, ":")
        printf "    server %s:%s;\n", parts[1], parts[2]
    }
}'
echo "}"

这个脚本将生成一个这样的上游块：


upstream backend {
    server server1:8080;
    server server2:8081;
    server server3:8082;
}

情节加深：条件配置生成

现在，让我们结合 sed 和 awk 来生成真正动态的配置。我们将创建一个脚本，根据环境生成不同的配置：


#!/bin/bash

ENV=${1:-production}
TEMPLATE="nginx.template"

# 根据环境生成服务器列表
if [ "$ENV" = "production" ]; then
    SERVERS="prod1:8080 prod2:8080 prod3:8080"
else
    SERVERS="dev1:8080"
fi

# 生成上游块
UPSTREAM=$(echo "$SERVERS" | awk '{
    print "upstream backend {"
    split($0, servers, " ")
    for (i in servers) {
        split(servers[i], parts, ":")
        printf "    server %s:%s;\n", parts[1], parts[2]
    }
    print "}"
}')

# 替换模板中的占位符
sed -e "s/{{ENV}}/$ENV/g" \
    -e "s|{{UPSTREAM_BLOCK}}|$UPSTREAM|g" \
    "$TEMPLATE" > "nginx_$ENV.conf"

这个脚本接受一个环境作为参数，生成一个合适的上游块，然后使用 sed 将其插入到最终配置中。

需要注意的陷阱

虽然 sed 和 awk 很强大，但它们也有一些怪癖：

  • 注意替换中的特殊字符。必要时使用不同的分隔符（如 | 而不是 /）。
  • Awk 的默认字段分隔符是空格。需要时使用 -F 来更改。
  • 记住 sed 是逐行处理输入的，这可能限制某些操作。

更进一步

一旦掌握了这些基础知识，你可以做一些真正令人印象深刻的事情：

  • 根据服务发现数据生成复杂的 HAProxy 配置
  • 动态更新多个配置文件中的数据库连接字符串
  • 在容器启动时创建特定于环境的应用程序配置

总结

Sed 和 awk 可能看起来像是过去时代的遗物，但它们在现代 DevOps 实践中仍然非常重要。它们能够快速执行复杂的文本转换且无需依赖，使其成为动态配置管理的宝贵工具。

记住，下次当你面临配置难题时，不要急于使用那些重型配置管理系统。有时候，一点 sed 和 awk 的魔法就足以拯救局面（和你的理智）。

“给我 sed、awk 和一个立足点，我将撼动世界。” - 阿基米德（如果他是一名 DevOps 工程师的话）

现在，去征服那些配置吧！