📚 课程目录第2章脚本设计基础

脚本设计基础：脚本语言选择（Python/Shell等）

做迁移工具脚本，第一件事不是写代码。

是选语言。

你可能觉得这有啥好选的？能用就行呗。但我告诉你，语言选错了，后面全是坑。我之前有个项目，用纯Shell写了一整条数据迁移流水线，结果遇到JSON解析和异常重试，代码写得像天书，维护成本直接翻倍。从那以后，我养成了一个习惯：动手之前，先花半小时把语言定死。

这一章，我就跟你聊聊几种主流脚本语言怎么选。不纸上谈兵，全是实战视角。

为什么选对语言这么关键？

迁移脚本不是一次性工具。它要跑很多遍，要处理各种边界情况，要能快速定位失败原因。

选错语言，会出现三种典型问题：

开发慢——语言能力跟任务不匹配，写一行查半天文档
维护难——半年后自己都看不懂，更别说交接给同事
跑不稳——遇到大文件、特殊字符、网络超时，脚本直接崩

说白了，选语言就是选你接下来几个月的「工作伙伴」。顺手，事半功倍；不顺手，天天踩坑。

主流脚本语言速览

迁移领域常见的有四种：Shell、Python、Perl、PowerShell。我直接拿一张表把差异说清楚。

语言	核心优势	主要短板	迁移场景推荐
Shell (bash/zsh)	系统命令调用极方便，管道处理文本流快	数据结构弱，JSON/XML处理费劲，异常处理简陋	批量文件操作、日志整理、环境准备
Python	数据结构丰富，库生态强大，跨平台一致性好	启动稍慢，系统级操作不如Shell直接	数据迁移、API对接、复杂转换
Perl	文本正则处理是看家本领，单行模式厉害	可读性差，社区活跃度下降，新人难上手	老旧系统文本迁移、日志分析
PowerShell	与Windows系统深度集成，对象管道强	非Windows环境支持弱，语法啰嗦	Windows平台迁移、Active Directory操作

我个人习惯：Linux环境首选Python做主力，Shell做辅力；Windows环境优先考虑PowerShell。别想着「一门语言打天下」，不合适。

Python — 我的主力推荐

为什么我推荐Python？三个字：安全感。

迁移脚本最怕什么？怕跑到一半数据对不上，怕异常情况没处理，怕换个环境就跑不起来。Python的异常处理、数据结构、跨平台能力，刚好能解决这些焦虑。

来，看一个实际例子。你要把一批CSV文件迁移到新格式，同时记录每行数据的变化：

#!/usr/bin/env python3
import csv
import json
from pathlib import Path

def migrate_csv_to_json(input_path, output_path):
    """迁移CSV到JSON格式，带行级处理记录"""
    result = []
    errors = []
    with open(input_path, 'r', encoding='utf-8') as f:
        reader = csv.DictReader(f)
        for line_num, row in enumerate(reader, start=2):  # 从第2行开始（跳过表头）
            try:
                # 尝试转换数字字段
                for key in ['amount', 'count']:
                    if key in row:
                        row[key] = float(row[key])
                result.append(row)
            except (ValueError, KeyError) as e:
                errors.append(f"第{line_num}行转换失败: {e}")
    # 输出结果
    output = {
        "total": len(result) + len(errors),
        "success": len(result),
        "failed": len(errors),
        "data": result,
        "error_log": errors
    }
    with open(output_path, 'w', encoding='utf-8') as f:
        json.dump(output, f, indent=2, ensure_ascii=False)
    print(f"迁移完成：成功 {len(result)} 条，失败 {len(errors)} 条")

migrate_csv_to_json("source.csv", "target.json")

看到没？错误处理、类型转换、结构化输出，一套全搞定。换成Shell写同样的逻辑，你得用awk结合jq，还得自己维护行号计数器，代码量差不多但可读性至少降一半。

Python在迁移场景的核心优势就三个：数据结构、异常捕获、库生态。这三个能力直接决定了脚本的健壮性。

Shell — 系统级操作的快刀

但Python不是万能的。有些场景，Shell就是比Python爽。

什么时候？批量处理文件、调用系统命令、快速过滤日志。这些事Shell天生就擅长，你非要用Python去写，反而绕远了。

举个例子。你要把一批日志文件中的ERROR行提取出来，按小时统计：

#!/bin/bash
# 批量提取日志中的ERROR，按小时聚合统计
LOG_DIR="./logs"
OUTPUT_FILE="./error_summary.txt"

# 先清空输出
> "$OUTPUT_FILE"

for logfile in "$LOG_DIR"/*.log; do
    echo "处理文件: $logfile"
    grep "ERROR" "$logfile" | grep -oP '\d{4}-\d{2}-\d{2} \d{2}' | sort | uniq -c \
        >> "$OUTPUT_FILE"
done

echo "统计完成，结果保存在 $OUTPUT_FILE"

三行逻辑，一个循环加管道，搞定。用Python写，你得用glob.glob、open、re.findall、Counter，代码量是Shell的两倍。

我曾经踩过的坑：用Shell处理包含特殊字符（比如文件名中有空格或换行）的文件列表，结果脚本跑出一堆诡异错误。后来老老实实在while循环里用 IFS= 和 -d '' 才解决。Shell对特殊字符的容忍度很低，这点你一定要小心。

其他语言选型参考

除了Python和Shell，还有几个语言在特定场景下值得考虑。

Perl：如果你要处理超大型文本文件（10GB+），Perl的正则引擎仍然是效率之王。我偶尔在历史遗留项目中用到它，但新项目不会主动选了。
PowerShell：Windows环境下的迁移，特别是涉及AD、IIS、注册表这些系统组件时，PowerShell的cmdlet直接调用比Python调用win32api方便十倍。
Node.js (JavaScript)：如果你的数据源或目标包含大量JSON/REST API，Node.js的异步模型和JSON原生支持确实很顺。不过我个人不太喜欢用它写运维脚本，依赖安装有点重。

选型决策指南

说了这么多，到底怎么选？我总结了一套简单的决策逻辑，画成了一张流程图。你照着走一遍，基本就不会出大错。

我的综合建议

学了这么多，你可能会问：那我到底该先学哪个？

我的建议很简单——先精通Python，再把Shell练到够用。

Python是你的「主力部队」，处理80%的迁移场景
Shell是你的「特种兵」，搞定那20%的系统级操作
至于Perl、PowerShell、Node.js，等实际遇到对应场景再学，完全来得及

选语言不是选「最好的」，是选「最适合当前任务的」。你想想看，搬砖用铲子，绣花用针，没有哪个工具是万能的。把Python和Shell组合用好，你已经能覆盖95%的迁移脚本需求了。

嗯，这一章就聊到这儿。语言选定了，下一件事就是设计脚本的结构——怎么组织代码、怎么管理配置、怎么处理错误。这些才是让脚本真正「能打」的关键。