企业官网建设流程全解析

1. 项目背景与核心价值

在智慧园区视频监控系统中，FFmpeg作为流媒体处理的核心工具，常被用于RTSP流拉取、转码、切片等关键操作。但实际运维中我们发现两个高频痛点：一是FFmpeg进程可能因网络波动或资源竞争异常退出，二是长时间运行的视频存储可能触发磁盘爆满风险。本项目通过Shell脚本实现两大增强功能：

1. 进程守护机制：当FFmpeg进程异常退出时自动重启，保障服务持续运行
2. 智能磁盘监控：实时检测存储目录磁盘使用率，超阈值时触发告警

这两个功能组合解决了智慧园区场景下视频监控系统最关键的稳定性与可靠性问题。根据某智慧园区实际运行数据统计，接入该方案后系统无间断运行时长从平均72小时提升至2000+小时。

2. 技术方案设计

2.1 整体架构设计

#!/bin/bash # 主控脚本架构示意 while true; do check_ffmpeg_process || restart_ffmpeg check_disk_usage && send_alert sleep 300 # 5分钟检测间隔 done

关键组件说明：

• 进程检测模块：通过ps/pgrep判断FFmpeg存活状态
• 重启执行模块：记录日志并重新拉起预设命令
• 磁盘检测模块：使用df命令获取分区使用率
• 告警推送模块：支持邮件/钉钉/企业微信通知

2.2 关键技术选型

3. 核心功能实现详解

3.1 进程守护实现

3.1.1 进程状态检测

function check_ffmpeg_process() { local pid=$(pgrep -f "ffmpeg.*rtsp") if [[ -z "$pid" ]]; then logger -t ffmpeg_watchdog "Process not found" return 1 fi # 检查进程实际运行状态 if ! ps -p "$pid" -o state= | grep -q 'R'; then logger -t ffmpeg_watchdog "Process $pid is not running" return 1 fi return 0 }

关键细节：使用-f参数匹配完整命令行，避免误判同名进程。检查进程状态为R（运行中）才是真正有效的检测。

3.1.2 安全重启逻辑

function restart_ffmpeg() { # 先尝试优雅终止旧进程 pkill -TERM -f "ffmpeg.*rtsp" sleep 2 # 强制清理残留 if pgrep -f "ffmpeg.*rtsp"; then pkill -KILL -f "ffmpeg.*rtsp" fi # 记录重启事件 local timestamp=$(date +%Y%m%d-%H%M%S) logger -t ffmpeg_watchdog "Restarting at $timestamp" # 启动新进程（示例命令） nohup ffmpeg -rtsp_transport tcp \ -i "rtsp://admin:password@camera-ip/stream" \ -c copy -f flv rtmp://server/live/stream \ >/var/log/ffmpeg.log 2>&1 & }

3.2 磁盘监控实现

3.2.1 使用率检测

function check_disk_usage() { local mount_point="/mnt/video_storage" local threshold=90 # 百分比 # 获取使用率数字部分（去掉%） local usage=$(df -hP "$mount_point" | awk 'NR==2 {print $5}' | tr -d '%') if (( usage >= threshold )); then logger -t disk_monitor "Usage exceeded: $usage%" return 0 # 触发告警 fi return 1 }

3.2.2 钉钉告警集成

function send_alert() { local webhook="https://oapi.dingtalk.com/robot/send?access_token=xxx" local msg="【告警】视频存储磁盘使用率超过${threshold}%" curl -s "$webhook" \ -H "Content-Type: application/json" \ -d "{ \"msgtype\": \"text\", \"text\": { \"content\": \"$msg\" } }" logger -t disk_monitor "Alert sent: $msg" }

4. 生产环境增强技巧

4.1 防误杀机制

在容器化环境中，需要特别处理PID命名空间问题：

# 在Docker容器内获取真实PID的方法 function get_real_pid() { local docker_pid=$1 cat /proc/$docker_pid/status | grep -i ppid | awk '{print $2}' }

4.2 资源限制策略

为防止频繁重启导致系统负载过高：

# 在重启函数中添加速率限制 declare -g restart_count=0 declare -g last_restart_time=0 function safe_restart() { local now=$(date +%s) local cooldown=300 # 5分钟冷却期 if (( restart_count >= 3 && (now - last_restart_time) < cooldown )); then logger -t ffmpeg_watchdog "Restricted: too many restarts" return 1 fi restart_ffmpeg ((restart_count++)) last_restart_time=$now }

4.3 日志增强方案

建议采用结构化日志格式：

function log_event() { local event_type=$1 local details=$2 jq -n \ --arg ts "$(date --iso-8601=seconds)" \ --arg host "$(hostname)" \ --arg type "$event_type" \ --arg data "$details" \ '{ timestamp: $ts, hostname: $host, event_type: $type, event_data: ($data|fromjson? // $data) }' >> /var/log/ffmpeg_monitor.json }

5. 常见问题排查指南

5.1 进程检测失效场景

5.2 磁盘告警误报处理

当遇到以下情况时需要特殊处理：

1. NFS挂载点卡顿：增加超时检测

   timeout 5s df -hP /mnt/nfs || echo "NFS timeout"

2. 临时文件干扰：排除tmpfs文件系统

   df -hP | grep -v tmpfs

3. 小数位比较问题：使用整数比较

   local usage=$(df --output=pcent / | tr -dc '0-9')

6. 部署与维护建议

6.1 系统服务化部署

推荐通过systemd管理守护进程：

# /etc/systemd/system/ffmpeg_monitor.service [Unit] Description=FFmpeg process monitor After=network.target [Service] Type=simple ExecStart=/opt/scripts/ffmpeg_monitor.sh Restart=always User=root [Install] WantedBy=multi-user.target

6.2 监控指标暴露

配合Prometheus实现指标可视化：

# 在脚本中添加指标输出 function export_metrics() { cat <<EOF > /var/lib/node_exporter/ffmpeg.prom # HELP ffmpeg_restarts_total Total number of restarts # TYPE ffmpeg_restarts_total counter ffmpeg_restarts_total $(get_restart_count) # HELP disk_usage_percent Current disk usage # TYPE disk_usage_percent gauge disk_usage_percent $(get_disk_usage) EOF }

6.3 版本升级策略

建议采用双脚本滚动更新：

1. 主脚本ffmpeg_monitor.sh保持稳定版本
2. 新功能在ffmpeg_monitor_new.sh测试
3. 通过符号链接切换版本：

   ln -sf /opt/scripts/ffmpeg_monitor_new.sh /usr/local/bin/ffmpeg_monitor

在实际运维中，我们发现该方案能有效将人工干预频率降低90%以上。特别是在夜间和节假日时段，自动化处理机制显著提升了系统可靠性。一个典型的改进案例是：某园区暴雨导致网络波动，系统在2小时内自动恢复了17次FFmpeg中断，期间监控视频零丢失。