准备工作：搭建监控脚本的运行基础
在开始编写运维监控脚本之前，需要确保服务器环境已经满足基本要求。常见的环境包括 Linux 操作系统（如 CentOS 7 或 Ubuntu 20.04）、Python 3 或 Shell 环境，以及 curl 或 wget 工具。这些工具可以帮助脚本模拟搜索引擎爬虫对网站页面的访问，从而检测网站是否正常运行、响应时间是否达标。
另外，建议提前准备好一个用于接收报警通知的邮箱或即时通讯机器人接口（例如钉钉、企业微信的 Webhook），以便脚本发现异常时能够第一时间通知运维人员。
脚本核心功能：检测百度搜索收录与网站可用性
一个基础的百度 SEO 监控脚本通常需要包含以下三个核心检测模块：
- 网站连通性检测：使用 curl 命令定时访问网站首页或核心页面，检查 HTTP 状态码是否为 200。如果返回 500、502 或超时，脚本应记录异常并触发报警。
- 页面关键词/内容匹配：通过 curl 抓取页面源代码，利用 grep 或正则表达式检测预设的关键词（如主推的核心词）是否仍在页面标题、 Description 或正文中。如果关键内容丢失，可能意味着页面被篡改或模板出错。
- 百度收录状态检测：使用
site:域名语句模拟百度搜索，通过 curl 获取搜索结果页，判断当前域名是否仍被百度收录。注意，此方法依赖搜索结果页的返回内容，如果搜索结果页结构变化，可能需要调整正则匹配规则。
实例讲解：一个实用的 Shell 监控脚本
下面是一个简单的 Shell 脚本示例，它每 10 分钟检测一次网站首页状态，并将结果写入日志文件：
#!/bin/bash # 百度SEO监控脚本示例 URL="https://www.example.com" KEYWORD="核心关键词" LOG="/var/log/seo_monitor.log" ADMIN_EMAIL="[email protected]" # 1. 检测首页是否正常 HTTP_CODE=$(curl -o /dev/null -s -w "%{http_code}" $URL) if [ "$HTTP_CODE" != "200" ]; then echo "$(date) 首页返回状态码: $HTTP_CODE" >> $LOG echo "网站首页异常，请检查！" | mail -s "SEO监控报警" $ADMIN_EMAIL fi # 2. 检测页面是否包含关键词 if ! curl -s $URL | grep -q "$KEYWORD"; then echo "$(date) 首页缺少关键词: $KEYWORD" >> $LOG fi
这个脚本是一个起点，实际生产环境中可能需要增加更丰富的逻辑，例如连续多次检测失败才报警、针对不同页面设置不同的检测频率等。
脚本部署与定时任务配置
将上述脚本保存为 seo_monitor.sh，并赋予可执行权限：
chmod +x seo_monitor.sh- 通过 crontab 配置定时任务：
crontab -e，添加一行*/10 * * * * /path/to/seo_monitor.sh即可实现每 10 分钟执行一次。
建议将脚本执行日志与系统日志分开存放，便于后续排查问题。同时，定期检查脚本是否正常运行，避免因脚本本身故障导致监控空窗期。
常见问题与优化建议
在实际运维中，可能会遇到以下情况：
- 检测结果误报：因为网络波动或服务器瞬时高负载，导致 curl 返回非 200 状态。解决方案是在脚本中加入重试机制，例如连续检测 3 次均失败才触发报警。
- 百度搜索结果页变化：百度偶尔会调整搜索结果页的 HTML 结构，导致“收录检测”功能失效。此时需要及时更新脚本中的正则表达式或改用百度搜索的官方 API（如有权限）。
- 资源占用过高：如果监控的页面数量较多，同时使用 curl 请求可能造成服务器负载升高。建议使用异步请求或限制并发检测数量，也可以考虑将脚本运行在独立的低配监控机上。
此外，监控数据（如响应时间、状态码、收录次数）可以通过简单的文本日志保存，也可以使用 Prometheus + Grafana 这类工具进行可视化展示。不过，对于快速上手的运维场景，文本日志配合报警通知已经足够满足大多数中小站点的需求。
小结
通过一个简单的运维监控脚本，可以帮助网站运维人员及时发现百度收录异常、页面内容丢失或服务器宕机等问题。从环境搭建、脚本编写到定时任务部署，每一步都可以根据实际站点情况灵活调整。掌握这些基本方法后，还可以进一步扩展监控维度，例如检查页面加载速度、外链有效性等，为百度搜索引擎优化提供持续的数据支持。
传智教育是一家多元化综合性跨国教育集团，业务涵盖职业培训、学历教育等领域。2024年以来，传智教育在职业培训领域实施“全面拥抱AI”战略，现以“黑马程序员”和“博学谷”为平台，分别针对现场培训模式和线上培训模式，开展AI智能应用开发（Java）、AI鸿蒙开发、AI大模型开发（Python）、AI大数据开发、AI嵌入式+机器人开发、AI测试、AI运维、AI视频创作与直播运营、AI设计等AI开发与AI应用人才培训及架构师、跨境电商等其他课程。
评论区
热门讨论 · 占位展示期待你的精彩发言。