★ FEATURED ARTICLE 做了快十年DevOps我发现自己有个职业病遇到重复性人工流程第一反应不是怎么优化而是“这流程要是能变成一条流水线就好了”。这个职业病在上一家公司被彻底放大——我们是一个技术驱动的媒体团队每天要往官网、公众号、知乎、头条、行业媒体等各种渠道分发内容高峰期一天要发二十篇以上而整套流程居然还停留在Excel表加聊天群的人工编排时代。运营同事每天早上第一件事就是打开几十个后台粘文案、传封面、设定时、再重复一遍晚上还要调闹钟爬起来看定时发布有没有翻车。这种状态明摆着就是一套没有CI/CD的“发布系统”。后来我牵头把宣发链路彻底重构了一遍做完以后回头看这种工作方式本质上是把媒体发布当成了软件部署来治理稿件是版本渠道是环境发稿动作是流水线任务发布后的反馈是监控数据。这篇文章就聊聊我们怎么用DevOps的思路把这套流程做出来包含整体架构、关键代码实现、质量门禁设计和避坑清单适合正在被手动发稿折磨的内容/市场同学也适合想帮团队写自动化工具但不知道从哪下手的工程师。1. 把宣发当“发布”而不是“发稿”1.1 手动发稿的真实成本先说说最原始的痛点。很多团队会觉得“不就发个稿吗”只有真正干过才知道手动发稿的隐性成本高得吓人。我们当时的流程是作者写完稿丢进共享文档校对改完再导出成Word或Markdown市场同学拿去复制到官网CMS里排版再复制到公众号后台设置封面和摘要再复制到头条、百家号、知乎等等。每多一个渠道就多一次重复劳动也多个一次出错的概率。渠道一多“已发/未发/改过/待撤”完全靠Excel打勾版本永远对不上。后台字段还不一样有的要封面图比例5:2有的要16:9有的限制摘要字数稍不注意就会提交失败然后就卡在那里等人救援。这些看起来都是小事但出现在发布高峰期就是大事故。我记得有次晚上十点要发一篇行业稿运营在六个平台都设好了定时结果第二天早上发现其中一个平台因为封面图被平台压缩后文字截断需要重新修改但其他平台早就发出去了。最后只能紧急撤稿重发好不容易攒的曝光窗口全浪费了。这种问题技术上一点不复杂根因是人工操作的随机性太大缺少自动化校验和统一编排。另外一个经常被忽略的是审批链。广告法、素材版权、内容合规这些在宣发场景里是硬要求。但当时的审批记录散落在聊天记录里有人口头说“没问题”有人点赞就算通过出了事根本追不到谁拍的板。这些都是做软件交付时早就解决过的问题——版本、审批、审计轨迹、回滚DevOps体系里全是现成的方案只是没人往发稿这件事上想。1.2 为什么DevOps正好能解决这些问题DevOps解决的是软件从代码到运行环境的交付问题。传统发布依赖运维手工操作DevOps则把构建、测试、部署、监控全部流水线化让每一次变更都可追溯、可验证、可回滚。媒体发布本质上是一样的内容从作者手里产生经过校验、审批、渲染成不同渠道需要的格式最终部署到各个媒体平台部署完成后还要持续观测曝光情况。这套类比不是硬蹭概念。我们可以把每个环节对应起来理解稿件仓库相当于代码仓库用来管理内容版本和变更记录。渠道模板相当于构建产物同一个源稿渲染成网页版、公众号版、头条版。人工审批相当于测试环境里的QA门禁不通过就不允许进入发布阶段。定时发布相当于定时任务部署灰度试发相当于金丝雀发布。发布后的数据监测相当于线上监控告警异常流量和链接失效就是P0故障。这样一映射很多成熟的工具和流程就能直接复用。第一个明显收益是效率我们原来发一个渠道平均要2分钟加上排版和检查一篇稿发全渠道要40分钟到1小时改造后从代码提交到全渠道发布成功批量任务平均只需要10分钟人工只是做审批和异常确认。第二个收益是确定性发布状态不再是“我觉得发出去了”而是流水线里的明确状态失败在哪一步、重试多少次全部有日志可查。第三个收益是组织协作方式的变化——大家不用再天天追问“发了没”而是像看CI状态一样看发布进度。当然这条路不是没有坑。我刚提出想法时很多人第一反应是“我们又不是科技公司搞这么复杂没必要”。实际落地后我才发现真正的复杂度不在于技术而在于怎么把非技术角色的习惯融入一套工程化流程中。后面的章节会重点展开。2. 流水线整体设计从素材提交到发布反馈2.1 一条标准宣发流水线应该长什么样我们最后落地的流水线分为六个阶段校验、构建、预览、审批、发布、验证。这六个阶段和软件交付流水线几乎一一对应每个阶段有明确的产物和退出条件。校验阶段负责对稿件本身做静态检查包括Markdown格式、错别字、链接可用性、图片尺寸、渠道字段完整性。构建阶段把一份源稿渲染成各个渠道需要的HTML、Markdown或JSON格式并生成渠道对应的发布参数。预览阶段生成一个可视化的预览页面供作者、编辑和市场同学在浏览器里确认而不是靠脑补“粘贴之后长什么样”。审批阶段设置必要的checklist只有指定角色点通过任务才会继续。发布阶段按照配置的渠道列表和发布方式执行推送支持定时、分批和灰度。验证阶段则是发布后自动检查链接是否可访问、实际页面内容是否正常、返回码是否符合预期并把结果汇总回流水线。这六个阶段看起来简单但真正落地时需要解决两个前置问题一是内容如何入库二是发布配置如何管理。我们把稿件统一收到Git仓库用Markdown写在content/articles/下封面图和素材图统一放在assets/images/下发布渠道和模板配置则放到config/channels.yaml里。这样内容也能享受到代码管理的所有好处提交记录、分支评审、标签版本、回滚。下面是一个简化后的仓库结构我们实际项目基本就是这个形态content/ articles/ 2024/Q3-industry-trend.md ai-series/01-intro.md assets/ images/ cover-16x9.png qr-code.png config/ channels.yaml approval-matrix.yaml scripts/ validate.sh build.py publish.py verify.py用Git管理内容还有个隐藏收益评审记录是自然生成的。作者发起Merge Request编辑在MR里逐行评论修改历史留痕再也不用“把第五版发我一下”。2.2 选型在现有工具上改而不是从零造轮子刚开始考虑是要自建一套系统还是用现成的CI/CD工具。我们团队有两位后端同学自建当然能做但仔细一评估发现完全没必要。CI/CD工具本身已经把最难的调度、重试、权限、日志、状态机都解决了。我们用的是GitLab CI它天然支持分支、MR、Tag、受保护环境protected environment和Manual Job正好对应用来治理稿件提交、内容审批和发布授权。Jenkins也能做但插件和权限模型要额外折腾GitHub Actions也可以只是如果团队已经用GitLab管理代码直接用现有平台最省事。选型上我的建议是不要因为“发稿工具”这个标签就去找一堆Martech工具优先评估团队已经有的研发基础设施。复用GitLab CI能省掉服务部署、账号体系、权限模型、日志采集这一整套麻烦。只有一种情况值得自建——渠道非常多且每个渠道都有复杂的自定义策略时才考虑用独立的任务编排器比如内部轻量worker加消息队列但这也应该挂在CI工具后面而不是替代CI工具。2.3 分支策略和发布配置管理分支策略沿用常规开发流程main分支存放已审核通过的内容基线作者从main拉出feature/xxx分支写稿完成后提MR给编辑和市场负责人审阅。审阅通过并合并后如果再需要发一个批次的稿就打一个tag格式是v1.2.0对应“第2周的第三批发稿”。这个分支策略最大的好处是让“发布批次”变得具体。发布一个批次不再是人肉记“这些稿今天要发”而是Git里一个明确的tag。流水线拿到tag后才知道该构建哪些内容也能记录下这次发布对应的代码版本后续出了问题直接回滚到上一个tag。发布渠道配置用YAML管理这里有一个关键设计每个渠道都要有独立的审批级别和发布时间窗口。比如官网允许工作时间随时发公众号因为一天只能群发一次必须设置最晚提交时间邮件渠道涉及大批用户触达必须要有市场负责人和合规审核双重审批。配置大致长这样channels: official_site: type: cms api: https://cms.internal/v2/articles publish_window: 09:00-23:00 approvals: - role: content_owner wechat_official: type: wechat app_id: wx123456 publish_window: 09:00-20:00 max_articles_per_day: 1 approvals: - role: content_owner - role: legal_reviewer email_digest: type: email_api template: weekly-digest.html publish_window: 10:00-18:00 approvals: - role: marketing_owner - role: legal_reviewer渠道配置独立后新增一个渠道只需要加一段配置和一个适配器代码完全不用改流水线主体。这也是过程中最值得的一笔投入后面半年内我们新增了4个发布渠道改的全部是配置文件主流程一行没动。2.4 角色权限与审批编排很多团队做自动化时第一反应是“把人都去掉”实际做出来往往会反弹。宣发场景里人工审批不是负担而是风险控制的一部分。我们保留审批但把审批过程变成流水线的一个显式节点。角色分四类内容作者、内容编辑/校对、市场负责人、合规审核。每个角色在审批环节看到的上下文完全不一样作者只确认稿子是不是最终版编辑确认文字和素材市场确认渠道策略合规确认广告法词条。用一个矩阵表可以描述这组关系角色可操作内容审批范围作者提交/修改稿件不参与审批编辑合并MR修改稿件内容质量、格式、图片市场负责人配置渠道和发布时间选稿策略、渠道覆盖合规审核只做checklist确认禁用词、素材授权、引用来源审批动作就两种通过或者驳回。驳回时必须在流水线里填写原因系统自动创建一条修改任务并通知作者。因为审批记录和发布记录都沉淀在流水线日志里所以事后审计不再需要翻聊天记录。这里有个小教训审批节点不要设置太多层级。我们最初设置了六类审批人结果一个稿子要等四五个小时后才有人点按钮发布延迟比手动时代还严重。后来压缩到最多两道强制审批其他环节只抄送不阻塞流程立刻顺畅了。3. 实操从提交稿件到发布成功的完整实现3.1 把稿件当成代码管起来稿件进入仓库后所有撰写、修订、评审都在Git里完成。我们约定的提交信息格式是类型加内容描述例如docs: 新增Q3行业趋势稿发布至官网/公众号/头条 fix: 修正Q3趋势稿中的行业数据来源这个格式无所谓标准关键是让作者养成提交Note的习惯。发布后再回看每个渠道的每个内容版本都能定位到具体提交和具体MR再配合流水线的job日志基本可以回答“这个页面上的这句话是谁在什么时候改的”这类问题。Markdown是稿件的最佳载体因为大部分渠道都能从Markdown生成对应的样式。少数渠道对排版要求高比如官网的首页banner或者邮件模板我们会用固定的HTML模板配合Jinja2/Markdown混合渲染。图片素材则统一命名在构建阶段由脚本检查每个渠道需要的尺寸规格尺寸不对直接失败。这里推荐在提交MR前先用本地脚本跑一遍校验否则CI里失败一次得等一轮构建很浪费时间。3.2 定义流水线一个GitLab CI示例直接用GitLab CI定义六个阶段下面是一个可运行的简化版本真实项目里还需要挂上环境、Secret和审批人映射。stages: - validate - build - preview - approval - publish - verify validate: stage: validate script: - markdownlint content/articles/ - check-links --src content/articles/ - check-images --asset-dir assets/images/ - check-channel-fields --config config/channels.yaml rules: - if: $CI_PIPELINE_SOURCE merge_request_event build: stage: build script: - python scripts/build.py --config config/channels.yaml --output dist/ artifacts: paths: - dist/ preview: stage: preview environment: preview script: - python scripts/preview.py --config dist/config.json artifacts: paths: - dist/preview/ expire_in: 7 days approval: stage: approval when: manual timeout: 8h script: - python scripts/approval.py --roles content_owner,legal_reviewer --timeout 8h publish: stage: publish script: - python scripts/publish.py --targets $PUBLISH_TARGETS --version $CI_COMMIT_TAG environment: production rules: - if: $CI_COMMIT_TAG $PUBLISH_TARGETS retry: max: 2 when: - runner_system_failure - stuck_or_timeout - api_failure verify: stage: verify script: - python scripts/verify.py --task-ids dist/task-ids.json --urls dist/urls.json after_script: - python scripts/notify.py --level alert --channel oncall关键点在于validate和build是自动的approval是手动门槛publish只针对带tag的提交触发verify是发完后的系统复检。每个阶段失败都有明确日志运营不再需要问“发到哪一步了”直接看Pipeline页面就知道。这个设计也解决了一个长期痛点夜间定时发布。我们把发布脚本抽象成任务队列定时触发器到点调用publish job执行完成后自动进入verify。一旦失败自动重试两次仍然失败就告警到值班群。因为我们把发布任务真正做成了异步任务不会再出现“电脑关了导致定时发布没跑”的问题。3.3 渠道适配器不同类型的媒体怎么接流水线主体稳定后剩下最核心的工程就是渠道接入。每个渠道的接口不同我们抽象出一个统一的适配器接口让主流程只依赖这个协议不关心具体平台。class ChannelAdapter(ABC): abstractmethod def publish(self, payload: PublishPayload) - TaskResult: 把渲染好的内容发布到目标渠道 pass abstractmethod def verify(self, task_id: str) - VerifyResult: 查询发布结果并检查线上状态 pass abstractmethod def rollback(self, task_id: str, version: str) - bool: 把内容下线或切回历史版本 pass以官网为例适配器调用内部CMS接口创建文章成功后拿到task_idverify时根据task_id调用CMS查询文章状态rollback时调用CMS删除或下架文章。公众号这类平台有素材和群发接口但限制比较多我们就在适配器里做字段校验和频控处理。没有开放API的渠道也能接入——适配器把发布任务转换成一个待确认卡片推送到运营的工作台或企业微信群里运营点一下“已手动发布”再手动填上线上链接verify阶段会用这个链接做可用性探测。这个“人工兜底模式”很重要。很多自动化项目死在渠道没有API这个理由上但实际根本不需要全套自动化只需要把人工操作变成流水线中的一个明确状态。半自动化也是自动化关键是人的动作能被追踪。3.4 定时、灰度与回滚实战灰度发布在这个场景里同样适用。我们的默认策略是重点稿先发官网一个渠道confirm没有问题后再把PUBLISH_TARGETS设为公众号、头条、知乎等全量渠道触发下一步job。这就是金丝雀发布在内容领域的最简形态。执行方式是通过流水线的变量控制。开发者或者市场负责人在触发publish时选择目标渠道例如# 只发官网快速验证 PUBLISH_TARGETSofficial_site # 全渠道发布 PUBLISH_TARGETSofficial_site,wechat_official,toutiao,zhihu,email_digest回滚是我们体感最差、也是最有价值的设计。内容发布有几秒钟的延迟所以如果在verify阶段发现线上链接404、页面乱码或者内容被平台拦截我们立刻触发rollback脚本。对于支持API删除的平台比如官网CMS回滚会自动执行对于不支持删除的平台rollback会生成一张紧急撤稿单并给对应渠道管理员发送高优通知平台本身无法做到的事至少流程上能保证不遗漏。这里有个容易被忽略的认知回滚不是“删掉重发”而是“让线上回到上一个可接受状态”。对内容平台来说旧版本往往比空白页更合理。所以我们的rollback优先切回上一版本再跑一次verify确认旧版本正常后才算完成。4. 质量门禁和合规闸门别让坏稿上线4.1 自动化静态检查清单发布前能自动检查的内容尽量不留给人工。我们的校验脚本包含五类检查Markdown语法和结构超链接可用性图片尺寸和格式渠道字段完整性以及文本规范。Markdown语法检查会拦截明显的格式错误比如列表嵌套不对、链接语法不合法、引用块未闭合。超链接检查会请求每个外部链接的响应状态发现404就报错。图片检查会读取图片尺寸确认每个渠道所需封面比例是否存在比如官网要16:9公众号要2.35:1邮件最好用900px等宽尺寸不对直接fail。文本规范检查不讨论复杂边界只做两部分一是自定义禁用词库比如一些违反广告法的绝对化用语我们做成一个词表文件持续维护二是调用文本审核接口做内容安全检测检测结果包含风险等级高风险自动阻止中风险进入人工确认。这个环节的价值是把以前靠人肉检查几十遍的内容变成确认一次就够。为了减少无效构建同样的校验脚本也应该本地可跑。我们在仓库根目录提供了一个make lint命令作者提交前先本地跑一遍CI再跑一遍。这样虽然增加了一点作者负担但大量减少了CI排队时间。4.2 人工审批的取舍自动化永远替代不了最终人眼确认或者说在媒体发布场景里审批人消除的不是自动化的需求而是对风险的责任。所以我们把审批做成了流水线上的一个“Manual Gate”。具体操作是这样的build完成后流水线自动生成一个预览环境展示每个渠道最终的渲染效果。审批人收到通知后打开预览页看到的是线上即将展示的样子不是原始Markdown。确认无误后在审批系统里点击通过任务才会进入发布阶段。如果发现问题一键驳回系统自动把驳回原因和MR关联通知作者去修改。这里有个很现实的经验审批节点要有超时策略。我们早期允许审批人无限期挂起结果一个季度出现了三篇稿子停在审批环节超过一周。后来加了8小时超时提醒超时后每2小时提醒一次超过24小时仍未处理则自动升级给部门负责人。上线这个机制后平均审批时长从12小时降到3小时以内。4.3 发布后的可观测性不是发完就结束发布成功和用户真的看到内容是两回事。verify阶段除了检查链接返回200之外我们还会从各渠道后台拉取发布结果和初步的曝光数据。公众号通过接口能拿到文章的阅读数和分享数有延迟官网CMS能拿到UV/PV第三方平台可以用后台导出API混合方式。把数据回流到流水线后我们会设置一些极简告警规则发布30分钟后如果核心渠道曝光量为0自动发告警给运营发布2小时后如果阅读转化明显低于历史同类型稿件的1/10也触发提示。目标不是代替分析师而是让异常能第一时间被发现避免“稿子发了三天才发现没被收录”的尴尬。可观测性还有一层价值它让流水线的优化有了依据。我们后来用发布数据反推渠道选择比如某个渠道阅读量长期接近零就把它移出默认渠道或者调整发布时间窗口。这种决策以前靠感觉现在可以直接看数据运营和市场也更容易达成共识。5. 常见问题与排错实录5.1 高频问题速查表先整理一个速查表都是我们实际运行中踩过的坑按概率排序列出来现象常见原因排查建议某渠道发布成功但线上没有平台异步上线有缓存延迟扩大verify等待时间到5~10分钟同一篇稿子出现重复内容渠道接口没有幂等任务重试导致重复创建在适配器里持久化外部task_id发布前查重定时发布到点没执行worker进程重启丢任务任务状态写入数据库不要再依赖内存队列审批已通过但publish没触发配置了tag规则但本次没有打tag在发布文档里明确打tag的流程公众号群发失败当天已群发过或者触发了平台频控通过配置max_articles_per_day在构建时提前校验链接检查误报部分平台有反爬请求返回403在check-links中配置合法的UA和请求头回滚后页面反而空白平台删除内容后返回404verify误判旧版本在线回滚操作后必须重新跑verify不能只看删除成功这表里的问题大多不是技术难题很多是“没有把平台特性纳入设计”。我们早期最惨的一次事故就是重复发布平台接口偶发超时我们在脚本里加了重试结果接口其实已经创建成功重试又把内容发了一遍线上出现两篇一模一样的文章。从那之后适配器里第一件事就是写幂等逻辑——发布前查一下是否已有同一个version的引用有就直接返回已有task_id。5.2 三个让我印象深刻的坑第一个坑是“定时任务睡死了”。我们最初把定时发布和主流程放在同一个进程里结果某次发布节点正好赶上服务器发布升级进程重启后所有定时任务全部丢失作者半夜发的稿子第二天才发现根本没人发。后来改成把任务持久化到数据库worker启动时重新加载未完成任务并用分布式锁保证不会重复执行。这是直接套用调度系统经验的地方效果立竿见影。第二个坑是“为了让流水线通过反而写了更多代码”。最初我们把所有校验都往流水线里塞结果渠道字段几十个每加一个新渠道就要改一大通校验逻辑。后来我们换个思路把校验拆成通用校验和渠道扩展校验。通用校验只管所有渠道都需要的字段扩展校验写到各个渠道适配器内部。现在新渠道接入只需要关注自己的特殊性不再影响全局构建。第三个坑更偏组织协作有一些运营同事完全不适应看流水线看到红色状态就慌。我们做了一次很大的简化业务人员不需要看懂整条流水线只需要关注企业微信里收到的“待审批”“发布成功”“发布失败”三条通知。把工具层面的专业性和业务层面的易用性隔离开系统才真正被用起来。5.3 效果评估不要只讲自动化率说到成果我倾向于用几个直观指标来说明指标改造前改造后单篇稿全渠道发布耗时40~60分钟8~12分钟发布失败需要人工处理的比例约15%约3%平均审批时长12小时3小时以内因重复发布/错误发布导致的事故每月稳定2~3次上线后半年1次夜间定时发布人工盯守每天需要不需要这些数字看起来漂亮但我的感受是真正的价值不在于“省了多少人”而在于把团队从救火状态中解放出来。以前大家每天都在问“哪个平台没发哪篇稿子要改”现在这些信息会自动出现在通知里有异常直接告警团队的注意力终于可以放在内容质量和渠道策略上。5.4 关于投入产出比的真心话最后说点实在的。做这类系统投入最大的不是写代码而是和各个渠道的接口、审核策略、业务规则做对齐。我的建议是第一个版本只做一条核心渠道加一个辅助渠道跑通后再扩。我们当时贪多一上来就接了六个渠道结果第一个月全部在调各平台的图片比例和字段校验主流程反而迟迟没稳定。共建的时候一定要把市场同事拉进来当需求方而不是直接扔一个自动化工具给他们。整个项目做完最有成就感的时刻不是流水线变绿而是运营同学第一次跟我说“今晚我可以准点下班了。”宣发这块事DevOps化不是要让谁失业是让所有人把时间花在更值得的事情上。
阅读完成 · 觉得有帮助？
)
