SelfMutate 阶段因 CodePipeline 而失败

Posted

技术标签:

【中文标题】SelfMutate 阶段因 CodePipeline 而失败【英文标题】:SelfMutate stage failing with CodePipeline 【发布时间】:2022-01-18 18:48:57 【问题描述】:

我正在尝试使用 CDK 管道创建 CI/CD,并在 Java 中导入 software.amazon.awscdk.pipelines.CodePipeline。 此管道创建另一个名为 xxxJavaxxxStack 的堆栈。 管道能够连接到外部 github,当检测到更改时,会触发管道。

xxxPipelinexxxApp.java 类中,我同时调用堆栈xxxJavaxxxStackxxxPipelinexxxStack。我已经成功地分别cdk synthcdk部署它们。

这将创建 2 个不同的 cloudformation 模板,它还创建了管道,并且前 2 个阶段要经过。 但是,管道在 SelfMutate 阶段失败。

流水线阶段是:

来源 - 成功 构建 - 成功 合成器 - 成功 SelfMutate - 失败

错误:

Error: No stacks match the name(s) xxxPipelinexxxStack

at CdkToolkit.validateStacksSelected (/usr/local/lib/node_modules/aws-cdk/lib/cdk-toolkit.ts:545:13)
    at CdkToolkit.selectStacksForDeploy (/usr/local/lib/node_modules/aws-cdk/lib/cdk-toolkit.ts:492:10)
    at CdkToolkit.deploy (/usr/local/lib/node_modules/aws-cdk/lib/cdk-toolkit.ts:120:20)
    at initCommandLine (/usr/local/lib/node_modules/aws-cdk/bin/cdk.ts:267:9)

Command did not exit successfully cdk -a . deploy xxxPipelinexxxStack --require-approval=never --verbose exit status 1
Phase complete: BUILD State: FAILED
Phase context status code: COMMAND_EXECUTION_ERROR Message: Error while executing command: cdk -a . deploy xxxPipelinexxxStack --require-approval=never --verbose. Reason: exit status 1

命令:sudo cdk bootstrap 结果:

@aws-cdk/core:newStyleStackSynthesis' context set, using new-style bootstrapping  ⏳  Bootstrapping environment aws://xxxxxx729/us-east-1... Trusted accounts for deployment: xxxxxx729 Trusted accounts for lookup: (none) Execution policies: arn:aws:iam::aws:policy/AdministratorAccess  Environment aws://xxxxxx729/us-east-1 bootstrapped (no changes).

应用代码 -


public class xxxxPipelinexxxApp 
    public static void main(final String[] args) 
        App app = new App();
        final xxxJavaxxxStack javaStack = new xxxJavaxxxStack(
            app,
            "xxxJavaxxxStack",
            StackProps.builder()
                .env(
                    new Environment.Builder()
                        .account("xxxxxx5729")
                        .region("us-east-1")
                        .build()
                )
                .build()
        );
        final xxxPipelinexxxStack pipelineStack = new xxxPipelinexxxStack(
                app,
                "xxxPipelinexxxStack",
                StackProps.builder()
                    .env(
                        new Environment.Builder()
                            .account("xxxxxx5729")
                            .region("us-east-1")
                            .build()
                    )
                    .build()
        );
        app.synth();
    

堆栈代码-

public class xxxPipelinexxxStack extends Stack 
    public xxxPipelinexxxStack(final Construct scope, final String id) 
        this(scope, id, null);
    

    public xxxPipelinexxxStack(final Construct scope, final String id, final StackProps props) 
        super(scope, id, props);
        CodePipeline pipeline = CodePipeline.Builder
                .create(this, "pipeline")
                .pipelineName("xxxPipelineXXX")
                .synth(
                        ShellStep.Builder.create("Synth")
                            .input(
                                    CodePipelineSource.connection("<git-owner>/<git-repo>", "main",
                                        ConnectionSourceOptions.builder().connectionArn("<git-repo-connection-arn>").build()
                                    )
                            )
                            .commands(
                                    Arrays.asList("mvn clean install", "npx cdk synth")
                            ).build()
                ).build();
        final xxxPipelineXXXStage deploy = new xxxPipelineXXXStage(this, "Deploy");
        pipeline.addStage(deploy);
    

P.S:我使用不同的 IAM 用户进行部署,而不是 root 用户,因为在尝试使用 root 用户部署管道时显然存在问题。

非常感谢任何帮助。

【问题讨论】:

为了调试,尝试将cdk ls 添加到合成器操作以查看它正在合成哪些堆栈。 xxxPipelineXXXStage 中有什么内容?它应该有xxxJavaxxxStack,但你似乎在其他地方启动它。 你不应该在舞台以外的任何地方开始你的堆叠。尝试从xxxxPipelinexxxApp 中删除它。还可以尝试按照@TJ-AWS 的建议将cdk ls 添加到 CodeBuild 项目以进行更新管道步骤。 您的合成步骤正在合成错误的模板。它没有合成管道模板,这就是自变异步骤失败的原因。目前尚不清楚为什么没有最少的代码复制。我们所能做的就是猜测。 修复上述错误后,使用cdk deploy PipelineStack重新部署(只是管道)。如上所述从 CDK 代码中删除后,不要忘记删除 CloudFormation 中的应用程序堆栈。 【参考方案1】:

问题存在,因为我使用了 2 个不同的 github 存储库 (repos)。第一个是xxxJava repo,它有xxxJavaxxxApp.javaxxxJavaxxxStack.java 类以及其他必要的文件。 第二个是 xxxPipeline 存储库,其中包含 xxxPipelinexxxApp.javaxxxPipelinexxxStack.java 以及其他必要的文件。

最初我在 git-repo 中使用 xxxJava 存储库作为代码 &lt;git-owner&gt;/&lt;git-repo&gt; 是错误的,该代码是 合成 xxxJavaxxxStack 并且管道期待 @ 987654330@ 部署它。 解决方案是在创建与 github 的连接时添加管道存储库。 由于该阶段无法找到此堆栈,因此在“自我变异”阶段失败。

当@gshpychka 提到将cdk ls 添加到我的synth 步骤以查看正在合成的堆栈时,我大吃一惊! commands(Arrays.asList("mvn clean install", "npx cdk synth", "npx cdk ls"))

要记住的一点 - 直到“selfmutate”阶段,管道相关的更改被部署,以及之后添加的任何阶段,实际的堆栈/AWS 服务被部署。

【讨论】:

以上是关于SelfMutate 阶段因 CodePipeline 而失败的主要内容,如果未能解决你的问题,请参考以下文章

普通程序员,三年成为年薪70w架构师,只因做到了这些

多因子策略-回测阶段应用

事件机制

阶段总结

大学阶段总结——大四

大学阶段总结——大四