如何使用jenkins将bitbucket中的repo同步到S3

背景:我有一个存储库说example.com连同主和开发分支。 我的主分支repo通过jenkinsbuild立和开发分支repo推到/ efs / prod通过jenkinsbuild立推到/ efs / qa。 现在我已经在我的开发分支的回购站中设置了一个文件夹say / s3,将更改推送到亚马逊S3,为此,我在jenkins中使用了“发布工件到S3 Bucket”插件。

要求:我能够将bitbucket上传到aws s3,但是当有人删除bitbucket repo中的文件时,我无法将其与AWS s3同步。 我已经在源代码后面将回购更改移到s3

http://www.devops-share.com/upload-builds-from-jenkins-to-s3/ 

有人能让我知道我怎么能让jenkins同步S3的bitbucket回购。

一个可能的解决方案是在jenkins实例上安装aws-cli ,使用aws configure ,理想的是授予它特定的权限,以便通过IAM策略上传到特定的S3存储桶。

接下来是上传数据,在jenkins完成处理/构建/编译代码之后,从要同步到S3的目录运行以下命令:

aws s3 sync . s3://YOUR_BUCKET_NAME

如果您想要排除某些目录,请添加--exclude "folder_name/**"

正如它在aws-cli 文档中所述 :“递归地将新的和更新的文件从源目录复制到目的地”。

它不会删除源目录中不存在但存在于存储桶中的文件。

如果您确实需要这种行为,那么您可以在每次上传之前CloudFront存储桶内容,但这会导致停机,因此可能需要考虑使用缓存桶内容的CloudFront设置,并且可以在您的aws s3 sync成功结束后从Jenkins清除此缓存。

要使CloudFront缓存无效,请参阅文档

我已经通过使用下面的命令在jenkins的Build> Execute shell中解决了它

 aws s3 sync --delete cdn/ s3://bucket-path