背景:我有一个存储库说example.com连同主和开发分支。 我的主分支repo通过jenkinsbuild立和开发分支repo推到/ efs / prod通过jenkinsbuild立推到/ efs / qa。 现在我已经在我的开发分支的回购站中设置了一个文件夹say / s3,将更改推送到亚马逊S3,为此,我在jenkins中使用了“发布工件到S3 Bucket”插件。
要求:我能够将bitbucket上传到aws s3,但是当有人删除bitbucket repo中的文件时,我无法将其与AWS s3同步。 我已经在源代码后面将回购更改移到s3
http://www.devops-share.com/upload-builds-from-jenkins-to-s3/
有人能让我知道我怎么能让jenkins同步S3的bitbucket回购。
一个可能的解决方案是在jenkins实例上安装aws-cli
,使用aws configure
,理想的是授予它特定的权限,以便通过IAM策略上传到特定的S3存储桶。
接下来是上传数据,在jenkins完成处理/构建/编译代码之后,从要同步到S3的目录运行以下命令:
aws s3 sync . s3://YOUR_BUCKET_NAME
如果您想要排除某些目录,请添加--exclude "folder_name/**"
正如它在aws-cli
文档中所述 :“递归地将新的和更新的文件从源目录复制到目的地”。
它不会删除源目录中不存在但存在于存储桶中的文件。
如果您确实需要这种行为,那么您可以在每次上传之前CloudFront
存储桶内容,但这会导致停机,因此可能需要考虑使用缓存桶内容的CloudFront
设置,并且可以在您的aws s3 sync
成功结束后从Jenkins清除此缓存。
要使CloudFront
缓存无效,请参阅文档
我已经通过使用下面的命令在jenkins的Build> Execute shell中解决了它
aws s3 sync --delete cdn/ s3://bucket-path