由于用户的业务不同,对日志的需求也不同。部分日志有长期存储及离线分析的需求,如安全审计类的日志。为了降低用户成本,日志服务支持用户将日志数据转储到对象存储OSS中。转储后,用户可在对象存储对应的bucket中下载需要的日志数据。
转储支持选择是否压缩,压缩转储可进一步降低成本,支持snappy和gzip压缩格式。也可以选择所需的格式进行转储,支持JSON格式和原始格式。
创建转储任务需要确认已添加采集配置,否则无法创建转储任务。
1)进入对应的日志集,选择需要创建转储任务的日志主题,直接点击日志转储后方的“添加”按钮,或点击“日志转储”,在子菜单中选择“转储任务列表”,点击“新建转储任务”。
2)转储信息配置
点击“新建转储任务”,填写转储任务名称,不为空,且只允许中文,数字,大小写字母,英文下划线“_”及中划线“-”,不超过32字符。
选择需要转储的京东云对象存储,该对象存储需要和当前转储的日志集和日志主题处于同一地域,如果用户当前账号下该地域没有对象存储资源,可点击“新建对象存储”,快速创建对象存储资源。
输入目录前缀。前缀以非/开头,若不设置目录前缀,则默认为当前日志集名称/日志主题名称/,例如servicecode/test-log/test-logapi。
填写分区格式。根据strptime时间格式化自动生成目录,例如,填写分区格式为 %Y/%m/%d,生成的目录 2017/07/16。最终投递的文件目录为:{OSS存储桶}/{目录前缀}/{分区格式}{转储任务id}{转储任务批次}。
选择转储文件大小和转储时间间隔。
选择转储格式,以及是否压缩,如果需要压缩,则选择需要压缩的格式。
点击“保存”,完成转储任务的创建。
转储任务创建完成后延迟约15分钟后开始进行转储。
进入转储历史页面,选择需要停止的转储任务,点击“停止转储”,即可停止转储日志数据。
点击日志转储下方的子菜单“转储历史”,即可进入该页面。查看转储任务的转储历史。