基于CloudFront导入Amazon S3数据-日志服务(SLS)-阿里云帮助中心

背景

为满足数据分析、审计及监控业务需求，我们将 Amazon S3 存储的文件数据同步至 SLS（Simple Log Service）系统进行统一处理与检索。然而，随着数据吞吐量的持续增长，AWS S3 直接出站流量费用已成为运营成本的主要压力点。尤其在跨云或大文件传输场景下，S3 直连不仅单价较高，而且在高并发拉取时易受网络波动影响，导致传输效率不稳定。

本文介绍通过 Amazon CloudFront 来优化数据传输链路。通过将 S3 配置为 CloudFront 源站，并将 SLS 数据拉取端点切换至 CloudFront 域名，利用其边缘分发能力替代直连。基于 CloudFront 更优的流量阶梯定价及全球网络特性，在降低带宽成本的同时，提升文件下载的成功率与吞吐性能，实现成本与稳定性的双重优化。这里我们仅使用 CloudFront 来获取文件数据，仍使用原模式（通过 SQS 或直连 S3）来获取文件元数据。若有安全需求，可以使用 CloudFront 提供的函数功能来对请求进行鉴权。接下来将依次介绍：1. 鉴权函数配置；2. CloudFront 详细配置；3. Distribution 关联函数；4. S3 导入任务的创建。

重要

本文档为阿里云原创，知识产权归阿里云所有。由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或其产品名称。

鉴权函数配置

步骤一：创建函数

在CloudFront中函数页创建函数，Runtime使用cloudfront-js-2.0。

步骤二：编辑鉴权函数并发布

使用以下代码，修改Token后构建函数并保存。测试后发布。

function handler(event) {
    var request = event.request;
    var headers = request.headers;

    // 定义你的 Token（请替换为一个随机生成的强密码字符串）
    var expectedToken = 'xxxxxx';

    // 校验 X-CF-Token Header
    if (!headers['x-cf-token'] || headers['x-cf-token'].value !== expectedToken) {
        return {
            statusCode: 403,
            statusDescription: 'Forbidden',
            body: {
                encoding: 'text',
                data: 'Access Denied'
            }
        };
    }

    // 校验通过，继续转发请求
    return request;
}