采集企业内网服务器日志

工作原理

Logtail与日志服务交互的数据主要包括管控数据、业务数据和监控数据。其中，管控数据包括Logtail配置下发及鉴权等信息。通信协议包括HTTP和HTTPS，默认使用HTTP协议发送业务数据和监控数据。因此，代理服务器必须能够同时代理HTTP协议数据和HTTPS协议数据。

Nginx是一款开源的高性能HTTP代理服务器，本身支持代理HTTP协议数据，但由于鉴权等原因并不能直接代理HTTPS协议数据。为此，需要为Nginx配置HTTPS补丁，从而使其能够代理HTTPS协议数据。

步骤一：配置代理服务器

使用Nginx将一台具有公网访问权限的企业内网服务器配置为正向代理服务器。

1. 登录待配置为正向代理服务器的机器。

2. 下载Nginx及HTTPS补丁。

   1. 下载HTTPS补丁。

      git clone https://github.com/chobits/ngx_http_proxy_connect_module.git

   2. 下载并解压Nginx。

      其中，${version}表示Nginx版本，请根据实际情况替换。最新版本，请参见nginx: download。

      wget http://nginx.org/download/nginx-${version}.tar.gz
      tar -xzvf nginx-${version}.tar.gz
      cd nginx-${version}/

3. 添加HTTPS补丁到Nginx。

   其中，${patchfile}为文件路径，请根据Nginx版本选择对应的文件。更多信息，请参见Select patch。

   patch -p1 < ../ngx_http_proxy_connect_module/patch/${patchfile}.patch

4. 安装Nginx。

   ./configure --add-module=../ngx_http_proxy_connect_module
   make && make install

5. 在nginx.conf文件中添加如下配置。

   其中，${代理服务器监听端口}和${DNS服务器地址}，请根据实际情况替换。

   server {
        listen                         ${代理服务器监听端口};
        resolver                       ${DNS服务器地址};
   
        # 用于指定非HTTP请求的代理。
        proxy_connect;
        proxy_connect_allow            443;
        proxy_connect_connect_timeout  10s;
        proxy_connect_data_timeout     10s;
   
        # 用于指定HTTP请求的代理。
        location / {
            proxy_pass http://$host;
            proxy_set_header Host $host;
        }
   }

6. 启动Nginx服务器。

步骤二：设置网络代理相关的环境变量

步骤三：验证网络

1. 登录某台企业内网服务器。

2. 执行如下命令。

   下述命令中的${region}为目标Project所在地域，${project_name}为目标Project名称，请根据实际情况替换。

   curl http://logtail.${region}.log.aliyuncs.com
   curl https://logtail.${region}.log.aliyuncs.com
   curl http://${project_name}.${region}.log.aliyuncs.com
   curl http://ali-${region}-sls-admin.${region}.log.aliyuncs.com     

   如果系统返回如下类似信息，表示网络正常。

   {"Error":{"Code":"OLSInvalidMethod","Message":"The script name is invalid : /","RequestId":"62591BC7C08B7BD4AA99FCD4"}}

3. 重复执行步骤1和2，验证其他企业内网服务器的网络。