采集第三方云厂商、互联网数据中心、华为云其他Region云主机日志到LTS

方案概述

云上用户经常会遇到多云或者跨Region采集日志的场景，典型场景有两种，分别是：

• 场景一：将互联网数据中心（Internet Data Center，以下简称IDC）或者第三方云厂商的日志采集到华为云LTS。
  图1 第三方云厂商日志采集
  
• 场景二：将华为云RegionA的日志采集到华为云RegionB的LTS。
  图2 跨Region日志采集
  

对于场景一和场景二，您需要先打通网络，再安装ICAgent，最后按照日志接入向导即可以将日志采集到LTS。

• ICAgent：ICAgent是华为云日志服务的日志采集器，通过在主机上安装ICAgent，您可以将日志采集到LTS。
  

  安装ICAgent前，请确保本地浏览器的时间、时区与主机的时间、时区一致。

• 网络互通：
  • 场景一：自建IDC或者第三方云厂商与华为云之间网络互通的典型方式是云专线DC，如果没有专线，您可以尝试VPN/公网IP方式。
  • 场景二：华为云不同Region之间网络互通典型的方式是云连接CC/云专线DC，您也可以使用VPN/公网IP方式。
• 跳板机
  • 安装在自建IDC/第三方云厂商/跨华为云Region的ICAgent无法直接访问华为云管理面上报日志的网段，需要配置跳板机进行数据转发；当您在进行POC测试，或者日志流量并不大的情况下，可以使用跳板机的方案。对于大流量的日志场景，如果您希望在生产环境中去掉跳板机，请提交工单给华为云网络技术支持工程师帮您设计网络直通的方案。
  • 典型的跳板机配置是2vCPUs | 4GB，每台跳板机可以支持约30MB/s的流量转发，您可以根据自身的日志流量配置合理数量的跳板机，多台跳板机配置ELB进行流量分发。

本文将详细介绍将阿里云主机日志采集到华为云LTS的操作步骤，客户自建IDC和华为云上跨Region采集日志的操作方式与采集阿里云主机日志的方式类似。

以下将阿里云-华北二-北京局点的日志采集到华为云华东-上海一局点的LTS服务，云主机的操作系统为Linux环境。

资源规划

在华为云华东-上海一购买ELB和云主机作为跳板机

1. 登录云服务控制台，购买弹性云服务器 ECS。

   非华为云上的服务器安装ICAgent，需要先在华为云上购买一台弹性云服务器作为跳板机。

2. 购买弹性负载均衡 ELB，并添加TCP监听器和后端服务器组。
   1. 添加监听器。分别为端口30200、30201、8149、8923、8102添加监听器，具体请参见添加TCP监听器。
   2. 添加云服务器。为给后端服务器组添加所有跳板机，具体请参见添加后端服务器。

3. 配置跳板机安全组规则，并开通转发端口。
   1. 修改跳板机ECS使用的安全组规则。
      1. 单击ECS主机名称进入详情页。
      2. 在安全组页签，单击具体的安全组名，进入安全组详情页。
      3. 在该安全组详情页，选择“入方向规则”页签，单击“添加规则 ”。将安全组的入方向端口8149、8102、8923、30200、30201、80开启，保证非华为云的VM到跳板机ECS的数据连通性。
      图3 修改安全组规则
      
   2. 在云日志服务控制台，选择“主机管理 > 主机”，单击“安装ICAgent”，进入安装ICAgent详情页面。按下图配置，“跳板机私有IP”填入ECS私有IP，生成安装命令。
      图4 安装ICAgent
      
   3. 复制命令以root用户登录跳板机，执行SSH Tunnel转发命令，根据命令提示输入root用户密码即可。
   4. 执行netstat -lnp | grep ssh命令查看对应端口是否被侦听，如果返回结果如下图所示，说明TCP端口已开通。
      图5 查看端口
      
      

      • 在浏览器地址栏里输入“http://跳板机ECS的IP地址”。如果访问成功，说明安全组规则已经生效。
      • 如果跳板机ECS掉电重启，请重新执行安装ICAgent页面生成的安装命令。如果您在生产环境中使用，请将上述端口转发命令配置为开机启动任务。

在阿里云主机上安装ICAgent

1. 获取AK/SK，请参考如何获取访问密钥AK/SK。
2. 输入跳板机连接IP（注意需要填入ECS弹性公网IP），生成ICAgent安装命令。
   

   • 请确保替换正确的AK/SK，否则将无法安装ICAgent。
   • 跳板机连接IP：使用EIP方式连接，为跳板机弹性公网IP，使用云专线VPC对等连接方式，为跳板机VPC内网IP。

3. 复制命令root用户登录阿里云ECS，执行ICAgent安装命令进行安装，当显示“ICAgent install success”时，表示安装成功。
   图6 查看ICAgent安装状态
   
   

   如果是华为云跨Region采集日志，例如：将华为云华东-上海一局点采集日志到华为云华南-广州局点，需要在华南-广州局点购买ELB和跳板机ECS，然后将ICAgent的安装命令在华东-上海一局点的跳板机ECS上执行。

4. 安装成功后，在云日志服务左侧导航栏中选择“主机管理 > 主机”，查看该服务器中ICAgent状态为“运行”。

将日志接入LTS

1. 登录华为云云日志服务控制台，在左侧导航栏中，选择“主机管理>新建主机组”，填写“主机组名称”并勾选主机，即可创建完成主机组。
2. 配置日志接入规则。具体操作请参考ECS接入。

查看日志流

在云日志服务（LTS）的日志管理页面，单击目标日志流名称进入详情页面，查看有日志即可证明阿里云主机日志已成功上报到LTS。