Hacer preparaciones
Esta sección describe cómo migrar datos de HDFS, HBase y Hive a un clúster MRS en diferentes escenarios. Durante la migración de datos, los datos pueden sobrescribirse, perderse o dañarse. Este documento es solo para referencia. Colabore con personal técnico de Huawei Cloud para formular e implementar una solución de migración de datos específica.
Realice preparativos en un clúster de origen antes de la migración de datos para evitar que el clúster de origen genere nuevos datos durante la migración de datos, evitando así la incoherencia de datos entre los clústeres de origen y destino después de la migración de datos. Antes de completar la migración de datos, el clúster de destino debe estar en el estado inicial y no puede ejecutar ningún otro servicio, excepto trabajos de migración de datos.
Detener los servicios de cluster y relacionados
- Si el servicio Kafka está involucrado en el clúster, detenga todos los trabajos que generan datos en Kafka. Espere hasta que las tareas de consumo de Kafka hayan consumido los datos de inventario en Kafka y, a continuación, realice el siguiente paso.
- Detenga todos los servicios y trabajos relacionados con HDFS, HBase y Hive, y detenga los servicios HBase y Hive.
Establecimiento de un canal de transmisión de datos
- Si el clúster de origen y el clúster de destino se despliegan en diferentes VPC en la misma región, cree una conexión de red entre las dos VPC para establecer un canal de transmisión de datos en la capa de red. Para obtener más información, consulte Descripción de interconexión de VPC.
- Si el clúster de origen y el clúster de destino se despliega en la misma VPC pero pertenecen a diferentes grupos de seguridad, agregue reglas de grupo de seguridad a cada grupo de seguridad en la consola de gestión de VPC. En las reglas de seguridad, Protocol está establecido en ANY, Transfer Direction está establecido en Inbound y Source está establecido en Security Group (el grupo de seguridad del clúster del mismo nivel).
- Para agregar una regla entrante al grupo de seguridad del clúster de origen, seleccione el grupo de seguridad del clúster de destino de Source.
- Para agregar una regla entrante al grupo de seguridad del clúster de destino, seleccione el grupo de seguridad del clúster de origen de Source.
- Si los clústeres de origen y destino se despliegan en el mismo grupo de seguridad de la misma VPC y la autenticación Kerberos está habilitada para ambos clústeres, configure la confianza mutua entre los dos clústeres.
