Servicio de transferencia de almacenamiento

El servicio de transferencia para datos locales genera registros de transferencia, de modo que puedes verificar los resultados de tus trabajos de transferencia y ofrece la opción de supervisar el progreso de los trabajos de transferencia a través de Cloud Monitoring. El Servicio de transferencia de almacenamiento podría configurarse para entregar notificaciones de Pub/Sub cuando se completa la transferencia.

El Servicio de transferencia de almacenamiento usa metadatos disponibles del sistema de almacenamiento de origen, como sumas de verificación y tamaños de archivos, para garantizar que los datos escritos en Cloud Storage sean los mismos datos leídos de la fuente. Además de la integridad de los datos que proporciona el protocolo TLS, el Servicio de de almacenamiento para datos locales calcula una suma de verificación CRC32C en cada archivo que se copia mientras el archivo se está leyendo.

Usamos la encriptación de TLS para las conexiones HTTP, a través de las redes públicas y privadas de Internet, y admitimos transferencias a bucket de Cloud Storage protegidos por los Controles del servicio de VPC. La única excepción a la encriptación de TLS es si se especifica una URL HTTP para una transferencia de lista de URL. Si usas la interconexión, puedes acceder a un extremo de API privado para obtener otra capa de seguridad.

Puedes programar operaciones de transferencia únicas o, también, operaciones de transferencia recurrentes. Cuando se transfieren datos de otros proveedores de servicios en la nube, puedes programar la sincronización periódica con filtros avanzados según las fechas de creación de archivos, los nombres de archivos y las horas del día en que prefieres importar los datos. No es necesario actuar de forma manual, y los resultados se registran en la consola de Cloud.

Incorporamos controles en el Servicio de transferencia de almacenamiento para datos locales a fin de evitar interrupciones en sus operaciones empresariales diarias. Configura un límite de ancho de banda para tu proyecto de Google Cloud a fin de limitar la velocidad a la que los agentes locales copiarán los archivos. El límite de ancho de banda se comparte entre todos los trabajos de transferencia de tu proyecto.

De forma predeterminada, todas las transferencias comienzan por evaluar los datos presentes en el origen y el destino. Este proceso determina qué objetos de origen son nuevos, actualizados o borrados desde la última transferencia. Con este paso inicial, puedes minimizar la cantidad de datos que se deben enviar, usar el ancho de banda de manera eficaz y asegurarte de que las transferencias se ejecuten rápidamente.

Puedes usar includePrefix y excludePrefix cuando creas transferencias para limitar los objetos en los que opera el Servicio de transferencia de almacenamiento. También admitimos opciones de filtro de datos basadas en el tiempo de modificación.

Cuando se transfieren datos desde ubicaciones locales, obtener un mejor rendimiento es tan fácil como generar más agentes del Servicio de transferencia de almacenamiento. No se requieren cambios en la configuración de la transferencia ni reenvíos. En cuanto los agentes comiencen a trabajar, comenzarán a realizar las tareas de transferencia.

Aplicamos confiabilidad desde el primer momento. Si algunos de tus agentes fallan, los restantes se encargarán del trabajo. If all tus agentes fallan, no hay problema: apenas los recuperes, las transferencias se retomarán donde quedaron. No se necesita una lógica de recuperación o reintento especial.

Cuando se utiliza Servicio de transferencia de almacenamiento para datos locales, se cobra una tarifa por GB. Cuando se transfieren datos de otros proveedores de servicios en la nube, el Servicio de transferencia de almacenamiento es gratuito. Después de transferir datos, se te cobra por los datos almacenados en Cloud Storage, tal como se documenta en los precios de Cloud Storage, y los costos de los proveedores externos de servicios en la nube también pueden aplicarse mientras usas el Servicio de transferencia de almacenamiento.

Puedes usar el Servicio de transferencia de almacenamiento para transferir datos de una lista de ubicaciones de datos públicos a un bucket de Cloud Storage.