NUEVO: replicación de objetos existentes con la replicación por lotes de Amazon S3 | Servicios web de Amazon

A partir de hoy, puede replicar objetos existentes de Amazon Simple Storage Service (Amazon S3) y sincronizar sus depósitos mediante la nueva característica de replicación por lotes de Amazon S3.

Amazon S3 Replication admite varios casos de uso de clientes. Por ejemplo, puede usarlo para minimizar la latencia al mantener copias de sus datos en regiones de AWS geográficamente más cerca de sus usuarios, para cumplir con los requisitos de cumplimiento y soberanía de datos, y para crear resiliencia adicional para la planificación de recuperación ante desastres. S3 Replication es una función de bajo costo totalmente administrada que replica objetos recién cargados entre depósitos. Los cubos pueden pertenecer a la misma cuenta o a cuentas diferentes. Los objetos se pueden replicar en un depósito de destino único o en varios depósitos de destino. Los depósitos de destino pueden estar en diferentes regiones de AWS (replicación entre regiones) o dentro de la misma región que el depósito de origen (replicación en la misma región).

Pero hasta hoy, S3 Replication no podía replicar objetos existentes; ahora puede hacerlo con S3 Batch Replication.

Hay muchas razones por las que los clientes querrán replicar objetos existentes. Por ejemplo, es posible que los clientes deseen copiar sus datos en una nueva región de AWS para una configuración de recuperación ante desastres. Para hacer eso, deberán completar el nuevo depósito de destino con los datos existentes. Otra razón para copiar datos existentes proviene de organizaciones que se están expandiendo por todo el mundo. Por ejemplo, imagine que una empresa de animación con sede en EE. UU. ahora abre un nuevo estudio en Singapur. Para reducir la latencia para sus empleados, deberán replicar todos los archivos internos y los archivos multimedia en curso en la región de Asia Pacífico (Singapur). Otro caso de uso común que vemos es el de los clientes que pasan por fusiones y adquisiciones en las que necesitan transferir la propiedad de los datos existentes de una cuenta de AWS a otra.

Para replicar objetos existentes entre depósitos, los clientes terminan creando procesos complejos. Además, la copia de objetos entre depósitos no conserva los metadatos de los objetos, como el ID de la versión y la hora de creación del objeto.

Hoy nos complace lanzar S3 Batch Replication, una nueva capacidad ofrecida a través de S3 Batch Operations que elimina la necesidad de que los clientes desarrollen sus propias soluciones para copiar objetos existentes entre depósitos. Proporciona una forma sencilla de replicar datos existentes desde un depósito de origen a uno o más destinos. Con esta capacidad, puede replicar cualquier cantidad de objetos con un solo trabajo.

Cuándo utilizar la replicación por lotes de Amazon S3
La replicación por lotes de S3 se puede utilizar para:

• Replicar objetos existentes – use la replicación por lotes de S3 para replicar objetos que se agregaron al depósito antes de que se configuraran las reglas de replicación.
• Replicar objetos que anteriormente no se pudieron replicar – Vuelva a intentar replicar objetos que no pudieron replicarse previamente con las reglas de replicación de S3 debido a permisos insuficientes u otras razones.
• Replicar objetos que ya se replicaron en otro destino – es posible que deba almacenar varias copias de sus datos en cuentas o regiones de AWS separadas. S3 Batch Replication puede replicar objetos que ya se replicaron en nuevos destinos.
• Replicar réplicas de objetos que se crearon a partir de una regla de replicación – S3 Replication crea réplicas de objetos en depósitos de destino. Las réplicas de objetos no se pueden volver a replicar con la replicación en vivo. Estos objetos de réplica solo se pueden replicar con S3 Batch Replication.

Comience con la replicación por lotes de S3
Hay muchas maneras de comenzar con la replicación por lotes de S3 desde la consola S3. Puede crear un trabajo desde la página de configuración de replicación o desde la página de creación de trabajos de operaciones por lotes. También se le pedirá que replique los objetos existentes cuando cree una nueva regla de replicación o agregue un nuevo depósito de destino.

Para esta demostración, imagine que está creando una regla de replicación en un depósito que tiene objetos existentes. Cuando termine de crear la regla, aparecerá un mensaje que le preguntará si desea replicar los objetos existentes.

si respondes síentonces se le dirigirá a un simplificado Crear trabajo de operaciones por lotes página. Si desea que este trabajo se ejecute automáticamente una vez que esté listo, puede dejar la opción predeterminada. Si desea revisar el manifiesto o los detalles del trabajo antes de ejecutar el trabajo, seleccione Espere para ejecutar el trabajo cuando esté listo.

Este método de creación del trabajo genera automáticamente el manifiesto de objetos para replicar. Un manifiesto es una lista de objetos en un depósito de origen dado para aplicar las reglas de replicación. El informe de manifiesto generado tiene el mismo formato que un informe de inventario de Amazon S3.

La replicación por lotes de S3 crea un Informe de finalización, similar a otros trabajos de operaciones por lotes, con información sobre los resultados del trabajo de replicación. Se recomienda encarecidamente seleccionar esta opción y especificar un depósito para almacenar este informe.

El último paso es configurar los permisos para crear este trabajo por lotes. Si mantiene la configuración predeterminada, Amazon S3 creará un nuevo rol de AWS Identity and Access Management (IAM) para usted.

Después de guardar este trabajo, verifique el estado del trabajo en la Operaciones por lotes página. Verá que el trabajo cambia de estado a medida que avanza, el porcentaje de archivos que se han replicado y el número total de archivos que han fallado en la replicación.

Tenga en cuenta que los objetos existentes pueden tardar más en replicarse que los objetos nuevos, y la velocidad de replicación depende en gran medida de las regiones de AWS, el tamaño de los datos, el número de objetos y el tipo de cifrado.

Cuando finaliza el trabajo de replicación por lotes, puede navegar hasta el depósito donde guardó el informe de finalización para comprobar el estado de la replicación de objetos. Los informes tienen el mismo formato que un informe de inventario de Amazon S3.

Precios y disponibilidad
Al usar esta función, se le cobrarán tarifas de replicación por solicitud y transferencia de datos para regiones cruzadas, para el
operaciones por lotes y una tarifa de generación de manifiesto si optaste por ello.

Además, se le cobrará el costo de almacenamiento de los datos replicados en el depósito de destino y los cargos de AWS KMS si sus objetos se replican con AWS KMS. Consulte la pestaña Replicación en la página de precios de S3 para conocer todos los detalles.

S3 Batch Replication está disponible en todas las regiones de AWS, incluidas las regiones de AWS GovCloud, la región de AWS China (Pekín), operada por Sinnet, y la región de AWS China (Ningxia), operada por NWCD. Y puede comenzar a usar la consola Amazon S3, CLIAPI S3 o cliente SDK de AWS.

Para obtener más información sobre la replicación por lotes de S3, consulte la Guía del usuario de Amazon S3.

— Marcia