El almacenamiento compatible con Amazon S3 en dispositivos optimizados para informática de AWS Snowball Edge ya está disponible de forma general | Servicios web de Amazon

Agregamos una colección de servicios especialmente diseñados a la familia AWS Snow para clientes, como Snowball Edge en 2016 y Snowcone en 2020. Estos servicios ejecutan cargas de trabajo de cómputo intensivo y almacenan datos en ubicaciones de borde con acceso denegado, interrumpido, intermitente o limitado. conectividad de red y para transferir grandes cantidades de datos desde entornos locales y resistentes o móviles.

Cada nuevo servicio está optimizado para entornos con restricciones de espacio o peso, portabilidad y opciones de red flexibles. Por ejemplo, los dispositivos Snowball Edge tienen tres opciones para la configuración de dispositivos. AWS Snowball Edge Compute Optimized proporciona un dispositivo resistente, seguro y del tamaño de una maleta que los clientes pueden implementar en ubicaciones de borde tácticas y resistentes para ejecutar sus aplicaciones informáticas. Los clientes modernizan sus aplicaciones perimetrales en la nube utilizando los servicios informáticos y de almacenamiento de AWS, como Amazon Simple Storage Service (Amazon S3), y luego implementan estas aplicaciones en dispositivos Snow en el perímetro.

Escuchamos de los clientes que también necesitaban acceso al almacén de objetos local para ejecutar aplicaciones en el perímetro, como el núcleo móvil 5G y el análisis de datos en tiempo real, para procesar las transacciones de los usuarios finales, y tenían una disponibilidad de infraestructura de almacenamiento limitada en estos entornos. Si bien el adaptador de Amazon S3 para Snowball permite el almacenamiento y la recuperación básicos de objetos en un dispositivo Snow, los clientes querían acceder a un conjunto más amplio de API de Amazon S3, incluida la flexibilidad a escala, la administración de depósitos locales, el etiquetado de objetos y las notificaciones de eventos de S3.

Hoy anunciamos la disponibilidad general de Almacenamiento compatible con Amazon S3 en Snow para nuestros dispositivos Snowball Edge Compute Optimized. Esto facilita el almacenamiento de datos y la ejecución de aplicaciones con depósitos S3 locales que requieren un procesamiento de baja latencia en el perímetro.

Con el almacenamiento compatible con Amazon S3 en Snow, puede usar un conjunto ampliado de API de Amazon S3 para crear fácilmente aplicaciones en AWS e implementarlas en dispositivos Snowball Edge Compute Optimized. Esto elimina la necesidad de rediseñar las aplicaciones para cada implementación. Puede administrar aplicaciones que requieren almacenamiento compatible con Amazon S3 en la nube, en las instalaciones y en el perímetro en entornos conectados y desconectados con una experiencia uniforme.

Además, puede utilizar AWS OpsHub, una interfaz gráfica de usuario, para administrar los servicios de la familia Snow y el almacenamiento compatible con Amazon S3 en los dispositivos en el perímetro o de forma remota desde una ubicación central. También puede usar el SDK de Amazon S3 o la interfaz de línea de comandos de AWS (AWS CLI) para crear y administrar depósitos de S3, obtener notificaciones de eventos de S3 mediante MQTT y notificaciones de servicios locales mediante SMTP, tal como lo hace en las regiones de AWS.

Con el almacenamiento compatible con Amazon S3 en Snow, ahora podemos abordar varios casos de uso en entornos de red limitados, brindando a los clientes un almacenamiento de objetos local seguro y duradero. Por ejemplo, los clientes de la comunidad de inteligencia y del IoT industrial implementan aplicaciones como análisis de video en ubicaciones perimetrales resistentes y móviles.

Primeros pasos con el almacenamiento compatible con S3 en Snowball Edge Compute Optimized
Para solicitar nuevos dispositivos Snowball Edge habilitados para Amazon S3, cree un trabajo en la consola de AWS Snow Family. Puede reemplazar un dispositivo Snow existente o un clúster con nuevos dispositivos de reemplazo que admitan almacenamiento compatible con S3.

En Paso 1: tipo de trabajoingrese el nombre de su trabajo y elija Computación local y almacenamiento solamente. En Paso 2: Cómputo y almacenamientoelija su dispositivo Snowball Edge Compute Optimized preferido.

Seleccionar Almacenamiento compatible con Amazon S3, una nueva opción de almacenamiento compatible con S3. La solución del adaptador S3 actual está en desuso y recomendamos migrar las cargas de trabajo para usar almacenamiento compatible con Amazon S3 en Snow.

cuando seleccionas Almacenamiento compatible con Amazon S3, puede configurar la capacidad de almacenamiento compatible con Amazon S3 para un solo dispositivo o para un clúster. La capacidad de almacenamiento de Amazon S3 depende de la cantidad y el tipo de dispositivo Snowball Edge.

• Para la implementación de un solo dispositivo, puede aprovisionar capacidad granular de Amazon S3 hasta un máximo de 31 TB en un dispositivo Snowball Edge Compute Optimized.
• Para una configuración de clúster, toda la capacidad de almacenamiento en un dispositivo se asigna al almacenamiento compatible con Amazon S3 en Snow. Puede aprovisionar un máximo de 500 TB en un clúster de 16 nodos de dispositivos Snowball Edge Compute Optimized.

Cuando proporciona todos los detalles necesarios del trabajo y crea su trabajo, puede ver el estado de la entrega de su dispositivo en la sección de estado del trabajo.

Administre el almacenamiento compatible con S3 en Snow con OpsHub
Una vez que su dispositivo llegue a su sitio, enciéndalo y conéctelo a su red. Para administrar su dispositivo, descargue, instale e inicie la aplicación OpsHub en su computadora portátil. Después de la instalación, puede desbloquear el dispositivo y comenzar a administrarlo y utilizar los servicios de AWS admitidos localmente.

OpsHub proporciona un tablero que resume las métricas clave, como la capacidad de almacenamiento y las instancias activas en su dispositivo. También proporciona una selección de servicios de AWS compatibles con los dispositivos de la familia Snow.

Inicie sesión en OpsHub, luego elija Administrar almacenamiento. Esto lo lleva a la página de inicio de almacenamiento compatible con Amazon S3 en Snow.

Para Iniciar la configuración del servicio escribe, elige Simple si su red utiliza el protocolo de configuración dinámica de host (DHCP). Con esta opción, las tarjetas de interfaz de red virtual (VNIC) se crean automáticamente en cada dispositivo cuando inicia el servicio. Cuando su red usa direcciones IP estáticas, necesita crear VNIC para cada dispositivo manualmente, así que elija el Avanzado opción.

Una vez que se inicia el servicio, verá que su estado es activo con una lista de puntos finales. El siguiente ejemplo muestra el servicio activado en un único dispositivo:

Elegir Crear cubo si desea el nuevo cubo S3 en su dispositivo. De lo contrario, puede cargar archivos en su depósito seleccionado. Los nuevos objetos cargados tienen direcciones URL de destino como s3-snow://test123/test_file con el nombre de depósito único en el dispositivo o clúster.

También puede usar la regla del ciclo de vida del depósito para definir cuándo desencadenar la eliminación de objetos en función de la antigüedad o la fecha. Elegir Crear regla de ciclo de vida en el Gestión pestaña para agregar una nueva regla de ciclo de vida.

Puede seleccionar cualquiera Eliminar objetos o Eliminar cargas multiparte incompletas como una regla de acción. Configure el activador de la regla que programa la eliminación en función de una fecha específica o la antigüedad del objeto. En este ejemplo, configuré dos días para eliminar objetos después de cargarlos.

También puede usar el SDK/CLI de Amazon S3 para todas las operaciones de API compatibles con S3 para Snowball Edge. Para obtener más información, consulte Operaciones de API admitidas en Amazon S3 para Snowball Edge en la documentación de AWS.

Cosas que saber
Tenga en cuenta lo siguiente con respecto a las características y consideraciones adicionales cuando utilice almacenamiento compatible con Amazon S3 en Snow:

• Capacidad: si utiliza completamente la capacidad de Amazon S3 en su dispositivo o clúster, su escritura (PUT) las solicitudes devuelven un error de capacidad insuficiente. Leer (GET) las operaciones siguen funcionando con normalidad. Para monitorear la capacidad disponible de Amazon S3, puede usar OpsHub S3 en la página Snow o usar el describe-service Comando CLI. Al detectar una capacidad insuficiente en el clúster o el dispositivo Snow, debe liberar espacio eliminando datos o transfiriéndolos a un depósito S3 en la región o a otro dispositivo local.
• Resistencia: El almacenamiento compatible con Amazon S3 en Snow almacena datos de forma redundante en varios discos en cada dispositivo Snow y en varios dispositivos de su clúster, con protección integrada contra fallas de hardware correlacionadas. En caso de que falle un disco o dispositivo dentro del rango de quórum, el almacenamiento compatible con Amazon S3 en Snow continúa funcionando hasta que se reemplace el hardware. Además, el almacenamiento compatible con Amazon S3 en Snow borra continuamente los datos del dispositivo para garantizar la integridad de los datos y recuperar los datos dañados. Para cargas de trabajo que requieren almacenamiento local, la mejor práctica es hacer una copia de seguridad de sus datos para proteger aún más sus datos almacenados en dispositivos Snow.
• Notificaciones: El almacenamiento compatible con Amazon S3 en Snow monitorea continuamente el estado de salud del dispositivo o clúster. Los procesos en segundo plano responden a inconsistencias de datos y fallas temporales para reparar y recuperar datos para garantizar la resiliencia. En el caso de fallas de hardware no recuperables, el almacenamiento compatible con Amazon S3 en Snow puede continuar con las operaciones y proporciona notificaciones proactivas a través de correos electrónicos, lo que le solicita que trabaje con AWS para reemplazar los dispositivos defectuosos. Para los dispositivos conectados, tiene la opción de habilitar la función de «Monitoreo remoto», que permitirá a AWS monitorear el estado del servicio en línea y notificarle de manera proactiva sobre cualquier problema del servicio.
• Seguridad: El almacenamiento compatible con Amazon S3 en Snow admite el cifrado mediante cifrado del lado del servidor con claves de cifrado administradas de Amazon S3 (SSE-S3) o claves proporcionadas por el cliente (SSE-C) y autenticación y autorización mediante el espacio de nombres de acciones de Snow IAM (s3:*) para brindarle controles distintos para los datos almacenados en sus dispositivos Snow. El almacenamiento compatible con Amazon S3 en Snow no admite listas de control de acceso a nivel de objeto ni políticas de depósito. El almacenamiento compatible con Amazon S3 en Snow tiene como valor predeterminado El propietario del cubo es el propietario del objetoasegurándose de que el propietario del depósito tenga control sobre los objetos del depósito.

Ya disponible
El almacenamiento compatible con Amazon S3 en Snow ya está disponible de forma general para los dispositivos optimizados para computación de AWS Snowball Edge en todas las regiones comerciales y de GovCloud de AWS donde está disponible AWS Snow.

Para obtener más información, consulte la Guía para desarrolladores de AWS Snowball Edge y envíe sus comentarios a AWS re:Publicar para AWS Snowball o a través de sus contactos habituales de soporte de AWS.

– channy