Editor Top
|
|
Cada año el 14 de marzo (3.14), AWS PI Day destaca las innovaciones de AWS que lo ayudan a administrar y trabajar con sus datos. Lo que comenzó en 2021 como una forma de conmemorar el decimoquinto aniversario de lanzamiento del servicio de almacenamiento simple de Amazon (Amazon S3) ahora se ha convertido en un evento que destaca cómo las tecnologías en la nube están transformando la gestión de datos, el análisis y la IA.
Este año, AWS PI Day regresa con un enfoque en acelerar el análisis y la innovación de IA con una base de datos unificados en AWS. El panorama de los datos está experimentando una transformación profunda a medida que surge la IA en la mayoría de las estrategias empresariales, con análisis de trabajo de análisis e IA cada vez más convergiendo muchos de los mismos datos y flujos de trabajo. Necesita una manera fácil de acceder a todos sus datos y utilizar todos sus análisis preferidos y herramientas de IA en una sola experiencia integrada. Este día de AWS PI, presentamos una lista de nuevas capacidades que lo ayudan a construir experiencias de datos unificadas e integradas.
La próxima generación de Amazon Sagemaker: el centro de todos sus datos, análisis e IA
En Re: Invent 2024, presentamos la próxima generación de Amazon Sagemaker, el centro de todos sus datos, análisis e IA. Sagemaker incluye prácticamente todos los componentes que necesita para la exploración de datos, la preparación e integración, el procesamiento de big data, el análisis de SQL Fast SQL, el desarrollo y la capacitación del modelo de aprendizaje automático (ML), y el desarrollo generativo de aplicaciones de IA. Con esta nueva generación de Amazon Sagemaker, Sagemaker Lakehouse le brinda acceso unificado a sus datos y al catálogo de Sagemaker le ayuda a cumplir con sus requisitos de gobernanza y seguridad. Puede leer la publicación del blog de lanzamiento escrita por mi colega Antje para obtener más detalles.
El núcleo de la próxima generación de Amazon Sagemaker es Sagemaker Unified Studio, un solo entorno de desarrollo de datos y IA donde puede usar todos sus datos y herramientas para análisis e IA. Sagemaker Unified Studio ahora está generalmente disponible.
Sagemaker Unified Studio facilita la colaboración entre científicos de datos, analistas, ingenieros y desarrolladores mientras trabajan en datos, análisis, flujos de trabajo de IA y aplicaciones. Proporciona herramientas familiares de los servicios de AWS Analytics y Artificial Intelligence and Machine Learning (AI/ML), incluidos el procesamiento de datos, el análisis SQL, el desarrollo del modelo ML y el desarrollo generativo de aplicaciones de IA, en una sola experiencia de usuario.
Sagemaker Unified Studio también trae capacidades seleccionadas de Bedrock de Amazon en Sagemaker. Ahora puede prototipo, personalizar y compartir rápidamente aplicaciones de IA generativas utilizando modelos de base (FMS) y características avanzadas, como las bases de conocimiento de la roca madre de Amazon, las barandillas de roca madre de Amazon, los agentes de lecho de roca de Amazon y los flujos de lecho de roca de Amazon para crear soluciones personalizadas alineadas con sus requisitos y las directrices de IA responsables, todas dentro de Sagemaker.
Por último, pero no menos importante, Amazon Q Developer ahora está generalmente disponible en Sagemaker Unified Studio. Amazon Q Developer proporciona asistencia generativa de IA para datos y desarrollo de IA. Le ayuda con tareas como escribir consultas SQL, extracto de construcción, transformación y carga de carga (ETL) y solución de problemas, y está disponible en el nivel y el nivel gratuito para los suscriptores existentes.
Puede obtener más información sobre Sagemaker Unified Studio en esta reciente publicación de blog escrita por mi colega Donnie.
Durante Re: Invent 2024, también lanzamos Amazon Sagemaker Lakehouse como parte de la próxima generación de Sagemaker. Sagemaker Lakehouse unifica todos sus datos en los lagos de datos de Amazon S3, los almacenes de datos de desplazamiento rojo de Amazon y las fuentes de datos de terceros y federados. Le ayuda a construir aplicaciones potentes de análisis y AI/ML en una sola copia de sus datos. Sagemaker Lakehouse le brinda la flexibilidad para acceder y consultar sus datos en el lugar de Apache iceberg–Las herramientas y motores compatibles. Además, las integraciones cero-ETL automatizan el proceso de llevar datos a Sagemaker Lakehouse de fuentes de datos de AWS como Amazon Aurora o Amazon Dynamodb y de aplicaciones como Salesforce, Anuncios de Facebook, Anuncios de Instagram, Servicenow, SAVIA, Zendesky Zoho CRM. La lista completa de integraciones está disponible en las preguntas frecuentes de Sagemaker Lakehouse.
Construyendo una base de datos con Amazon S3
La construcción de una base de datos es la piedra angular de la aceleración de análisis de análisis e IA, lo que permite a las organizaciones administrar, descubrir y descubrir sin problemas sus activos de datos a cualquier escala. Amazon S3 es el mejor lugar del mundo para construir un lago de datos, con una escala prácticamente ilimitada, y proporciona la base esencial para esta transformación.
Siempre me sorprende saber sobre la escala en la que operamos Amazon S3: actualmente tiene más de 400 billones de objetos, exabytes de datos y procesa 150 millones de solicitudes alucinantes por segundo. Hace solo una década, ni siquiera 100 clientes almacenaban más que un petabyte (PB) de datos en S3. Hoy, miles de clientes han superado el hito de 1 PB.
Amazon S3 almacena exabytes de datos tabulares, y promedia más de 15 millones de solicitudes a datos tabulares por segundo. Para ayudarlo a reducir el trabajo pesado indiferenciado al administrar sus datos tabulares en cubos S3, anunciamos las tablas de Amazon S3 en AWS Re: Invent 2024. Las tablas S3 son la primera tienda de objetos en la nube con soporte incorporado para Apache Iceberg. Las tablas S3 están optimizadas específicamente para las cargas de trabajo de análisis, lo que resulta en un rendimiento de consulta hasta tres veces más rápido y transacciones hasta diez veces más altas por segundo en comparación con las tablas autogestionadas.
Hoy estamos anunciando el Disponibilidad general de la integración de tablas de Amazon S3 con Amazon Sagemaker Lakehouse Las tablas de Amazon S3 ahora se integran con Amazon Sagemaker Lakehouse, lo que le facilita el acceso a las tablas S3 de los servicios de AWS Analytics como Amazon Redshift, Amazon Athena, Amazon EMR, AWS Glue y Apache Iceberg -Compatible Engines como Apache Spark o Pyiceberg. Sagemaker Lakehouse permite la gestión centralizada de permisos de acceso a datos de grano fino para tablas S3 y otras fuentes y los aplica constantemente en todos los motores.
Para aquellos de ustedes que usan un catálogo de terceros, tienen una implementación de catálogo personalizado, o solo necesitan acceso básico de lectura y escritura a datos tabulares en una sola tabla de tabla, hemos agregado nuevas API que son compatibles con el Estándar de catálogo de REST de iceberg. Esto permite que cualquier aplicación compatible con iceberg cree, actualizar, actualizar y eliminar tablas en un cubo de tabla S3. Para la gestión de datos unificados en todos sus datos tabulares, gobierno de datos y controles de acceso de grano fino, también puede usar tablas S3 con Sagemaker Lakehouse.
Para ayudarlo a acceder Tablas S3, hemos lanzado actualizaciones en la consola de administración de AWS. Ahora puede crear una tabla, llenarla con datos y consultarlo directamente desde la consola S3 usando Amazon Athena, lo que facilita comenzar y analizar datos en cubos de tabla S3.
La siguiente captura de pantalla muestra cómo acceder a Athena directamente desde la consola S3.
Desde re: Invent 2024, hemos seguido agregando nuevas capacidades a las tablas S3 a un ritmo rápido. Por ejemplo, agregamos soporte de definición de esquema al CreateTable API y ahora puedes crear hasta 10,000 tablas en un cubo de mesa S3. También lanzamos tablas S3 en ocho regiones AWS adicionales, siendo la más reciente Asia Pacífico (Seúl, Singapur, Sydney) el 4 de marzo, con más por venir. Puede consultar la página de Regiones AWS de las Tablas S3 de la documentación para obtener la lista de once regiones donde las tablas S3 están disponibles hoy.
Los metadatos de Amazon S3, anunciados durante Re: Invent 2024, han estado generalmente disponibles desde el 27 de enero. Es la forma más rápida y fácil de ayudarlo a descubrir y comprender sus datos S3 con metadatos automatizados y sin esfuerzo que se actualizan en tiempo casi real. Los metadatos S3 funcionan con etiquetas de objeto S3. Las etiquetas lo ayudan a agrupar los datos lógicamente por una variedad de razones, como aplicar las políticas de IAM para proporcionar un acceso de grano fino, especificar filtros basados en etiquetas para administrar las reglas del ciclo de vida de los objetos y replicar selectivamente los datos a otra región. En las regiones donde hay metadatos S3 disponibles, puede capturar y consultar metadatos personalizados que se almacenan como etiquetas de objeto. Para reducir el costo asociado con las etiquetas de objeto cuando se usa metadatos S3, Amazon S3 redujo el precio para el etiquetado de objetos S3 en un 35 por ciento En todas las regiones, haciéndolo más barato usar metadatos personalizados.
AWS Pi Day 2025
Con los años, AWS Pi Day ha mostrado hitos importantes en el almacenamiento en la nube y el análisis de datos. Este año, el evento virtual AWS PI Day contará con una gama de temas diseñados para desarrolladores y tomadores de decisiones técnicos, ingenieros de datos, profesionales de AI/ML y líderes de TI. Los aspectos más destacados clave incluyen inmersiones profundas, demostraciones en vivo y sesiones de expertos sobre todos los servicios y capacidades que discutí en esta publicación.
Al asistir a este evento, aprenderá cómo puede acelerar su análisis e innovación de IA. Aprenderá cómo puede usar tablas S3 con soporte nativo de Apache Iceberg y metadatos S3 para construir lagos de datos escalables que sirven tanto analíticos tradicionales como cargas de trabajo de IA/ML emergentes. También descubrirá la próxima generación de Amazon Sagemaker, el Centro de todos sus datos, análisis e IA, para ayudar a sus equipos a colaborar y construir más rápido desde un estudio unificado, utilizando herramientas de AWS familiares con acceso a todos sus datos, ya sea almacenado en lagos de datos, almacenes de datos o fuentes de datos de terceros o federados.
Para aquellos que buscan mantenerse por delante de las últimas tendencias de la nube, AWS Pi Day 2025 es un evento que no se puede perder. Ya sea que esté construyendo casas de datos de datos, capacitación de modelos de IA, construyendo aplicaciones generativas de IA u optimización de cargas de trabajo de análisis, las ideas compartidas lo ayudará a maximizar el valor de sus datos.
Sintoniza hoy y explore lo último en innovación de datos en la nube. No se pierda la oportunidad de interactuar con expertos, socios y clientes de AWS que dan forma al futuro de los datos, el análisis y la IA.
Si te perdiste el evento virtual el 14 de marzo, Puedes visitar la página del evento En cualquier momento, ¡mantendremos todo el contenido disponible a pedido allí!
¿Cómo está el blog de noticias? Tomar esto Encuesta de 1 minuto!
(Este encuesta está alojado por una empresa externa. AWS maneja su información como se describe en el Aviso de privacidad de AWS. AWS será propietario de los datos recopilados a través de esta encuesta y no compartirá la información recopilada con los encuestados).
