Vista previa: Amazon OpenSearch Serverless: ejecute cargas de trabajo de búsqueda y análisis sin administrar clústeres | Servicios web de Amazon

La mayoría de los servicios de análisis de AWS tienen atractivas ofertas sin servidor que facilitan aún más a los clientes el análisis de grandes cantidades de datos sin tener que configurar, escalar o administrar la infraestructura subyacente.

Junto con otros análisis sin servidor, como Amazon QuickSight para inteligencia comercial y AWS Glue para integración de datos, este año presentamos Amazon EMR Serverless, Amazon MSK Serverless y Amazon Redshift Serverless.

Hoy anunciamos el lanzamiento preliminar de un nueva opción sin servidor para Servicio de búsqueda abierta de Amazon eso facilita a los clientes ejecutar cargas de trabajo de búsqueda y análisis a gran escala sin administrar clústeres. Aprovisiona y escala automáticamente los recursos subyacentes para ofrecer respuestas rápidas de ingestión de datos y consultas incluso para las cargas de trabajo más exigentes e impredecibles, lo que elimina la necesidad de configurar y optimizar los clústeres.

Con Amazon OpenSearch Serverless, no necesita tener en cuenta factores que son difíciles de conocer de antemano, como la frecuencia y la complejidad de las consultas o el volumen de datos que se espera analizar. En lugar de administrar la infraestructura, puede concentrarse en usar OpenSearch para explorar y obtener información de sus datos. También puede comenzar a usar las API familiares para cargar y consultar datos y usar los paneles de OpenSearch para el análisis y la visualización de datos interactivos.

Configure su colección sin servidor de OpenSearch
Para comenzar con Amazon OpenSearch Serverless, cree un Recopilación a través de la consola de administración de AWS, la interfaz de línea de comandos de AWS (AWS CLI) o la API de AWS.

Antes del lanzamiento de OpenSearch Serverless, creó un clúster administrado, especificando tipos de instancias, recuentos y opciones de almacenamiento, y luego administró el ciclo de vida y la estrategia de fragmentos para los índices dentro de ese clúster. Con OpenSearch Serverless, crea una colección, que administra un grupo de índices que funcionan juntos para admitir una carga de trabajo específica. Ya no necesita especificar el hardware o administrar los índices directamente.

Para crear una colección de OpenSearch Serverless y proteger los datos, configure Políticas de cifrado para asignar claves de AWS KMS a una o más colecciones y adjuntar Políticas de red a colecciones para controlar el acceso desde VPC específicas y direcciones IP públicas.

Para crear una política de cifrado, seleccione Políticas de cifrado en el panel de navegación izquierdo y Crear política de cifrado. El cifrado en reposo protege los índices dentro de su colección. Para cada colección, AWS KMS genera una clave de cifrado simétrica única. Las políticas de cifrado son la forma óptima de administrar las claves de AWS KMS en varias colecciones. Puede definir el nombre de la colección de destino o un prefijo que aplique automáticamente la configuración de cifrado de esta política a la colección.

Para que los usuarios accedan a una colección, seleccione Políticas de red en el panel de navegación izquierdo y Crear política de red. Las políticas de red determinan si se puede acceder a su colección a través de Internet desde redes públicas o si se debe acceder a ella a través de puntos finales de VPC administrados sin servidor de OpenSearch.

Puede definir varias reglas para cada colección, ya sea la Público o VPC, como una opción recomendada para el Tipo de acceso. Si selecciona una opción pública, puede acceder a la colección desde OpenSearch Dashboards.

Además, puede configurar el acceso para OpenSearch Dashboards y el punto final de OpenSearch. Para el Rtipo de recurso, habilite el acceso a los puntos finales de OpenSearch y el acceso a los paneles de OpenSearch. En ambos cuadros de entrada, seleccione el Collection Name propiedad y el nombre o prefijo de su colección.

Finalmente, para crear una colección sin servidor de OpenSearch, elija Crear colección en la página de inicio o elige Colecciones en el panel de navegación izquierdo y seleccione Crear colección.

Ingrese el nombre de su colección, la descripción y el tipo de colección, ya sea Series de tiempo o Búsqueda por su tipo de datos.

• Series de tiempo – El segmento de análisis de registros que se enfoca en analizar grandes volúmenes de datos semiestructurados generados por máquinas en tiempo real para obtener información operativa, de seguridad, de comportamiento del usuario y comercial.
• Búsqueda – Búsqueda de texto completo que potencia las aplicaciones en sus redes internas (sistemas de gestión de contenido, documentos legales) y aplicaciones orientadas a Internet, como la búsqueda de sitios web de comercio electrónico y la búsqueda de contenido.

cuando eliges Crearuna colección suele tardar menos de un minuto en inicializarse.

Cargar y buscar datos en su colección
Antes de cargar y buscar datos en su colección, configure la política de IAM para acceder a los datos reales dentro de una colección. Elegir Políticas de acceso a datos en el panel de navegación izquierdo y Crear política de acceso a datos.

Puede aplicar varias políticas simultáneamente al mismo recurso. Cada política contiene un conjunto de reglas. Cada regla tiene un recurso (colección o índice), permisos para el recurso y una lista de entidades principales (usuarios de IAM, ARN de roles o identidades SAML).

Aquí hay una política de muestra que proporciona a un solo usuario los permisos mínimos necesarios para crear un índice en su colección, indexar algunos datos y buscarlos. Reemplace el ARN principal con el ARN de la cuenta que usará para iniciar sesión en OpenSearch Dashboards.

[
  {
    "Rules": [
      {
        "ResourceType": "index",
        "Resource": [
          "index/books/*"
        ],
        "Permission": [
          "aoss:CreateIndex",
          "aoss:ReadDocument",
          "aoss:UpdateIndex",
          "aoss:DeleteIndex",
          "aoss:WriteDocument"
        ]
      }
    ],
    "Principal": [
      "arn:aws:iam::123456789012:user/admin"
    ]
  }
]

Ahora, puede cargar datos en una colección de OpenSearch Serverless usando Postman o curl. También puede usar Dev Tools dentro de la consola de OpenSearch Dashboards. Elegir Paneles de OpenSearch en la página de detalles de tu colección.

Inicie sesión en OpenSearch Dashboards utilizando las claves secretas y de acceso de AWS para el principal que especificó en su política de acceso a datos. Dentro de OpenSearch Dashboards, abra el menú de navegación izquierdo y seleccione Herramientas de desarrollo.

Para crear un solo índice llamado books-indexcorrer PUT books-indexe indexe su primer documento individual en books-index.

También puede consultar los datos de búsqueda en las herramientas de desarrollo.

GET books_index/_search
{
    "query": {
    "simple_query_string": {
    "query": "Jeff",
    "fields": ["author"]
    } 
  }
}

En el caso de los datos de series temporales, puede ingerir datos con todas las opciones de ingesta de transmisión, como nativa API de transmisión de OpenSearchAmazon Kinesis Data Firehose, AWS Glue y una amplia gama de canalizaciones de ingesta de streaming de código abierto como Logstash, FluentBit, Fluentd y Data Prepper.

Además, puede tomar una instantánea de sus datos desde un clúster administrado en OpenSearch Service y restaurarlos en su colección, lo que facilita la migración de sus cargas de trabajo. Una vez que sus datos estén en su colección, puede consultarlos usando su cliente OpenSearch favorito y analizar y visualizar de forma interactiva sus datos usando OpenSearch Dashboards.

Cosas que saber
Aquí hay un par de cosas que debe tener en cuenta acerca de las características y consideraciones adicionales cuando elige Amazon OpenSearch Serverless:

• SAML Aautenticacións – Puede usar su proveedor de identidad existente para ofrecer inicio de sesión único (SSO) para los extremos de OpenSearch Dashboards de OpenSearch Serverless La autenticación SAML le permite usar proveedores de identidad de terceros para iniciar sesión en OpenSearch Dashboards para indexar y buscar datos. OpenSearch Serverless admite proveedores que utilizan el estándar SAML 2.0, como Okta, Keycloak, Active Directory Federation Services y Auth0.
• Puntos de enlace de la VPC privada – Puede usar AWS PrivateLink para crear una conexión privada entre su VPC y OpenSearch Serverless. Puede acceder a sus colecciones como si estuvieran en su VPC sin utilizar una puerta de enlace de Internet, un dispositivo NAT, una conexión VPN o una conexión AWS Direct Connect. Para crear un punto final de interfaz, elija Puntos de enlace de la VPC en el panel de navegación izquierdo de OpenSearch Service.
• Clústeres administrados – Es posible que prefiera utilizar una opción de los clústeres administrados de Amazon OpenSearch Service en escenarios en los que necesita un control estricto sobre la configuración del clúster o personalizaciones específicas. Por ejemplo, sus cargas de trabajo pueden necesitar complementos personalizados que funcionen mejor en instancias informáticas aceleradas y necesiten más control sobre la configuración, como la estrategia de fragmentación de datos. Puede elegir instancias aprovisionadas o sin servidor según los requisitos de su carga de trabajo.

Únete a la vista previa
La versión preliminar de Amazon OpenSearch Serverless ahora está disponible en EE. UU. Este (Norte de Virginia, Ohio), EE. UU. Oeste (Oregón), UE (Irlanda), Asia Pacífico (Tokio). Con OpenSearch Serverless, no hay costos iniciales y solo paga por los datos que se ingieren y las consultas que ejecuta. Para obtener detalles sobre los precios, consulte la página de precios del servicio OpenSearch. Para obtener más información, visite la Guía del usuario de Amazon OpenSearch Service.

Queremos escuchar más comentarios durante la vista previa. Envíe sus comentarios a AWS re: Post para Amazon OpenSearch Service o a través de sus contactos habituales de soporte de AWS.

– channy