Editor Top
|
|
Las organizaciones están ampliando rápidamente el uso de la IA generativa en todas las partes del negocio. Las aplicaciones que requieren una profunda experiencia en un dominio o un contexto empresarial específico necesitan modelos que realmente comprendan su conocimiento exclusivo, sus flujos de trabajo y sus requisitos únicos.
Si bien técnicas como la ingeniería rápida y la generación aumentada de recuperación (RAG) funcionan bien para muchos casos de uso, tienen limitaciones fundamentales cuando se trata de incorporar conocimientos especializados en la comprensión central de un modelo. El ajuste supervisado y el aprendizaje de refuerzo ayudan a personalizar el modelo, pero operan demasiado tarde en el ciclo de vida de desarrollo, superponiendo modificaciones a modelos que están completamente entrenados y, por lo tanto, son difíciles de dirigir a dominios de interés específicos.
Cuando las organizaciones intentan una personalización más profunda a través de la capacitación previa continua (CPT) utilizando solo sus datos propietarios, a menudo se encuentran con un olvido catastrófico, donde los modelos pierden sus capacidades fundamentales a medida que aprenden contenido nuevo. Al mismo tiempo, los datos, la computación y el costo necesarios para entrenar un modelo desde cero siguen siendo una barrera prohibitiva para la mayoría de las organizaciones.
Hoy presentamos Amazon Nova Forge, un nuevo servicio para crear sus propios modelos de frontera utilizando Nova. Los clientes de Nova Forge pueden comenzar su desarrollo desde los primeros puntos de control del modelo, combinar sus conjuntos de datos con datos de entrenamiento seleccionados por Amazon Nova y alojar sus modelos personalizados de forma segura en AWS. Nova Forge es la forma más fácil y rentable de crear su propio modelo de frontera.
Casos de uso y aplicaciones
Nova Forge está diseñado para organizaciones con acceso a datos propietarios o específicos de la industria que desean crear una IA que realmente comprenda su dominio. Esto incluye:
- Fabricación y automatización – Creación de modelos que comprendan procesos especializados, datos de equipos y flujos de trabajo específicos de la industria.
- Investigación y desarrollo – Creación de modelos capacitados en datos de investigación patentados y conocimientos específicos del dominio.
- Contenido y medios – Desarrollar modelos que comprendan la voz de la marca, los estándares de contenido y los requisitos de moderación específicos.
- Industrias especializadas – Modelos de capacitación sobre terminología, regulaciones y mejores prácticas específicas de la industria.
Dependiendo de los casos de uso específicos, Nova Forge se puede utilizar para agregar capacidades diferenciadas, mejorar la precisión de tareas específicas, reducir costos y reducir la latencia.
Cómo funciona Nova Forge
Nova Forge aborda las limitaciones de los enfoques de personalización actuales al permitirle comenzar el desarrollo del modelo desde puntos de control tempranos en las fases previas, intermedias y posteriores a la capacitación. Puede combinar sus datos patentados con datos seleccionados de Amazon Nova a lo largo de todas las fases de capacitación, ejecutando la capacitación utilizando recetas probadas en la infraestructura totalmente administrada de Amazon SageMaker AI. Este enfoque de combinación de datos reduce significativamente los olvidos catastróficos en comparación con el entrenamiento solo con datos sin procesar, lo que ayuda a preservar las habilidades fundamentales (incluida la inteligencia básica, las capacidades de seguimiento de instrucciones generales y los beneficios de seguridad) al tiempo que incorpora su conocimiento especializado.
Nova Forge brinda la posibilidad de utilizar funciones de recompensa en su propio entorno para el aprendizaje por refuerzo (RL). Esto permite que el modelo aprenda de los comentarios generados en entornos que son representativos de sus casos de uso. Más allá de las evaluaciones de un solo paso, también puede utilizar su propio orquestador para gestionar implementaciones de varios turnos, lo que permite la capacitación de RL para flujos de trabajo de agentes complejos y tareas secuenciales de toma de decisiones. Ya sea que esté utilizando herramientas químicas para calificar diseños moleculares o simulaciones robóticas que recompensan la finalización eficiente de tareas y penalizan las colisiones, puede conectar sus entornos propietarios directamente.
También puede aprovechar el kit de herramientas de IA responsable integrado disponible en Nova Forge para configurar los ajustes de seguridad y moderación de contenido de su modelo. Puede ajustar la configuración para satisfacer sus necesidades comerciales específicas en áreas como seguridad y manejo de contenido confidencial.
Empezando con Nova Forge
Nova Forge se integra perfectamente con sus flujos de trabajo de AWS existentes. Puede utilizar las herramientas y la infraestructura familiares de Amazon SageMaker AI para ejecutar su capacitación y luego importar sus modelos Nova personalizados como modelos privados en Amazon Bedrock. Esto le brinda la misma seguridad, API consistentes e integraciones de AWS más amplias que cualquier modelo de Amazon Bedrock.
En Amazon SageMaker Studio, ahora puede crear su modelo de frontera con Amazon Nova.
Para comenzar a construir el modelo, elija qué punto de control usar: pre-entrenado, medio-entrenado o post-entrenado. También puede cargar su conjunto de datos aquí o utilizar conjuntos de datos existentes.
Puede combinar sus datos de entrenamiento mezclando conjuntos de datos seleccionados proporcionados por Nova. Estos conjuntos de datos, categorizados por dominio, pueden ayudar a su modelo a preservar el rendimiento general y evitar el sobreajuste o el olvido catastrófico.
Opcionalmente, puede optar por utilizar el ajuste fino de refuerzo (RFT) para mejorar la precisión de los hechos y reducir las alucinaciones en dominios específicos.
Cuando finalice la capacitación, importe el modelo a Amazon Bedrock y comience a usarlo en sus aplicaciones.
Cosas que debes saber
Amazon Nova Forge está disponible en la región de AWS de EE. UU. Este (Norte de Virginia). El programa incluye acceso a múltiples puntos de control del modelo Nova, recetas de capacitación para combinar datos patentados con datos de capacitación seleccionados por Amazon Nova, recetas de capacitación probadas e integración con Amazon SageMaker AI y Amazon Bedrock.
Obtenga más información en la Guía del usuario de Amazon Nova y explore Nova Forge desde la consola de Amazon SageMaker AI.
Las organizaciones interesadas en la asistencia de expertos también pueden comunicarse con nuestro Centro de innovación en IA generativa para obtener apoyo adicional con sus iniciativas de desarrollo de modelos.
— Danilo
