Uso de la API ApplyGuardrail con Entradas de Contexto Largo y Salidas en Streaming en Amazon Bedrock
Con la creciente prevalencia de aplicaciones de inteligencia artificial generativa (IA), mantener principios responsables de IA se vuelve esencial. Sin las salvaguardas adecuadas, los modelos de lenguaje grandes (LLMs) pueden generar contenido da帽ino, sesgado o inapropiado, lo cual representa riesgos para individuos y organizaciones. La aplicaci贸n de guardrails ayuda a mitigar estos riesgos al imponer pol铆ticas y directrices que se alinean con principios 茅ticos y requisitos legales. Los Guardrails para Amazon Bedrock eval煤an entradas de usuario y respuestas de modelos basados en pol铆ticas espec铆ficas de uso, proporcionando una capa adicional de salvaguardas sin importar el modelo subyacente. Adem谩s, estos guardrails pueden aplicarse a todos los LLM en Amazon Bedrock, incluyendo modelos afinados y aplicaciones de IA generativa fuera de esta plataforma. El nuevo API ApplyGuardrail permite evaluar cualquier texto usando guardrails preconfigurados en Amazon Bedrock, sin invocar los FMs. Esto se demuestra con inputs de largo contexto y salidas en streaming. La API, f谩cil de usar y desacoplada de los FMs, puede integrarse en cualquier flujo de aplicaci贸n para validar datos antes de procesar o servir resultados a los usuarios, lo que es 煤til en aplicaciones como la Generaci贸n Aumentada por Recuperaci贸n (RAG).
La API ofrece funciones clave como facilidad de uso y desacoplamiento de los FMs, permitiendo su uso con modelos alojados en Amazon SageMaker o incluso autohospe...
Fuente de la noticia:
lujovip
URL de la Fuente:
http://lujovip.com/
| -------------------------------- |
|
|
Tu Dinero, Tus Datos, Tu Decisi贸n: M谩s All谩 de la Bancarizaci贸n
31-10-2024 06:17 - (
lujo )
