Gracias por enviar su consulta! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Gracias por enviar su reserva! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Temario del curso
Despliegue de EXO sin conexión
- Uso de EXO_OFFLINE para prevenir el acceso a internet durante la ejecución del entorno de ejecución.
- Carga previa de modelos en EXO_MODELS_READ_ONLY_DIRS desde espejos internos confiables.
- Verificación de la integridad de los pesos del modelo mediante sumas de comprobación SHA-256 y tarjetas de modelo firmadas.
- Ejecución de EXO en redes air-gapped sin dependencias de HuggingFace.
Control de acceso al panel de control y a la API
- Instalación y configuración de proxy inversos (nginx, Caddy) con terminación TLS.
- Implementación de control de acceso basado en roles para el panel de control y la API REST de EXO.
- Uso del llavero de macOS o pass de Linux para almacenar secretos para la autenticación de la API.
- Restricción de los extremos administrativos a rangos específicos de direcciones IP de origen.
Aislamiento de clústeres y seguridad de red
- Segmentación de clústeres EXO con EXO_LIBP2P_NAMESPACE y VLAN.
- Configuración de firewalls de host (firewall de aplicaciones de macOS, iptables, nftables) para los puertos de EXO.
- Prevención del descubrimiento no autorizado de dispositivos e inyección de nodos maliciosos.
- Cifrado del tráfico libp2p entre nodos cuando RDMA no esté disponible.
Gobernanza y procedencia de modelos
- Construcción de un registro interno de modelos con listas aprobadas de modelos y metadatos.
- Etiquetado y versionado de pesos cuantizados (4-bit, 8-bit) junto a los puntos de control originales.
- Hacer cumplir que solo repositorios específicos de HuggingFace o artefactos internos puedan ser cargados.
- Documentación de la linaje del modelo, términos de licencia y políticas de uso aceptable.
Registro de auditoría y cumplimiento
- Configuración del envío de registros de EXO a registros inmutables (SIEM, almacenamiento WORM).
- Correlación de los registros de llamadas de la API con la identidad del usuario y la marca de tiempo.
- Captura de eventos de creación y eliminación de instancias de modelos, así como de solicitudes de inferencia.
- Generación de informes periódicos de cumplimiento para auditores internos y externos.
Modelado de amenazas y respuesta a incidentes
- Identificación de amenazas: exfiltración de datos a través de las salidas del modelo, inyección de prompts, fugas por canales laterales.
- Implementación de supervisión de prompts y pipelines de filtrado de contenido.
- Creación de manuales de respuesta ante incidentes para escenarios de compromiso del clúster.
- Aislamiento de los nodos afectados, preservación de registros forenses y reconstrucción de entornos limpios.
Seguridad física y límites de hardware
- Protección de puertos Thunderbolt contra conexiones de cables RDMA no autorizadas.
- Uso de enclaves seguros y atestación de hardware Apple Silicon, cuando corresponda.
- Control del acceso físico a Macs en clúster y almacenamiento compartido.
- Documentación del ciclo de vida del hardware y procedimientos de baja.
Consideraciones regulatorias
- Mapeo de los despliegues de EXO a los requisitos de GDPR, HIPAA y SOC 2.
- Mantenimiento de la residencia de datos mediante la ejecución de la inferencia en local.
- Documentación de riesgos de la cadena de suministro del proveedor (MLX, EXO, pesos del modelo).
- Preparación para marcos de gobernanza de IA como el Artículo 53 de la Ley de IA de la UE.
Requerimientos
- Experiencia con EXO u otro entorno de ejecución local LLM.
- Comprensión de los permisos del sistema de archivos Unix y las listas de control de acceso (ACL) de red.
- Familiaridad con la gestión de certificados TLS/SSL y los fundamentos del cifrado.
Público objetivo
- Ingenieros de seguridad.
- Oficiales de cumplimiento normativo.
- Administradores de infraestructura de IA que manejan datos sensibles.
14 Horas
Reseñas (1)
El instructor tenía un excelente conocimiento de FortiGate y entregó el contenido muy bien. Muchas gracias a Soroush.
Colin Donohue - Technological University of the Shannon: Midlands Midwest
Curso - FortiGate 7.4 Administration
Traducción Automática
