INTRODUCCIN A LSF V5'0

1
INTRODUCCIÓN A LSF V5.0

• Servicio de Supercomputación
• UCLM
• jayllon_at_uclm.es

2
CLUSTER

• Conjunto de Software de sistema orientado a
  cooperación.
• Analiza, monitoriza y planifica.
• Conceptos.
• Cluster SSC en la UCLM.
• Puerta
• Maxwell
• Mulhacen

3
Recursos y colas

• Arquitectura, CPUs, Memoria y swap.
• User defined
• Colas como contenedores virtuales.
• Corto (1 Dia )
• Medio ( 1 Semana )
• Largo ( 1 Mes )
• Prioridades. Cross-queue Fairshare.

4
BSUB

• Manda el trabajo y asigna un identificador.
• El orden de ejecución lo determina la politica de
  administración.
• Los trabajos son atendidos, parados y
  rearrancados en función de esta politica.
• Podemos decidir la cola a la que queremos mandar
  el trabajo o dejar que el sistema decida

5
BSUB Opciones por defecto

• El nombre de trabajo es el del comando que se da,
  se puede especificar J ltnombregt.
• El entorno de ejecución Shell especificada L.
  Variables de entorno actuales.
• El directorio en que se ejecuta es el actual para
  qsub, si no usa /tmp.
• El usuario de ejecución supone mismo ID si no se
  debe hacer usermap.

6
BSUB Opciones por defecto (cont)

• Se especifica cola mediante q.
• Se especifican recursos R.
• Si no se especifican ninguno de los dos se usa la
  cola por defecto. (Corta en UCLM).
• Por defecto se asigna un único procesador.
• Se pueden designar proyectos para contabilidad de
  recursos, por defecto no existen grupos.
• Por defecto se devuelve un mail cuando termina el
  trabajo. u Indica un usuario alternativo.
• Por defecto no hay checkpoint.

7
BSUB - opciones

• Opciones de archivo
• -f gt copia un archivo al destino para empezar.
• -f lt copia un archivo al origen al terminar.
• -f ltlt copia un archivo al origen y añade al
  terminar.
• -e Redirigir error a un archivo.
• -F Tamaño máximo de archivo.
• Correo
• Cambiar el usuario de notificación u.
• Forzar notificación cuando comienza el trabajo
  B.

8
BSUB opciones (cont)

• Control de ejecución
• Lista de hosts de ejecución. m h1 h2...
• Definir trabajo re-ejecutable. r
• Comando pre-exec -E ltcomandogt
• Si la salida es 0 se ejecuta, si no, se reencola.
• Ejecutar no antes de... b ltmomentgt

9
BSUB condiciones

• Tiempo límite de uso de CPU. c hhmm.
• Hora límite absoluta t MMddhhmm.
• -M Límite de memoria total usada por nuestro
  programa.
• -C Tamaño máximo de archivo core.
• Tamaño límite de memoria de datos ( a través de
  mmap() )usada D.
• Límite de espacio límite en pila S.
• Límite de espacio en memoria virtual V.

10
BSUB condiciones (cont)

• Esperar una condición w. Ej. ltnombre de
  trabajogt
• Asignar prioridad a nuestro trabajo sp.

11
BSUB cadena de reserva

• La cadena de reserva de bsub, permite especificar
  los recursos que usará el trabajo.
• Formato -R cadena
• Select Criterio de elección.
• Order Criterio de ordenación.
• Rusage Lista de recursos
• Span Ejecución en múltiples máquinas.
• Same Ejecución en una única máquina.

12
Ciclo de vida

• Envío.
• Planificación. Modificación?
• Proceso.
• Ejecución. Parada y rearranque.?
• Devolución de resultados.
• Notificación a usuario.

13
Monitorización

• Nivel de máquina bhosts l.
• Nivel de colas bqueues l.
• Trabajos bjobs. Información detallada l.
• Trabajos pendientes o suspendidos y razón bjobs
  lp.
• Trabajo realizado hasta el momento bpeek.
• Histórico de trabajos. Bhist.