Fwd: state of your simulation on caparmor,
Bonjour, Voici de quoi peut-être alimenter la réunion ISIS de demain matin : - désormais on arrive bien à faire tourner les simus sur un unique coeur à la fois. - par contre on utilise toujours plus de mémoire que prévu par nos options. - il semblerait que certaines simulations restent sur le disque de caparmor alors qu'elles sont terminées. Il est possible que cela corresponde à certaines simus qui à priori sont terminées mais pour lesquelles je n'ai aucun résultat téléchargé. La question est pourquoi elles n'ont pas été téléchargées, et comment les télécharger facilement (bout de script de Sigrid ?) ? Loïc -------- Message original -------- Sujet: state of your simulation on caparmor, Date : Thu, 23 Jan 2014 14:47:58 +0100 De : Tina ODAKA <Tina.Odaka@ifremer.fr> Organisation : IFREMER Pour : GASCHE <Loic.Gasche@ifremer.fr> hi loic, i was checking how your job is running since 13th of jan until now; each of your job take max 2.5 hours. your cpu time does not exeed your wall time. (i.e. you do not use more than 1 core anymore) before 13th of Jan, it used always more than 2 cores, but it never use more than one core anymore. Did code-lutin changed java version installed at /home3/caparmor/poussin/jdk7/bin/java ?? or changed any option for submitting the script?? or is it because of difference in configuration of your job?? max memory (ram) you used is about 5.1G. thus option of java ' -Xmx2000M' is not working at all. for each simulation, /home1/caparmor/lgasche/isis-tmp/simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_xxx-output.txt goes up max 268M. zip file is max 37M. so even we add some margin, each simulation takes max 400M. i.e. although you run 100 job at a time, it take max 40G of quota, if just after each job is finished, output file get transferred, and cleans up the output file and zip file. -----pb i see with 'disk'----- even though calculation finishes, result are not yet cleand (probably not transfferd to loic's PC) .zip which still stays at caparmor is at /home1/caparmor/lgasche/isis-tmp/*.zip each zip file have .output and .zip.md5 together, thus it make huge disk space. i list the files which stays although the job itself got finished, tina service7>20% pwd /home1/caparmor/lgasche/isis-tmp service7>21% ls simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_*-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_104-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_228-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_109-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_231-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_114-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_234-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_12-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_236-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_125-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_239-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_127-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_24-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_134-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_240-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_138-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_243-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_147-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_254-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_152-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_259-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_155-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_26-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_158-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_260-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_160-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_261-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_163-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_266-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_164-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_278-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_171-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_281-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_181-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_284-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_183-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_288-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_187-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_289-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_189-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_39-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_190-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_41-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_192-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_42-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_194-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_50-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_196-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_54-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_20-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_59-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_200-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_65-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_207-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_69-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_209-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_70-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_212-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_75-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_213-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_77-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_214-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_84-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_215-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_95-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_22-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_96-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_220-result.zip simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_97-result.zip service7>22% ls simulation-as_7DV11_toutesPop_avecPeche_toutesRegle_sansCantonnements_Parallel8_2014-01-13-11-46_*-result.zip |wc -l 68 -- =================================================== Tina Odaka RIC - IDM - IMN - IFREMER Pôle de Calcul Intensif pour la Mer (PCIM) Tel: +33 (0)2 98 22 41 85 Fax: +33 (0)2 98 22 45 46 email: Tina.Odaka@ifremer.fr http://www.ifremer.fr/pcim ==================================================
participants (1)
-
Loic GASCHE