Scheduled Downtime
On Tuesday 24 October 2023 @ 5pm MT the forums will be in read only mode in preparation for the downtime. On Wednesday 25 October 2023 @ 5am MT, this website will be down for maintenance and expected to return online later in the morning.
Normal Operations
The forums are back online with normal operations. If you notice any issues or errors related to the forums, please reach out to help@ucar.edu

Problem with runtime error. Topic: Segmentation fault

I'm intend to use Intel's OpenMP to accelerate CESM 1.2.2. But it occour a segmentation fault error with log below:(seq_comm_setcomm)  initialize ID (  1 GLOBAL          ) pelist   =     0    59     1 ( npes =    60) ( nthreads =  1)(seq_comm_setcomm)  initialize ID (  2 CPL             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 17 ATM             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 18 CPLATM          ) join IDs =     2    17       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  3 ALLATMID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 10 CPLALLATMID     ) join IDs =     2     3       ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 19 LND             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 20 CPLLND          ) join IDs =     2    19       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  4 ALLLNDID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 11 CPLALLLNDID     ) join IDs =     2     4       ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 21 OCN             ) pelist   =    48    59     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 22 CPLOCN          ) join IDs =     2    21       ( npes =    24) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  5 ALLOCNID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 12 CPLALLOCNID     ) join IDs =     2     5       ( npes =    24) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 23 ICE             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 24 CPLICE          ) join IDs =     2    23       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  6 ALLICEID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 13 CPLALLICEID     ) join IDs =     2     6       ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 25 GLC             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 26 CPLGLC          ) join IDs =     2    25       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  7 ALLGLCID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 14 CPLALLGLCID     ) join IDs =     2     7       ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 27 ROF             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 28 CPLROF          ) join IDs =     2    27       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  8 ALLROFID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 15 CPLALLROFID     ) join IDs =     2     8       ( npes =    12) ( nthreads =  4)(seq_comm_setcomm)  initialize ID ( 29 WAV             ) pelist   =     0    11     1 ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 30 CPLWAV          ) join IDs =     2    29       ( npes =    12) ( nthreads =  4)(seq_comm_jcommarr) initialize ID (  9 ALLWAVID        ) join multiple comp IDs       ( npes =    12) ( nthreads =  4)(seq_comm_joincomm) initialize ID ( 16 CPLALLWAVID     ) join IDs =     2     9       ( npes =    12) ( nthreads =  4)(seq_comm_printcomms)     1     0    60     1  GLOBAL:(seq_comm_printcomms)     2     0    12     4  CPL:(seq_comm_printcomms)     3     0    12     4  ALLATMID:(seq_comm_printcomms)     4     0    12     4  ALLLNDID:(seq_comm_printcomms)     5    48    -1     1  ALLOCNID:(seq_comm_printcomms)     6     0    12     4  ALLICEID:(seq_comm_printcomms)     7     0    12     4  ALLGLCID:(seq_comm_printcomms)     8     0    12     4  ALLROFID:(seq_comm_printcomms)     9     0    12     4  ALLWAVID:(seq_comm_printcomms)    10     0    12     4  CPLALLATMID:(seq_comm_printcomms)    11     0    12     4  CPLALLLNDID:(seq_comm_printcomms)    12     0    24     4  CPLALLOCNID:(seq_comm_printcomms)    13     0    12     4  CPLALLICEID:(seq_comm_printcomms)    14     0    12     4  CPLALLGLCID:(seq_comm_printcomms)    15     0    12     4  CPLALLROFID:(seq_comm_printcomms)    16     0    12     4  CPLALLWAVID:(seq_comm_printcomms)    17     0    12     4  ATM:(seq_comm_printcomms)    18     0    12     4  CPLATM:(seq_comm_printcomms)    19     0    12     4  LND:(seq_comm_printcomms)    20     0    12     4  CPLLND:(seq_comm_printcomms)    21    48    -1     1  OCN:(seq_comm_printcomms)    22     0    24     4  CPLOCN:(seq_comm_printcomms)    23     0    12     4  ICE:(seq_comm_printcomms)    24     0    12     4  CPLICE:(seq_comm_printcomms)    25     0    12     4  GLC:(seq_comm_printcomms)    26     0    12     4  CPLGLC:(seq_comm_printcomms)    27     0    12     4  ROF:(seq_comm_printcomms)    28     0    12     4  CPLROF:(seq_comm_printcomms)    29     0    12     4  WAV:(seq_comm_printcomms)    30     0    12     4  CPLWAV: OCN              : pio_numiotasks =            3 OCN              : pio_stride =            4 OCN              : pio_root =            0 OCN              : pio_iotype =            6 OCN              : iosys  -2080374780 -1006632952 (t_initf) Read in prof_inparm namelist from: drv_in8 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           965.108 MB memory   alloc in MB is             8.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.018 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1053.85seq_flds_mod: read seq_cplflds_inparm namelist from: drv_in8 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1023.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1026.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00seq_flds_mod: read seq_cplflds_userspec namelist from: drv_inMemory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1031.058 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1026.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1022.008 MB memory   alloc in MB is             8.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1024.00Memory block size conversion in bytes is          1018.038 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1027.018 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.018 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1028.528 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1024.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.518 MB memory   alloc in MB is             8.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           965.54Memory block size conversion in bytes is          1029.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1028.528 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1019.528 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           968.668 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1024.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           994.858 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1025.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1018.038 MB memory   alloc in MB is             8.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1024.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1022.508 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           994.858 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1023.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1022.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1025.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           969.118 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1026.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1030.548 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1025.508 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1020.028 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.018 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1032.068 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is            -0.27Memory block size conversion in bytes is          1053.858 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           997.698 MB memory   alloc in MB is             8.008 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1024.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           969.568 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1035.128 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is           994.858 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1027.018 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1027.018 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1021.518 MB memory   alloc in MB is             8.008 MB memory dealloc in MB is             0.00Memory block size conversion in bytes is          1022.00seq_flds_mod: seq_flds_a2x_states= Sa_z:Sa_u:Sa_v:Sa_tbot:Sa_ptem:Sa_shum:Sa_pbot:Sa_dens:Sa_pslv:Sa_co2prog:Sa_co2diagseq_flds_mod: seq_flds_a2x_fluxes= Faxa_rainc:Faxa_rainl:Faxa_snowc:Faxa_snowl:Faxa_lwdn:Faxa_swndr:Faxa_swvdr:Faxa_swndf:Faxa_swvdf:Faxa_swnet:Faxa_bcphidry:Faxa_bcphodry:Faxa_bcphiwet:Faxa_ocphidry:Faxa_ocphodry:Faxa_ocphiwet:Faxa_dstwet1:Faxa_dstwet2:Faxa_dstwet3:Faxa_dstwet4:Faxa_dstdry1:Faxa_dstdry2:Faxa_dstdry3:Faxa_dstdry4seq_flds_mod: seq_flds_x2a_states= Sf_lfrac:Sf_ifrac:Sf_ofrac:Sx_avsdr:Sx_anidr:Sx_avsdf:Sx_anidf:Sx_tref:Sx_qref:So_t:Sx_t:Sl_fv:Sl_ram1:Sl_snowh:Si_snowh:So_ssq:So_re:Sx_u10:So_ustarseq_flds_mod: seq_flds_x2a_fluxes= Faxx_taux:Faxx_tauy:Faxx_lat:Faxx_sen:Faxx_lwup:Faxx_evap:Fall_flxdst1:Fall_flxdst2:Fall_flxdst3:Fall_flxdst4seq_flds_mod: seq_flds_l2x_states= Sl_avsdr:Sl_anidr:Sl_avsdf:Sl_anidf:Sl_tref:Sl_qref:Sl_t:Sl_fv:Sl_ram1:Sl_snowh:Sl_u10seq_flds_mod: seq_flds_l2x_fluxes= Fall_swnet:Fall_taux:Fall_tauy:Fall_lat:Fall_sen:Fall_lwup:Fall_evap:Fall_flxdst1:Fall_flxdst2:Fall_flxdst3:Fall_flxdst4:Flrl_rofliq:Flrl_roficeseq_flds_mod: seq_flds_x2l_states= Sa_z:Sa_u:Sa_v:Sa_tbot:Sa_ptem:Sa_shum:Sa_pbot:Slrr_volr:Sa_co2prog:Sa_co2diagseq_flds_mod: seq_flds_x2l_fluxes= Faxa_rainc:Faxa_rainl:Faxa_snowc:Faxa_snowl:Faxa_lwdn:Faxa_swndr:Faxa_swvdr:Faxa_swndf:Faxa_swvdf:Faxa_bcphidry:Faxa_bcphodry:Faxa_bcphiwet:Faxa_ocphidry:Faxa_ocphodry:Faxa_ocphiwet:Faxa_dstwet1:Faxa_dstwet2:Faxa_dstwet3:Faxa_dstwet4:Faxa_dstdry1:Faxa_dstdry2:Faxa_dstdry3:Faxa_dstdry4:Flrr_floodseq_flds_mod: seq_flds_i2x_states= Si_avsdr:Si_anidr:Si_avsdf:Si_anidf:Si_tref:Si_qref:Si_t:Si_snowh:Si_u10:Si_ifracseq_flds_mod: seq_flds_i2x_fluxes= Faii_swnet:Fioi_swpen:Faii_taux:Fioi_taux:Faii_tauy:Fioi_tauy:Faii_lat:Faii_sen:Faii_lwup:Faii_evap:Fioi_melth:Fioi_meltw:Fioi_saltseq_flds_mod: seq_flds_x2i_states= Sa_z:Sa_u:Sa_v:Sa_tbot:Sa_ptem:Sa_shum:Sa_pbot:Sa_dens:So_t:So_s:So_u:So_v:So_dhdx:So_dhdyseq_flds_mod: seq_flds_x2i_fluxes= Faxa_rain:Faxa_snow:Faxa_lwdn:Faxa_swndr:Faxa_swvdr:Faxa_swndf:Faxa_swvdf:Faxa_bcphidry:Faxa_bcphodry:Faxa_bcphiwet:Faxa_ocphidry:Faxa_ocphodry:Faxa_ocphiwet:Faxa_dstwet1:Faxa_dstwet2:Faxa_dstwet3:Faxa_dstwet4:Faxa_dstdry1:Faxa_dstdry2:Faxa_dstdry3:Faxa_dstdry4:Fioo_qseq_flds_mod: seq_flds_o2x_states= So_t:So_s:So_u:So_v:So_dhdx:So_dhdy:So_bldepthseq_flds_mod: seq_flds_o2x_fluxes= Fioo_qseq_flds_mod: seq_flds_x2o_states= Sa_pslv:So_duu10n:Si_ifrac:Sw_lamult:Sw_ustokes:Sw_vstokes:Sw_hstokesseq_flds_mod: seq_flds_x2o_fluxes= Faxa_rain:Faxa_snow:Faxa_prec:Faxa_lwdn:Foxx_swnet:Faxa_bcphidry:Faxa_bcphodry:Faxa_bcphiwet:Faxa_ocphidry:Faxa_ocphodry:Faxa_ocphiwet:Faxa_dstwet1:Faxa_dstwet2:Faxa_dstwet3:Faxa_dstwet4:Faxa_dstdry1:Faxa_dstdry2:Faxa_dstdry3:Faxa_dstdry4:Foxx_taux:Foxx_tauy:Foxx_lat:Foxx_sen:Foxx_lwup:Foxx_evap:Fioi_melth:Fioi_meltw:Fioi_salt:Forr_roff:Forr_ioffseq_flds_mod: seq_flds_s2x_states= 
seq_flds_mod: seq_flds_s2x_fluxes= 
seq_flds_mod: seq_flds_x2s_states= 
seq_flds_mod: seq_flds_x2s_fluxes= 
seq_flds_mod: seq_flds_g2x_states= 
seq_flds_mod: seq_flds_g2x_fluxes= 
seq_flds_mod: seq_flds_x2g_states= 
seq_flds_mod: seq_flds_x2g_fluxes= 
seq_flds_mod: seq_flds_xao_states= So_tref:So_qref:So_ssq:So_re:So_u10:So_duu10n:So_ustarseq_flds_mod: seq_flds_xao_albedo= So_avsdr:So_anidr:So_avsdf:So_anidfseq_flds_mod: seq_flds_r2x_states= Slrr_volrseq_flds_mod: seq_flds_r2x_fluxes= Forr_roff:Forr_ioff:Flrr_floodseq_flds_mod: seq_flds_x2r_states= 
seq_flds_mod: seq_flds_x2r_fluxes= Flrl_rofliq:Flrl_roficeseq_flds_mod: seq_flds_w2x_states= Sw_lamult:Sw_ustokes:Sw_vstokes:Sw_hstokesseq_flds_mod: seq_flds_w2x_fluxes= 
seq_flds_mod: seq_flds_x2w_states= Sa_u:Sa_v:Sa_tbot:Si_ifrac:So_t:So_u:So_v:So_bldepthseq_flds_mod: seq_flds_x2w_fluxes= 
          12 pes participating in computation ----------------------------------- TASK#  NAME  0  cu01  1  cu01  2  cu01  3  cu01  4  cu01  5  cu01  6  cu01  7  cu01  8  cu01  9  cu01 10  cu01 11  cu01 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/inic/fv/cami_1 980-01-01_0.47x0.63_L26_c071226.nc       65536 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/topo/USGS_gtop o30_0.47x0.63_remap_c061106.nc      131072 NetCDF: Invalid dimension ID or name NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/sulf ate_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/dust 1_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/dust 2_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/dust 3_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/dust 4_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/bcph o_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/bcph i_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/ocph o_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/ocph i_camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/ssam _camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/physprops/sscm _camrt_c080918.nc      196608 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/ozone/ozone_1. 9x2.5_L26_1850clim_c091112.nc      196608 NetCDF: Invalid dimension ID or name Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/chem/trop_moza rt_aero/aero/aero_1.9x2.5_L26_1850clim_c091112.nc      262144 NetCDF: Invalid dimension ID or name Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/chem/trop_moza rt_aero/aero/aerosoldep_monthly_1850_mean_1.9x2.5_c090421.nc      327680 NetCDF: Variable not found NetCDF: Variable not found NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/rad/abs_ems_fa ctors_fastvx.c030508.nc      393216 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/atm/cam/chem/trop_moza rt/ub/clim_p_trop.nc      393216

 12 pes participating in computation for CLM
-----------------------------------
NODE#  NAME(    0)  cu01(    1)  cu01(    2)  cu01(    3)  cu01(    4)  cu01(    5)  cu01(    6)  cu01(    7)  cu01(    8)  cu01(    9)  cu01(   10)  cu01(   11)  cu01 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/share/domains/domain.l nd.fv0.47x0.63_gx1v6.090407.nc      393216 NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Variable not found Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/share/domains/domain.l nd.fv0.47x0.63_gx1v6.090407.nc      393216 NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/surfdata/surf data_0.47x0.63_simyr1850_c100826.nc      393216 NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/pftdata/pft-p hysiology.clm40.c130424.nc      393216 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/surfdata/surf data_0.47x0.63_simyr1850_c100826.nc      393216 NetCDF: Variable not found NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name  proc=            1  beg gridcell=         6675  end gridcell=        13348   total gridcells per proc=         6674 proc=            1  beg landunit=         8564  end landunit=        17078   total landunits per proc=         8515 proc=            1  beg column  =        13335  end column  =        26561   total columns per proc  =        13227 proc=            1  beg pft     =        85943  end pft     =       171697   total pfts per proc     =        85755 proc=            1  lnd ngseg   =         2607  lnd nlseg   =          215 proc=            1  gce ngseg   =          960  gce nlseg   =           80 proc=            1  lun ngseg   =          960  lun nlseg   =           80 proc=            1  col ngseg   =          960  col nlseg   =           80 proc=            1  pft ngseg   =          960  pft nlseg   =           80 proc=            1  nclumps =            4 proc=            1  clump no =            1  clump id=            2   beg gridcell=         6675  end gridcell=         8342   total gridcells per clump=         1668 proc=            1  clump no =            1  clump id=            2   beg landunit=         8564  end landunit=        10648   total landunits per clump =         2085 proc=            1  clump no =            1  clump id=            2   beg column  =        13335  end column  =        16484   total columns per clump  =         3150 proc=            1  clump no =            1  clump id=            2   beg pft     =        85943  end pft     =       107156   total pfts per clump     =        21214  proc=            5  beg gridcell=        33371  end gridcell=        40044   total gridcells per proc=         6674 proc=            5  beg landunit=        42979  end landunit=        51445   total landunits per proc=         8467 proc=            5  beg column  =        67064  end column  =        80023   total columns per proc  =        12960 proc=            5  beg pft     =       428728  end pft     =       515591   total pfts per proc     =        86864 proc=            5  lnd ngseg   =         2607  lnd nlseg   =          215 proc=            5  gce ngseg   =          960  gce nlseg   =           80 proc=            5  lun ngseg   =          960  lun nlseg   =           80 proc=            5  col ngseg   =          960  col nlseg   =           80 proc=            5  pft ngseg   =          960  pft nlseg   =           80 proc=            5  nclumps =            4 proc=            5  clump no =            1  clump id=            6   beg gridcell=        33371  end gridcell=        35038   total gridcells per clump=         1668 proc=            5  clump no =            1  clump id=            6   beg landunit=        42979  end landunit=        45049   total landunits per clump =         2071 proc=            5  clump no =            1  clump id=            6   beg column  =        67064  end column  =        70248   total columns per clump  =         3185 proc=            5  clump no =            1  clump id=            6   beg pft     =       428728  end pft     =       450168   total pfts per clump     =        21441  proc=           10  beg gridcell=        66741  end gridcell=        73414   total gridcells per proc=         6674 proc=           10  beg landunit=        85921  end landunit=        94511   total landunits per proc=         8591 proc=           10  beg column  =       133534  end column  =       146903   total columns per proc  =        13370 proc=           10  beg pft     =       860702  end pft     =       947447   total pfts per proc     =        86746 proc=           10  lnd ngseg   =         2607  lnd nlseg   =          225 proc=           10  gce ngseg   =          960  gce nlseg   =           80 proc=           10  lun ngseg   =          960  lun nlseg   =           80 proc=           10  col ngseg   =          960  col nlseg   =           80 proc=           10  pft ngseg   =          960  pft nlseg   =           80 proc=           10  nclumps =            4 proc=           10  clump no =            1  clump id=           11   beg gridcell=        66741  end gridcell=        68408   total gridcells per clump=         1668 proc=           10  clump no =            1  clump id=           11   beg landunit=        85921  end landunit=        87997   total landunits per clump =         2077 proc=           10  clump no =            1  clump id=           11   beg column  =       133534  end column  =       136691   total columns per clump  =         3158 proc=           10  clump no =            1  clump id=           11   beg pft     =       860702  end pft     =       882531   total pfts per clump     =        21830  proc=           11  beg gridcell=        73415  end gridcell=        80086   total gridcells per proc=         6672 proc=           11  beg landunit=        94512  end landunit=       103130   total landunits per proc=         8619 proc=           11  beg column  =       146904  end column  =       160216   total columns per proc  =        13313 proc=           11  beg pft     =       947448  end pft     =      1033160   total pfts per proc     =        85713 proc=           11  lnd ngseg   =         2607  lnd nlseg   =          221 proc=           11  gce ngseg   =          960  gce nlseg   =           80 proc=           11  lun ngseg   =          960  lun nlseg   =           80 proc=           11  col ngseg   =          960  col nlseg   =           80 proc=           11  pft ngseg   =          960  pft nlseg   =           80 proc=           11  nclumps =            4 proc=           11  clump no =            1  clump id=           12   beg gridcell=        73415  end gridcell=        75082   total gridcells per clump=         1668 proc=           11  clump no =            1  clump id=           12   beg landunit=        94512  end landunit=        96700   total landunits per clump =         2189 proc=           11  clump no =            1  clump id=           12   beg column  =       146904  end column  =       150188   total columns per clump  =         3285 proc=           11  clump no =            1  clump id=           12   beg pft     =       947448  end pft     =       968316   total pfts per clump     =        20869 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/surfdata/surf data_0.47x0.63_simyr1850_c100826.nc      393216 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/surfdata/surf data_0.47x0.63_simyr1850_c100826.nc      393216 NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name NetCDF: Invalid dimension ID or name Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/snicardata/sn icar_optics_5bnd_c090915.nc      458752 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/snicardata/sn icar_drdt_bst_fit_60_c070416.nc      458752 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/initdata/clmi .BCN.0182-01-01_0.47x0.63_g1v6_simyr1850_c120324.nc      458752 NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found NetCDF: Variable not found(shr_stream_set) size of filename =      1(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc(shr_stream_set) size of filename =      1(shr_stream_set) filename = /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/ndepdata/fndep_clm_hist_simyr1849-2006_1.9x2.5_c100428.nc hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T hist_htapes_build hist tape =            1  written with dov2xy=  T Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/lnd/clm2/rtmdata/rdirc _0.5x0.5_simyr2000_slpmxvl_c120717.nc      458752 rtm decomp info proc =            1  begr =        21630  endr =        43258   numr =        21629                 proc =            1  begrl=        12706  endrl=        25848   numrl=        13143                 proc =            1  begro=         8925  endro=        17410   numro=         8486 rtm decomp info proc =            5  begr =       108267  endr =       129912   numr =        21646                 proc =            5  begrl=        54999  endrl=        64635   numrl=         9637                 proc =            5  begro=        53269  endro=        65277   numro=        12009 rtm decomp info proc =           10  begr =       216754  endr =       238382   numr =        21629                 proc =           10  begrl=        79612  endrl=        82326   numrl=         2715                 proc =           10  begro=       137143  endro=       156056   numro=        18914 rtm decomp info proc =           11  begr =       238383  endr =       259200   numr =        20818                 proc =           11  begrl=        82327  endrl=        84511   numrl=         2185                 proc =           11  begro=       156057  endro=       174689   numro=        18633 Opened existing file  /exports/home/asc01/chenfz/CESM/inputdata/inputdata_EXP1/rof/rtm/initdata/rtmi. I1850CRUCLM45BGC.0241-01-01.R05_simyr1850_c130515.nc      458752 Reading setup_nml Reading grid_nml Reading ice_nml Reading tracer_nmlCalcWorkPerBlock: Total blocks:   384 Ice blocks:   126 IceFree blocks:   229 Land blocks:    29MCT::m_Router::initp_: GSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: GSMap indices not increasing...Will correctMCT::m_Router::initp_: GSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: GSMap indices not increasing...Will correctMCT::m_Router::initp_: GSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: RGSMap indices not increasing...Will correctMCT::m_Router::initp_: GSMap indices not increasing...Will correct(seq_domain_areafactinit) : min/max mdl2drv   0.964166830348515       1.03890667698306    areafact_o_OCN(seq_domain_areafactinit) : min/max drv2mdl   0.962550363911375       1.03716490603450    areafact_o_OCN
====================================================================================   BAD TERMINATION OF ONE OF YOUR APPLICATION PROCESSES=   PID 3237 RUNNING AT cu01=   EXIT CODE: 11=   CLEANING UP REMAINING PROCESSES=   YOU CAN IGNORE THE BELOW CLEANUP MESSAGES===================================================================================YOUR APPLICATION TERMINATED WITH THE EXIT STRING: Segmentation fault (signal 11)This typically refers to a problem with your application.Please see the FAQ page for debugging suggestionsAnd this is my env_mach_pes.xml :                    
                    
                    
                    
            
                    
                    
                    
                                
                                 My compiler is icc and ifort.mpi is mpich.Please help me to fix it.
 

jedwards

CSEG and Liaisons
Staff member
I think that the problem is in cice, try turning off threading in that component.   In general we do not have the resources to solve this problem for you in cesm1.2.2, however we are interested in solutions if you find them.  
 

jedwards

CSEG and Liaisons
Staff member
I think that the problem is in cice, try turning off threading in that component.   In general we do not have the resources to solve this problem for you in cesm1.2.2, however we are interested in solutions if you find them.  
 
I had change my env_mach_pes.xml from    to   but still have segmentation fault.And I have question on how the software generate the parameter TOTALPES. I'm not clearly understand what it means in documentation. The default value of TOTALPES is 132 when I rebuild the case, is it related to my phyiscal core numbers? or some other reasons?Thank you jedwards!
 
I had change my env_mach_pes.xml from    to   but still have segmentation fault.And I have question on how the software generate the parameter TOTALPES. I'm not clearly understand what it means in documentation. The default value of TOTALPES is 132 when I rebuild the case, is it related to my phyiscal core numbers? or some other reasons?Thank you jedwards!
 
Top