source: palm/trunk/SOURCE/write_restart_data_mod.f90 @ 4510

Last change on this file since 4510 was 4495, checked in by raasch, 5 years ago

restart data handling with MPI-IO added, first part

  • Property svn:keywords set to Id
File size: 53.9 KB
Line 
1!> @file write_restart_data_mod.f90
2!--------------------------------------------------------------------------------------------------!
3! This file is part of the PALM model system.
4!
5! PALM is free software: you can redistribute it and/or modify it under the terms of the GNU General
6! Public License as published by the Free Software Foundation, either version 3 of the License, or
7! (at your option) any later version.
8!
9! PALM is distributed in the hope that it will be useful, but WITHOUT ANY WARRANTY; without even the
10! implied warranty of MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE. See the GNU General
11! Public License for more details.
12!
13! You should have received a copy of the GNU General Public License along with PALM. If not, see
14! <http://www.gnu.org/licenses/>.
15!
16! Copyright 1997-2020 Leibniz Universitaet Hannover
17!--------------------------------------------------------------------------------------------------!
18!
19! Current revisions:
20! -----------------
21!
22!
23! Former revisions:
24! -----------------
25! $Id: write_restart_data_mod.f90 4495 2020-04-13 20:11:20Z raasch $
26! restart data handling with MPI-IO added
27!
28! 4489 2020-04-04 10:54:08Z raasch
29! file re-formatted to follow the PALM coding standard
30!
31! 4360 2020-01-07 11:25:50Z suehring
32! - Move 2-m potential temperature to diagnostic_output_quantities.
33!
34! 4301 2019-11-22 12:09:09Z oliver.maas
35! removed recycling_yshift
36!
37! 4227 2019-09-10 18:04:34Z gronemeier
38! implement new palm_date_time_mod and increased binary version
39!
40! 4146 2019-08-07 07:47:36Z gronemeier
41! Corrected "Former revisions" section
42!
43! 4101 2019-07-17 15:14:26Z gronemeier
44! remove old_dt
45!
46! 4039 2019-06-18 10:32:41Z suehring
47! Modularize diagnostic output
48!
49! 4017 2019-06-06 12:16:46Z schwenkel
50! output of turbulence intensity added
51!
52! 3988 2019-05-22 11:32:37Z kanani
53! + time_virtual_measurement (to enable steering of output interval)
54!
55! 3936 2019-04-26 15:38:02Z kanani
56! Enable time-averaged output of theta_2m* with restarts
57!
58! 3668 2019-01-14 12:49:24Z maronga
59! Implementation of the PALM module interface
60!
61! 2894 2018-03-15 09:17:58Z Giersch
62! Initial revision
63!
64!
65! Description:
66! ------------
67!> Writes restart data into binary file(s) for restart runs.
68!--------------------------------------------------------------------------------------------------!
69 MODULE write_restart_data_mod
70
71
72    USE arrays_3d,                                                                                 &
73        ONLY:  e, inflow_damping_factor, kh, km, mean_inflow_profiles, p, pt, pt_init, q, q_init,  &
74               ql, ref_state, s, s_init, u, u_init, ug, u_m_l, u_m_n, u_m_r, u_m_s, v, v_init, vg, &
75               v_m_l, v_m_n, v_m_r, v_m_s, vpt, w, w_m_l, w_m_n, w_m_r, w_m_s
76
77    USE averaging
78
79    USE bulk_cloud_model_mod,                                                                      &
80        ONLY:  bulk_cloud_model
81
82    USE control_parameters
83
84    USE grid_variables,                                                                            &
85        ONLY:  dx, dy
86
87    USE gust_mod,                                                                                  &
88        ONLY:  gust_module_enabled
89
90    USE indices,                                                                                   &
91        ONLY:  nx, nxl, nxr, ny, nys, nyn, nz, nzb, nzt
92
93    USE kinds
94
95    USE model_1d_mod,                                                                              &
96        ONLY:  damp_level_1d, dt_pr_1d, dt_run_control_1d, end_time_1d
97
98    USE module_interface,                                                                          &
99        ONLY:  module_interface_wrd_global,                                                        &
100               module_interface_wrd_local
101
102    USE netcdf_interface,                                                                          &
103        ONLY:  netcdf_precision, output_for_t0
104
105    USE particle_attributes,                                                                       &
106        ONLY:  particle_advection
107
108    USE pegrid,                                                                                    &
109        ONLY:  collective_wait, hor_index_bounds, myid, numprocs
110
111    USE radiation_model_mod,                                                                       &
112        ONLY:  time_radiation
113
114    USE random_function_mod,                                                                       &
115        ONLY:  random_iv, random_iy
116
117    USE random_generator_parallel,                                                                 &
118        ONLY:  id_random_array, seq_random_array
119
120    USE restart_data_mpi_io_mod,                                                                   &
121        ONLY:  wrd_mpi_io, wrd_mpi_io_global_array
122
123    USE spectra_mod,                                                                               &
124        ONLY:  average_count_sp, spectrum_x, spectrum_y
125
126    USE statistics,                                                                                &
127        ONLY:  hom, hom_sum, statistic_regions, u_max, u_max_ijk, v_max, v_max_ijk, w_max,         &
128        w_max_ijk, z_i
129
130    USE surface_mod,                                                                               &
131        ONLY:  surface_wrd_local
132
133    USE user,                                                                                      &
134        ONLY:  user_module_enabled
135
136    USE vertical_nesting_mod,                                                                      &
137        ONLY:  vnest_init
138
139    USE virtual_measurement_mod,                                                                   &
140        ONLY:  time_virtual_measurement
141
142
143    IMPLICIT NONE
144
145
146    INTERFACE wrd_global
147       MODULE PROCEDURE wrd_global
148    END INTERFACE wrd_global
149
150    INTERFACE wrd_local
151       MODULE PROCEDURE wrd_local
152    END INTERFACE wrd_local
153
154
155    PUBLIC wrd_local, wrd_global
156
157
158 CONTAINS
159
160
161! Description:
162! ------------
163!> Global data of control variables and arrays is written out for restarts.
164!> In case of output in Fortran binary format, this information is only written to the file
165!> opened by PE0.
166!--------------------------------------------------------------------------------------------------!
167
168
169 SUBROUTINE wrd_global
170
171
172    CHARACTER(LEN=10) ::  binary_version_global  !<
173    CHARACTER(LEN=20) ::  tmp_name               !< temporary variable
174
175    INTEGER ::  i                                !< loop index
176
177    binary_version_global = '4.9'
178
179    IF ( restart_data_format_output == 'fortran_binary' )  THEN
180!
181!--    Output in Fortran binary format
182       CALL wrd_write_string( 'binary_version_global' )
183       WRITE ( 14 )  binary_version_global
184
185       CALL wrd_write_string( 'numprocs' )
186       WRITE ( 14 )  numprocs
187
188       CALL wrd_write_string( 'hor_index_bounds' )
189       WRITE ( 14 )  hor_index_bounds
190
191       CALL wrd_write_string( 'nz' )
192       WRITE ( 14 )  nz
193
194       CALL wrd_write_string( 'max_pr_user' )
195       WRITE ( 14 )  max_pr_user
196
197       CALL wrd_write_string( 'statistic_regions' )
198       WRITE ( 14 )  statistic_regions
199
200!
201!--    Caution: After changes in the following parameter-list, the version number stored in the
202!--    -------- variable binary_version_global has to be increased. The same changes must also be
203!--             done in the parameter-list in rrd_global.
204       CALL wrd_write_string( 'advected_distance_x' )
205       WRITE ( 14 )  advected_distance_x
206
207       CALL wrd_write_string( 'advected_distance_y' )
208       WRITE ( 14 )  advected_distance_y
209
210       CALL wrd_write_string( 'alpha_surface' )
211       WRITE ( 14 )  alpha_surface
212
213       CALL wrd_write_string( 'average_count_pr' )
214       WRITE ( 14 )  average_count_pr
215
216       CALL wrd_write_string( 'average_count_sp' )
217       WRITE ( 14 )  average_count_sp
218
219       CALL wrd_write_string( 'average_count_3d' )
220       WRITE ( 14 )  average_count_3d
221
222       CALL wrd_write_string( 'bc_e_b' )
223       WRITE ( 14 )  bc_e_b
224
225       CALL wrd_write_string( 'bc_lr' )
226       WRITE ( 14 )  bc_lr
227
228       CALL wrd_write_string( 'bc_ns' )
229       WRITE ( 14 )  bc_ns
230
231       CALL wrd_write_string( 'bc_p_b' )
232       WRITE ( 14 )  bc_p_b
233
234       CALL wrd_write_string( 'bc_p_t' )
235       WRITE ( 14 )  bc_p_t
236
237       CALL wrd_write_string( 'bc_pt_b' )
238       WRITE ( 14 )  bc_pt_b
239
240       CALL wrd_write_string( 'bc_pt_t' )
241       WRITE ( 14 )  bc_pt_t
242
243       CALL wrd_write_string( 'bc_pt_t_val' )
244       WRITE ( 14 )  bc_pt_t_val
245
246       CALL wrd_write_string( 'bc_q_b' )
247       WRITE ( 14 )  bc_q_b
248
249       CALL wrd_write_string( 'bc_q_t' )
250       WRITE ( 14 )  bc_q_t
251
252       CALL wrd_write_string( 'bc_q_t_val' )
253       WRITE ( 14 )  bc_q_t_val
254
255       CALL wrd_write_string( 'bc_s_b' )
256       WRITE ( 14 )  bc_s_b
257
258       CALL wrd_write_string( 'bc_s_t' )
259       WRITE ( 14 )  bc_s_t
260
261       CALL wrd_write_string( 'bc_uv_b' )
262       WRITE ( 14 )  bc_uv_b
263
264       CALL wrd_write_string( 'bc_uv_t' )
265       WRITE ( 14 )  bc_uv_t
266
267       CALL wrd_write_string( 'building_height' )
268       WRITE ( 14 )  building_height
269
270       CALL wrd_write_string( 'building_length_x' )
271       WRITE ( 14 )  building_length_x
272
273       CALL wrd_write_string( 'building_length_y' )
274       WRITE ( 14 )  building_length_y
275
276       CALL wrd_write_string( 'building_wall_left' )
277       WRITE ( 14 )  building_wall_left
278
279       CALL wrd_write_string( 'building_wall_south' )
280       WRITE ( 14 )  building_wall_south
281
282       CALL wrd_write_string( 'call_psolver_at_all_substeps' )
283       WRITE ( 14 )  call_psolver_at_all_substeps
284
285       CALL wrd_write_string( 'canyon_height' )
286       WRITE ( 14 )  canyon_height
287
288       CALL wrd_write_string( 'canyon_wall_left' )
289       WRITE ( 14 )  canyon_wall_left
290
291       CALL wrd_write_string( 'canyon_wall_south' )
292       WRITE ( 14 )  canyon_wall_south
293
294       CALL wrd_write_string( 'canyon_width_x' )
295       WRITE ( 14 )  canyon_width_x
296
297       CALL wrd_write_string( 'canyon_width_y' )
298       WRITE ( 14 )  canyon_width_y
299
300       CALL wrd_write_string( 'cfl_factor' )
301       WRITE ( 14 )  cfl_factor
302
303       CALL wrd_write_string( 'cloud_droplets' )
304       WRITE ( 14 )  cloud_droplets
305
306       CALL wrd_write_string( 'collective_wait' )
307       WRITE ( 14 )  collective_wait
308
309       CALL wrd_write_string( 'conserve_volume_flow' )
310       WRITE ( 14 )  conserve_volume_flow
311
312       CALL wrd_write_string( 'conserve_volume_flow_mode' )
313       WRITE ( 14 )  conserve_volume_flow_mode
314
315       CALL wrd_write_string( 'constant_flux_layer' )
316       WRITE ( 14 )  constant_flux_layer
317
318       CALL wrd_write_string( 'coupling_start_time' )
319       WRITE ( 14 )  coupling_start_time
320
321       CALL wrd_write_string( 'current_timestep_number' )
322       WRITE ( 14 )  current_timestep_number
323
324       CALL wrd_write_string( 'cycle_mg' )
325       WRITE ( 14 )  cycle_mg
326
327       CALL wrd_write_string( 'damp_level_1d' )
328       WRITE ( 14 )  damp_level_1d
329
330       CALL wrd_write_string( 'origin_date_time' )
331       WRITE ( 14 )  origin_date_time
332
333       CALL wrd_write_string( 'dissipation_1d' )
334       WRITE ( 14 )  dissipation_1d
335
336       CALL wrd_write_string( 'do2d_xy_time_count' )
337       WRITE ( 14 )  do2d_xy_time_count
338
339       CALL wrd_write_string( 'do2d_xz_time_count' )
340       WRITE ( 14 )  do2d_xz_time_count
341
342       CALL wrd_write_string( 'do2d_yz_time_count' )
343       WRITE ( 14 )  do2d_yz_time_count
344
345       CALL wrd_write_string( 'do3d_time_count' )
346       WRITE ( 14 )  do3d_time_count
347
348       CALL wrd_write_string( 'dp_external' )
349       WRITE ( 14 )  dp_external
350
351       CALL wrd_write_string( 'dp_level_b' )
352       WRITE ( 14 )  dp_level_b
353
354       CALL wrd_write_string( 'dp_smooth' )
355       WRITE ( 14 )  dp_smooth
356
357       CALL wrd_write_string( 'dpdxy' )
358       WRITE ( 14 )  dpdxy
359
360       CALL wrd_write_string( 'dt_3d' )
361       WRITE ( 14 )  dt_3d
362
363    CALL wrd_write_string( 'dt_pr_1d' )
364    WRITE ( 14 )  dt_pr_1d
365
366       CALL wrd_write_string( 'dt_run_control_1d' )
367       WRITE ( 14 )  dt_run_control_1d
368
369       CALL wrd_write_string( 'dx' )
370       WRITE ( 14 )  dx
371
372       CALL wrd_write_string( 'dy' )
373       WRITE ( 14 )  dy
374
375       CALL wrd_write_string( 'dz' )
376       WRITE ( 14 )  dz
377
378       CALL wrd_write_string( 'dz_max' )
379       WRITE ( 14 )  dz_max
380
381       CALL wrd_write_string( 'dz_stretch_factor' )
382       WRITE ( 14 )  dz_stretch_factor
383
384       CALL wrd_write_string( 'dz_stretch_factor_array' )
385       WRITE ( 14 )  dz_stretch_factor_array
386
387       CALL wrd_write_string( 'dz_stretch_level' )
388       WRITE ( 14 )  dz_stretch_level
389
390       CALL wrd_write_string( 'dz_stretch_level_end' )
391       WRITE ( 14 )  dz_stretch_level_end
392
393       CALL wrd_write_string( 'dz_stretch_level_start' )
394       WRITE ( 14 )  dz_stretch_level_start
395
396       CALL wrd_write_string( 'e_min' )
397       WRITE ( 14 )  e_min
398
399       CALL wrd_write_string( 'end_time_1d' )
400       WRITE ( 14 )  end_time_1d
401
402       CALL wrd_write_string( 'fft_method' )
403       WRITE ( 14 )  fft_method
404
405       CALL wrd_write_string( 'first_call_lpm' )
406       WRITE ( 14 )  first_call_lpm
407
408       CALL wrd_write_string( 'galilei_transformation' )
409       WRITE ( 14 )  galilei_transformation
410
411       CALL wrd_write_string( 'hom' )
412       WRITE ( 14 )  hom
413
414       CALL wrd_write_string( 'hom_sum' )
415       WRITE ( 14 )  hom_sum
416
417       CALL wrd_write_string( 'humidity' )
418       WRITE ( 14 )  humidity
419
420       IF ( ALLOCATED( inflow_damping_factor ) )  THEN
421          CALL wrd_write_string( 'inflow_damping_factor' )
422          WRITE ( 14 )  inflow_damping_factor
423       ENDIF
424
425       CALL wrd_write_string( 'inflow_damping_height' )
426       WRITE ( 14 )  inflow_damping_height
427
428       CALL wrd_write_string( 'inflow_damping_width' )
429       WRITE ( 14 )  inflow_damping_width
430
431       CALL wrd_write_string( 'inflow_disturbance_begin' )
432       WRITE ( 14 )  inflow_disturbance_begin
433
434       CALL wrd_write_string( 'inflow_disturbance_end' )
435       WRITE ( 14 )  inflow_disturbance_end
436
437       CALL wrd_write_string( 'km_constant' )
438       WRITE ( 14 )  km_constant
439
440       CALL wrd_write_string( 'large_scale_forcing' )
441       WRITE ( 14 )  large_scale_forcing
442
443       CALL wrd_write_string( 'large_scale_subsidence' )
444       WRITE ( 14 )  large_scale_subsidence
445
446       CALL wrd_write_string( 'latitude' )
447       WRITE ( 14 )  latitude
448
449       CALL wrd_write_string( 'longitude' )
450       WRITE ( 14 )  longitude
451
452       CALL wrd_write_string( 'loop_optimization' )
453       WRITE ( 14 )  loop_optimization
454
455       CALL wrd_write_string( 'masking_method' )
456       WRITE ( 14 )  masking_method
457
458       IF ( ALLOCATED( mean_inflow_profiles ) )  THEN
459          CALL wrd_write_string( 'mean_inflow_profiles' )
460          WRITE ( 14 )  mean_inflow_profiles
461       ENDIF
462
463       CALL wrd_write_string( 'mg_cycles' )
464       WRITE ( 14 )  mg_cycles
465
466       CALL wrd_write_string( 'mg_switch_to_pe0_level' )
467       WRITE ( 14 )  mg_switch_to_pe0_level
468
469       CALL wrd_write_string( 'mixing_length_1d' )
470       WRITE ( 14 )  mixing_length_1d
471
472       CALL wrd_write_string( 'momentum_advec' )
473       WRITE ( 14 )  momentum_advec
474
475       CALL wrd_write_string( 'netcdf_precision' )
476       WRITE ( 14 )  netcdf_precision
477
478       CALL wrd_write_string( 'neutral' )
479       WRITE ( 14 )  neutral
480
481       CALL wrd_write_string( 'ngsrb' )
482       WRITE ( 14 )  ngsrb
483
484       CALL wrd_write_string( 'nsor' )
485       WRITE ( 14 )  nsor
486
487       CALL wrd_write_string( 'nsor_ini' )
488       WRITE ( 14 )  nsor_ini
489
490       CALL wrd_write_string( 'nudging' )
491       WRITE ( 14 )  nudging
492
493       CALL wrd_write_string( 'num_leg' )
494       WRITE ( 14 )  num_leg
495
496       CALL wrd_write_string( 'nx' )
497       WRITE ( 14 )  nx
498
499       CALL wrd_write_string( 'ny' )
500       WRITE ( 14 )  ny
501
502       CALL wrd_write_string( 'ocean_mode' )
503       WRITE ( 14 )  ocean_mode
504
505       CALL wrd_write_string( 'omega' )
506       WRITE ( 14 )  omega
507
508       CALL wrd_write_string( 'omega_sor' )
509       WRITE ( 14 )  omega_sor
510
511       CALL wrd_write_string( 'output_for_t0' )
512       WRITE ( 14 )  output_for_t0
513
514       CALL wrd_write_string( 'passive_scalar' )
515       WRITE ( 14 )  passive_scalar
516
517       CALL wrd_write_string( 'prandtl_number' )
518       WRITE ( 14 )  prandtl_number
519
520       CALL wrd_write_string( 'psolver' )
521       WRITE ( 14 )  psolver
522
523       CALL wrd_write_string( 'pt_damping_factor' )
524       WRITE ( 14 )  pt_damping_factor
525
526       CALL wrd_write_string( 'pt_damping_width' )
527       WRITE ( 14 )  pt_damping_width
528
529       CALL wrd_write_string( 'pt_init' )
530       WRITE ( 14 )  pt_init
531
532       CALL wrd_write_string( 'pt_reference' )
533       WRITE ( 14 )  pt_reference
534
535       CALL wrd_write_string( 'pt_surface' )
536       WRITE ( 14 )  pt_surface
537
538       CALL wrd_write_string( 'pt_surface_initial_change' )
539       WRITE ( 14 )  pt_surface_initial_change
540
541       CALL wrd_write_string( 'pt_vertical_gradient' )
542       WRITE ( 14 )  pt_vertical_gradient
543
544       CALL wrd_write_string( 'pt_vertical_gradient_level' )
545       WRITE ( 14 )  pt_vertical_gradient_level
546
547       CALL wrd_write_string( 'pt_vertical_gradient_level_ind' )
548       WRITE ( 14 )  pt_vertical_gradient_level_ind
549
550       CALL wrd_write_string( 'q_init' )
551       WRITE ( 14 )  q_init
552
553       CALL wrd_write_string( 'q_surface' )
554       WRITE ( 14 )  q_surface
555
556       CALL wrd_write_string( 'q_surface_initial_change' )
557       WRITE ( 14 )  q_surface_initial_change
558
559       CALL wrd_write_string( 'q_vertical_gradient' )
560       WRITE ( 14 )  q_vertical_gradient
561
562       CALL wrd_write_string( 'q_vertical_gradient_level' )
563       WRITE ( 14 )  q_vertical_gradient_level
564
565       CALL wrd_write_string( 'q_vertical_gradient_level_ind' )
566       WRITE ( 14 )  q_vertical_gradient_level_ind
567
568       CALL wrd_write_string( 'random_generator' )
569       WRITE ( 14 )  random_generator
570
571       CALL wrd_write_string( 'random_heatflux' )
572       WRITE ( 14 )  random_heatflux
573
574       CALL wrd_write_string( 'rans_mode' )
575       WRITE ( 14 )  rans_mode
576
577       CALL wrd_write_string( 'rayleigh_damping_factor' )
578       WRITE ( 14 )  rayleigh_damping_factor
579
580       CALL wrd_write_string( 'rayleigh_damping_height' )
581       WRITE ( 14 )  rayleigh_damping_height
582
583       CALL wrd_write_string( 'recycling_width' )
584       WRITE ( 14 )  recycling_width
585
586       CALL wrd_write_string( 'ref_state' )
587       WRITE ( 14 )  ref_state
588
589       CALL wrd_write_string( 'reference_state' )
590       WRITE ( 14 )  reference_state
591
592       CALL wrd_write_string( 'residual_limit' )
593       WRITE ( 14 )  residual_limit
594
595       CALL wrd_write_string( 'roughness_length' )
596       WRITE ( 14 )  roughness_length
597
598       CALL wrd_write_string( 'run_coupled' )
599       WRITE ( 14 )  run_coupled
600
601       CALL wrd_write_string( 'runnr' )
602       WRITE ( 14 )  runnr
603
604       CALL wrd_write_string( 's_init' )
605       WRITE ( 14 )  s_init
606
607       CALL wrd_write_string( 's_surface' )
608       WRITE ( 14 )  s_surface
609
610       CALL wrd_write_string( 's_surface_initial_change' )
611       WRITE ( 14 )  s_surface_initial_change
612
613       CALL wrd_write_string( 's_vertical_gradient' )
614       WRITE ( 14 )  s_vertical_gradient
615
616       CALL wrd_write_string( 's_vertical_gradient_level' )
617       WRITE ( 14 )  s_vertical_gradient_level
618
619       CALL wrd_write_string( 's_vertical_gradient_level_ind' )
620       WRITE ( 14 )  s_vertical_gradient_level_ind
621
622       CALL wrd_write_string( 'scalar_advec' )
623       WRITE ( 14 )  scalar_advec
624
625       CALL wrd_write_string( 'simulated_time' )
626       WRITE ( 14 )  simulated_time
627
628       IF ( ALLOCATED( spectrum_x ) )  THEN
629          CALL wrd_write_string( 'spectrum_x' )
630          WRITE ( 14 )  spectrum_x
631          CALL wrd_write_string( 'spectrum_y' )
632          WRITE ( 14 )  spectrum_y
633       ENDIF
634
635       CALL wrd_write_string( 'spinup_time ' )
636       WRITE ( 14 )  spinup_time
637
638       CALL wrd_write_string( 'subs_vertical_gradient' )
639       WRITE ( 14 )  subs_vertical_gradient
640
641       CALL wrd_write_string( 'subs_vertical_gradient_level' )
642       WRITE ( 14 )  subs_vertical_gradient_level
643
644       CALL wrd_write_string( 'subs_vertical_gradient_level_i' )
645       WRITE ( 14 )  subs_vertical_gradient_level_i
646
647       CALL wrd_write_string( 'surface_heatflux' )
648       WRITE ( 14 )  surface_heatflux
649
650       CALL wrd_write_string( 'surface_pressure' )
651       WRITE ( 14 )  surface_pressure
652
653       CALL wrd_write_string( 'surface_scalarflux' )
654       WRITE ( 14 )  surface_scalarflux
655
656       CALL wrd_write_string( 'surface_waterflux' )
657       WRITE ( 14 )  surface_waterflux
658
659       CALL wrd_write_string( 'time_coupling' )
660       WRITE ( 14 )  time_coupling
661
662       CALL wrd_write_string( 'time_disturb' )
663       WRITE ( 14 )  time_disturb
664
665       CALL wrd_write_string( 'time_do2d_xy' )
666       WRITE ( 14 )  time_do2d_xy
667
668       CALL wrd_write_string( 'time_do2d_xz' )
669       WRITE ( 14 )  time_do2d_xz
670
671       CALL wrd_write_string( 'time_do2d_yz' )
672       WRITE ( 14 )  time_do2d_yz
673
674       CALL wrd_write_string( 'time_do3d' )
675       WRITE ( 14 )  time_do3d
676
677       CALL wrd_write_string( 'time_do_av' )
678       WRITE ( 14 )  time_do_av
679
680       CALL wrd_write_string( 'time_do_sla' )
681       WRITE ( 14 )  time_do_sla
682
683       CALL wrd_write_string( 'time_domask' )
684       WRITE ( 14 )  time_domask
685
686       CALL wrd_write_string( 'time_dopr' )
687       WRITE ( 14 )  time_dopr
688
689       CALL wrd_write_string( 'time_dopr_av' )
690       WRITE ( 14 )  time_dopr_av
691
692       CALL wrd_write_string( 'time_dopr_listing' )
693       WRITE ( 14 )  time_dopr_listing
694
695       CALL wrd_write_string( 'time_dopts' )
696       WRITE ( 14 )  time_dopts
697
698       CALL wrd_write_string( 'time_dosp' )
699       WRITE ( 14 )  time_dosp
700
701       CALL wrd_write_string( 'time_dots' )
702       WRITE ( 14 )  time_dots
703
704       CALL wrd_write_string( 'time_radiation' )
705       WRITE ( 14 )  time_radiation
706
707       CALL wrd_write_string( 'time_restart' )
708       WRITE ( 14 )  time_restart
709
710       CALL wrd_write_string( 'time_run_control' )
711       WRITE ( 14 )  time_run_control
712
713       CALL wrd_write_string( 'time_since_reference_point' )
714       WRITE ( 14 )  time_since_reference_point
715
716       CALL wrd_write_string( 'time_virtual_measurement' )
717       WRITE ( 14 )  time_virtual_measurement
718
719       CALL wrd_write_string( 'timestep_scheme' )
720       WRITE ( 14 )  timestep_scheme
721
722       CALL wrd_write_string( 'top_heatflux' )
723       WRITE ( 14 )  top_heatflux
724
725       CALL wrd_write_string( 'top_momentumflux_u' )
726       WRITE ( 14 )  top_momentumflux_u
727
728       CALL wrd_write_string( 'top_momentumflux_v' )
729       WRITE ( 14 )  top_momentumflux_v
730
731       CALL wrd_write_string( 'top_scalarflux' )
732       WRITE ( 14 )  top_scalarflux
733
734       CALL wrd_write_string( 'topography' )
735       WRITE ( 14 )  topography
736
737       CALL wrd_write_string( 'topography_grid_convention' )
738       WRITE ( 14 )  topography_grid_convention
739
740       CALL wrd_write_string( 'tsc' )
741       WRITE ( 14 )  tsc
742
743       CALL wrd_write_string( 'tunnel_height' )
744       WRITE ( 14 )  tunnel_height
745
746       CALL wrd_write_string( 'tunnel_length' )
747       WRITE ( 14 )  tunnel_length
748
749       CALL wrd_write_string( 'tunnel_wall_depth' )
750       WRITE ( 14 )  tunnel_wall_depth
751
752       CALL wrd_write_string( 'tunnel_width_x' )
753       WRITE ( 14 )  tunnel_width_x
754
755       CALL wrd_write_string( 'tunnel_width_y' )
756       WRITE ( 14 )  tunnel_width_y
757
758       CALL wrd_write_string( 'turbulence_closure' )
759       WRITE ( 14 )  turbulence_closure
760
761       CALL wrd_write_string( 'turbulent_inflow' )
762       WRITE ( 14 )  turbulent_inflow
763
764       CALL wrd_write_string( 'u_bulk' )
765       WRITE ( 14 )  u_bulk
766
767       CALL wrd_write_string( 'u_init' )
768       WRITE ( 14 )  u_init
769
770       CALL wrd_write_string( 'u_max' )
771       WRITE ( 14 )  u_max
772
773       CALL wrd_write_string( 'u_max_ijk' )
774       WRITE ( 14 )  u_max_ijk
775
776       CALL wrd_write_string( 'ug' )
777       WRITE ( 14 )  ug
778
779       CALL wrd_write_string( 'ug_surface' )
780       WRITE ( 14 )  ug_surface
781
782       CALL wrd_write_string( 'ug_vertical_gradient' )
783       WRITE ( 14 )  ug_vertical_gradient
784
785       CALL wrd_write_string( 'ug_vertical_gradient_level' )
786       WRITE ( 14 )  ug_vertical_gradient_level
787
788       CALL wrd_write_string( 'ug_vertical_gradient_level_ind' )
789       WRITE ( 14 )  ug_vertical_gradient_level_ind
790
791       CALL wrd_write_string( 'use_surface_fluxes' )
792       WRITE ( 14 )  use_surface_fluxes
793
794       CALL wrd_write_string( 'use_top_fluxes' )
795       WRITE ( 14 )  use_top_fluxes
796
797       CALL wrd_write_string( 'use_ug_for_galilei_tr' )
798       WRITE ( 14 )  use_ug_for_galilei_tr
799
800       CALL wrd_write_string( 'use_upstream_for_tke' )
801       WRITE ( 14 )  use_upstream_for_tke
802
803       CALL wrd_write_string( 'v_bulk' )
804       WRITE ( 14 )  v_bulk
805
806       CALL wrd_write_string( 'v_init' )
807       WRITE ( 14 )  v_init
808
809       CALL wrd_write_string( 'v_max' )
810       WRITE ( 14 )  v_max
811
812       CALL wrd_write_string( 'v_max_ijk' )
813       WRITE ( 14 )  v_max_ijk
814
815       CALL wrd_write_string( 'vg' )
816       WRITE ( 14 )  vg
817
818       CALL wrd_write_string( 'vg_surface' )
819       WRITE ( 14 )  vg_surface
820
821       CALL wrd_write_string( 'vg_vertical_gradient' )
822       WRITE ( 14 ) vg_vertical_gradient
823
824       CALL wrd_write_string( 'vg_vertical_gradient_level' )
825       WRITE ( 14 )  vg_vertical_gradient_level
826
827       CALL wrd_write_string( 'vg_vertical_gradient_level_ind' )
828       WRITE ( 14 )  vg_vertical_gradient_level_ind
829
830       CALL wrd_write_string( 'virtual_flight' )
831       WRITE ( 14 )  virtual_flight
832
833       CALL wrd_write_string( 'vnest_init' )
834       WRITE ( 14 )  vnest_init
835
836       CALL wrd_write_string( 'volume_flow_area' )
837       WRITE ( 14 )  volume_flow_area
838
839       CALL wrd_write_string( 'volume_flow_initial' )
840       WRITE ( 14 )  volume_flow_initial
841
842       CALL wrd_write_string( 'w_max' )
843       WRITE ( 14 )  w_max
844
845       CALL wrd_write_string( 'w_max_ijk' )
846       WRITE ( 14 )  w_max_ijk
847
848       CALL wrd_write_string( 'wall_adjustment' )
849       WRITE ( 14 )  wall_adjustment
850
851       CALL wrd_write_string( 'wall_heatflux' )
852       WRITE ( 14 )  wall_heatflux
853
854       CALL wrd_write_string( 'wall_humidityflux' )
855       WRITE ( 14 )  wall_humidityflux
856
857       CALL wrd_write_string( 'wall_scalarflux' )
858       WRITE ( 14 )  wall_scalarflux
859
860       CALL wrd_write_string( 'y_shift' )
861       WRITE ( 14 )  y_shift
862
863       CALL wrd_write_string( 'z0h_factor' )
864       WRITE ( 14 )  z0h_factor
865
866       CALL wrd_write_string( 'zeta_max' )
867       WRITE ( 14 )  zeta_max
868
869       CALL wrd_write_string( 'zeta_min' )
870       WRITE ( 14 )  zeta_min
871
872       CALL wrd_write_string( 'z_i' )
873       WRITE ( 14 )  z_i
874
875    ELSEIF ( restart_data_format_output == 'mpi' )  THEN
876!
877!--    Write global restart data using MPI-IO
878!--    ATTENTION: Arrays need to be written with routine wrd_mpi_io_global_array!
879       CALL wrd_mpi_io( 'binary_version_global',  binary_version_global )
880       CALL wrd_mpi_io( 'numprocs',  numprocs )
881       CALL wrd_mpi_io( 'nz' , nz )
882       CALL wrd_mpi_io( 'max_pr_user',  max_pr_user )
883       CALL wrd_mpi_io( 'statistic_regions', statistic_regions )
884
885!
886!--    Caution: After changes in the following parameter-list, the version number stored in the
887!--    -------- variable binary_version_global has to be increased. The same changes must also be
888!--             done in the parameter-list in rrd_global.
889       CALL wrd_mpi_io( 'advected_distance_x',  advected_distance_x )
890       CALL wrd_mpi_io( 'advected_distance_y', advected_distance_y )
891       CALL wrd_mpi_io( 'alpha_surface', alpha_surface )
892       CALL wrd_mpi_io( 'average_count_pr', average_count_pr )
893       CALL wrd_mpi_io( 'average_count_sp', average_count_sp )
894       CALL wrd_mpi_io( 'average_count_3d', average_count_3d )
895       CALL wrd_mpi_io( 'bc_e_b', bc_e_b )
896       CALL wrd_mpi_io( 'bc_lr', bc_lr )
897       CALL wrd_mpi_io( 'bc_ns', bc_ns )
898       CALL wrd_mpi_io( 'bc_p_b', bc_p_b )
899       CALL wrd_mpi_io( 'bc_p_t', bc_p_t )
900       CALL wrd_mpi_io( 'bc_pt_b', bc_pt_b )
901       CALL wrd_mpi_io( 'bc_pt_t', bc_pt_t )
902       CALL wrd_mpi_io( 'bc_pt_t_val', bc_pt_t_val )
903       CALL wrd_mpi_io( 'bc_q_b', bc_q_b )
904       CALL wrd_mpi_io( 'bc_q_t', bc_q_t )
905       CALL wrd_mpi_io( 'bc_q_t_val', bc_q_t_val )
906       CALL wrd_mpi_io( 'bc_s_b', bc_s_b )
907       CALL wrd_mpi_io( 'bc_s_t', bc_s_t )
908       CALL wrd_mpi_io( 'bc_uv_b', bc_uv_b )
909       CALL wrd_mpi_io( 'bc_uv_t', bc_uv_t )
910       CALL wrd_mpi_io( 'biometeorology', biometeorology )
911       CALL wrd_mpi_io( 'building_height', building_height )
912       CALL wrd_mpi_io( 'building_length_x', building_length_x )
913       CALL wrd_mpi_io( 'building_length_y', building_length_y )
914       CALL wrd_mpi_io( 'building_wall_left', building_wall_left )
915       CALL wrd_mpi_io( 'building_wall_south', building_wall_south )
916       CALL wrd_mpi_io( 'bulk_cloud_model', bulk_cloud_model )
917       CALL wrd_mpi_io( 'call_psolver_at_all_substeps', call_psolver_at_all_substeps )
918       CALL wrd_mpi_io( 'canyon_height', canyon_height )
919       CALL wrd_mpi_io( 'canyon_wall_left', canyon_wall_left )
920       CALL wrd_mpi_io( 'canyon_wall_south', canyon_wall_south )
921       CALL wrd_mpi_io( 'canyon_width_x',  canyon_width_x )
922       CALL wrd_mpi_io( 'canyon_width_y', canyon_width_y )
923       CALL wrd_mpi_io( 'cfl_factor', cfl_factor )
924       CALL wrd_mpi_io( 'cloud_droplets',  cloud_droplets )
925       CALL wrd_mpi_io( 'collective_wait', collective_wait )
926       CALL wrd_mpi_io( 'conserve_volume_flow', conserve_volume_flow )
927       CALL wrd_mpi_io( 'conserve_volume_flow_mode', conserve_volume_flow_mode )
928       CALL wrd_mpi_io( 'constant_flux_layer', constant_flux_layer )
929       CALL wrd_mpi_io( 'coupling_start_time', coupling_start_time )
930       CALL wrd_mpi_io( 'current_timestep_number', current_timestep_number )
931       CALL wrd_mpi_io( 'cycle_mg', cycle_mg )
932       CALL wrd_mpi_io( 'damp_level_1d', damp_level_1d )
933       CALL wrd_mpi_io( 'dissipation_1d', dissipation_1d )
934       CALL wrd_mpi_io_global_array( 'do2d_xy_time_count', do2d_xy_time_count )
935       CALL wrd_mpi_io_global_array( 'do2d_xz_time_count', do2d_xz_time_count )
936       CALL wrd_mpi_io_global_array( 'do2d_yz_time_count', do2d_yz_time_count )
937       CALL wrd_mpi_io_global_array( 'do3d_time_count', do3d_time_count )
938       CALL wrd_mpi_io( 'dp_external', dp_external )
939       CALL wrd_mpi_io( 'dp_level_b', dp_level_b )
940       CALL wrd_mpi_io( 'dp_smooth', dp_smooth )
941       CALL wrd_mpi_io_global_array( 'dpdxy', dpdxy )
942       CALL wrd_mpi_io( 'dt_3d', dt_3d )
943       CALL wrd_mpi_io( 'dt_pr_1d', dt_pr_1d )
944       CALL wrd_mpi_io( 'dt_run_control_1d', dt_run_control_1d )
945       CALL wrd_mpi_io( 'dx', dx )
946       CALL wrd_mpi_io( 'dy', dy )
947       CALL wrd_mpi_io_global_array( 'dz', dz )
948       CALL wrd_mpi_io( 'dz_max', dz_max )
949       CALL wrd_mpi_io( 'dz_stretch_factor', dz_stretch_factor )
950       CALL wrd_mpi_io_global_array( 'dz_stretch_factor_array', dz_stretch_factor_array )
951       CALL wrd_mpi_io( 'dz_stretch_level', dz_stretch_level )
952       CALL wrd_mpi_io_global_array( 'dz_stretch_level_end', dz_stretch_level_end )
953       CALL wrd_mpi_io_global_array( 'dz_stretch_level_start', dz_stretch_level_start )
954       CALL wrd_mpi_io( 'e_min', e_min )
955       CALL wrd_mpi_io( 'end_time_1d', end_time_1d )
956       CALL wrd_mpi_io( 'fft_method', fft_method )
957       CALL wrd_mpi_io( 'first_call_lpm', first_call_lpm )
958       CALL wrd_mpi_io( 'galilei_transformation', galilei_transformation )
959       CALL wrd_mpi_io( 'gust_module_enabled', gust_module_enabled )
960       CALL wrd_mpi_io_global_array( 'hom', hom )
961       CALL wrd_mpi_io_global_array( 'hom_sum', hom_sum )
962       CALL wrd_mpi_io( 'humidity', humidity )
963       IF ( ALLOCATED( inflow_damping_factor ) )  THEN
964          CALL wrd_mpi_io_global_array( 'inflow_damping_factor', inflow_damping_factor )
965       ENDIF
966       CALL wrd_mpi_io( 'inflow_damping_height', inflow_damping_height )
967       CALL wrd_mpi_io( 'inflow_damping_width', inflow_damping_width )
968       CALL wrd_mpi_io( 'inflow_disturbance_begin', inflow_disturbance_begin )
969       CALL wrd_mpi_io( 'inflow_disturbance_end', inflow_disturbance_end )
970       CALL wrd_mpi_io( 'km_constant', km_constant )
971       CALL wrd_mpi_io( 'large_scale_forcing', large_scale_forcing )
972       CALL wrd_mpi_io( 'large_scale_subsidence', large_scale_subsidence )
973       CALL wrd_mpi_io( 'latitude', latitude )
974       CALL wrd_mpi_io( 'longitude', longitude )
975       CALL wrd_mpi_io( 'loop_optimization', loop_optimization )
976       CALL wrd_mpi_io( 'masking_method', masking_method )
977       IF ( ALLOCATED( mean_inflow_profiles ) )  THEN
978          CALL wrd_mpi_io_global_array( 'mean_inflow_profiles', mean_inflow_profiles )
979       ENDIF
980       CALL wrd_mpi_io( 'mg_cycles', mg_cycles )
981       CALL wrd_mpi_io( 'mg_switch_to_pe0_level', mg_switch_to_pe0_level )
982       CALL wrd_mpi_io( 'mixing_length_1d', mixing_length_1d )
983       CALL wrd_mpi_io( 'momentum_advec', momentum_advec )
984!
985!--    There is no module procedure for CHARACTER arrays
986       DO  i = 1, SIZE( netcdf_precision, 1 )
987          WRITE ( tmp_name, '(A,I2.2)' )  'netcdf_precision_', i
988          CALL wrd_mpi_io( TRIM( tmp_name ), netcdf_precision(i) )
989       ENDDO
990       CALL wrd_mpi_io( 'neutral', neutral )
991       CALL wrd_mpi_io( 'ngsrb', ngsrb )
992       CALL wrd_mpi_io( 'nsor', nsor )
993       CALL wrd_mpi_io( 'nsor_ini', nsor_ini )
994       CALL wrd_mpi_io( 'nudging', nudging )
995       CALL wrd_mpi_io( 'num_leg', num_leg )
996       CALL wrd_mpi_io( 'nx', nx )
997       CALL wrd_mpi_io( 'ny', ny )
998       CALL wrd_mpi_io( 'ocean_mode', ocean_mode )
999       CALL wrd_mpi_io( 'omega', omega )
1000       CALL wrd_mpi_io( 'omega_sor', omega_sor )
1001       CALL wrd_mpi_io( 'origin_date_time', origin_date_time )
1002       CALL wrd_mpi_io( 'output_for_t0', output_for_t0 )
1003       CALL wrd_mpi_io( 'particle_advection', particle_advection )
1004       CALL wrd_mpi_io( 'passive_scalar', passive_scalar )
1005       CALL wrd_mpi_io( 'prandtl_number', prandtl_number )
1006       CALL wrd_mpi_io( 'psolver', psolver )
1007       CALL wrd_mpi_io( 'pt_damping_factor', pt_damping_factor )
1008       CALL wrd_mpi_io( 'pt_damping_width', pt_damping_width )
1009       CALL wrd_mpi_io_global_array( 'pt_init', pt_init )
1010       CALL wrd_mpi_io( 'pt_reference', pt_reference )
1011       CALL wrd_mpi_io( 'pt_surface', pt_surface )
1012       CALL wrd_mpi_io( 'pt_surface_initial_change', pt_surface_initial_change )
1013       CALL wrd_mpi_io_global_array( 'pt_vertical_gradient', pt_vertical_gradient )
1014       CALL wrd_mpi_io_global_array( 'pt_vertical_gradient_level', pt_vertical_gradient_level )
1015       CALL wrd_mpi_io_global_array( 'pt_vertical_gradient_level_ind', pt_vertical_gradient_level_ind )
1016       CALL wrd_mpi_io_global_array( 'q_init', q_init )
1017       CALL wrd_mpi_io( 'q_surface', q_surface )
1018       CALL wrd_mpi_io( 'q_surface_initial_change', q_surface_initial_change )
1019       CALL wrd_mpi_io_global_array( 'q_vertical_gradient', q_vertical_gradient )
1020       CALL wrd_mpi_io_global_array( 'q_vertical_gradient_level', q_vertical_gradient_level )
1021       CALL wrd_mpi_io_global_array( 'q_vertical_gradient_level_ind', q_vertical_gradient_level_ind )
1022       CALL wrd_mpi_io( 'random_generator', random_generator )
1023       CALL wrd_mpi_io( 'random_heatflux', random_heatflux )
1024       CALL wrd_mpi_io( 'rans_mode', rans_mode )
1025       CALL wrd_mpi_io( 'rayleigh_damping_factor', rayleigh_damping_factor )
1026       CALL wrd_mpi_io( 'rayleigh_damping_height', rayleigh_damping_height )
1027       CALL wrd_mpi_io( 'recycling_width', recycling_width )
1028       CALL wrd_mpi_io_global_array( 'ref_state', ref_state )
1029       CALL wrd_mpi_io( 'reference_state', reference_state )
1030       CALL wrd_mpi_io( 'residual_limit', residual_limit )
1031       CALL wrd_mpi_io( 'roughness_length', roughness_length )
1032       CALL wrd_mpi_io( 'run_coupled', run_coupled )
1033       CALL wrd_mpi_io( 'runnr', runnr )
1034       CALL wrd_mpi_io_global_array( 's_init', s_init )
1035       CALL wrd_mpi_io( 's_surface', s_surface )
1036       CALL wrd_mpi_io( 's_surface_initial_change', s_surface_initial_change )
1037       CALL wrd_mpi_io_global_array( 's_vertical_gradient', s_vertical_gradient )
1038       CALL wrd_mpi_io_global_array( 's_vertical_gradient_level', s_vertical_gradient_level )
1039       CALL wrd_mpi_io_global_array( 's_vertical_gradient_level_ind', s_vertical_gradient_level_ind )
1040       CALL wrd_mpi_io( 'scalar_advec', scalar_advec )
1041       CALL wrd_mpi_io( 'simulated_time', simulated_time )
1042       IF ( ALLOCATED( spectrum_x ) )  THEN
1043          CALL wrd_mpi_io( 'spectrum_x', spectrum_x )
1044          CALL wrd_mpi_io( 'spectrum_y', spectrum_y )
1045       ENDIF
1046       CALL wrd_mpi_io( 'spinup_time ', spinup_time )
1047       CALL wrd_mpi_io_global_array( 'subs_vertical_gradient', subs_vertical_gradient )
1048       CALL wrd_mpi_io_global_array( 'subs_vertical_gradient_level', subs_vertical_gradient_level )
1049       CALL wrd_mpi_io_global_array( 'subs_vertical_gradient_level_i', subs_vertical_gradient_level_i )
1050       CALL wrd_mpi_io( 'surface_heatflux', surface_heatflux )
1051       CALL wrd_mpi_io( 'surface_output', surface_output )
1052       CALL wrd_mpi_io( 'surface_pressure', surface_pressure )
1053       CALL wrd_mpi_io( 'surface_scalarflux', surface_scalarflux )
1054       CALL wrd_mpi_io( 'surface_waterflux', surface_waterflux )
1055       CALL wrd_mpi_io( 'syn_turb_gen', syn_turb_gen )
1056       CALL wrd_mpi_io( 'time_coupling', time_coupling )
1057       CALL wrd_mpi_io( 'time_disturb', time_disturb )
1058       CALL wrd_mpi_io( 'time_do2d_xy', time_do2d_xy )
1059       CALL wrd_mpi_io( 'time_do2d_xz', time_do2d_xz )
1060       CALL wrd_mpi_io( 'time_do2d_yz', time_do2d_yz )
1061       CALL wrd_mpi_io( 'time_do3d', time_do3d )
1062       CALL wrd_mpi_io( 'time_do_av', time_do_av )
1063       CALL wrd_mpi_io( 'time_do_sla', time_do_sla )
1064       CALL wrd_mpi_io_global_array( 'time_domask', time_domask )
1065       CALL wrd_mpi_io( 'time_dopr', time_dopr )
1066       CALL wrd_mpi_io( 'time_dopr_av', time_dopr_av )
1067       CALL wrd_mpi_io( 'time_dopr_listing', time_dopr_listing )
1068       CALL wrd_mpi_io( 'time_dopts', time_dopts )
1069       CALL wrd_mpi_io( 'time_dosp', time_dosp )
1070       CALL wrd_mpi_io( 'time_dots', time_dots )
1071       CALL wrd_mpi_io( 'time_radiation', time_radiation )
1072       CALL wrd_mpi_io( 'time_restart', time_restart )
1073       CALL wrd_mpi_io( 'time_run_control', time_run_control )
1074       CALL wrd_mpi_io( 'time_since_reference_point', time_since_reference_point )
1075       CALL wrd_mpi_io( 'time_virtual_measurement', time_virtual_measurement )
1076       CALL wrd_mpi_io( 'timestep_scheme', timestep_scheme )
1077       CALL wrd_mpi_io( 'top_heatflux', top_heatflux )
1078       CALL wrd_mpi_io( 'top_momentumflux_u', top_momentumflux_u )
1079       CALL wrd_mpi_io( 'top_momentumflux_v', top_momentumflux_v )
1080       CALL wrd_mpi_io( 'top_scalarflux', top_scalarflux )
1081       CALL wrd_mpi_io( 'topography', topography )
1082       CALL wrd_mpi_io( 'topography_grid_convention', topography_grid_convention )
1083       CALL wrd_mpi_io_global_array( 'tsc', tsc )
1084       CALL wrd_mpi_io( 'tunnel_height', tunnel_height )
1085       CALL wrd_mpi_io( 'tunnel_length', tunnel_length )
1086       CALL wrd_mpi_io( 'tunnel_wall_depth', tunnel_wall_depth )
1087       CALL wrd_mpi_io( 'tunnel_width_x', tunnel_width_x )
1088       CALL wrd_mpi_io( 'tunnel_width_y', tunnel_width_y )
1089       CALL wrd_mpi_io( 'turbulence_closure', turbulence_closure )
1090       CALL wrd_mpi_io( 'turbulent_inflow', turbulent_inflow )
1091       CALL wrd_mpi_io( 'u_bulk', u_bulk )
1092       CALL wrd_mpi_io_global_array( 'u_init', u_init )
1093       CALL wrd_mpi_io( 'u_max', u_max )
1094       CALL wrd_mpi_io_global_array( 'u_max_ijk', u_max_ijk )
1095       CALL wrd_mpi_io_global_array( 'ug', ug )
1096       CALL wrd_mpi_io( 'ug_surface', ug_surface )
1097       CALL wrd_mpi_io_global_array( 'ug_vertical_gradient', ug_vertical_gradient )
1098       CALL wrd_mpi_io_global_array( 'ug_vertical_gradient_level', ug_vertical_gradient_level )
1099       CALL wrd_mpi_io_global_array( 'ug_vertical_gradient_level_ind', ug_vertical_gradient_level_ind )
1100       CALL wrd_mpi_io( 'use_surface_fluxes', use_surface_fluxes )
1101       CALL wrd_mpi_io( 'use_top_fluxes', use_top_fluxes )
1102       CALL wrd_mpi_io( 'use_ug_for_galilei_tr', use_ug_for_galilei_tr )
1103       CALL wrd_mpi_io( 'use_upstream_for_tke', use_upstream_for_tke )
1104       CALL wrd_mpi_io( 'user_module_enabled', user_module_enabled )
1105       CALL wrd_mpi_io( 'v_bulk', v_bulk )
1106       CALL wrd_mpi_io_global_array( 'v_init', v_init )
1107       CALL wrd_mpi_io( 'v_max', v_max )
1108       CALL wrd_mpi_io_global_array( 'v_max_ijk', v_max_ijk )
1109       CALL wrd_mpi_io_global_array( 'vg', vg )
1110       CALL wrd_mpi_io( 'vg_surface', vg_surface )
1111       CALL wrd_mpi_io_global_array( 'vg_vertical_gradient', vg_vertical_gradient )
1112       CALL wrd_mpi_io_global_array( 'vg_vertical_gradient_level', vg_vertical_gradient_level )
1113       CALL wrd_mpi_io_global_array( 'vg_vertical_gradient_level_ind', vg_vertical_gradient_level_ind )
1114       CALL wrd_mpi_io( 'virtual_flight', virtual_flight )
1115       CALL wrd_mpi_io( 'vnest_init', vnest_init )
1116       CALL wrd_mpi_io_global_array( 'volume_flow_area', volume_flow_area )
1117       CALL wrd_mpi_io_global_array( 'volume_flow_initial', volume_flow_initial )
1118       CALL wrd_mpi_io( 'w_max', w_max )
1119       CALL wrd_mpi_io_global_array( 'w_max_ijk', w_max_ijk )
1120       CALL wrd_mpi_io( 'wall_adjustment', wall_adjustment )
1121       CALL wrd_mpi_io_global_array( 'wall_heatflux', wall_heatflux )
1122       CALL wrd_mpi_io_global_array( 'wall_humidityflux', wall_humidityflux )
1123       CALL wrd_mpi_io_global_array( 'wall_scalarflux', wall_scalarflux )
1124       CALL wrd_mpi_io( 'y_shift', y_shift )
1125       CALL wrd_mpi_io( 'z0h_factor', z0h_factor )
1126       CALL wrd_mpi_io( 'zeta_max', zeta_max )
1127       CALL wrd_mpi_io( 'zeta_min', zeta_min )
1128       CALL wrd_mpi_io_global_array( 'z_i', z_i )
1129
1130    ENDIF
1131
1132!
1133!-- Write restart data of the other modules
1134    CALL module_interface_wrd_global
1135
1136
1137 END SUBROUTINE wrd_global
1138
1139
1140!--------------------------------------------------------------------------------------------------!
1141! Description:
1142! ------------
1143!> Processor specific data of variables and arrays is written out for restarts (binary format).
1144!> This information is written to the file opened by each PE.
1145!--------------------------------------------------------------------------------------------------!
1146
1147
1148 SUBROUTINE wrd_local
1149
1150
1151    CHARACTER(LEN=10) ::  binary_version_local  !<
1152    CHARACTER(LEN=20) ::  tmp_name              !<  temporary variable
1153
1154    INTEGER ::  i                               !<  loop index
1155
1156!
1157!-- Write arrays.
1158    binary_version_local = '4.7'
1159
1160    IF ( TRIM( restart_data_format_output ) == 'fortran_binary' )  THEN
1161!
1162!--    Output in Fortran binary format
1163
1164       CALL wrd_write_string( 'binary_version_local' )
1165       WRITE ( 14 )  binary_version_local
1166
1167       WRITE ( 14 )  numprocs, myid, nxl, nxr, nys, nyn, nzb, nzt
1168
1169!
1170!--    Attention: After changes to the following output commands the version number of the variable
1171!--    ---------- binary_version_local must be changed!
1172!--               Also, the list of arrays to be read in rrd_local must be adjusted accordingly.
1173       CALL wrd_write_string( 'e' )
1174       WRITE ( 14 )  e
1175
1176       IF ( ALLOCATED( e_av ) )  THEN
1177          CALL wrd_write_string( 'e_av' )
1178          WRITE ( 14 )  e_av
1179       ENDIF
1180
1181       CALL wrd_write_string( 'kh' )
1182       WRITE ( 14 )  kh
1183
1184
1185       IF ( ALLOCATED( kh_av ) )  THEN
1186          CALL wrd_write_string( 'kh_av' )
1187          WRITE ( 14 )  kh_av
1188       ENDIF
1189
1190       CALL wrd_write_string( 'km' )
1191       WRITE ( 14 )  km
1192
1193       IF ( ALLOCATED( km_av ) )  THEN
1194          CALL wrd_write_string( 'km_av' )
1195          WRITE ( 14 )  km_av
1196       ENDIF
1197
1198       IF ( ALLOCATED( lpt_av ) )  THEN
1199          CALL wrd_write_string( 'lpt_av' )
1200          WRITE ( 14 )  lpt_av
1201       ENDIF
1202
1203       IF ( ALLOCATED( lwp_av ) )  THEN
1204          CALL wrd_write_string( 'lwp_av' )
1205          WRITE ( 14 )  lwp_av
1206       ENDIF
1207
1208       CALL wrd_write_string( 'p' )
1209       WRITE ( 14 )  p
1210
1211       IF ( ALLOCATED( p_av ) )  THEN
1212          CALL wrd_write_string( 'p_av' )
1213          WRITE ( 14 )  p_av
1214       ENDIF
1215
1216       IF ( ALLOCATED( pc_av ) )  THEN
1217          CALL wrd_write_string( 'pc_av' )
1218          WRITE ( 14 )  pc_av
1219       ENDIF
1220
1221       IF ( ALLOCATED( pr_av ) )  THEN
1222          CALL wrd_write_string( 'pr_av' )
1223          WRITE ( 14 )  pr_av
1224       ENDIF
1225
1226       CALL wrd_write_string( 'pt' )
1227       WRITE ( 14 )  pt
1228
1229       IF ( ALLOCATED( pt_av ) )  THEN
1230          CALL wrd_write_string( 'pt_av' )
1231          WRITE ( 14 )  pt_av
1232       ENDIF
1233
1234       IF ( humidity )  THEN
1235
1236          CALL wrd_write_string( 'q' )
1237          WRITE ( 14 )  q
1238
1239          IF ( ALLOCATED( q_av ) )  THEN
1240             CALL wrd_write_string( 'q_av' )
1241             WRITE ( 14 )  q_av
1242          ENDIF
1243
1244          IF ( cloud_droplets )  THEN
1245
1246             CALL wrd_write_string( 'ql' )
1247             WRITE ( 14 )  ql
1248
1249             IF ( ALLOCATED( ql_av ) )  THEN
1250                CALL wrd_write_string( 'ql_av' )
1251                WRITE ( 14 )  ql_av
1252             ENDIF
1253
1254          ENDIF
1255
1256          IF ( ALLOCATED( qsws_av ) )  THEN
1257             CALL wrd_write_string( 'qsws_av' )
1258             WRITE ( 14 )  qsws_av
1259          ENDIF
1260
1261       ENDIF
1262
1263       IF ( passive_scalar )  THEN
1264
1265          CALL wrd_write_string( 's' )
1266          WRITE ( 14 )  s
1267
1268          IF ( ALLOCATED( s_av ) )  THEN
1269             CALL wrd_write_string( 's_av' )
1270             WRITE ( 14 )  s_av
1271          ENDIF
1272
1273          IF ( ALLOCATED( ssws_av ) )  THEN
1274             CALL wrd_write_string( 'ssws_av' )
1275             WRITE ( 14 )  ssws_av
1276          ENDIF
1277
1278       ENDIF
1279
1280       IF ( ALLOCATED( ql_c_av ) )  THEN
1281          CALL wrd_write_string( 'ql_c_av' )
1282          WRITE ( 14 )  ql_c_av
1283       ENDIF
1284
1285       IF ( ALLOCATED( ql_v_av ) )  THEN
1286          CALL wrd_write_string( 'ql_v_av' )
1287          WRITE ( 14 )  ql_v_av
1288       ENDIF
1289
1290       IF ( ALLOCATED( ql_vp_av ) )  THEN
1291          CALL wrd_write_string( 'ql_vp_av' )
1292          WRITE ( 14 )  ql_vp_av
1293       ENDIF
1294
1295       IF ( ALLOCATED( qv_av ) )  THEN
1296          CALL wrd_write_string( 'qv_av' )
1297          WRITE ( 14 )  qv_av
1298       ENDIF
1299
1300       CALL wrd_write_string( 'random_iv' )
1301       WRITE ( 14 )  random_iv
1302       WRITE ( 14 )  random_iy
1303
1304       IF ( ALLOCATED( seq_random_array ) )  THEN
1305          CALL wrd_write_string( 'seq_random_array' )
1306          WRITE ( 14 )  id_random_array
1307          WRITE ( 14 )  seq_random_array
1308       ENDIF
1309
1310       IF ( ALLOCATED( s_av ) )  THEN
1311          CALL wrd_write_string( 's_av' )
1312          WRITE ( 14 )  s_av
1313       ENDIF
1314
1315       IF ( ALLOCATED( shf_av ) )  THEN
1316          CALL wrd_write_string( 'shf_av' )
1317          WRITE ( 14 )  shf_av
1318       ENDIF
1319
1320       IF ( ALLOCATED( ts_av ) )  THEN
1321          CALL wrd_write_string( 'ts_av' )
1322          WRITE ( 14 ) ts_av
1323       ENDIF
1324
1325       CALL wrd_write_string( 'u' )
1326       WRITE ( 14 )  u
1327
1328       IF ( ALLOCATED( u_av ) )  THEN
1329          CALL wrd_write_string( 'u_av' )
1330          WRITE ( 14 )  u_av
1331       ENDIF
1332
1333       IF ( ALLOCATED( u_m_l ) )  THEN
1334          CALL wrd_write_string( 'u_m_l' )
1335          WRITE ( 14 )  u_m_l
1336       ENDIF
1337
1338       IF ( ALLOCATED( u_m_n ) )  THEN
1339          CALL wrd_write_string( 'u_m_n' )
1340          WRITE ( 14 )  u_m_n
1341       ENDIF
1342
1343       IF ( ALLOCATED( u_m_r ) )  THEN
1344          CALL wrd_write_string( 'u_m_r' )
1345          WRITE ( 14 )  u_m_r
1346       ENDIF
1347
1348       IF ( ALLOCATED( u_m_s ) )  THEN
1349          CALL wrd_write_string( 'u_m_s' )
1350          WRITE ( 14 )  u_m_s
1351       ENDIF
1352
1353       IF ( ALLOCATED( us_av ) )  THEN
1354          CALL wrd_write_string( 'us_av' )
1355          WRITE ( 14 )  us_av
1356       ENDIF
1357
1358       CALL wrd_write_string( 'v' )
1359       WRITE ( 14 )  v
1360
1361       IF ( ALLOCATED( v_av ) )  THEN
1362          CALL wrd_write_string( 'v_av' )
1363          WRITE ( 14 )  v_av
1364       ENDIF
1365
1366       IF ( ALLOCATED( v_m_l  ) )  THEN
1367          CALL wrd_write_string( 'v_m_l' )
1368          WRITE ( 14 )  v_m_l
1369       ENDIF
1370
1371       IF ( ALLOCATED( v_m_n ) )  THEN
1372          CALL wrd_write_string( 'v_m_n' )
1373         WRITE ( 14 )  v_m_n
1374       ENDIF
1375
1376       IF ( ALLOCATED( v_m_r ) )  THEN
1377          CALL wrd_write_string( 'v_m_r' )
1378          WRITE ( 14 )  v_m_r
1379       ENDIF
1380
1381       IF ( ALLOCATED( v_m_s ) )  THEN
1382          CALL wrd_write_string( 'v_m_s' )
1383          WRITE ( 14 )  v_m_s
1384       ENDIF
1385
1386       IF ( humidity )  THEN
1387
1388          CALL wrd_write_string( 'vpt' )
1389          WRITE ( 14 )  vpt
1390
1391          IF ( ALLOCATED( vpt_av ) )  THEN
1392             CALL wrd_write_string( 'vpt_av' )
1393             WRITE ( 14 ) vpt_av
1394          ENDIF
1395
1396       ENDIF
1397
1398       CALL wrd_write_string( 'w' )
1399       WRITE ( 14 )  w
1400
1401       IF ( ALLOCATED( w_av ) )  THEN
1402          CALL wrd_write_string( 'w_av' )
1403          WRITE ( 14 )  w_av
1404       ENDIF
1405
1406       IF ( ALLOCATED( w_m_l ) )  THEN
1407          CALL wrd_write_string( 'w_m_l' )
1408          WRITE ( 14 )  w_m_l
1409       ENDIF
1410
1411       IF ( ALLOCATED( w_m_n ) )  THEN
1412          CALL wrd_write_string( 'w_m_n' )
1413          WRITE ( 14 )  w_m_n
1414       ENDIF
1415
1416       IF ( ALLOCATED( w_m_r ) )  THEN
1417          CALL wrd_write_string( 'w_m_r' )
1418          WRITE ( 14 )  w_m_r
1419       ENDIF
1420
1421       IF ( ALLOCATED( w_m_s ) )  THEN
1422          CALL wrd_write_string( 'w_m_s' )
1423          WRITE ( 14 )  w_m_s
1424       ENDIF
1425
1426       IF ( ALLOCATED( z0_av ) )  THEN
1427          CALL wrd_write_string( 'z0_av' )
1428          WRITE ( 14 )  z0_av
1429       ENDIF
1430
1431      IF ( ALLOCATED( z0h_av ) )  THEN
1432          CALL wrd_write_string( 'z0h_av' )
1433          WRITE ( 14 )  z0h_av
1434       ENDIF
1435
1436       IF ( ALLOCATED( z0q_av ) )  THEN
1437          CALL wrd_write_string( 'z0q_av' )
1438          WRITE ( 14 )  z0q_av
1439       ENDIF
1440
1441       IF ( land_surface .OR. urban_surface )  THEN
1442
1443          IF ( ALLOCATED( ghf_av ) )  THEN
1444             CALL wrd_write_string( 'ghf_av' )
1445             WRITE ( 14 )  ghf_av
1446          ENDIF
1447
1448          IF ( ALLOCATED( r_a_av ) )  THEN
1449             CALL wrd_write_string( 'r_a_av' )
1450             WRITE ( 14 )  r_a_av
1451          ENDIF
1452
1453       ENDIF
1454
1455       IF ( ALLOCATED( tsurf_av ) )  THEN
1456          CALL wrd_write_string( 'tsurf_av' )
1457          WRITE ( 14 )  tsurf_av
1458       ENDIF
1459
1460    ELSEIF ( restart_data_format_output == 'mpi' )  THEN
1461!
1462!--    Write local restart data using MPI-IO
1463!--    Attention: After changes to the following output commands the version number
1464!--    ---------  of the variable binary_version must be changed!
1465!--               Also, the list of arrays to be read in rrd_local must be adjusted accordingly.
1466       CALL wrd_mpi_io( 'e',  e)
1467       IF ( ALLOCATED( e_av ) )  CALL wrd_mpi_io( 'e_av',  e_av)
1468       CALL wrd_mpi_io( 'kh', kh )
1469       IF ( ALLOCATED( kh_av ) )  CALL wrd_mpi_io( 'kh_av', kh_av )
1470       CALL wrd_mpi_io( 'km' , km )
1471       IF ( ALLOCATED( km_av ) )  CALL wrd_mpi_io( 'km_av', km_av )
1472       IF ( ALLOCATED( lpt_av ) )  CALL wrd_mpi_io( 'lpt_av', lpt_av )
1473       IF ( ALLOCATED( lwp_av ) )  CALL wrd_mpi_io( 'lwp_av', lwp_av )
1474       CALL wrd_mpi_io( 'p', p )
1475       IF ( ALLOCATED( p_av ) )  CALL wrd_mpi_io( 'p_av', p_av )
1476       IF ( ALLOCATED( pc_av ) )  CALL wrd_mpi_io( 'pc_av', pc_av )
1477       IF ( ALLOCATED( pr_av ) )  CALL wrd_mpi_io( 'pr_av', pr_av )
1478       CALL wrd_mpi_io( 'pt', pt )
1479       IF ( ALLOCATED( pt_av ) )  CALL wrd_mpi_io( 'pt_av', pt_av )
1480
1481       IF ( humidity )  THEN
1482
1483          CALL wrd_mpi_io( 'q', q )
1484          IF ( ALLOCATED( q_av ) )  CALL wrd_mpi_io( 'q_av', q_av )
1485
1486          IF ( cloud_droplets )  THEN
1487
1488             CALL wrd_mpi_io( 'ql', ql )
1489             IF ( ALLOCATED( ql_av ) )  CALL wrd_mpi_io( 'ql_av', ql_av )
1490
1491          ENDIF
1492
1493          IF ( ALLOCATED( qsws_av ) )  CALL wrd_mpi_io( 'qsws_av', qsws_av )
1494
1495       ENDIF
1496
1497       IF ( passive_scalar )  THEN
1498
1499          CALL wrd_mpi_io( 's', s )
1500          IF ( ALLOCATED( s_av ) )  CALL wrd_mpi_io( 's_av',  s_av )
1501          IF ( ALLOCATED( ssws_av ) )  CALL wrd_mpi_io( 'ssws_av', ssws_av )
1502
1503       ENDIF
1504
1505       IF ( ALLOCATED( ql_c_av ) )  CALL wrd_mpi_io( 'ql_c_av', ql_c_av )
1506       IF ( ALLOCATED( ql_v_av ) )  CALL wrd_mpi_io( 'ql_v_av', ql_v_av )
1507       IF ( ALLOCATED( ql_vp_av ) )  CALL wrd_mpi_io( 'ql_vp_av', ql_vp_av )
1508       IF ( ALLOCATED( qv_av ) )  CALL wrd_mpi_io( 'qv_av', qv_av )
1509!
1510!--    Only PE0 writes random_iv and random_iy to restart file.
1511!--    ATTENTION: If one value for every PE is required, the general approach of PE indendent
1512!--    restart will be lost. That means that in general the parallel random number generator
1513!--    in random_generatot_parallel_mod should be used!
1514       CALL wrd_mpi_io_global_array( 'random_iv', random_iv )
1515       CALL wrd_mpi_io( 'random_iy', random_iy )
1516
1517       IF ( ALLOCATED( seq_random_array ) )  THEN
1518          CALL wrd_mpi_io( 'id_random_array', id_random_array )
1519          DO  i = 1, SIZE( seq_random_array, 1 )
1520             WRITE( tmp_name, '(A,I2.2)' )  'seq_random_array', i
1521             CALL wrd_mpi_io( TRIM( tmp_name ), seq_random_array(i,:,:) )
1522          ENDDO
1523       ENDIF
1524       IF ( ALLOCATED( s_av ) )  CALL wrd_mpi_io( 's_av', s_av )
1525       IF ( ALLOCATED( shf_av ) )  CALL wrd_mpi_io( 'shf_av', shf_av )
1526       IF ( ALLOCATED( ts_av ) )  CALL wrd_mpi_io( 'ts_av', ts_av )
1527       CALL wrd_mpi_io( 'u', u)
1528       IF ( ALLOCATED( u_av ) )  CALL wrd_mpi_io( 'u_av', u_av )
1529       IF ( ALLOCATED( u_m_l ) )  CALL wrd_mpi_io( 'u_m_l', u_m_l )
1530       IF ( ALLOCATED( u_m_n ) )  CALL wrd_mpi_io( 'u_m_n', u_m_n )
1531       IF ( ALLOCATED( u_m_r ) )  CALL wrd_mpi_io( 'u_m_r', u_m_r )
1532       IF ( ALLOCATED( u_m_s ) )  CALL wrd_mpi_io( 'u_m_s', u_m_s )
1533       IF ( ALLOCATED( us_av ) )  CALL wrd_mpi_io( 'us_av', us_av )
1534       CALL wrd_mpi_io( 'v', v )
1535       IF ( ALLOCATED( v_av ) )  CALL wrd_mpi_io( 'v_av', v_av )
1536       IF ( ALLOCATED( v_m_l ) )  CALL wrd_mpi_io( 'v_m_l', v_m_l )
1537       IF ( ALLOCATED( v_m_n ) )  CALL wrd_mpi_io( 'v_m_n', v_m_n )
1538       IF ( ALLOCATED( v_m_r ) )  CALL wrd_mpi_io( 'v_m_r', v_m_r )
1539       IF ( ALLOCATED( v_m_s ) )  CALL wrd_mpi_io( 'v_m_s', v_m_s )
1540       IF ( humidity )  THEN
1541          CALL wrd_mpi_io( 'vpt',  vpt )
1542          IF ( ALLOCATED( vpt_av ) )  CALL wrd_mpi_io( 'vpt_av', vpt_av )
1543       ENDIF
1544       CALL wrd_mpi_io( 'w', w)
1545       IF ( ALLOCATED( w_av ) )  CALL wrd_mpi_io( 'w_av', w_av )
1546       IF ( ALLOCATED( w_m_l ) )  CALL wrd_mpi_io( 'w_m_l', w_m_l )
1547       IF ( ALLOCATED( w_m_n ) )  CALL wrd_mpi_io( 'w_m_n', w_m_n )
1548       IF ( ALLOCATED( w_m_r ) )  CALL wrd_mpi_io( 'w_m_r', w_m_r )
1549       IF ( ALLOCATED( w_m_s ) )  CALL wrd_mpi_io( 'w_m_s', w_m_s )
1550       IF ( ALLOCATED( z0_av ) )  CALL wrd_mpi_io( 'z0_av', z0_av )
1551       IF ( ALLOCATED( z0h_av ) )  CALL wrd_mpi_io( 'z0h_av', z0h_av )
1552       IF ( ALLOCATED( z0q_av ) )  CALL wrd_mpi_io( 'z0q_av', z0q_av )
1553       IF ( land_surface  .OR.  urban_surface )  THEN
1554          IF ( ALLOCATED( ghf_av ) )  CALL wrd_mpi_io( 'ghf_av', ghf_av )
1555          IF ( ALLOCATED( r_a_av ) )  CALL wrd_mpi_io( 'r_a_av', r_a_av )
1556       ENDIF
1557       IF ( ALLOCATED( tsurf_av ) )  CALL wrd_mpi_io( 'tsurf_av', tsurf_av )
1558
1559    ENDIF
1560
1561    CALL surface_wrd_local
1562
1563!
1564!-- Write restart data of other modules
1565    CALL module_interface_wrd_local
1566
1567!
1568!-- Write end label
1569    IF (  restart_data_format_output == 'fortran_binary' )  THEN
1570       CALL wrd_write_string( '*** end ***' )
1571    ENDIF
1572
1573 END SUBROUTINE wrd_local
1574
1575
1576 END MODULE write_restart_data_mod
Note: See TracBrowser for help on using the repository browser.