Task 13408060

Name	hadcm3n_u06f_1980_40_007458880_1
Workunit	7656383
Created	22 Sep 2011, 16:47:18 UTC
Sent	25 Sep 2011, 18:05:27 UTC
Report deadline	26 Dec 2011, 1:32:38 UTC
Received	25 Nov 2011, 15:48:59 UTC
Server state	Over
Outcome	Computation error
Client state	Compute error
Exit status	193 (0x000000C1) EXIT_SIGNAL
Computer ID	1171724
Run time	24 days 15 hours 7 min 59 sec
CPU time	20 days 4 hours 23 min 46 sec
Validate state	Invalid
Credit	9,331.20
Device peak FLOPS	2.17 GFLOPS
Application version	UK Met Office Coupled Model Full Resolution Ocean v6.07 windows_intelx86
Stderr	<core_client_version>6.12.34</core_client_version> <![CDATA[ <message> - exit code 193 (0xc1) </message> <stderr_txt> CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3980, iMonCtr=1 Model crash detected, will try to restart... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=4092, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3980, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=2968, iMonCtr=1 Model crash detected, will try to restart... Suspended CPDN Monitor - Suspend request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3796, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3784, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3536, iMonCtr=1 Model crash detected, will try to restart... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=1224, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3744, iMonCtr=1 Model crash detected, will try to restart... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3744, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... 10:14:04 (3460): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... 10:14:06 (3460): No heartbeat from core client for 30 sec - exiting 10:14:07 (3460): No heartbeat from core client for 30 sec - exiting 10:14:08 (3460): No heartbeat from core client for 30 sec - exiting 10:14:09 (3460): No heartbeat from core client for 30 sec - exiting 10:14:10 (3460): No heartbeat from core client for 30 sec - exiting 10:14:11 (3460): No heartbeat from core client for 30 sec - exiting 10:14:12 (3460): No heartbeat from core client for 30 sec - exiting 10:14:13 (3460): No heartbeat from core client for 30 sec - exiting 10:14:14 (3460): No heartbeat from core client for 30 sec - exiting 10:14:16 (3460): No heartbeat from core client for 30 sec - exiting Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=1268, iMonCtr=1 Model crash detected, will try to restart... 11:32:24 (3832): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... 11:32:25 (3832): No heartbeat from core client for 30 sec - exiting 11:32:26 (3832): No heartbeat from core client for 30 sec - exiting 11:32:27 (3832): No heartbeat from core client for 30 sec - exiting 11:32:28 (3832): No heartbeat from core client for 30 sec - exiting 11:32:29 (3832): No heartbeat from core client for 30 sec - exiting 11:32:30 (3832): No heartbeat from core client for 30 sec - exiting 11:32:31 (3832): No heartbeat from core client for 30 sec - exiting 11:32:33 (3832): No heartbeat from core client for 30 sec - exiting 11:32:34 (3832): No heartbeat from core client for 30 sec - exiting 11:32:35 (3832): No heartbeat from core client for 30 sec - exiting 11:33:52 (1376): Can't acquire lockfile (32) - waiting 35s 11:34:11 (4336): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... 11:34:27 (1376): Can't set up shared mem: -1. Will run in standalone mode. 11:34:29 (4628): Can't set up shared mem: -1. Will run in standalone mode. 11:34:45 (3584): Can't acquire lockfile (32) - waiting 35s 11:35:20 (3584): Can't acquire lockfile (32) - exiting 11:35:20 (3584): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 11:45:22 (3656): Can't acquire lockfile (32) - waiting 35s 11:45:57 (3656): Can't acquire lockfile (32) - exiting 11:45:57 (3656): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 11:55:58 (3128): Can't acquire lockfile (32) - waiting 35s 11:56:33 (3128): Can't acquire lockfile (32) - exiting 11:56:33 (3128): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:06:34 (440): Can't acquire lockfile (32) - waiting 35s 12:07:09 (440): Can't acquire lockfile (32) - exiting 12:07:09 (440): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:17:10 (3816): Can't acquire lockfile (32) - waiting 35s 12:17:45 (3816): Can't acquire lockfile (32) - exiting 12:17:45 (3816): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:27:45 (4780): Can't acquire lockfile (32) - waiting 35s 12:28:20 (4780): Can't acquire lockfile (32) - exiting 12:28:20 (4780): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:38:21 (3044): Can't acquire lockfile (32) - waiting 35s 12:38:56 (3044): Can't acquire lockfile (32) - exiting 12:38:56 (3044): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:48:57 (5088): Can't acquire lockfile (32) - waiting 35s 12:49:32 (5088): Can't acquire lockfile (32) - exiting 12:49:32 (5088): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 12:56:40 (2196): Can't acquire lockfile (32) - waiting 35s 12:57:15 (2196): Can't acquire lockfile (32) - exiting 12:57:15 (2196): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:07:17 (2688): Can't acquire lockfile (32) - waiting 35s 13:07:52 (2688): Can't acquire lockfile (32) - exiting 13:07:52 (2688): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:18:29 (1608): Can't acquire lockfile (32) - waiting 35s 13:19:04 (1608): Can't acquire lockfile (32) - exiting 13:19:04 (1608): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:29:42 (3972): Can't acquire lockfile (32) - waiting 35s 13:30:17 (3972): Can't acquire lockfile (32) - exiting 13:30:17 (3972): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:40:53 (1076): Can't acquire lockfile (32) - waiting 35s 13:41:28 (1076): Can't acquire lockfile (32) - exiting 13:41:28 (1076): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 13:52:06 (3816): Can't acquire lockfile (32) - waiting 35s 13:52:41 (3816): Can't acquire lockfile (32) - exiting 13:52:41 (3816): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:03:18 (3984): Can't acquire lockfile (32) - waiting 35s 14:03:53 (3984): Can't acquire lockfile (32) - exiting 14:03:53 (3984): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:14:31 (4084): Can't acquire lockfile (32) - waiting 35s 14:15:06 (4084): Can't acquire lockfile (32) - exiting 14:15:06 (4084): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:17:42 (1676): Can't acquire lockfile (32) - waiting 35s 14:18:17 (1676): Can't acquire lockfile (32) - exiting 14:18:17 (1676): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:29:11 (3208): Can't acquire lockfile (32) - waiting 35s 14:29:46 (3208): Can't acquire lockfile (32) - exiting 14:29:46 (3208): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:39:46 (3216): Can't acquire lockfile (32) - waiting 35s 14:40:21 (3216): Can't acquire lockfile (32) - exiting 14:40:21 (3216): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 14:51:01 (4500): Can't acquire lockfile (32) - waiting 35s 14:51:36 (4500): Can't acquire lockfile (32) - exiting 14:51:36 (4500): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:02:13 (2152): Can't acquire lockfile (32) - waiting 35s 15:02:48 (2152): Can't acquire lockfile (32) - exiting 15:02:48 (2152): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:13:26 (2696): Can't acquire lockfile (32) - waiting 35s 15:14:01 (2696): Can't acquire lockfile (32) - exiting 15:14:01 (2696): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:24:39 (3132): Can't acquire lockfile (32) - waiting 35s 15:25:14 (3132): Can't acquire lockfile (32) - exiting 15:25:14 (3132): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:36:13 (3868): Can't acquire lockfile (32) - waiting 35s 15:36:48 (3868): Can't acquire lockfile (32) - exiting 15:36:48 (3868): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:46:50 (4284): Can't acquire lockfile (32) - waiting 35s 15:47:25 (4284): Can't acquire lockfile (32) - exiting 15:47:25 (4284): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 15:57:26 (2464): Can't acquire lockfile (32) - waiting 35s 15:58:01 (2464): Can't acquire lockfile (32) - exiting 15:58:01 (2464): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:08:02 (3984): Can't acquire lockfile (32) - waiting 35s 16:08:37 (3984): Can't acquire lockfile (32) - exiting 16:08:37 (3984): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:18:37 (5000): Can't acquire lockfile (32) - waiting 35s 16:19:12 (5000): Can't acquire lockfile (32) - exiting 16:19:12 (5000): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:29:13 (1268): Can't acquire lockfile (32) - waiting 35s 16:29:48 (1268): Can't acquire lockfile (32) - exiting 16:29:48 (1268): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 16:39:48 (440): Can't acquire lockfile (32) - waiting 35s 16:40:23 (440): Can't acquire lockfile (32) - exiting 16:40:23 (440): Error: Der Prozess kann nicht auf die Datei zugreifen, da sie von einem anderen Prozess verwendet wird. (0x20) 17:13:35 (1412): No heartbeat from core client for 30 sec - exiting 17:13:36 (1412): No heartbeat from core client for 30 sec - exiting 17:13:37 (1412): No heartbeat from core client for 30 sec - exiting 17:13:38 (1412): No heartbeat from core client for 30 sec - exiting 17:13:39 (1412): No heartbeat from core client for 30 sec - exiting 17:13:40 (1412): No heartbeat from core client for 30 sec - exiting 17:13:41 (1412): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... 17:13:42 (1412): No heartbeat from core client for 30 sec - exiting 17:13:43 (1412): No heartbeat from core client for 30 sec - exiting 17:13:44 (1412): No heartbeat from core client for 30 sec - exiting CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... 10:40:50 (2060): No heartbeat from core client for 30 sec - exiting 10:40:51 (2060): No heartbeat from core client for 30 sec - exiting 10:40:52 (2060): No heartbeat from core client for 30 sec - exiting 10:40:53 (2060): No heartbeat from core client for 30 sec - exiting 10:40:54 (2060): No heartbeat from core client for 30 sec - exiting 10:40:55 (2060): No heartbeat from core client for 30 sec - exiting 10:40:56 (2060): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... Controller:: CPDN process is not running, exiting, bRetVal = 1, checkPID=0, selfPID=3760, iMonCtr=1 Model crash detected, will try to restart... CPDN Monitor - Quit request from BOINC... Suspended CPDN Monitor - Suspend request from BOINC... CPDN Monitor - Quit request from BOINC... CPDN Monitor - Quit request from BOINC... 19:26:59 (3412): No heartbeat from core client for 30 sec - exiting CPDN Monitor - No 'heartbeat' from BOINC... Signal 11 received, exiting... Called boinc_finish </stderr_txt> ]]>

Latest Trickles Received
Time Sent (UTC)	Host ID	Result ID	Result Name	Timestep	CPU Time (sec)	Average (sec/TS)
25 Nov 2011 14:52:31	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	777,600	1,743,817	2.2426
24 Nov 2011 09:21:45	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	751,680	1,688,762	2.2467
22 Nov 2011 15:50:41	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	725,760	1,631,718	2.2483
21 Nov 2011 10:08:53	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	699,840	1,575,112	2.2507
19 Nov 2011 22:10:15	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	673,920	1,520,197	2.2558
18 Nov 2011 13:10:22	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	648,000	1,481,938	2.2869
15 Nov 2011 18:23:42	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	622,080	1,426,181	2.2926
15 Nov 2011 18:23:42	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	596,160	1,373,042	2.3031
15 Nov 2011 18:23:42	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	570,240	1,318,501	2.3122
15 Nov 2011 18:23:42	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	544,320	1,261,046	2.3167
09 Nov 2011 19:40:47	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	518,400	1,199,877	2.3146
08 Nov 2011 11:11:18	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	492,480	1,139,797	2.3144
06 Nov 2011 18:42:36	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	466,560	1,080,011	2.3148
05 Nov 2011 14:26:33	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	440,640	1,020,859	2.3168
03 Nov 2011 11:46:09	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	414,720	960,716	2.3165
01 Nov 2011 20:25:45	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	388,800	899,730	2.3141
31 Oct 2011 19:42:27	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	362,880	838,703	2.3112
31 Oct 2011 18:41:25	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	336,960	778,373	2.3100
31 Oct 2011 17:15:30	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	311,040	716,970	2.3051
31 Oct 2011 15:55:37	1171724	13408060	hadcm3n_u06f_1980_40_007458880_1	285,120	656,493	2.3025