2008-07-02 13:10:55 [ndbd] INFO -- Angel pid: 3160 ndb pid: 3161 2008-07-02 13:10:55 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-02 13:10:55 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-02 13:10:55 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-02 13:10:55 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-02 13:10:55 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-02 13:17:44 [ndbd] INFO -- Shutdown initiated 2008-07-02 13:17:45 [ndbd] INFO -- Shutdown completed - exiting 2008-07-02 13:17:45 [ndbd] INFO -- Angel shutting down 2008-07-02 13:17:45 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-02 13:18:52 [ndbd] INFO -- Angel pid: 3285 ndb pid: 3286 2008-07-02 13:18:52 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-02 13:18:52 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-02 13:18:52 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-02 13:18:53 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-02 13:18:53 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1037 rows applied RESTORE table: 0 1011 rows applied RESTORE table: 1 0 rows applied RESTORE table: 1 0 rows applied m_active_buckets.set(0) alloc_chunk(33 16) - m_copyReason: 3 m_waiting: 0 c_copyGCISlave: sender{Data, Ref} 2 f60002 reason: 3 nextWord: 0 file[0] status: 2 type: 1 reqStatus: 0 file1: 2 1 4 File: /var/lib/mysql-cluster/ndb_2_fs/D1/DBDIH/P0.sysfile 0xa695e0 Last request: [ Request: file: 0xa6b8b0 userRef: 0x00f60002 userData: 1 theFilePointer: 11 action: writeSync ] theReportTo [ theSize: 512 theReadIndex: 215 theWriteIndex: 215 ] theMemoryChannelPtr[ theSize: 512 theReadIndex: 113 theWriteIndex: 113 ] All files: 0 (0xa55e70): CLOSED 1 (0xa57fd0): CLOSED 2 (0xa5a230): CLOSED 3 (0xa5c500): OPEN 4 (0xa5e7d0): OPEN 5 (0xa60aa0): OPEN 6 (0xa62d70): OPEN 7 (0xa65040): CLOSED 8 (0xa67310): CLOSED 9 (0xa695e0): OPEN 10 (0xa6b8b0): OPEN 11 (0xa6df60): OPEN 12 (0xa70170): OPEN 13 (0xa72440): OPEN 14 (0xa74710): OPEN 15 (0xa769e0): CLOSED 16 (0xa78cb0): CLOSED 17 (0xa7af80): CLOSED 18 (0xa7d250): CLOSED 19 (0xa7f520): CLOSED 20 (0xa817f0): CLOSED 21 (0xa83ac0): CLOSED 22 (0xa85d90): CLOSED 23 (0xa88060): CLOSED 24 (0xa8a330): CLOSED 25 (0xa8c600): CLOSED 26 (0xa8e8d0): CLOSED File: /var/lib/mysql-cluster/ndb_2_fs/D2/DBDIH/P0.sysfile 0xa6b8b0 Current request: [ Request: file: 0xa6b8b0 userRef: 0x00f60002 userData: 1 theFilePointer: 11 action: writeSync ] Last request: [ Request: file: 0xa70170 userRef: 0x00f70002 userData: 48 theFilePointer: 59 action: sync ] theReportTo [ theSize: 512 theReadIndex: 215 theWriteIndex: 215 ] theMemoryChannelPtr[ theSize: 512 theReadIndex: 113 theWriteIndex: 113 ] All files: 0 (0xa55e70): CLOSED 1 (0xa57fd0): CLOSED 2 (0xa5a230): CLOSED 3 (0xa5c500): OPEN 4 (0xa5e7d0): OPEN 5 (0xa60aa0): OPEN 6 (0xa62d70): OPEN 7 (0xa65040): CLOSED 8 (0xa67310): CLOSED 9 (0xa695e0): OPEN 10 (0xa6b8b0): OPEN 11 (0xa6df60): OPEN 12 (0xa70170): OPEN 13 (0xa72440): OPEN 14 (0xa74710): OPEN 15 (0xa769e0): CLOSED 16 (0xa78cb0): CLOSED 17 (0xa7af80): CLOSED 18 (0xa7d250): CLOSED 19 (0xa7f520): CLOSED 20 (0xa817f0): CLOSED 21 (0xa83ac0): CLOSED 22 (0xa85d90): CLOSED 23 (0xa88060): CLOSED 24 (0xa8a330): CLOSED 25 (0xa8c600): CLOSED 26 (0xa8e8d0): CLOSED c_COPY_GCIREQ_Counter = [SignalCounter: m_count=1 0000000000000004] c_COPY_TABREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_CREATE_FRAGREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_DIH_SWITCH_REPLICA_REQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_EMPTY_LCP_REQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_END_TOREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_GCP_COMMIT_Counter = [SignalCounter: m_count=0 0000000000000000] c_GCP_PREPARE_Counter = [SignalCounter: m_count=0 0000000000000000] c_GCP_SAVEREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_INCL_NODEREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_MASTER_GCPREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_MASTER_LCPREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_START_INFOREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_START_RECREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_START_TOREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_STOP_ME_REQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_TC_CLOPSIZEREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_TCGETOPSIZEREQ_Counter = [SignalCounter: m_count=0 0000000000000000] c_UPDATE_TOREQ_Counter = [SignalCounter: m_count=0 0000000000000000] 2008-07-03 22:39:39 [ndbd] INFO -- Node 2 killed this node because GCP stop was detected 2008-07-03 22:39:39 [ndbd] INFO -- NDBCNTR (Line: 235) 0x0000000a 2008-07-03 22:39:39 [ndbd] INFO -- Error handler shutting down system 2008-07-03 22:39:42 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-03 22:39:42 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Caused by error 2303: 'System error, node killed during node restart by other node(Internal error, programming error or missing error message, please report a bug). Temporary error, restart node'. 2008-07-04 00:38:47 [ndbd] INFO -- Angel pid: 3683 ndb pid: 3684 2008-07-04 00:38:47 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 00:38:47 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 00:38:47 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 00:38:48 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 00:38:48 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(2495 16) - 2008-07-04 00:41:03 [ndbd] INFO -- Shutdown initiated 2008-07-04 00:41:03 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 00:41:03 [ndbd] INFO -- Angel shutting down 2008-07-04 00:41:03 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 00:42:52 [ndbd] INFO -- Angel pid: 3722 ndb pid: 3723 2008-07-04 00:42:52 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 00:42:52 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 00:42:52 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 00:42:52 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 00:42:52 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) 2008-07-04 00:42:57 [ndbd] INFO -- Error opening DIH schema files for table: 10 2008-07-04 00:42:57 [ndbd] INFO -- DBDIH (Line: 9509) 0x0000000a 2008-07-04 00:42:57 [ndbd] INFO -- Error handler startup shutting down system 2008-07-04 00:42:58 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-04 00:42:58 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-04 00:42:58 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2815: 'File not found(Ndbd file system inconsistency error, please report a bug). Ndbd file system error, restart node initial'. 2008-07-04 00:44:19 [ndbd] INFO -- Angel pid: 3785 ndb pid: 3786 2008-07-04 00:44:19 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 00:44:19 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 00:44:19 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 00:44:20 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 00:44:20 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) 2008-07-04 00:44:24 [ndbd] INFO -- Error opening DIH schema files for table: 10 2008-07-04 00:44:24 [ndbd] INFO -- DBDIH (Line: 9509) 0x0000000a 2008-07-04 00:44:24 [ndbd] INFO -- Error handler startup shutting down system 2008-07-04 00:44:25 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-04 00:44:25 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-04 00:44:25 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2815: 'File not found(Ndbd file system inconsistency error, please report a bug). Ndbd file system error, restart node initial'. 2008-07-04 00:45:10 [ndbd] INFO -- Angel pid: 3823 ndb pid: 3824 2008-07-04 00:45:10 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 00:45:10 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 00:45:10 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 00:45:10 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 00:45:10 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-04 10:03:10 [ndbd] INFO -- Shutdown initiated 2008-07-04 10:03:10 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 10:03:10 [ndbd] INFO -- Angel shutting down 2008-07-04 10:03:10 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 10:37:13 [ndbd] INFO -- Angel pid: 4042 ndb pid: 4043 2008-07-04 10:37:13 [ndbd] INFO -- /home/backups 2008-07-04 10:37:13 [ndbd] INFO -- BackupDataDir 2008-07-04 10:37:13 [ndbd] INFO -- Error handler shutting down system 2008-07-04 10:37:13 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-04 10:37:13 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 0. Caused by error 2805: 'Illegal file system path(Configuration error). Permanent error, external action needed'. 2008-07-04 10:37:32 [ndbd] INFO -- Angel pid: 4048 ndb pid: 4049 2008-07-04 10:37:32 [ndbd] INFO -- /home/backups 2008-07-04 10:37:32 [ndbd] INFO -- BackupDataDir 2008-07-04 10:37:32 [ndbd] INFO -- Error handler shutting down system 2008-07-04 10:37:32 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-04 10:37:32 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 0. Caused by error 2805: 'Illegal file system path(Configuration error). Permanent error, external action needed'. 2008-07-04 10:37:51 [ndbd] INFO -- Angel pid: 4064 ndb pid: 4065 2008-07-04 10:37:51 [ndbd] INFO -- /home/backups 2008-07-04 10:37:51 [ndbd] INFO -- BackupDataDir 2008-07-04 10:37:51 [ndbd] INFO -- Error handler shutting down system 2008-07-04 10:37:51 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-04 10:37:51 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 0. Caused by error 2805: 'Illegal file system path(Configuration error). Permanent error, external action needed'. 2008-07-04 10:38:27 [ndbd] INFO -- Angel pid: 4074 ndb pid: 4075 2008-07-04 10:38:27 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 10:38:27 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 10:38:27 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 10:38:28 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 10:38:28 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) 2008-07-04 10:40:14 [ndbd] INFO -- Shutdown initiated 2008-07-04 10:40:15 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 10:40:15 [ndbd] INFO -- Angel shutting down 2008-07-04 10:40:15 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 10:40:26 [ndbd] INFO -- Angel pid: 4111 ndb pid: 4112 2008-07-04 10:40:26 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 10:40:26 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 10:40:26 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 10:40:26 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 10:40:26 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-04 11:45:04 [ndbd] INFO -- Shutdown initiated 2008-07-04 11:45:04 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 11:45:04 [ndbd] INFO -- Angel shutting down 2008-07-04 11:45:04 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 11:45:20 [ndbd] INFO -- Angel pid: 4155 ndb pid: 4156 2008-07-04 11:45:20 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 11:45:20 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 11:45:20 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 11:45:20 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 11:45:20 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1065 rows applied RESTORE table: 0 1038 rows applied RESTORE table: 1 53 rows applied RESTORE table: 1 44 rows applied RESTORE table: 2 31 rows applied RESTORE table: 2 25 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied m_active_buckets.set(0) alloc_chunk(63903 16) - 2008-07-04 12:16:34 [ndbd] INFO -- Shutdown initiated 2008-07-04 12:16:35 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 12:16:35 [ndbd] INFO -- Angel shutting down 2008-07-04 12:16:35 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 12:17:15 [ndbd] INFO -- Angel pid: 4197 ndb pid: 4198 2008-07-04 12:17:15 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 12:17:15 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 12:17:15 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 12:17:15 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 12:17:15 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1066 rows applied RESTORE table: 0 1038 rows applied RESTORE table: 1 53 rows applied RESTORE table: 1 46 rows applied RESTORE table: 2 32 rows applied RESTORE table: 2 25 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied m_active_buckets.set(0) alloc_chunk(63903 16) - 2008-07-04 12:32:16 [ndbd] INFO -- Shutdown initiated 2008-07-04 12:32:17 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 12:32:17 [ndbd] INFO -- Angel shutting down 2008-07-04 12:32:17 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 12:34:12 [ndbd] INFO -- Angel pid: 4235 ndb pid: 4236 2008-07-04 12:34:12 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 12:34:12 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 12:34:12 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 12:34:12 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 12:34:12 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1066 rows applied RESTORE table: 0 1038 rows applied RESTORE table: 1 53 rows applied RESTORE table: 1 46 rows applied RESTORE table: 2 32 rows applied RESTORE table: 2 25 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied m_active_buckets.set(0) alloc_chunk(64081 16) - 2008-07-04 13:10:03 [ndbd] INFO -- Shutdown initiated 2008-07-04 13:10:04 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 13:10:04 [ndbd] INFO -- Angel shutting down 2008-07-04 13:10:04 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 13:42:06 [ndbd] INFO -- Angel pid: 4783 ndb pid: 4784 2008-07-04 13:42:06 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 13:42:06 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 13:42:06 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 13:42:07 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 13:42:07 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1069 rows applied RESTORE table: 0 1043 rows applied RESTORE table: 1 60 rows applied RESTORE table: 1 51 rows applied RESTORE table: 2 36 rows applied RESTORE table: 2 32 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied records: 16 len: 428 left: 876 records: 16 len: 428 left: 876 records: 16 len: 428 left: 876 records: 16 len: 428 left: 876 records: 16 len: 428 left: 876 records: 16 len: 8e0 left: 568 records: 16 len: e20 left: 2888 records: 16 len: 978 left: 132 records: 16 len: 4ac left: 1056 RESTORE table: 145 44071 rows applied records: 16 len: 72c left: 1800 records: 16 len: 700 left: 956 records: 16 len: 130 left: 104 records: 16 len: a4c left: 272 records: 16 len: fcc left: 2776 records: 16 len: a30 left: 1696 records: 16 len: b10 left: 756 RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied records: 16 len: 20 left: 12 records: 16 len: 20 left: 12 records: 16 len: 20 left: 12 RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied records: 16 len: 40 left: 52 records: 16 len: 40 left: 52 RESTORE table: 185 753784 rows applied records: 16 len: 40 left: 52 records: 16 len: 40 left: 52 RESTORE table: 185 754577 rows applied 2008-07-04 13:44:42 [ndbd] WARNING -- Ndb kernel is stuck in: Job Handling 2008-07-04 13:44:42 [ndbd] INFO -- Watchdog: User time: 4792 System time: 318 RESTORE table: 192 24 rows applied 2008-07-04 13:44:42 [ndbd] INFO -- Watchdog: User time: 4792 System time: 318 2008-07-04 13:44:42 [ndbd] WARNING -- Watchdog: Warning overslept 264 ms, expected 100 ms. RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied RESTORE table: 237 110 rows applied RESTORE table: 237 115 rows applied RESTORE table: 240 3546 rows applied RESTORE table: 240 3371 rows applied RESTORE table: 243 4 rows applied RESTORE table: 243 3 rows applied RESTORE table: 244 0 rows applied RESTORE table: 244 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 249 2265 rows applied RESTORE table: 249 2158 rows applied RESTORE table: 251 0 rows applied RESTORE table: 251 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 256 561 rows applied RESTORE table: 256 568 rows applied RESTORE table: 258 7254 rows applied RESTORE table: 258 7180 rows applied RESTORE table: 261 7290 rows applied RESTORE table: 261 7144 rows applied RESTORE table: 262 2 rows applied RESTORE table: 262 4 rows applied RESTORE table: 265 21385 rows applied RESTORE table: 265 21195 rows applied 2008-07-04 13:44:55 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-04 13:49:49 [ndbd] INFO -- Angel pid: 4823 ndb pid: 4824 2008-07-04 13:49:49 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 13:49:49 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 13:49:49 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 13:49:49 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 13:49:49 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1069 rows applied RESTORE table: 0 1043 rows applied RESTORE table: 1 60 rows applied RESTORE table: 1 51 rows applied RESTORE table: 2 36 rows applied RESTORE table: 2 32 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied RESTORE table: 237 110 rows applied RESTORE table: 237 115 rows applied RESTORE table: 240 3546 rows applied RESTORE table: 240 3371 rows applied RESTORE table: 243 4 rows applied RESTORE table: 243 3 rows applied RESTORE table: 244 0 rows applied RESTORE table: 244 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 249 2265 rows applied RESTORE table: 249 2158 rows applied RESTORE table: 251 0 rows applied RESTORE table: 251 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 256 561 rows applied RESTORE table: 256 568 rows applied RESTORE table: 258 7254 rows applied RESTORE table: 258 7180 rows applied RESTORE table: 261 7290 rows applied RESTORE table: 261 7144 rows applied RESTORE table: 262 2 rows applied RESTORE table: 262 4 rows applied RESTORE table: 265 21385 rows applied RESTORE table: 265 21195 rows applied 2008-07-04 13:52:31 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-04 13:54:50 [ndbd] INFO -- Angel pid: 4862 ndb pid: 4863 2008-07-04 13:54:50 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 13:54:50 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 13:54:50 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 13:54:50 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 13:54:50 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1069 rows applied RESTORE table: 0 1043 rows applied RESTORE table: 1 60 rows applied RESTORE table: 1 51 rows applied RESTORE table: 2 36 rows applied RESTORE table: 2 32 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied RESTORE table: 237 110 rows applied RESTORE table: 237 115 rows applied RESTORE table: 240 3546 rows applied RESTORE table: 240 3371 rows applied RESTORE table: 243 4 rows applied RESTORE table: 243 3 rows applied RESTORE table: 244 0 rows applied RESTORE table: 244 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 249 2265 rows applied RESTORE table: 249 2158 rows applied RESTORE table: 251 0 rows applied RESTORE table: 251 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 256 561 rows applied RESTORE table: 256 568 rows applied RESTORE table: 258 7254 rows applied RESTORE table: 258 7180 rows applied RESTORE table: 261 7290 rows applied RESTORE table: 261 7144 rows applied RESTORE table: 262 2 rows applied RESTORE table: 262 4 rows applied RESTORE table: 265 21385 rows applied RESTORE table: 265 21195 rows applied 2008-07-04 13:57:25 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-04 14:04:58 [ndbd] INFO -- Angel pid: 4900 ndb pid: 4901 2008-07-04 14:04:58 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 14:04:58 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 14:04:58 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 14:04:58 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 14:04:58 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1069 rows applied RESTORE table: 0 1043 rows applied RESTORE table: 1 60 rows applied RESTORE table: 1 51 rows applied RESTORE table: 2 36 rows applied RESTORE table: 2 32 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 43746 rows applied RESTORE table: 10 43853 rows applied RESTORE table: 11 43200 rows applied RESTORE table: 11 43293 rows applied RESTORE table: 22 69899 rows applied RESTORE table: 22 69984 rows applied RESTORE table: 25 69612 rows applied RESTORE table: 25 70271 rows applied RESTORE table: 28 63976 rows applied RESTORE table: 28 64384 rows applied RESTORE table: 29 42768 rows applied RESTORE table: 29 43139 rows applied RESTORE table: 30 106879 rows applied RESTORE table: 30 107549 rows applied RESTORE table: 33 63854 rows applied RESTORE table: 33 64506 rows applied RESTORE table: 39 5838 rows applied RESTORE table: 39 5683 rows applied RESTORE table: 40 1047 rows applied RESTORE table: 40 1000 rows applied RESTORE table: 41 4533 rows applied RESTORE table: 41 4378 rows applied RESTORE table: 44 5838 rows applied RESTORE table: 44 5683 rows applied RESTORE table: 49 543 rows applied RESTORE table: 49 509 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 2 rows applied RESTORE table: 51 1 rows applied RESTORE table: 51 1 rows applied RESTORE table: 54 9590 rows applied RESTORE table: 54 9545 rows applied RESTORE table: 57 96274 rows applied RESTORE table: 57 96668 rows applied RESTORE table: 60 8397 rows applied RESTORE table: 60 8322 rows applied RESTORE table: 63 10961 rows applied RESTORE table: 63 10839 rows applied RESTORE table: 66 3649 rows applied RESTORE table: 66 3459 rows applied RESTORE table: 69 789 rows applied RESTORE table: 69 753 rows applied RESTORE table: 72 0 rows applied RESTORE table: 72 0 rows applied RESTORE table: 75 352 rows applied RESTORE table: 75 316 rows applied RESTORE table: 76 15 rows applied RESTORE table: 76 23 rows applied RESTORE table: 77 14 rows applied RESTORE table: 77 10 rows applied RESTORE table: 78 15 rows applied RESTORE table: 78 16 rows applied RESTORE table: 79 15 rows applied RESTORE table: 79 16 rows applied RESTORE table: 80 16 rows applied RESTORE table: 80 14 rows applied RESTORE table: 81 14 rows applied RESTORE table: 81 15 rows applied RESTORE table: 82 16 rows applied RESTORE table: 82 15 rows applied RESTORE table: 83 14 rows applied RESTORE table: 83 14 rows applied RESTORE table: 84 14 rows applied RESTORE table: 84 22 rows applied RESTORE table: 85 15 rows applied RESTORE table: 85 17 rows applied RESTORE table: 86 15 rows applied RESTORE table: 86 16 rows applied RESTORE table: 89 354 rows applied RESTORE table: 89 314 rows applied RESTORE table: 90 246 rows applied RESTORE table: 90 228 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 92 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 93 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 94 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 95 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 96 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 98 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 99 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 100 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 101 0 rows applied RESTORE table: 104 237 rows applied RESTORE table: 104 237 rows applied RESTORE table: 105 5 rows applied RESTORE table: 105 9 rows applied RESTORE table: 106 0 rows applied RESTORE table: 106 1 rows applied RESTORE table: 109 361 rows applied RESTORE table: 109 343 rows applied RESTORE table: 110 14 rows applied RESTORE table: 110 7 rows applied RESTORE table: 112 0 rows applied RESTORE table: 112 0 rows applied RESTORE table: 114 83 rows applied RESTORE table: 114 72 rows applied RESTORE table: 116 3 rows applied RESTORE table: 116 4 rows applied RESTORE table: 118 0 rows applied RESTORE table: 118 2 rows applied RESTORE table: 120 19479 rows applied RESTORE table: 120 19896 rows applied RESTORE table: 122 7 rows applied RESTORE table: 122 8 rows applied RESTORE table: 123 7 rows applied RESTORE table: 123 8 rows applied RESTORE table: 130 9 rows applied RESTORE table: 130 5 rows applied RESTORE table: 131 9 rows applied RESTORE table: 131 5 rows applied RESTORE table: 133 8 rows applied RESTORE table: 133 7 rows applied RESTORE table: 136 20 rows applied RESTORE table: 136 18 rows applied RESTORE table: 140 20 rows applied RESTORE table: 140 20 rows applied RESTORE table: 144 44382 rows applied RESTORE table: 144 44337 rows applied RESTORE table: 145 44071 rows applied RESTORE table: 145 44021 rows applied RESTORE table: 148 44322 rows applied RESTORE table: 148 44397 rows applied RESTORE table: 149 74702 rows applied RESTORE table: 149 74201 rows applied RESTORE table: 153 98361 rows applied RESTORE table: 153 98731 rows applied RESTORE table: 157 108871 rows applied RESTORE table: 157 109237 rows applied RESTORE table: 161 64011 rows applied RESTORE table: 161 64008 rows applied RESTORE table: 164 22156 rows applied RESTORE table: 164 22308 rows applied RESTORE table: 167 22173 rows applied RESTORE table: 167 22291 rows applied RESTORE table: 168 634 rows applied RESTORE table: 168 569 rows applied RESTORE table: 172 58 rows applied RESTORE table: 172 70 rows applied RESTORE table: 175 27 rows applied RESTORE table: 175 29 rows applied RESTORE table: 178 0 rows applied RESTORE table: 178 1 rows applied RESTORE table: 179 0 rows applied RESTORE table: 179 0 rows applied RESTORE table: 181 3871 rows applied RESTORE table: 181 3884 rows applied RESTORE table: 182 6 rows applied RESTORE table: 182 4 rows applied RESTORE table: 183 0 rows applied RESTORE table: 183 1 rows applied RESTORE table: 185 753784 rows applied RESTORE table: 185 754577 rows applied RESTORE table: 192 24 rows applied RESTORE table: 192 31 rows applied RESTORE table: 194 85 rows applied RESTORE table: 194 75 rows applied RESTORE table: 197 131 rows applied RESTORE table: 197 116 rows applied RESTORE table: 199 2 rows applied RESTORE table: 199 4 rows applied RESTORE table: 201 42 rows applied RESTORE table: 201 43 rows applied RESTORE table: 203 4 rows applied RESTORE table: 203 5 rows applied RESTORE table: 205 43 rows applied RESTORE table: 205 42 rows applied RESTORE table: 208 116 rows applied RESTORE table: 208 103 rows applied RESTORE table: 211 21 rows applied RESTORE table: 211 23 rows applied RESTORE table: 214 18 rows applied RESTORE table: 214 18 rows applied RESTORE table: 215 0 rows applied RESTORE table: 215 0 rows applied RESTORE table: 217 5 rows applied RESTORE table: 217 8 rows applied RESTORE table: 220 4 rows applied RESTORE table: 220 3 rows applied RESTORE table: 222 519 rows applied RESTORE table: 222 496 rows applied RESTORE table: 224 5 rows applied RESTORE table: 224 9 rows applied RESTORE table: 225 5 rows applied RESTORE table: 225 7 rows applied RESTORE table: 226 5 rows applied RESTORE table: 226 4 rows applied RESTORE table: 229 5 rows applied RESTORE table: 229 9 rows applied RESTORE table: 230 30 rows applied RESTORE table: 230 23 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 72091 rows applied RESTORE table: 234 72711 rows applied RESTORE table: 235 35387 rows applied RESTORE table: 235 36081 rows applied RESTORE table: 237 110 rows applied RESTORE table: 237 115 rows applied RESTORE table: 240 3546 rows applied RESTORE table: 240 3371 rows applied RESTORE table: 243 4 rows applied RESTORE table: 243 3 rows applied RESTORE table: 244 0 rows applied RESTORE table: 244 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 246 0 rows applied RESTORE table: 249 2265 rows applied RESTORE table: 249 2158 rows applied RESTORE table: 251 0 rows applied RESTORE table: 251 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 254 0 rows applied RESTORE table: 256 561 rows applied RESTORE table: 256 568 rows applied RESTORE table: 258 7254 rows applied RESTORE table: 258 7180 rows applied RESTORE table: 261 7290 rows applied RESTORE table: 261 7144 rows applied RESTORE table: 262 2 rows applied RESTORE table: 262 4 rows applied RESTORE table: 265 21385 rows applied RESTORE table: 265 21195 rows applied 2008-07-04 14:08:56 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-04 14:12:04 [ndbd] INFO -- Angel pid: 4950 ndb pid: 4951 2008-07-04 14:12:04 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 14:12:04 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 14:12:04 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 14:12:04 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 14:12:04 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-04 15:39:16 [ndbd] INFO -- Shutdown initiated 2008-07-04 15:39:16 [ndbd] INFO -- Shutdown completed - exiting 2008-07-04 15:39:16 [ndbd] INFO -- Angel shutting down 2008-07-04 15:39:16 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-04 15:39:45 [ndbd] INFO -- Angel pid: 5013 ndb pid: 5014 2008-07-04 15:39:45 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-04 15:39:45 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-04 15:39:45 [ndbd] INFO -- Configuration fetched at 192.168.168.100 port 1186 2008-07-04 15:39:45 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-04 15:39:45 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1038 rows applied RESTORE table: 0 1013 rows applied RESTORE table: 1 2 rows applied RESTORE table: 1 3 rows applied RESTORE table: 2 1 rows applied RESTORE table: 2 1 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 0 rows applied RESTORE table: 4 0 rows applied RESTORE table: 5 43746 rows applied RESTORE table: 5 43853 rows applied RESTORE table: 6 43200 rows applied RESTORE table: 6 43293 rows applied m_active_buckets.set(0) alloc_chunk(5311 16) - 2008-07-07 12:22:09 [ndbd] INFO -- Arbitrator decided to shutdown this node 2008-07-07 12:22:09 [ndbd] INFO -- QMGR (Line: 5024) 0x0000000a 2008-07-07 12:22:09 [ndbd] INFO -- Error handler shutting down system 2008-07-07 12:22:10 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-07 12:22:10 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Caused by error 2305: 'Node lost connection to other nodes and can not form a unpartitioned cluster, please investigate if there are error(s) on other node(s)(Arbitration error). Temporary error, restart node'. 2008-07-07 12:22:59 [ndbd] WARNING -- Unable to report shutdown reason to 192.168.168.100:1186: Could not connect to socket : Unable to connect with connect string: nodeid=0,192.168.168.100:1186 2008-07-07 13:08:23 [ndbd] INFO -- Angel pid: 3031 ndb pid: 3032 2008-07-07 13:08:23 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-07 13:08:23 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-07 13:08:23 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-07 13:08:24 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-07 13:08:24 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1039 rows applied RESTORE table: 0 1013 rows applied RESTORE table: 1 3 rows applied RESTORE table: 1 3 rows applied RESTORE table: 2 2 rows applied RESTORE table: 2 1 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 0 rows applied RESTORE table: 4 0 rows applied RESTORE table: 5 43746 rows applied records: 16 len: 24c left: 112 records: 16 len: 24c left: 112 records: 16 len: 24c left: 112 records: 16 len: 24c left: 112 records: 16 len: 24c left: 112 RESTORE table: 5 43853 rows applied records: 16 len: 2b8 left: 552 records: 16 len: 680 left: 28 records: 16 len: dd0 left: 96 2008-07-07 13:08:48 [ndbd] INFO -- Node 3 disconnected 2008-07-07 13:08:48 [ndbd] INFO -- QMGR (Line: 2681) 0x0000000a 2008-07-07 13:08:48 [ndbd] INFO -- Error handler startup shutting down system 2008-07-07 13:08:48 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-07 13:08:48 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-07 13:08:48 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2308: 'Another node failed during system restart, please investigate error(s) on other node(s)(Restart error). Temporary error, restart node'. 2008-07-07 13:09:35 [ndbd] INFO -- Angel pid: 3071 ndb pid: 3072 2008-07-07 13:09:35 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-07 13:09:35 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-07 13:09:35 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-07 13:09:36 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-07 13:09:36 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-07 13:43:42 [ndbd] INFO -- Shutdown initiated 2008-07-07 13:43:42 [ndbd] INFO -- Shutdown completed - exiting 2008-07-07 13:43:42 [ndbd] INFO -- Angel shutting down 2008-07-07 13:43:42 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-07 17:09:49 [ndbd] INFO -- Angel pid: 3123 ndb pid: 3124 2008-07-07 17:09:49 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-07 17:09:49 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-07 17:09:49 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-07 17:09:50 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-07 17:09:50 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 80Mb initial: 100Mb Adding 100Mb to ZONE_LO (1,3199) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1037 rows applied RESTORE table: 0 1011 rows applied RESTORE table: 1 0 rows applied RESTORE table: 1 0 rows applied m_active_buckets.set(0) m_active_buckets.set(1) 2008-07-07 17:11:30 [ndbd] WARNING -- Ndb kernel is stuck in: Job Handling 2008-07-07 17:11:30 [ndbd] INFO -- Watchdog: User time: 8 System time: 7 2008-07-07 17:11:31 [ndbd] WARNING -- Ndb kernel is stuck in: Job Handling 2008-07-07 17:11:31 [ndbd] INFO -- Watchdog: User time: 8 System time: 7 2008-07-07 17:11:31 [ndbd] WARNING -- Ndb kernel is stuck in: Job Handling 2008-07-07 17:11:31 [ndbd] INFO -- Watchdog: User time: 8 System time: 7 2008-07-07 17:11:31 [ndbd] WARNING -- Ndb kernel is stuck in: Job Handling 2008-07-07 17:11:31 [ndbd] INFO -- Watchdog: User time: 8 System time: 7 tab: 0 frag: 0 replicaP->nextLcp: 1 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 scanning idx: 0 lcpId: 1 Didnt find any LCP for node: 3 tab: 0 frag: 0 tab: 0 frag: 1 replicaP->nextLcp: 1 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 scanning idx: 0 lcpId: 1 Didnt find any LCP for node: 3 tab: 0 frag: 1 tab: 1 frag: 0 replicaP->nextLcp: 1 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 scanning idx: 0 lcpId: 1 Didnt find any LCP for node: 3 tab: 1 frag: 0 tab: 1 frag: 1 replicaP->nextLcp: 1 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 scanning idx: 0 lcpId: 1 Didnt find any LCP for node: 3 tab: 1 frag: 1 tab: 2 frag: 0 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 2 frag: 0 tab: 2 frag: 1 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 2 frag: 1 tab: 3 frag: 0 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 3 frag: 0 tab: 3 frag: 1 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 3 frag: 1 tab: 4 frag: 0 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 4 frag: 0 tab: 4 frag: 1 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 4 frag: 1 tab: 5 frag: 0 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 5 frag: 0 tab: 5 frag: 1 replicaP->nextLcp: 0 scanning idx: 0 lcpId: 0 scanning idx: 1 lcpId: 0 scanning idx: 2 lcpId: 0 Didnt find any LCP for node: 3 tab: 5 frag: 1 startNextCopyFragment 2008-07-07 17:11:42 [ndbd] INFO -- granting dict lock to 3 2008-07-07 17:11:42 [ndbd] INFO -- clearing dict lock for 3 prepare to handover bucket: 1 alloc_chunk(23 16) - 1011/0 (1010/4294967295) switchover complete bucket 1 state: 2handover 2008-07-07 17:35:33 [ndbd] INFO -- Shutdown initiated 2008-07-07 17:35:34 [ndbd] INFO -- Shutdown completed - exiting 2008-07-07 17:35:34 [ndbd] INFO -- Angel shutting down 2008-07-07 17:35:34 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-07 17:41:03 [ndbd] INFO -- Angel pid: 3970 ndb pid: 3971 2008-07-07 17:41:03 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-07 17:41:03 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-07 17:41:03 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-07 17:41:03 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-07 17:41:03 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) 2008-07-07 17:41:15 [ndbd] INFO -- DBLQH: File system open failed. OS errno: 2 2008-07-07 17:41:15 [ndbd] INFO -- DBLQH (Line: 1861) 0x0000000a 2008-07-07 17:41:15 [ndbd] INFO -- Error handler startup shutting down system 2008-07-07 17:41:15 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-07 17:41:15 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-07 17:41:15 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2815: 'File not found(Ndbd file system inconsistency error, please report a bug). Ndbd file system error, restart node initial'. 2008-07-07 17:41:36 [ndbd] INFO -- Angel pid: 4021 ndb pid: 4022 2008-07-07 17:41:36 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-07 17:41:36 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-07 17:41:36 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-07 17:41:36 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-07 17:41:36 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) m_active_buckets.set(0) alloc_chunk(8 16) - 2008-07-08 10:47:54 [ndbd] INFO -- Shutdown initiated 2008-07-08 10:47:55 [ndbd] WARNING -- Ndb kernel is stuck in: Performing Send 2008-07-08 10:47:55 [ndbd] INFO -- Watchdog: User time: 197777 System time: 238706 2008-07-08 10:47:55 [ndbd] INFO -- Shutdown completed - exiting 2008-07-08 10:47:56 [ndbd] INFO -- Angel shutting down 2008-07-08 10:47:56 [ndbd] INFO -- Node 2: Node shutdown completed. 2008-07-08 10:50:17 [ndbd] INFO -- Angel pid: 31631 ndb pid: 31632 2008-07-08 10:50:17 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 10:50:17 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 10:50:17 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 10:50:17 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 10:50:17 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 10:54:22 [ndbd] INFO -- Node 3 disconnected 2008-07-08 10:54:22 [ndbd] INFO -- QMGR (Line: 2681) 0x0000000a 2008-07-08 10:54:22 [ndbd] INFO -- Error handler startup shutting down system 2008-07-08 10:54:22 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-08 10:54:22 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-08 10:54:22 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2308: 'Another node failed during system restart, please investigate error(s) on other node(s)(Restart error). Temporary error, restart node'. 2008-07-08 11:00:04 [ndbd] INFO -- Angel pid: 31861 ndb pid: 31862 2008-07-08 11:00:04 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 11:00:04 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 11:00:04 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 11:00:04 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 11:00:04 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 11:03:53 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-08 11:07:29 [ndbd] INFO -- Angel pid: 32055 ndb pid: 32056 2008-07-08 11:07:29 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 11:07:29 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 11:07:29 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 11:07:30 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 11:07:30 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 11:11:52 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-08 11:14:26 [ndbd] INFO -- Angel pid: 32177 ndb pid: 32178 2008-07-08 11:14:26 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 11:14:26 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 11:14:26 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 11:14:26 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 11:14:26 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 11:18:13 [ndbd] INFO -- Node 3 disconnected 2008-07-08 11:18:13 [ndbd] INFO -- QMGR (Line: 2681) 0x0000000a 2008-07-08 11:18:13 [ndbd] INFO -- Error handler startup shutting down system 2008-07-08 11:18:13 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-08 11:18:13 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-08 11:18:13 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2308: 'Another node failed during system restart, please investigate error(s) on other node(s)(Restart error). Temporary error, restart node'. 2008-07-08 12:07:37 [ndbd] INFO -- Angel pid: 951 ndb pid: 952 2008-07-08 12:07:37 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 12:07:37 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 12:07:37 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 12:07:37 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 12:07:37 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 12:11:25 [ndbd] INFO -- Node 3 disconnected 2008-07-08 12:11:25 [ndbd] INFO -- QMGR (Line: 2681) 0x0000000a 2008-07-08 12:11:25 [ndbd] INFO -- Error handler startup shutting down system 2008-07-08 12:11:25 [ndbd] INFO -- Error handler shutdown completed - exiting 2008-07-08 12:11:25 [ndbd] INFO -- Angel received ndbd startup failure count 1. 2008-07-08 12:11:25 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2308: 'Another node failed during system restart, please investigate error(s) on other node(s)(Restart error). Temporary error, restart node'. 2008-07-08 11:33:20 [ndbd] INFO -- Angel pid: 1569 ndb pid: 1570 2008-07-08 11:33:20 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 11:33:20 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 11:33:20 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 11:33:21 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 11:33:21 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 11:37:08 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-08 11:38:24 [ndbd] INFO -- Angel pid: 1705 ndb pid: 1706 2008-07-08 11:38:24 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 11:38:24 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 11:38:24 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 11:38:24 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 11:38:24 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 11:42:12 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-08 14:50:13 [ndbd] INFO -- Angel pid: 6219 ndb pid: 6220 2008-07-08 14:50:13 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 14:50:13 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 14:50:13 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 14:50:14 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 14:50:14 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 14:54:06 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11. 2008-07-08 15:41:57 [ndbd] INFO -- Angel pid: 7638 ndb pid: 7639 2008-07-08 15:41:57 [ndbd] INFO -- NDB Cluster -- DB node 2 2008-07-08 15:41:57 [ndbd] INFO -- mysql-5.1.23 ndb-6.2.15 -- 2008-07-08 15:41:57 [ndbd] INFO -- Configuration fetched at 192.168.3.5 port 1186 2008-07-08 15:41:57 [ndbd] INFO -- Start initiated (mysql-5.1.23 ndb-6.2.15) 2008-07-08 15:41:57 [ndbd] INFO -- Ndbd_mem_manager::init(1) min: 7200Mb initial: 7220Mb Adding 7220Mb to ZONE_LO (1,231039) WOPool::init(61, 9) RWPool::init(22, 13) RWPool::init(42, 18) RWPool::init(62, 13) RWPool::init(c2, 18) RWPool::init(e2, 18) WOPool::init(41, 12) RWPool::init(82, 12) RWPool::init(a2, 52) WOPool::init(21, 10) RESTORE table: 0 1095 rows applied RESTORE table: 0 1071 rows applied RESTORE table: 1 94 rows applied RESTORE table: 1 87 rows applied RESTORE table: 2 65 rows applied RESTORE table: 2 69 rows applied RESTORE table: 3 0 rows applied RESTORE table: 3 0 rows applied RESTORE table: 4 682418 rows applied RESTORE table: 4 683127 rows applied RESTORE table: 10 543 rows applied RESTORE table: 10 509 rows applied RESTORE table: 11 0 rows applied RESTORE table: 11 2 rows applied RESTORE table: 12 1 rows applied RESTORE table: 12 1 rows applied RESTORE table: 15 9590 rows applied RESTORE table: 15 9545 rows applied RESTORE table: 18 96274 rows applied RESTORE table: 18 96668 rows applied RESTORE table: 21 8397 rows applied RESTORE table: 21 8322 rows applied RESTORE table: 24 10961 rows applied RESTORE table: 24 10839 rows applied RESTORE table: 27 3649 rows applied RESTORE table: 27 3459 rows applied RESTORE table: 30 789 rows applied RESTORE table: 30 753 rows applied RESTORE table: 33 0 rows applied RESTORE table: 33 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 36 0 rows applied RESTORE table: 38 8 rows applied RESTORE table: 38 9 rows applied RESTORE table: 39 0 rows applied RESTORE table: 39 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 41 0 rows applied RESTORE table: 43 3 rows applied RESTORE table: 43 4 rows applied RESTORE table: 44 3 rows applied RESTORE table: 44 4 rows applied RESTORE table: 46 1 rows applied RESTORE table: 46 2 rows applied RESTORE table: 48 1 rows applied RESTORE table: 48 1 rows applied RESTORE table: 50 0 rows applied RESTORE table: 50 1 rows applied RESTORE table: 51 0 rows applied RESTORE table: 51 1 rows applied RESTORE table: 53 2 rows applied RESTORE table: 53 2 rows applied RESTORE table: 54 14 rows applied RESTORE table: 54 16 rows applied RESTORE table: 55 15 rows applied RESTORE table: 55 14 rows applied RESTORE table: 56 10 rows applied RESTORE table: 56 8 rows applied RESTORE table: 90 5 rows applied RESTORE table: 90 9 rows applied RESTORE table: 91 0 rows applied RESTORE table: 91 1 rows applied RESTORE table: 94 361 rows applied RESTORE table: 94 343 rows applied RESTORE table: 95 14 rows applied RESTORE table: 95 7 rows applied RESTORE table: 97 0 rows applied RESTORE table: 97 0 rows applied RESTORE table: 99 3 rows applied RESTORE table: 99 4 rows applied RESTORE table: 101 83 rows applied RESTORE table: 101 72 rows applied RESTORE table: 103 0 rows applied RESTORE table: 103 2 rows applied RESTORE table: 105 19479 rows applied RESTORE table: 105 19896 rows applied RESTORE table: 107 7 rows applied RESTORE table: 107 8 rows applied RESTORE table: 108 7 rows applied RESTORE table: 108 8 rows applied RESTORE table: 115 9 rows applied RESTORE table: 115 5 rows applied RESTORE table: 116 9 rows applied RESTORE table: 116 5 rows applied RESTORE table: 118 8 rows applied RESTORE table: 118 7 rows applied RESTORE table: 121 20 rows applied RESTORE table: 121 18 rows applied RESTORE table: 125 20 rows applied RESTORE table: 125 20 rows applied RESTORE table: 129 44382 rows applied RESTORE table: 129 44337 rows applied RESTORE table: 130 44071 rows applied RESTORE table: 130 44021 rows applied RESTORE table: 133 44322 rows applied RESTORE table: 133 44397 rows applied RESTORE table: 134 98361 rows applied RESTORE table: 134 98731 rows applied RESTORE table: 138 108871 rows applied RESTORE table: 138 109237 rows applied RESTORE table: 142 74702 rows applied RESTORE table: 142 74201 rows applied RESTORE table: 146 64011 rows applied RESTORE table: 146 64008 rows applied RESTORE table: 149 22156 rows applied RESTORE table: 149 22308 rows applied RESTORE table: 152 22173 rows applied RESTORE table: 152 22291 rows applied RESTORE table: 153 634 rows applied RESTORE table: 153 569 rows applied RESTORE table: 157 27 rows applied RESTORE table: 157 29 rows applied RESTORE table: 160 58 rows applied RESTORE table: 160 70 rows applied RESTORE table: 163 0 rows applied RESTORE table: 163 1 rows applied RESTORE table: 164 0 rows applied RESTORE table: 164 0 rows applied RESTORE table: 166 3871 rows applied RESTORE table: 166 3884 rows applied RESTORE table: 167 6 rows applied RESTORE table: 167 4 rows applied RESTORE table: 168 0 rows applied RESTORE table: 168 1 rows applied RESTORE table: 170 753784 rows applied RESTORE table: 170 754577 rows applied RESTORE table: 177 24 rows applied RESTORE table: 177 31 rows applied RESTORE table: 179 85 rows applied RESTORE table: 179 75 rows applied RESTORE table: 182 131 rows applied RESTORE table: 182 116 rows applied RESTORE table: 184 2 rows applied RESTORE table: 184 4 rows applied RESTORE table: 186 42 rows applied RESTORE table: 186 43 rows applied RESTORE table: 188 4 rows applied RESTORE table: 188 5 rows applied RESTORE table: 190 43 rows applied RESTORE table: 190 42 rows applied RESTORE table: 193 116 rows applied RESTORE table: 193 103 rows applied RESTORE table: 196 21 rows applied RESTORE table: 196 23 rows applied RESTORE table: 199 18 rows applied RESTORE table: 199 18 rows applied RESTORE table: 200 0 rows applied RESTORE table: 200 0 rows applied RESTORE table: 202 5 rows applied RESTORE table: 202 8 rows applied RESTORE table: 205 4 rows applied RESTORE table: 205 3 rows applied RESTORE table: 207 519 rows applied RESTORE table: 207 496 rows applied RESTORE table: 209 5 rows applied RESTORE table: 209 9 rows applied RESTORE table: 210 5 rows applied RESTORE table: 210 7 rows applied RESTORE table: 211 5 rows applied RESTORE table: 211 4 rows applied RESTORE table: 214 5 rows applied RESTORE table: 214 9 rows applied RESTORE table: 215 30 rows applied RESTORE table: 215 23 rows applied RESTORE table: 216 0 rows applied RESTORE table: 216 0 rows applied RESTORE table: 219 72091 rows applied RESTORE table: 219 72711 rows applied RESTORE table: 220 35387 rows applied RESTORE table: 220 36081 rows applied RESTORE table: 222 3546 rows applied RESTORE table: 222 3371 rows applied RESTORE table: 225 110 rows applied RESTORE table: 225 115 rows applied RESTORE table: 228 4 rows applied RESTORE table: 228 3 rows applied RESTORE table: 229 0 rows applied RESTORE table: 229 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 231 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 234 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 236 0 rows applied RESTORE table: 239 2265 rows applied RESTORE table: 239 2158 rows applied RESTORE table: 241 561 rows applied RESTORE table: 241 568 rows applied RESTORE table: 243 7254 rows applied RESTORE table: 243 7180 rows applied RESTORE table: 246 7290 rows applied RESTORE table: 246 7144 rows applied RESTORE table: 247 2 rows applied RESTORE table: 247 4 rows applied RESTORE table: 250 21385 rows applied RESTORE table: 250 21195 rows applied 2008-07-08 15:45:44 [ndbd] ALERT -- Node 2: Forced node shutdown completed. Initiated by signal 11.