[lxc-users] filesystem full -> lxd won't start after freeing space

Tomasz Chmielewski mangoo at wpkg.org
Sun May 6 08:16:58 UTC 2018


On 2018-05-06 17:07, Tomasz Chmielewski wrote:
> I have a Ubuntu 16.04 server with LXD 3.0 installed from snap.
> 
> I've filled the disk to 100% to get "No space left on device".

(...)

> The same error shows up after freeing space and restarting the server.
> 
> How to debug this?

Also found this (panic: txn not found):

# snap logs -n 1000 lxd
(...)

2018-05-06T08:08:06Z systemd[1]: Stopping Service for snap application 
lxd.daemon...
2018-05-06T08:08:06Z lxd.daemon[4176]: => Stop reason is: crashed
2018-05-06T08:08:06Z systemd[1]: Stopped Service for snap application 
lxd.daemon.
2018-05-06T08:08:06Z systemd[1]: Started Service for snap application 
lxd.daemon.
2018-05-06T08:08:06Z lxd.daemon[4215]: => Preparing the system
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Loading snap configuration
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Setting up mntns symlink
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Setting up kmod wrapper
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Preparing /boot
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Preparing a clean copy of 
/run
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Preparing a clean copy of 
/etc
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Setting up ceph configuration
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Setting up LVM configuration
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Rotating logs
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Escaping the systemd cgroups
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Escaping the systemd process 
resource limits
2018-05-06T08:08:06Z lxd.daemon[4215]: ==> Detected kernel with partial 
AppArmor support
2018-05-06T08:08:06Z lxd.daemon[4215]: => Re-using existing LXCFS
2018-05-06T08:08:06Z lxd.daemon[4215]: => Starting LXD
2018-05-06T08:08:06Z lxd.daemon[4215]: lvl=warn msg="CGroup memory swap 
accounting is disabled, swap limits will be ignored." 
t=2018-05-06T08:08:06+0000
2018-05-06T08:08:06Z lxd.daemon[4215]: panic: txn not found
2018-05-06T08:08:06Z lxd.daemon[4215]: trace:
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57659: fsm: 
restore=1101 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57659: fsm: 
restore=1101 database size: 4096
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57660: fsm: 
restore=1101 wal size: 325512
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57677: fsm: 
restore=1101 filename: db.bin
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57677: fsm: 
restore=1101 transaction ID:
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57732: fsm: 
restore=1101 open follower: db.bin
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.57817: fsm: 
restore=1101 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.58869: fsm: 
term=1 index=1102 cmd=frames txn=1101 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.59327: fsm: 
term=1 index=1102 cmd=frames txn=1101 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.59327: fsm: 
term=1 index=1102 cmd=frames txn=1101 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.59333: fsm: 
term=1 index=1103 cmd=frames txn=1102 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.59377: fsm: 
term=1 index=1103 cmd=frames txn=1102 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.59378: fsm: 
term=1 index=1103 cmd=frames txn=1102 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60338: fsm: 
term=1 index=1104 cmd=frames txn=1103 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60400: fsm: 
term=1 index=1104 cmd=frames txn=1103 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60400: fsm: 
term=1 index=1104 cmd=frames txn=1103 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60407: fsm: 
term=1 index=1105 cmd=frames txn=1104 pages=11 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60461: fsm: 
term=1 index=1105 cmd=frames txn=1104 pages=11 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60461: fsm: 
term=1 index=1105 cmd=frames txn=1104 pages=11 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60462: fsm: 
term=1 index=1106 cmd=frames txn=1105 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60501: fsm: 
term=1 index=1106 cmd=frames txn=1105 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60501: fsm: 
term=1 index=1106 cmd=frames txn=1105 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60502: fsm: 
term=1 index=1107 cmd=frames txn=1106 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60540: fsm: 
term=1 index=1107 cmd=frames txn=1106 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60540: fsm: 
term=1 index=1107 cmd=frames txn=1106 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60542: fsm: 
term=1 index=1108 cmd=frames txn=1107 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60579: fsm: 
term=1 index=1108 cmd=frames txn=1107 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60579: fsm: 
term=1 index=1108 cmd=frames txn=1107 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60583: fsm: 
term=1 index=1109 cmd=frames txn=1108 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60633: fsm: 
term=1 index=1109 cmd=frames txn=1108 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60633: fsm: 
term=1 index=1109 cmd=frames txn=1108 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60637: fsm: 
term=1 index=1110 cmd=frames txn=1109 pages=13 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60693: fsm: 
term=1 index=1110 cmd=frames txn=1109 pages=13 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60693: fsm: 
term=1 index=1110 cmd=frames txn=1109 pages=13 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60696: fsm: 
term=1 index=1111 cmd=frames txn=1110 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60747: fsm: 
term=1 index=1111 cmd=frames txn=1110 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60747: fsm: 
term=1 index=1111 cmd=frames txn=1110 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60750: fsm: 
term=1 index=1112 cmd=frames txn=1111 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60787: fsm: 
term=1 index=1112 cmd=frames txn=1111 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60787: fsm: 
term=1 index=1112 cmd=frames txn=1111 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60791: fsm: 
term=1 index=1113 cmd=frames txn=1112 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60840: fsm: 
term=1 index=1113 cmd=frames txn=1112 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60841: fsm: 
term=1 index=1113 cmd=frames txn=1112 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60843: fsm: 
term=1 index=1114 cmd=frames txn=1113 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60880: fsm: 
term=1 index=1114 cmd=frames txn=1113 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60880: fsm: 
term=1 index=1114 cmd=frames txn=1113 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.60962: fsm: 
term=1 index=1115 cmd=frames txn=1114 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61001: fsm: 
term=1 index=1115 cmd=frames txn=1114 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61001: fsm: 
term=1 index=1115 cmd=frames txn=1114 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61005: fsm: 
term=1 index=1116 cmd=frames txn=1115 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61058: fsm: 
term=1 index=1116 cmd=frames txn=1115 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61058: fsm: 
term=1 index=1116 cmd=frames txn=1115 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61060: fsm: 
term=1 index=1117 cmd=frames txn=1116 pages=1 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61093: fsm: 
term=1 index=1117 cmd=frames txn=1116 pages=1 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61093: fsm: 
term=1 index=1117 cmd=frames txn=1116 pages=1 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61095: fsm: 
term=1 index=1118 cmd=frames txn=1117 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61134: fsm: 
term=1 index=1118 cmd=frames txn=1117 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61134: fsm: 
term=1 index=1118 cmd=frames txn=1117 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61144: fsm: 
term=1 index=1119 cmd=frames txn=1118 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61199: fsm: 
term=1 index=1119 cmd=frames txn=1118 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61199: fsm: 
term=1 index=1119 cmd=frames txn=1118 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61201: fsm: 
term=1 index=1120 cmd=frames txn=1119 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61238: fsm: 
term=1 index=1120 cmd=frames txn=1119 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61238: fsm: 
term=1 index=1120 cmd=frames txn=1119 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61239: fsm: 
term=1 index=1121 cmd=frames txn=1120 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61275: fsm: 
term=1 index=1121 cmd=frames txn=1120 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61276: fsm: 
term=1 index=1121 cmd=frames txn=1120 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61278: fsm: 
term=1 index=1122 cmd=frames txn=1121 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61313: fsm: 
term=1 index=1122 cmd=frames txn=1121 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61313: fsm: 
term=1 index=1122 cmd=frames txn=1121 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61315: fsm: 
term=1 index=1123 cmd=frames txn=1122 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61351: fsm: 
term=1 index=1123 cmd=frames txn=1122 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61351: fsm: 
term=1 index=1123 cmd=frames txn=1122 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61353: fsm: 
term=1 index=1124 cmd=frames txn=1123 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61390: fsm: 
term=1 index=1124 cmd=frames txn=1123 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61390: fsm: 
term=1 index=1124 cmd=frames txn=1123 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61393: fsm: 
term=1 index=1125 cmd=frames txn=1124 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61429: fsm: 
term=1 index=1125 cmd=frames txn=1124 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61429: fsm: 
term=1 index=1125 cmd=frames txn=1124 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61433: fsm: 
term=1 index=1126 cmd=frames txn=1125 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61483: fsm: 
term=1 index=1126 cmd=frames txn=1125 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61484: fsm: 
term=1 index=1126 cmd=frames txn=1125 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61486: fsm: 
term=1 index=1127 cmd=frames txn=1126 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61521: fsm: 
term=1 index=1127 cmd=frames txn=1126 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61521: fsm: 
term=1 index=1127 cmd=frames txn=1126 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61522: fsm: 
term=1 index=1128 cmd=frames txn=1127 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61560: fsm: 
term=1 index=1128 cmd=frames txn=1127 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61560: fsm: 
term=1 index=1128 cmd=frames txn=1127 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61562: fsm: 
term=1 index=1129 cmd=frames txn=1128 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61598: fsm: 
term=1 index=1129 cmd=frames txn=1128 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61598: fsm: 
term=1 index=1129 cmd=frames txn=1128 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61600: fsm: 
term=1 index=1130 cmd=frames txn=1129 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61637: fsm: 
term=1 index=1130 cmd=frames txn=1129 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61637: fsm: 
term=1 index=1130 cmd=frames txn=1129 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61641: fsm: 
term=1 index=1131 cmd=frames txn=1130 pages=11 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61691: fsm: 
term=1 index=1131 cmd=frames txn=1130 pages=11 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61691: fsm: 
term=1 index=1131 cmd=frames txn=1130 pages=11 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61694: fsm: 
term=1 index=1132 cmd=frames txn=1131 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61731: fsm: 
term=1 index=1132 cmd=frames txn=1131 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61731: fsm: 
term=1 index=1132 cmd=frames txn=1131 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.61735: fsm: 
term=1 index=1133 cmd=frames txn=1132 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62000: fsm: 
term=1 index=1133 cmd=frames txn=1132 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62001: fsm: 
term=1 index=1133 cmd=frames txn=1132 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62008: fsm: 
term=1 index=1134 cmd=frames txn=1133 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62061: fsm: 
term=1 index=1134 cmd=frames txn=1133 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62061: fsm: 
term=1 index=1134 cmd=frames txn=1133 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62064: fsm: 
term=1 index=1135 cmd=frames txn=1134 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62103: fsm: 
term=1 index=1135 cmd=frames txn=1134 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62103: fsm: 
term=1 index=1135 cmd=frames txn=1134 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62110: fsm: 
term=1 index=1136 cmd=frames txn=1135 pages=17 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62174: fsm: 
term=1 index=1136 cmd=frames txn=1135 pages=17 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62175: fsm: 
term=1 index=1136 cmd=frames txn=1135 pages=17 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62178: fsm: 
term=1 index=1137 cmd=frames txn=1136 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62216: fsm: 
term=1 index=1137 cmd=frames txn=1136 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62216: fsm: 
term=1 index=1137 cmd=frames txn=1136 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62221: fsm: 
term=1 index=1138 cmd=frames txn=1137 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62271: fsm: 
term=1 index=1138 cmd=frames txn=1137 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62271: fsm: 
term=1 index=1138 cmd=frames txn=1137 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62276: fsm: 
term=1 index=1139 cmd=frames txn=1138 pages=10 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62327: fsm: 
term=1 index=1139 cmd=frames txn=1138 pages=10 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62327: fsm: 
term=1 index=1139 cmd=frames txn=1138 pages=10 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62330: fsm: 
term=1 index=1140 cmd=frames txn=1139 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.62727: fsm: 
term=1 index=1140 cmd=frames txn=1139 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63137: fsm: 
term=1 index=1140 cmd=frames txn=1139 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63141: fsm: 
term=1 index=1141 cmd=frames txn=1140 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63188: fsm: 
term=1 index=1141 cmd=frames txn=1140 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63188: fsm: 
term=1 index=1141 cmd=frames txn=1140 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63190: fsm: 
term=1 index=1142 cmd=frames txn=1141 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63229: fsm: 
term=1 index=1142 cmd=frames txn=1141 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63229: fsm: 
term=1 index=1142 cmd=frames txn=1141 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63231: fsm: 
term=1 index=1143 cmd=frames txn=1142 pages=2 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63267: fsm: 
term=1 index=1143 cmd=frames txn=1142 pages=2 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63267: fsm: 
term=1 index=1143 cmd=frames txn=1142 pages=2 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63269: fsm: 
term=1 index=1144 cmd=frames txn=1143 pages=3 commit=1 start
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63307: fsm: 
term=1 index=1144 cmd=frames txn=1143 pages=3 commit=1 unregister txn
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63307: fsm: 
term=1 index=1144 cmd=frames txn=1143 pages=3 commit=1 done
2018-05-06T08:08:06Z lxd.daemon[4215]: 2018-05-06 08:08:06.63308: fsm: 
term=1 index=1145 cmd=undo txn=1143 start
2018-05-06T08:08:06Z lxd.daemon[4215]: goroutine 75 [running]:
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/CanonicalLtd/dqlite/internal/trace.(*Tracer).Panic(0xc420343540, 
0xffdf3d, 0xd, 0x0, 0x0, 0x0)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/CanonicalLtd/dqlite/internal/trace/tracer.go:59 
+0x12c
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/CanonicalLtd/dqlite/internal/replication.(*FSM).applyUndo(0xc420345b40, 
0xc420343540, 0xc420296268, 0x1, 0xc420343400)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/CanonicalLtd/dqlite/internal/replication/fsm.go:335 
+0x200
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/CanonicalLtd/dqlite/internal/replication.(*FSM).apply(0xc420345b40, 
0xc420343400, 0xc4202a4600, 0xc425bbf71f, 0x25bbf71f00000003)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/CanonicalLtd/dqlite/internal/replication/fsm.go:116 
+0x4b6
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/CanonicalLtd/dqlite/internal/replication.(*FSM).Apply(0xc420345b40, 
0xc4202a4600, 0x0, 0x0)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/CanonicalLtd/dqlite/internal/replication/fsm.go:81 
+0xaf
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/hashicorp/raft.(*Raft).runFSM.func1(0xc42024c570)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/hashicorp/raft/fsm.go:57 +0x15a
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/hashicorp/raft.(*Raft).runFSM(0xc4202ad080)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/hashicorp/raft/fsm.go:120 +0x2fa
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/hashicorp/raft.(*Raft).(github.com/hashicorp/raft.runFSM)-fm()
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/hashicorp/raft/api.go:506 +0x2a
2018-05-06T08:08:06Z lxd.daemon[4215]: 
github.com/hashicorp/raft.(*raftState).goFunc.func1(0xc4202ad080, 
0xc42024c440)
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/hashicorp/raft/state.go:146 +0x53
2018-05-06T08:08:06Z lxd.daemon[4215]: created by 
github.com/hashicorp/raft.(*raftState).goFunc
2018-05-06T08:08:06Z lxd.daemon[4215]:  
/build/lxd/parts/lxd/go/src/github.com/hashicorp/raft/state.go:144 +0x66
2018-05-06T08:10:37Z lxd.daemon[3336]: Error: LXD still not running 
after 600s timeout (Get http://unix.socket/1.0: dial unix 
/var/snap/lxd/common/lxd/unix.socket: connect: connection refused)
2018-05-06T08:12:46Z systemd[1]: Stopping Service for snap application 
lxd.daemon...
2018-05-06T08:12:46Z lxd.daemon[4544]: => Stop reason is: crashed
2018-05-06T08:12:46Z systemd[1]: Stopped Service for snap application 
lxd.daemon.



Tomasz Chmielewski
https://lxadm.com


More information about the lxc-users mailing list