<html><body><div style="color:#000; background-color:#fff; font-family:HelveticaNeue, Helvetica Neue, Helvetica, Arial, Lucida Grande, sans-serif;font-size:12pt"><div><span>Hello all,</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br><span></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>we are currently using 0.8.0 and trying to update to 0.8.1. We have even tried the latest git version.</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br><span></span></div><div style="color: rgb(0, 0, 0); font-size:
 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>1) xattr INFOs</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>We are using ext4 with user_xattr parameter in /etc/fstab and have tried the defaults of ext4 also.<br></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br><span></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>When starting with -u<br></span></div><div style="color: rgb(0, 0, 0); font-size:
 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span><br></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>Apr 09 16:32:28   INFO [main] convert_ecidx_xattr2path(447) object: /opt/sheep/storage/obj/0089b48c00000952 doesn't have its ec index in xattr: No data available<br>Apr 09 16:32:28   INFO [main] convert_ecidx_xattr2path(447) object: /opt/sheep/storage/obj/0072926800000103 doesn't have its ec index in xattr: No data available<br>Apr 09 16:32:28   INFO [main] convert_ecidx_xattr2path(447) object: /opt/sheep/storage/obj/007292680000053a doesn't have its ec index in xattr: No data available</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family:
 HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;">2) Starting than without -u</div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br>Apr 09 16:37:53   INFO [main] md_add_disk(337) /opt/sheep/storage/obj, vdisk nr 3464, total disk 1<br>Apr 09 16:37:53  ERROR [main] init_config_file(99) This sheep version is not compatible with the existing data layout, 3<br>Apr 09 16:37:53  ERROR [main] init_config_file(118) use '-u' option to upgrade sheep store<br><br><span></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family:
 HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br><span></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>How can we update our cluster ?</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><br><span></span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent; font-style: normal;"><span>Thanks,</span></div><div style="color: rgb(0, 0, 0); font-size: 16px; font-family: HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif; background-color: transparent;
 font-style: normal;"><span>Giovanni</span></div><div style="display: block;" class="yahoo_quoted"> <div style="font-family: HelveticaNeue, Helvetica Neue, Helvetica, Arial, Lucida Grande, sans-serif; font-size: 12pt;"> <div style="font-family: HelveticaNeue, Helvetica Neue, Helvetica, Arial, Lucida Grande, sans-serif; font-size: 12pt;"> <div dir="ltr"> <font face="Arial" size="2"> Hitoshi Mitake <mitake.hitoshi@gmail.com> schrieb am 19:30 Sonntag, 6.April 2014:<br> </font> </div>  <div class="y_msg_container">At Thu, 3 Apr 2014 06:02:50 +0200,<br clear="none"><<a shape="rect" ymailto="mailto:richter@ecos.de" href="mailto:richter@ecos.de">richter@ecos.de</a>> wrote:<br clear="none">> <br clear="none">> Hi,<br clear="none">> <br clear="none">> I have changed from corosync to zookeeper before. I have done a dog cluster<br clear="none">> shutdown and then changed all nodes and brought them up again. This worked<br
 clear="none">> fine. This was at 19:36:22.<br clear="none">> <br clear="none">> There is nothing about the failed check in the log, as far as I can see. The<br clear="none">> message "Failed to find requested tag" was before my try to check the image<br clear="none"><br clear="none">It seems that some of your sheep processes don't have its epoch log<br clear="none">and reading it from remote sheep process is failing. It would be a<br clear="none">cause of failing "dog vdi check". Can I see output of "dog cluster<br clear="none">info" on all nodes?<br clear="none"><br clear="none">> <br clear="none">> I was wondering why I get still the message about the upgrade from v3 to v4.<br clear="none">> I had already run sheep with -u in the past.<br clear="none"><br clear="none">I think you will never see the log after rebooting sheep process. If<br clear="none">you see the log even after the reboot, it means that the updating<br
 clear="none">process has bug. Could you check it?<br clear="none"><br clear="none">Thanks,<br clear="none">Hitoshi<div class="yqt5152240816" id="yqtfd14227"><br clear="none"><br clear="none">> <br clear="none">> Regards<br clear="none">> <br clear="none">> Gerald<br clear="none">> <br clear="none">> <br clear="none">> #dog cluster info<br clear="none">> Cluster status: running, auto-recovery enabled<br clear="none">> <br clear="none">> Cluster created at Fri Feb  7 23:17:20 2014<br clear="none">> <br clear="none">> Epoch Time           Version<br clear="none">> 2014-04-02 09:01:56     99 [1.1.1.1:7000, 2.2.2.2:7000, 3.3.3.3:7000]<br clear="none">> 2014-04-01 16:57:48     98 [1.1.1.1:7000, 3.3.3.3:7000]<br clear="none">> 2014-04-01 12:54:46     97 [1.1.1.1:7000, 2.2.2.2:7000, 3.3.3.3:7000]<br clear="none">> 2014-04-01 12:54:41     96
 [1.1.1.1:7000, 3.3.3.3:7000]<br clear="none">> 2014-03-29 15:00:20     95 [1.1.1.1:7000, 2.2.2.2:7000, 3.3.3.3:7000]<br clear="none">> <br clear="none">> <br clear="none">> Apr 02 19:36:22   INFO [main] md_add_disk(333)<br clear="none">> /var/lib/sheepdog//disc1/data, vdisk nr 1619, total disk 1<br clear="none">> Apr 02 19:36:22   INFO [main] md_add_disk(333)<br clear="none">> /var/lib/sheepdog//disc2/data, vdisk nr 1836, total disk 2<br clear="none">> Apr 02 19:36:22  ERROR [main] init_config_file(99) This sheep version is not<br clear="none">> compatible with the existing data layout, 3<br clear="none">> Apr 02 19:36:24   INFO [main] convert_ecidx_xattr2path(446) object:<br clear="none">> /var/lib/sheepdog//disc1/data/00f6b38a00005f9e doesn't have its ec index in<br clear="none">> xattr: No data available<br clear="none">> Apr 02 19:36:24   INFO [main]
 convert_ecidx_xattr2path(446) object:<br clear="none">> /var/lib/sheepdog//disc1/data/002b8afa00000679 doesn't have its ec index in<br clear="none">> xattr: No data available<br clear="none">> Apr 02 19:36:24   INFO [main] convert_ecidx_xattr2path(446) object:<br clear="none">> /var/lib/sheepdog//disc1/data/00f08a9300000da6 doesn't have its ec index in<br clear="none">> xattr: No data available<br clear="none">> ....<br clear="none">> Apr 02 19:36:26   INFO [main] convert_ecidx_xattr2path(446) object:<br clear="none">> /var/lib/sheepdog//disc2/data/00f6b38a0000c80a doesn't have its ec index in<br clear="none">> xattr: No dat<br clear="none">> a available<br clear="none">> Apr 02 19:36:26   INFO [main] convert_ecidx_xattr2path(446) object:<br clear="none">> /var/lib/sheepdog//disc2/data/00bb7a2500000c76 doesn't have its ec index in<br clear="none">> xattr: No dat<br clear="none">> a available<br
 clear="none">> Apr 02 19:36:26 NOTICE [main] get_local_addr(519) found IPv4 address<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other
 nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17 
 ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:38:17  ERROR [io 226735] sheep_exec_req(1096) failed Waiting for<br clear="none">> other nodes to join cluster<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">>
 find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br
 clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed
 to<br clear="none">> find requested tag<br clear="none">> Apr 02 19:39:53  ERROR [io 227060] sheep_exec_req(1096) failed Failed to<br clear="none">> find requested tag<br clear="none">> <br clear="none">> <br clear="none">> <br clear="none">> > -----Ursprüngliche Nachricht-----<br clear="none">> > Von: Hitoshi Mitake [mailto:<a shape="rect" ymailto="mailto:mitake.hitoshi@gmail.com" href="mailto:mitake.hitoshi@gmail.com">mitake.hitoshi@gmail.com</a>]<br clear="none">> > Gesendet: Donnerstag, 3. April 2014 04:39<br clear="none">> > An: Gerald Richter - ECOS Technology<br clear="none">> > Cc: <a shape="rect" ymailto="mailto:sheepdog-users@lists.wpkg.org" href="mailto:sheepdog-users@lists.wpkg.org">sheepdog-users@lists.wpkg.org</a><br clear="none">> > Betreff: Re: [sheepdog-users] 0.8.1 check broken?<br clear="none">> > <br clear="none">> > Hi Gerald,<br clear="none">> > <br
 clear="none">> > On Thu, Apr 3, 2014 at 2:50 AM, Gerald Richter - ECOS Technology<br clear="none">> > <<a shape="rect" ymailto="mailto:gerald.richter@ecos.de" href="mailto:gerald.richter@ecos.de">gerald.richter@ecos.de</a>> wrote:<br clear="none">> > > Hi,<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > Running check (I tried with different images), I always get:<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > #dog vdi check vm-12162-disk-1<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > PANIC: can't find a valid vnode<br clear="none">> > ><br clear="none">> > > dog exits unexpectedly (Aborted).<br clear="none">> > ><br clear="none">> > > dog.c:351: crash_handler<br
 clear="none">> > ><br clear="none">> > > /lib/x86_64-linux-gnu/libpthread.so.0(+0xf02f) [0x7f880ff8d02f]<br clear="none">> > ><br clear="none">> > > /lib/x86_64-linux-gnu/libc.so.6(gsignal+0x34) [0x7f880fa0d474]<br clear="none">> > ><br clear="none">> > > /lib/x86_64-linux-gnu/libc.so.6(abort+0x17f) [0x7f880fa106ef]<br clear="none">> > ><br clear="none">> > > sheep.h:80: oid_to_vnodes<br clear="none">> > ><br clear="none">> > > vdi.c:1885: do_vdi_check<br clear="none">> > ><br clear="none">> > > dog.c:519: main<br clear="none">> > ><br clear="none">> > > /lib/x86_64-linux-gnu/libc.so.6(__libc_start_main+0xfc)<br clear="none">> > > [0x7f880f9f9eac]<br clear="none">> > ><br clear="none">> > > dog() [0x403fa8]<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br
 clear="none">> > > This is a working image ( I can start th VM and it's working). So<br clear="none">> > > what's wrong here?<br clear="none">> > <br clear="none">> > Thanks for reporting. Can I see an output of "dog cluster info" and log of<br clear="none">> > sheep process which runs on the host you executed the above dog vdi<br clear="none">> > check?<br clear="none">> > <br clear="none">> > Thanks,<br clear="none">> > Hitoshi<br clear="none">> > <br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > Thanks & Regards<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > Gerald<br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > ><br clear="none">> > > --<br
 clear="none">> > > sheepdog-users mailing lists<br clear="none">> > > <a shape="rect" ymailto="mailto:sheepdog-users@lists.wpkg.org" href="mailto:sheepdog-users@lists.wpkg.org">sheepdog-users@lists.wpkg.org</a><br clear="none">> > > <a shape="rect" href="http://lists.wpkg.org/mailman/listinfo/sheepdog-users" target="_blank">http://lists.wpkg.org/mailman/listinfo/sheepdog-users</a><br clear="none">> > ><br clear="none">> <br clear="none">-- <br clear="none">sheepdog-users mailing lists<br clear="none"><a shape="rect" ymailto="mailto:sheepdog-users@lists.wpkg.org" href="mailto:sheepdog-users@lists.wpkg.org">sheepdog-users@lists.wpkg.org</a><br clear="none"><a shape="rect" href="http://lists.wpkg.org/mailman/listinfo/sheepdog-users" target="_blank">http://lists.wpkg.org/mailman/listinfo/sheepdog-users</a><br clear="none"></div><br><br></div>  </div> </div>  </div> </div></body></html>