<font size=2 face="sans-serif">Hello Peter,</font><br><br><font size=2 face="sans-serif">Planned network outage is a lot easier
to handle than unexpected ones!</font><br><br><font size=2 face="sans-serif">At BnF, we paused all running jobs until
we have the confirmation everything is back to normal. We already did this
during broad crawls so for more than 60 cralwers.</font><br><font size=2 face="sans-serif">The challenge is to make sure you have
no new job to start, so we temporarily desactivate the Selective harvests.</font><br><font size=2 face="sans-serif">If we have jobs at a post-processing
stage that we cannot paused, we stop the HarvestController by putting a
shutdown.txt file in the job directory..  </font><br><br><font size=2 face="sans-serif">Best,</font><br><br><font size=2 face="sans-serif">Sara</font><br><br><br><br><font size=1 color=#5f5f5f face="sans-serif">De :      
 </font><font size=1 face="sans-serif">"Tue Hejlskov
Larsen" <tlr@kb.dk></font><br><font size=1 color=#5f5f5f face="sans-serif">A :      
 </font><font size=1 face="sans-serif">"netarchivesuite-users@ml.sbforge.org"
<netarchivesuite-users@ml.sbforge.org></font><br><font size=1 color=#5f5f5f face="sans-serif">Date :      
 </font><font size=1 face="sans-serif">29/08/2024 08:42</font><br><font size=1 color=#5f5f5f face="sans-serif">Objet :    
   </font><font size=1 face="sans-serif">Re: [Netarchivesuite-users]
Preparing for and handling planned network outage during broad crawl</font><br><font size=1 color=#5f5f5f face="sans-serif">Envoyé par :    
   </font><font size=1 face="sans-serif">"NetarchiveSuite-users"
<netarchivesuite-users-bounces@ml.sbforge.org></font><br><hr noshade><br><br><br><font size=3 color=#004080 face="Calibri">Hello Peter,</font><br><font size=3 color=#004080 face="Calibri"> </font><br><font size=3 color=#004080 face="Calibri">It depends on your max messages
queues settings in the Open JMs broker properties and how long time there
is no network. Our installation breaks down if it  loose the network
connection more than an 10 – 30 min..dependend on what’a running </font><br><font size=3 color=#004080 face="Calibri">If the message queues hIt
the maximum there is normally no other way than restart the whole platform
and all running harvesterjobs needs to be restarted. </font><br><font size=3 color=#004080 face="Calibri">You can try to restart the
GUI it will try to empty the JMS queues. And sometimes - after the network
is ok again - and you have patience and wait 2-3 hours the broker will
tries to resolve the messages queues and succeded to do it  last time.</font><br><font size=3 color=#004080 face="Calibri"> </font><br><font size=3 color=#004080 face="Calibri">Best regards</font><br><font size=3 color=#004080 face="Calibri">Tue</font><br><font size=3 color=#004080 face="Calibri"> </font><br><font size=3 face="Calibri"><b>From:</b> NetarchiveSuite-users <netarchivesuite-users-bounces@ml.sbforge.org>
<b>On Behalf Of </b>Peter Svanberg<b><br>Sent:</b> Wednesday, August 28, 2024 6:01 PM<b><br>To:</b> netarchivesuite-users@ml.sbforge.org<b><br>Subject:</b> [Netarchivesuite-users] Preparing for and handling planned
network outage during broad crawl</font><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri">Hello!</font><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri">There will be network service work at our
site next weekend (7-8 Aug.). No figures on outage but they will change
hardware so probably many minutes, maybe hours. Our current broad crawl
pass is perhaps not finished then. How do you minimize the consequences
in NAS?</font><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri">Pause all running jobs before and unpause
them after? That would minimize the effects of the ongoing crawls.</font><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri">But what will happen with the other processes
and connections? Will the processes have to be restarted? And also the
unpaused jobs, when they are ready, to make them reconnect? (I'm guessing
wildly/groping blindly …) Anyone have experience?</font><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri"> </font><p><table width=394 style="border-collapse:collapse;"><tr height=8><td width=113 style="border-style:solid;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;"><a href=https://www.kb.se/></a><td width=281 style="border-style:solid;border-color:#000000;border-width:0px 0px 0px 0px;padding:0px 0px;"><font size=3 face="Arial"><b>Peter
Svanberg</b></font><br><font size=3 face="Arial"><b>Technical officer </b></font><br><font size=3 face="Arial">Aquisitions and Metadata Department<br>Film, Games, Sheet Music and Web Unit</font><br><font size=3 face="Arial"> </font><br><font size=3 face="Arial"><b>National Library of Sweden</b></font><br><font size=3 face="Arial">PO Box 5039, SE-102 41 Stockholm</font><br><font size=3 face="Arial">Visits: Karlavägen 96, Stockholm</font><br><font size=3 face="Arial">+46 10-709 32 78</font><br><a href=mailto:Peter.Svanberg@kb.se><font size=3 color=#0082bf face="Arial"><u>Peter.Svanberg@kb.se</u></font></a><br><a href=https://www.kb.se/><font size=3 color=blue face="Arial"><u>www.kb.se</u></font></a></table><br><font size=3 face="Calibri"> </font><br><font size=3 face="Calibri"> </font><tt><font size=2>_______________________________________________<br>NetarchiveSuite-users mailing list<br>NetarchiveSuite-users@ml.sbforge.org<br></font></tt><a href="https://ml.sbforge.org/mailman/listinfo/netarchivesuite-users"><tt><font size=2>https://ml.sbforge.org/mailman/listinfo/netarchivesuite-users</font></tt></a><tt><font size=2><br></font></tt><br><font face="sans-serif"><hr />
<p>Venez découvrir le <strong><a href="https://www.bnf.fr/fr/le-musee-de-la-bnf">le musée de la BnF à Richelieu</a></strong>.</p>
<p style="color:#008000"><strong>Avant d'imprimer, pensez à l'environnement.</strong></p></font>