<html><body><div style="font-family: arial, helvetica, sans-serif; font-size: 12pt; color: #000000"><div id="zimbraEditorContainer" style="font-family: arial, helvetica, sans-serif; font-size: 12pt; color: #000000" class="30"><div>not sure this is IDP specifics </div><div>you may have tomcat and/or JVM  tunning needed</div><div>could this be related ? </div><div>https://stackoverflow.com/questions/49978938/1000-threads-blocks-on-tomcat-response-process/49979529<br data-mce-bogus="1"></div><br><div>jehan .</div><br><hr id="zwchr" data-marker="__DIVIDER__"><div data-marker="__HEADERS__"><b>De: </b>"jeanchristophe martin" <jeanchristophe.martin@orange.com><br><b>À: </b>"Jehan PROCACCIA" <jehan.procaccia@tem-tsp.eu>, "Shib Dev" <dev@shibboleth.net>, "users" <users@shibboleth.net><br><b>Envoyé: </b>Vendredi 4 Juin 2021 10:35:01<br><b>Objet: </b>RE: Freeze tomcat<br></div><div><br></div><div data-marker="__QUOTED_TEXT__">

<div class="WordSection1">

<p class="MsoNormal">Hi,</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">- shibboleth-idp : <code><span style="font-size:10.0pt">3.4.6</span></code></p>

<p class="MsoNormal">- java version : 1.8.0_292</p>

<p class="MsoNormal">- tomcat version : 8.5.66 : apr 1.7</p>

<p class="MsoNormal">- jvm sizing : -Xms1G -Xmx1G -XX:+UseG1GC</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">Context : </p>

<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo1"><span style="font-family:Symbol"><span style="mso-list:Ignore">·<span style="font:7.0pt "Times New Roman"">        

</span></span></span>LocalDynamicMetadataProvider : ~100 sp-metadata</p>

<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo1"><span style="font-family:Symbol"><span style="mso-list:Ignore">·<span style="font:7.0pt "Times New Roman"">        

</span></span></span>JPAstorageService : Session Storage in Mariadb 

</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">Problem : tomcat freeze periodically and we need to restart tomcat</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">catalina.out  -></p>

<p class="MsoNormal"> </p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">"https-openssl-apr-8443-exec-193" #49381 daemon prio=5 os_prio=0 tid=0x00007f7c3c55b000 nid=0x29a1 waiting for monitor entry [0x00007f7c21928000]</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">   java.lang.Thread.State: BLOCKED (on object monitor)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        at org.opensaml.storage.ReplayCache.check(ReplayCache.java:132)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        - waiting to lock <0x00000000c8942538> (a org.opensaml.storage.ReplayCache)</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal"> </p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<div>

<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm">

<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">De :</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> jehan Procaccia tem-tsp <jehan.procaccia@tem-tsp.eu>

<br>

<b>Envoyé :</b> vendredi 4 juin 2021 09:48<br>

<b>À :</b> Shib Dev <dev@shibboleth.net>; MARTIN Jean-Christophe OBS/DD <jeanchristophe.martin@orange.com>; Shib Users <users@shibboleth.net><br>

<b>Objet :</b> Re: Freeze tomcat</span></p>

</div>

</div>

<p class="MsoNormal"> </p>

<div>

<p class="MsoNormal">Hi</p>

</div>

<div>

<p class="MsoNormal"> </p>

</div>

<div>

<p class="MsoNormal">you would probably better send to <a href="mailto:users@shibboleth.net" target="_blank">

users@shibboleth.net</a>  (which I add in copie) </p>

</div>

<div>

<p class="MsoNormal">could you elaborate more </p>

</div>

<div>

<p class="MsoNormal">- shibboleth-idp version</p>

</div>

<div>

<p class="MsoNormal">- java version</p>

</div>

<div>

<p class="MsoNormal">- tomcat version and httpd (if in front / reverse-proxy for TLS ?) 

</p>

</div>

<div>

<p class="MsoNormal">- context (it happened after which action:  update, restart , change config ...)

</p>

</div>

<div>

<p class="MsoNormal">- the log you show us, are tomcat logs, apache, idp-process ?

</p>

</div>

<div>

<p class="MsoNormal"> </p>

</div>

<div>

<p class="MsoNormal">thanks </p>

</div>

<div>

<p class="MsoNormal"> </p>

</div>

<div>

<p class="MsoNormal">jehan . </p>

</div>

<div>

<p class="MsoNormal"> </p>

</div>

<div>

<p class="MsoNormal">Le 04/06/2021 à 09:29, <a href="mailto:jeanchristophe.martin@orange.com" target="_blank">

jeanchristophe.martin@orange.com</a> a écrit :</p>

</div>

<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">

<div>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">Hi</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">We’ve recurent freeze on our shibboleth instance.

</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto"> </p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">In the thread dump, we’ve a lot of    java.lang.Thread.State: BLOCKED (on object monitor)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto"> </p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">"https-openssl-apr-8443-exec-193" #49381 daemon prio=5 os_prio=0 tid=0x00007f7c3c55b000 nid=0x29a1 waiting for monitor entry [0x00007f7c21928000]</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">   java.lang.Thread.State: BLOCKED (on object monitor)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        at org.opensaml.storage.ReplayCache.check(ReplayCache.java:132)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        - waiting to lock <0x00000000c8942538> (a org.opensaml.storage.ReplayCache)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto"> </p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">Could you help me ?</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">Thks</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">BR</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto"> </p>

</div>

<pre>_________________________________________________________________________________________________________________________</pre>

<pre> </pre>

<pre>Ce message et ses pieces jointes peuvent contenir des informations confidentielles ou privilegiees et ne doivent donc</pre>

<pre>pas etre diffuses, exploites ou copies sans autorisation. Si vous avez recu ce message par erreur, veuillez le signaler</pre>

<pre>a l'expediteur et le detruire ainsi que les pieces jointes. Les messages electroniques etant susceptibles d'alteration,</pre>

<pre>Orange decline toute responsabilite si ce message a ete altere, deforme ou falsifie. Merci.</pre>

<pre> </pre>

<pre>This message and its attachments may contain confidential or privileged information that may be protected by law;</pre>

<pre>they should not be distributed, used or copied without authorisation.</pre>

<pre>If you have received this email in error, please notify the sender and delete this message and its attachments.</pre>

<pre>As emails may be altered, Orange is not liable for messages that have been modified, changed or falsified.</pre>

<pre>Thank you.</pre>

<p class="MsoNormal"><br>

<br>

</p>

</blockquote>

<p> </p>

</div>

<pre>_________________________________________________________________________________________________________________________

Ce message et ses pieces jointes peuvent contenir des informations confidentielles ou privilegiees et ne doivent donc

pas etre diffuses, exploites ou copies sans autorisation. Si vous avez recu ce message par erreur, veuillez le signaler

a l'expediteur et le detruire ainsi que les pieces jointes. Les messages electroniques etant susceptibles d'alteration,

Orange decline toute responsabilite si ce message a ete altere, deforme ou falsifie. Merci.

This message and its attachments may contain confidential or privileged information that may be protected by law;

they should not be distributed, used or copied without authorisation.

If you have received this email in error, please notify the sender and delete this message and its attachments.

As emails may be altered, Orange is not liable for messages that have been modified, changed or falsified.

Thank you.

</pre></div></div><div><br><br></div><hr id="zwchr" data-marker="__DIVIDER__"><div data-marker="__HEADERS__"><b>De: </b>"jeanchristophe martin" <jeanchristophe.martin@orange.com><br><b>À: </b>"Jehan PROCACCIA" <jehan.procaccia@tem-tsp.eu>, "Shib Dev" <dev@shibboleth.net>, "users" <users@shibboleth.net><br><b>Envoyé: </b>Vendredi 4 Juin 2021 10:35:01<br><b>Objet: </b>RE: Freeze tomcat<br></div><div><br><style><!--

@font-face

        {font-family:Wingdings;

        panose-1:5 0 0 0 0 0 0 0 0 0;}

@font-face

        {font-family:"Cambria Math";

        panose-1:2 4 5 3 5 4 6 3 2 4;}

@font-face

        {font-family:Calibri;

        panose-1:2 15 5 2 2 2 4 3 2 4;}

@font-face

        {font-family:Consolas;

        panose-1:2 11 6 9 2 2 4 3 2 4;}

p.MsoNormal, li.MsoNormal, div.MsoNormal

        {margin:0cm;

        margin-bottom:.0001pt;

        font-size:12.0pt;

        font-family:"Times New Roman",serif;}

a:link, span.MsoHyperlink

        {mso-style-priority:99;

        color:blue;

        text-decoration:underline;}

a:visited, span.MsoHyperlinkFollowed

        {mso-style-priority:99;

        color:purple;

        text-decoration:underline;}

p

        {mso-style-priority:99;

        mso-margin-top-alt:auto;

        margin-right:0cm;

        mso-margin-bottom-alt:auto;

        margin-left:0cm;

        font-size:12.0pt;

        font-family:"Times New Roman",serif;}

code

        {mso-style-priority:99;

        font-family:"Courier New";}

pre

        {mso-style-priority:99;

        mso-style-link:"Préformaté HTML Car";

        margin:0cm;

        margin-bottom:.0001pt;

        font-size:10.0pt;

        font-family:"Courier New";}

p.MsoListParagraph, li.MsoListParagraph, div.MsoListParagraph

        {mso-style-priority:34;

        margin-top:0cm;

        margin-right:0cm;

        margin-bottom:0cm;

        margin-left:36.0pt;

        margin-bottom:.0001pt;

        font-size:12.0pt;

        font-family:"Times New Roman",serif;}

span.PrformatHTMLCar

        {mso-style-name:"Préformaté HTML Car";

        mso-style-priority:99;

        mso-style-link:"Préformaté HTML";

        font-family:Consolas;}

p.msonormal0, li.msonormal0, div.msonormal0

        {mso-style-name:msonormal;

        mso-style-priority:99;

        mso-margin-top-alt:auto;

        margin-right:0cm;

        mso-margin-bottom-alt:auto;

        margin-left:0cm;

        font-size:12.0pt;

        font-family:"Times New Roman",serif;}

span.EmailStyle22

        {mso-style-type:personal-reply;

        font-family:"Calibri",sans-serif;

        color:#1F497D;}

.MsoChpDefault

        {mso-style-type:export-only;

        font-size:10.0pt;}

@page WordSection1

        {size:612.0pt 792.0pt;

        margin:70.85pt 70.85pt 70.85pt 70.85pt;}

div.WordSection1

        {page:WordSection1;}

/* List Definitions */

@list l0

        {mso-list-id:912080905;

        mso-list-type:hybrid;

        mso-list-template-ids:-1187884298 67895297 67895299 67895301 67895297 67895299 67895301 67895297 67895299 67895301;}

@list l0:level1

        {mso-level-start-at:0;

        mso-level-number-format:bullet;

        mso-level-text:\F0B7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Symbol;

        mso-fareast-font-family:"Times New Roman";

        mso-bidi-font-family:"Times New Roman";}

@list l0:level2

        {mso-level-number-format:bullet;

        mso-level-text:o;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:"Courier New";}

@list l0:level3

        {mso-level-number-format:bullet;

        mso-level-text:\F0A7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Wingdings;}

@list l0:level4

        {mso-level-number-format:bullet;

        mso-level-text:\F0B7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Symbol;}

@list l0:level5

        {mso-level-number-format:bullet;

        mso-level-text:o;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:"Courier New";}

@list l0:level6

        {mso-level-number-format:bullet;

        mso-level-text:\F0A7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Wingdings;}

@list l0:level7

        {mso-level-number-format:bullet;

        mso-level-text:\F0B7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Symbol;}

@list l0:level8

        {mso-level-number-format:bullet;

        mso-level-text:o;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:"Courier New";}

@list l0:level9

        {mso-level-number-format:bullet;

        mso-level-text:\F0A7;

        mso-level-tab-stop:none;

        mso-level-number-position:left;

        text-indent:-18.0pt;

        font-family:Wingdings;}

ol

        {margin-bottom:0cm;}

ul

        {margin-bottom:0cm;}

--></style></div><div data-marker="__QUOTED_TEXT__">

<div class="WordSection1">

<p class="MsoNormal">Hi,</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">- shibboleth-idp : <code><span style="font-size:10.0pt">3.4.6</span></code></p>

<p class="MsoNormal">- java version : 1.8.0_292</p>

<p class="MsoNormal">- tomcat version : 8.5.66 : apr 1.7</p>

<p class="MsoNormal">- jvm sizing : -Xms1G -Xmx1G -XX:+UseG1GC</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">Context : </p>

<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo1"><span style="font-family:Symbol"><span style="mso-list:Ignore">·<span style="font:7.0pt "Times New Roman"">        

</span></span></span>LocalDynamicMetadataProvider : ~100 sp-metadata</p>

<p class="MsoListParagraph" style="text-indent:-18.0pt;mso-list:l0 level1 lfo1"><span style="font-family:Symbol"><span style="mso-list:Ignore">·<span style="font:7.0pt "Times New Roman"">        

</span></span></span>JPAstorageService : Session Storage in Mariadb 

</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">Problem : tomcat freeze periodically and we need to restart tomcat</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal">catalina.out  -></p>

<p class="MsoNormal"> </p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">"https-openssl-apr-8443-exec-193" #49381 daemon prio=5 os_prio=0 tid=0x00007f7c3c55b000 nid=0x29a1 waiting for monitor entry [0x00007f7c21928000]</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">   java.lang.Thread.State: BLOCKED (on object monitor)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        at org.opensaml.storage.ReplayCache.check(ReplayCache.java:132)</p>

<p class="MsoNormal" style="mso-margin-top-alt:auto;mso-margin-bottom-alt:auto">        - waiting to lock <0x00000000c8942538> (a org.opensaml.storage.ReplayCache)</p>

<p class="MsoNormal"> </p>

<p class="MsoNormal"> </p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US"> </span></p>

<div>

<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm">

<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">De :</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> jehan Procaccia tem-tsp <jehan.procaccia@tem-tsp.eu>

<br>

<b>Envoyé :</b> vendredi 4 juin 2021 09:48<br>

<b>À :</b> Shib Dev <dev@shibboleth.net>; MARTIN Jean-Christophe OBS/DD <jeanchristophe.martin@orange.com>; Shib Users <users@shibboleth.net><br>

<b>Objet :</b> Re: Freeze tomcat</span></p>

</div>

</div>

<p class="MsoNormal"> </p>

<div>

<p class="MsoNormal">Hi</p>

</div>

<div>

<p class="MsoNormal"> </p>

</div>

<div>

<p class="MsoNormal">you would probably better send to <a href="mailto:users@shibboleth.net" target="_blank">

users@shibboleth.net</a>  (which I add in copie) </p>

</div>

<div>

<p class="MsoNormal">could you elaborate more </p>

</div>

<div>

<p class="MsoNormal">- shibboleth-idp version</p>

</div>

<div>

<p class="MsoNormal">- java version</p>

</div>

<div>

<p class="MsoNormal">- tomcat version and httpd (if in front / reverse-proxy for TLS ?) 

</p>

</div>

<div>

<p class="MsoNormal">- context (it happened after which action:  update, restart , change config ...)

</p>

</div>

<div>