<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta name=Generator content="Microsoft Word 15 (filtered medium)"><!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
{font-family:"Cambria Math";
panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0cm;
margin-bottom:.0001pt;
font-size:12.0pt;
font-family:"Times New Roman",serif;}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
p
{mso-style-priority:99;
mso-margin-top-alt:auto;
margin-right:0cm;
mso-margin-bottom-alt:auto;
margin-left:0cm;
font-size:12.0pt;
font-family:"Times New Roman",serif;}
span.EmailStyle18
{mso-style-type:personal;
font-family:"Calibri",sans-serif;
color:#1F497D;}
span.EmailStyle19
{mso-style-type:personal-reply;
font-family:"Calibri",sans-serif;
color:#1F497D;}
.MsoChpDefault
{mso-style-type:export-only;
font-size:10.0pt;}
@page WordSection1
{size:612.0pt 792.0pt;
margin:70.85pt 70.85pt 2.0cm 70.85pt;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1028" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=DE link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Das Problem ist aber doch gar nicht der OOM-Killer, sondern dass diese Geräte normalerweise 30 MiB freien RAM haben, und dann plötzlich diese Spikes auftauchen. Die Frage ist doch gar nicht, was bei 8 MiB RAM passiert, sondern wie wir überhaupt von 30 auf 8 kommen …<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Wo kommen diese Zacken im RAM-Graphen her?<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Beste Grüße<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Adrian<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><o:p> </o:p></span></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><o:p> </o:p></span></p><div style='border:none;border-left:solid blue 1.5pt;padding:0cm 0cm 0cm 4.0pt'><div><div style='border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm'><p class=MsoNormal><b><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri",sans-serif'>From:</span></b><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri",sans-serif'> Florian Wiessner [mailto:f.wiessner@smart-kvm.com] <br><b>Sent:</b> Freitag, 26. Februar 2021 04:15<br><b>To:</b> Adrian Schmutzler <mail@adrianschmutzler.de>; franken-dev@freifunk.net; 'Fabian Bläse' <fabian@blaese.de><br><b>Cc:</b> franken@freifunk.net<br><b>Subject:</b> Re: Neue Firmwareversion 20210218<o:p></o:p></span></p></div></div><p class=MsoNormal><o:p> </o:p></p><div><p class=MsoNormal>Hallo,<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>ja, diese Probleme habe ich seit dem Upgrade nach der 2018er Firmware. Das es mit der Anzahl der User oder Airtime koreliert kann ich nicht sagen, ich habe auch Router die relativ Idle sind und da tritt das Problem auch auf. <o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Der OOM Killer ist in jedem Fall dran Schuld dass die Nodes als offline oder rebooted auftauchen im Monitoring, das passiert immer dann, wenn der oom Killer alfred killt. <o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Wie dem auch sei ist es falsch bei < 8192kb free mem den OOM-Killer anzuwerfen. Das ist bei nodes mit wenig ram viel zu knapp! 1024kb würde ich mir ja noch eingehen lassen, aber so wird ja defakto 8MB vom RAM verschenkt. <o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Reboot nach oom-kill sollte immer eingebaut werden, man kann zwar konfigurieren welche prozesse je nach prio gekillt werden sollen, aber wenn es hostapd zerlegt oder dhcp etc hat man einen node der zwar eine ssid ausstrahlt aber nicht funktioniert, daher sollte der reboot mandatory sein!<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Im alten dmesg habe ich gesehen das macnock den Speicher angefordert hat - irgendwo gibts ein memleak...<o:p></o:p></p></div><div><p class=MsoNormal><o:p> </o:p></p></div><div><p class=MsoNormal>Am 25.02.2021 um 23:19 schrieb Adrian Schmutzler:<o:p></o:p></p></div><blockquote style='margin-top:5.0pt;margin-bottom:5.0pt'><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Es fällt auf, dass beide recht viele Zacken im Memory-Graphen und auch diverse Reboots aufzuweisen haben.</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Scheinbar korreliert das mit der Anzahl der Clients und der Airtime.</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Die Router, die weniger Clients haben (Mittelwert <5) haben einen recht stetigen Graphen, z.B.</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><a href="https://monitoring.freifunk-franken.de/routers/8703">https://monitoring.freifunk-franken.de/routers/8703</a></span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Besonders deutlich sieht man den negativen Effekt hier:</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'><a href="https://monitoring.freifunk-franken.de/routers/5583">https://monitoring.freifunk-franken.de/routers/5583</a></span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Der Verlauf der Graphen und die reboot-Events deuten für mich darauf hin, dass diese auch bisher nicht wirklich stabil waren.</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Kann es sein, dass das Problem gar nichts mit der neuen FW zu tun hat, sondern schon länger bestand und nur gerade jetzt zufällig das OOM Log zugänglich war?</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Beste Grüße</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'>Adrian</span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><p class=MsoNormal><span style='font-size:11.0pt;font-family:"Calibri",sans-serif;color:#1F497D;mso-fareast-language:EN-US'> </span><o:p></o:p></p><div style='border:none;border-left:solid blue 1.5pt;padding:0cm 0cm 0cm 4.0pt'><div><div style='border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm'><p class=MsoNormal><b><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri",sans-serif'>From:</span></b><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri",sans-serif'> franken-dev [<a href="mailto:franken-dev-bounces@freifunk.net">mailto:franken-dev-bounces@freifunk.net</a>] <b>On Behalf Of </b>Florian Wiessner<br><b>Sent:</b> Donnerstag, 25. Februar 2021 22:45<br><b>To:</b> Fabian Bläse <a href="mailto:fabian@blaese.de"><fabian@blaese.de></a>; <a href="mailto:franken-dev@freifunk.net">franken-dev@freifunk.net</a><br><b>Cc:</b> <a href="mailto:franken@freifunk.net">franken@freifunk.net</a><br><b>Subject:</b> Re: Neue Firmwareversion 20210218</span><o:p></o:p></p></div></div><p class=MsoNormal> <o:p></o:p></p><div><p class=MsoNormal>Am 25.02.2021 um 20:25 schrieb Fabian Bläse:<o:p></o:p></p></div><blockquote style='margin-top:5.0pt;margin-bottom:5.0pt'><p class=MsoNormal>On 25.02.21 20:14, Florian Wiessner wrote: <br><br><br><o:p></o:p></p><blockquote style='margin-top:5.0pt;margin-bottom:5.0pt'><p class=MsoNormal>Reboot bei OOM ist besser, als nen node zu haben ohne SSH/httpd aber mit hostapd aber dafür ohne dhcp. Das macht dann wirklich Ärger, dann lieber Reboot und es geht wieder alles für eine gewisse Zeit! <o:p></o:p></p></blockquote><p class=MsoNormal>Da stimme ich dir zu, aber dennoch sollten wir hier unbedingt die Ursache des Problems ermitteln. <br>Hast du zu den 1043 einen Monitoring-Link? Geht es um 1043v1 (32MB RAM) oder um neuere Revisionen (64MB RAM)? <o:p></o:p></p></blockquote><p><a href="https://monitoring.freifunk-franken.de/routers/7196">https://monitoring.freifunk-franken.de/routers/7196</a><o:p></o:p></p><p>Der router war nicht offline, aber alfred etc war alles weg und auch hostapd. SSH ging zum Glück noch, ich habe dann logs abgegriffen und rebootet.<o:p></o:p></p><p> <o:p></o:p></p><p>Dieser hier: <o:p></o:p></p><p><a href="https://monitoring.freifunk-franken.de/routers/7266">https://monitoring.freifunk-franken.de/routers/7266</a><o:p></o:p></p><p>hat auch Probleme ohne WAN Uplink. <o:p></o:p></p><p> <o:p></o:p></p><p> <o:p></o:p></p><p> <o:p></o:p></p><div><p class=MsoNormal>-- <o:p></o:p></p><table class=MsoNormalTable border=0 cellpadding=0><tr><td style='padding:.75pt .75pt .75pt .75pt'><p class=MsoNormal style='margin-bottom:12.0pt'><span style='font-size:10.0pt;font-family:"Courier New",serif'>Mit freundlichen Grüßen<br><br>Florian Wiessner</span><o:p></o:p></p></td></tr><tr><td style='padding:.75pt .75pt .75pt .75pt'><p class=MsoNormal><br><a href="http://www.smart-kvm.com/"></a><!--[if gte vml 1]><v:shapetype id="_x0000_t75" coordsize="21600,21600" o:spt="75" o:preferrelative="t" path="m@4@5l@4@11@9@11@9@5xe" filled="f" stroked="f">
<v:stroke joinstyle="miter" />
<v:formulas>
<v:f eqn="if lineDrawn pixelLineWidth 0" />
<v:f eqn="sum @0 1 0" />
<v:f eqn="sum 0 0 @1" />
<v:f eqn="prod @2 1 2" />
<v:f eqn="prod @3 21600 pixelWidth" />
<v:f eqn="prod @3 21600 pixelHeight" />
<v:f eqn="sum @0 0 1" />
<v:f eqn="prod @6 1 2" />
<v:f eqn="prod @7 21600 pixelWidth" />
<v:f eqn="sum @8 21600 0" />
<v:f eqn="prod @7 21600 pixelHeight" />
<v:f eqn="sum @10 21600 0" />
</v:formulas>
<v:path o:extrusionok="f" gradientshapeok="t" o:connecttype="rect" />
<o:lock v:ext="edit" aspectratio="t" />
</v:shapetype><v:shape id="_x0000_s1026" type="#_x0000_t75" alt="" href="http://www.smart-kvm.com/" style='position:absolute;margin-left:0;margin-top:0;width:112.5pt;height:24.75pt;z-index:251658240;mso-wrap-distance-left:0;mso-wrap-distance-top:0;mso-wrap-distance-right:0;mso-wrap-distance-bottom:0;mso-position-horizontal:left;mso-position-horizontal-relative:text;mso-position-vertical-relative:line' o:allowoverlap="f" o:button="t">
<v:imagedata src="cid:image001.png@01D70C39.11594050" o:title="part5.EE9B521F.986F6313@smart-kvm" />
<w:wrap type="square"/>
</v:shape><![endif]--><![if !vml]><a href="http://www.smart-kvm.com/"><img border=0 width=150 height=33 src="cid:image001.png@01D70C39.11594050" align=left v:shapes="_x0000_s1026"></a><![endif]><a href="http://www.smart-kvm.com/"></a><o:p></o:p></p></td></tr></table><p class=MsoNormal><br><span style='font-size:10.0pt;font-family:"Courier New",serif'>smart-kvm.com<br>c/o Smart Weblications GmbH<br>Martinsberger Str. 1<br>D-95119 Naila<br>fon.: +49 9282 9638 200<br>fax.: +49 9282 9638 205<br>24/7: +49 900 144 000 00 - 0,99 EUR/Min*<br><a href="http://www.smart-kvm.com">http://www.smart-kvm.com</a><br></span><br>--<br><span style='font-size:10.0pt;font-family:"Courier New",serif'>Sitz der Gesellschaft: Naila<br>Geschäftsführer: Florian Wiessner<br>HRB-Nr.: HRB 3840 Amtsgericht Hof<br>*aus dem dt. Festnetz, ggf. abweichende Preise aus dem Mobilfunknetz</span> <o:p></o:p></p></div></div></blockquote><p><o:p> </o:p></p><div><p class=MsoNormal>-- <o:p></o:p></p><table class=MsoNormalTable border=0 cellpadding=0><tr><td style='padding:.75pt .75pt .75pt .75pt'><p class=MsoNormal style='margin-bottom:12.0pt'><span style='font-size:10.0pt;font-family:"Courier New",serif'>Mit freundlichen Grüßen<br><br>Florian Wiessner</span><o:p></o:p></p></td></tr><tr><td style='padding:.75pt .75pt .75pt .75pt'><p class=MsoNormal><br><a href="http://www.smart-kvm.com/"></a><!--[if gte vml 1]><v:shape id="_x0000_s1027" type="#_x0000_t75" alt="" href="http://www.smart-kvm.com/" style='position:absolute;margin-left:0;margin-top:0;width:112.5pt;height:24.75pt;z-index:251659264;mso-wrap-distance-left:0;mso-wrap-distance-top:0;mso-wrap-distance-right:0;mso-wrap-distance-bottom:0;mso-position-horizontal:left;mso-position-horizontal-relative:text;mso-position-vertical-relative:line' o:allowoverlap="f" o:button="t">
<v:imagedata src="cid:image002.png@01D70C39.11594050" o:title="part8.4B89957A.D7557853@smart-kvm" />
<w:wrap type="square"/>
</v:shape><![endif]--><![if !vml]><a href="http://www.smart-kvm.com/"><img border=0 width=150 height=33 src="cid:image003.png@01D70C39.11594050" align=left v:shapes="_x0000_s1027"></a><![endif]><a href="http://www.smart-kvm.com/"></a><o:p></o:p></p></td></tr></table><p class=MsoNormal><br><span style='font-size:10.0pt;font-family:"Courier New",serif'>smart-kvm.com<br>c/o Smart Weblications GmbH<br>Martinsberger Str. 1<br>D-95119 Naila<br>fon.: +49 9282 9638 200<br>fax.: +49 9282 9638 205<br>24/7: +49 900 144 000 00 - 0,99 EUR/Min*<br><a href="http://www.smart-kvm.com">http://www.smart-kvm.com</a><br></span><br>--<br><span style='font-size:10.0pt;font-family:"Courier New",serif'>Sitz der Gesellschaft: Naila<br>Geschäftsführer: Florian Wiessner<br>HRB-Nr.: HRB 3840 Amtsgericht Hof<br>*aus dem dt. Festnetz, ggf. abweichende Preise aus dem Mobilfunknetz</span> <o:p></o:p></p></div></div></div></body></html>