Apache Localer Download langsam ( nur 1 cpu)

hyle · Dec 3rd 2021

Starte mal zwei Downloads und sieh Dir währenddessen nochmals free -m an. Ändert sich dabei etwas?

Zum Vergleich der Geschwindigkeiten HTTP(S) = dem Webserver und SMB = Sambaserver kann ich mangels konkretem Wissen leider nur raten. Vielleicht liegt das an den unterschiedlichen Protokollen?!

HTTP ist/war eher für kleinere Pakete ausgelegt. Neben den Protokollen steht noch die Software, die den Up- oder Download verarbeitet. Da ist der Apache2 und u.a. PHP im Spiel, die auch Recourcen zum Cachen benötigen.

SMB dagegen ist u.a. für Dateimanagement im Netzwerk entwickelt worden und verwendet evtl. größere Pakete oder puffert weniger oder sowas i.d.A. und ist vielleicht deshalb schneller.

ABER wie geschrieben ist das nur geraten! Bei den Hintergründen kennen sich andere hier bestimmt besser aus.

rpi444 · Dec 3rd 2021

Quote from Pfann

nun in der datei steht nichts davon drin. soll ich den command dort einfach mal eintragen ...

Wenn Du es persistent haben willst und nach einem reboot nicht immer neu eingeben willst, ja.

BTW: reboot ist nicht erforderlich, weil Du es ja manuell schon auf 2 konfiguriert hast.

rpi444 · Dec 3rd 2021

Quote from Pfann

ich mein 15 bis 20 Mb/s download im localem netzwerk ist ein bissl wenig

Was ergibt ein Speedtest im lokalen Netzwerk, mit z. B. iperf3 (... d. h. memory-to-memory, so dass keine Daten von einem Datenträger gelesen werden müssen und auch keine Daten auf einen Datenträger geschrieben werden müssen).

EDIT:

BTW: Mach mal im lokalen Netzwerk einen ausreichend großen Download (z. B. > 1 GB-Datei) mit z. B. axel und schau nach, wie die CPU-cores benutzt werden:

Code

axel -a -n 8 http://<IP-Adresse>/<Datei>

(IP-Adresse bzw. Datei anpassen und ohne spitze Klammern).

llutz · Dec 3rd 2021

Quote from Pfann

habe gelesen dass ich das MPM addon für apache benötige,

Welches mpm-Modul nutzt du zur Zeit?

apache2ctl -t -D DUMP_MODULES|grep mpm

Da du ohnehin php-fpm nutzt, sollte mpm_event die performanteste Lösung sein.

Pfann · Dec 4th 2021

iperf:

mit dem befehl axel bekomme ich auch nur 16 Mb/s rein (siehe Bild)

und es läuft mpm_event

Code

apache2ctl -t -D DUMP_MODULES|grep mpm     
AH00558: apache2: Could not reliably determine the server's fully qualified domain name, using 127.0.1.1. Set the 'ServerName' directive globally to suppress this message
 mpm_event_module (shared)

llutz · Dec 4th 2021

Iperf3 auf localhost ist hier ziemlich sinnlos. Du müsstest das schon von/zu einem anderen Rechner im LAN machen. In beide Richtungen sinvollerweise.

Pfann · Dec 4th 2021

Quote from llutz

Iperf3 auf localhost ist hier ziemlich sinnlos. Du müsstest das schon von/zu einem anderen Rechner im LAN machen. In beide Richtungen sinvollerweise.

( der andere Linux ist ein Vserver auf meinem Intel Nuc )

dies ist die verbindung vom rpi zu einem zweiten linux

und hier vom zweiten linux zum rpi

Meiner Meinung nach kann es nur am Apache liegen, SSH sowie Apache sind relativ langsam.

Kann es am SSL/SSH liegen?

llutz · Dec 4th 2021

Das liegt Im normalen GbE-Bereich.

Hast du den Axel-Test auf deine Nextcloud-Installation gemacht oder auf den Apache?

Speicher-/CPU-Last dabei mal beobachtet?

Pfann · Dec 4th 2021

Quote from llutz

Das liegt Im normalen GbE-Bereich.
Hast du den Axel-Test auf deine Nextcloud-Installation gemacht oder auf den Apache?
Speicher-/CPU-Last dabei mal beobachtet?

also wenn ich axel nur mit dem rpi mache kommt folgendes

mache ich das mit dem Vserver bekomme ich folgenden fehler

Der meint irgendwas mit SSL und HTTP/1.1

auch mit http anstatt https kommt der gleiche Fehler

llutz · Dec 4th 2021

Du bräuchtest dafür natürlich einen 2. vhost bzw. müsstest den default nextcloud-vhost so lange deaktivieren.

Pfann · Dec 4th 2021

okay gesagt getan

auslastung des rpi

speed

ich habe auch versucht den download mit firefox zu starten. fullspeed!

es liegt offenbar an den Vhost oder eben an dem SSL

doch wie kann ich das nun beheben?

Pfann · Dec 4th 2021

Vhost nextcloud.conf

Apache Configuration

<VirtualHost *:80>
     Protocols h2 http/1.1
     ServerAdmin *********
     DocumentRoot /var/www/Nextcloud/
     ServerName *********

     Alias /nextcloud "/var/www/Nextcloud/"

     <Directory /var/www/Nextcloud/>
        Options +FollowSymlinks
        AllowOverride All
        Require all granted
          <IfModule mod_dav.c>
            Dav off
          </IfModule>
        SetEnv HOME /var/www/Nextcloud
        SetEnv HTTP_HOME /var/www/Nextcloud
     </Directory>

     ErrorLog ${APACHE_LOG_DIR}/error.log
     CustomLog ${APACHE_LOG_DIR}/access.log combined

RewriteEngine on
RewriteCond %{SERVER_NAME} =*********
RewriteRule ^ https://%{SERVER_NAME}%{REQUEST_URI} [END,NE,R=permanent]
</VirtualHost>

Display More

nextcloud-le-ssl.conf

Code

<IfModule mod_ssl.c>
<VirtualHost *:443>
     Protocols h2 http/1.1
     ServerAdmin *********
     DocumentRoot /var/www/Nextcloud/
     ServerName *********
     Header always set Strict-Transport-Security "max-age=31536000; includeSubDomains"

     Alias /nextcloud "/var/www/Nextcloud/"

     <Directory /var/www/Nextcloud/>
        Options +FollowSymlinks
        AllowOverride All
        Require all granted
          <IfModule mod_dav.c>
            Dav off
          </IfModule>
        SetEnv HOME /var/www/Nextcloud
        SetEnv HTTP_HOME /var/www/Nextcloud
     </Directory>

     ErrorLog ${APACHE_LOG_DIR}/error.log
     CustomLog ${APACHE_LOG_DIR}/access.log combined

SSLCertificateFile /etc/letsencrypt/live/*********/fullchain.pem
SSLCertificateKeyFile /etc/letsencrypt/live/*********/privkey.pem
Include /etc/letsencrypt/options-ssl-apache.conf
</VirtualHost>
</IfModule>

Display More

nextcloud-localhost.conf

Apache Configuration

<VirtualHost *:80>
     Protocols h2 http/1.1
     ServerAdmin *********
     DocumentRoot /var/www/Nextcloud/
     ServerName *********

     Alias /nextcloud "/var/www/Nextcloud/"

     <Directory /var/www/Nextcloud/>
        Options +FollowSymlinks
        AllowOverride All
        Require all granted
          <IfModule mod_dav.c>
            Dav off
          </IfModule>
        SetEnv HOME /var/www/Nextcloud
        SetEnv HTTP_HOME /var/www/Nextcloud
     </Directory>

     ErrorLog ${APACHE_LOG_DIR}/error.log
     CustomLog ${APACHE_LOG_DIR}/access.log combined

RewriteEngine on
RewriteCond %{SERVER_NAME} =192.168.178.49
RewriteRule ^ https://%{SERVER_NAME}%{REQUEST_URI} [END,NE,R=permanent]
</VirtualHost>

Display More

für SSL verwende ich letsencrypt und certbot

llutz · Dec 4th 2021

Weiter eingrenzen

- vhost (ohne Nextcloud), mit TLS

- vhost http mit php

- vhost mit php und TLS

Alternativ mal mit einer neuen SD-Karte die Anleitung von Franjo G benutzen. Es gibt anscheinend einige Leute hier, die das so (mpm_prefork + php_module) laufen haben, aber nichts von Durchsatzproblemen berichteten.

Pfann · Dec 4th 2021

also ich habe mal rumprobiert und etweas google gespielt.

es liegt am SFTP / SSL vermutlich scheint der raspberry probleme zu haben mit dem encrypten ?

HTTPdownloads laufen wie sie sollen, nur sobald etwas über eine sichere leitung (HTTPS oder SFTP (winscp) läuft, wird der download / upload verlangsamt

llutz · Dec 4th 2021

Was sagt openssl speed -elapsed aes ?

Pfann · Dec 5th 2021

Quote from llutz

Was sagt openssl speed -elapsed aes ?

Code

openssl speed -elapsed aes
You have chosen to measure elapsed time instead of user CPU time.
Doing aes-128 cbc for 3s on 16 size blocks: 13206402 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 64 size blocks: 3518450 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 256 size blocks: 889926 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 1024 size blocks: 224138 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 8192 size blocks: 28042 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 16384 size blocks: 14031 aes-128 cbc's in 3.00s
Doing aes-192 cbc for 3s on 16 size blocks: 11394075 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 64 size blocks: 3008905 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 256 size blocks: 759993 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 1024 size blocks: 191185 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 8192 size blocks: 23921 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 16384 size blocks: 11965 aes-192 cbc's in 3.00s
Doing aes-256 cbc for 3s on 16 size blocks: 10024091 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 64 size blocks: 2628753 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 256 size blocks: 663099 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 1024 size blocks: 166655 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 8192 size blocks: 20859 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 16384 size blocks: 10428 aes-256 cbc's in 3.00s
OpenSSL 1.1.1d  10 Sep 2019
built on: Tue Aug 24 08:30:43 2021 UTC
options:bn(64,64) rc4(char) des(int) aes(partial) blowfish(ptr) 
compiler: gcc -fPIC -pthread -Wa,--noexecstack -Wall -Wa,--noexecstack -g -O2 -fdebug-prefix-map=/build/openssl-RzZXhH/openssl-1.1.1d=. -fstack-protector-strong -Wformat -Werror=format-security -DOPENSSL_USE_NODELETE -DOPENSSL_PIC -DOPENSSL_CPUID_OBJ -DOPENSSL_BN_ASM_MONT -DSHA1_ASM -DSHA256_ASM -DSHA512_ASM -DKECCAK1600_ASM -DVPAES_ASM -DECP_NISTZ256_ASM -DPOLY1305_ASM -DNDEBUG -Wdate-time -D_FORTIFY_SOURCE=2
The 'numbers' are in 1000s of bytes per second processed.
type             16 bytes     64 bytes    256 bytes   1024 bytes   8192 bytes  16384 bytes
aes-128 cbc      70434.14k    75060.27k    75940.35k    76505.77k    76573.35k    76627.97k
aes-192 cbc      60768.40k    64189.97k    64852.74k    65257.81k    65320.28k    65344.85k
aes-256 cbc      53461.82k    56080.06k    56584.45k    56884.91k    56958.98k    56950.78k

Display More

Gleiches Problem an einem Freund seinem Rpi 4 ( Minimal Debian ohne ssl nur SFTP )

llutz · Dec 5th 2021

Die Werte sind ~~imho sehr schwach~~ anscheinend für einen RPi normal - sorry.

Leider bin ich bei RPi4-spezifischen Problemen mangels eigener Hardware raus.

Es wäre aber interessant, ob alle RPi4 derartige Probleme haben.

Hier im Forum ist der (wie mir scheint) sehr weit verbreitet, da müssten sich doch Vergleichsobjekte finden lassen.

fred0815 · Dec 5th 2021

Pi4 8GB:

Code

You have chosen to measure elapsed time instead of user CPU time.
Doing aes-128 cbc for 3s on 16 size blocks: 13826824 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 64 size blocks: 3765716 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 256 size blocks: 981803 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 1024 size blocks: 245598 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 8192 size blocks: 30793 aes-128 cbc's in 3.00s
Doing aes-128 cbc for 3s on 16384 size blocks: 15497 aes-128 cbc's in 3.00s
Doing aes-192 cbc for 3s on 16 size blocks: 12335593 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 64 size blocks: 3302282 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 256 size blocks: 853616 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 1024 size blocks: 215071 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 8192 size blocks: 26737 aes-192 cbc's in 3.00s
Doing aes-192 cbc for 3s on 16384 size blocks: 13428 aes-192 cbc's in 3.00s
Doing aes-256 cbc for 3s on 16 size blocks: 10960373 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 64 size blocks: 2915045 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 256 size blocks: 750412 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 1024 size blocks: 188833 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 8192 size blocks: 23627 aes-256 cbc's in 3.00s
Doing aes-256 cbc for 3s on 16384 size blocks: 11823 aes-256 cbc's in 3.00s
OpenSSL 1.1.1d  10 Sep 2019
built on: Tue Aug 24 08:30:43 2021 UTC
options:bn(64,32) rc4(char) des(long) aes(partial) blowfish(ptr)
compiler: gcc -fPIC -pthread -Wa,--noexecstack -Wall -Wa,--noexecstack -g -O2 -fdebug-prefix-map=/build/openssl-JAgNvF/openssl-1.1.1d=. -fstack-protector-strong -Wformat -Werror=format-security -DOPENSSL_USE_NODELETE -DOPENSSL_PIC -DOPENSSL_CPUID_OBJ -DOPENSSL_BN_ASM_MONT -DOPENSSL_BN_ASM_GF2m -DSHA1_ASM -DSHA256_ASM -DSHA512_ASM -DKECCAK1600_ASM -DAES_ASM -DBSAES_ASM -DGHASH_ASM -DECP_NISTZ256_ASM -DPOLY1305_ASM -DNDEBUG -Wdate-time -D_FORTIFY_SOURCE=2
The 'numbers' are in 1000s of bytes per second processed.
type             16 bytes     64 bytes    256 bytes   1024 bytes   8192 bytes  16384 bytes
aes-128 cbc      73743.06k    80335.27k    83780.52k    83830.78k    84085.42k    84634.28k
aes-192 cbc      65789.83k    70448.68k    72841.90k    73410.90k    73009.83k    73334.78k
aes-256 cbc      58455.32k    62187.63k    64035.16k    64455.00k    64517.46k    64569.34k

Display More

hyle · Dec 5th 2021

RPi4 4GB:

Code

type             16 bytes     64 bytes    256 bytes   1024 bytes   8192 bytes  16384 bytes
aes-128 cbc      74126.16k    80456.77k    83898.11k    84631.89k    84975.62k    84847.27k
aes-192 cbc      65870.28k    70241.62k    72698.20k    73249.45k    73509.55k    73476.78k
aes-256 cbc      58767.69k    62276.71k    64150.19k    64575.83k    64771.41k    64738.65k

zum Vergleich RPi3 B (ohne Plus)

Code

type             16 bytes     64 bytes    256 bytes   1024 bytes   8192 bytes  16384 bytes
aes-128 cbc      37499.98k    44930.03k    47404.63k    48187.73k    48346.45k    48332.80k
aes-192 cbc      33320.93k    38556.61k    40458.84k    40965.80k    41115.65k    41123.84k
aes-256 cbc      30211.47k    34462.44k    35974.66k    36375.55k    36487.17k    36498.09k

Vielleicht hilfts ja weiter.

Pfann · Dec 5th 2021

also im prinzip ist es der rpi ja?

Apache Localer Download langsam ( nur 1 cpu)

Tags

Users Viewing This Thread