it-swarm.com.de

Hat Curl eine Auszeit?

Bisher konnte ich nichts wirklich finden, aber ist es wahr, dass curl überhaupt keine Zeitüberschreitung hat?

 [email protected]:~# curl http://localhost/testdir/image.jpg

Ich frage, weil ich jede Anfrage nach Bildern in testdir an ein separates Apache-Modul umleite, das diese Bilder im laufenden Betrieb generiert. Es kann bis zu 15 Minuten dauern, bis das Bild tatsächlich fertig ist und an den anfragenden Kunden geliefert wird.

Wird curl immer warten (oder hängt es von der Konfiguration ab) oder gibt es eine Zeitüberschreitung?

274
Preexo

Ja.

Timeout-Parameter

curl hat zwei Optionen: --connect-timeout und --max-time.

Zitat aus der Manpage:

--connect-timeout <seconds>
    Maximum  time  in  seconds  that you allow the connection to the
    server to take.  This only limits  the  connection  phase,  once
    curl has connected this option is of no more use.  Since 7.32.0,
    this option accepts decimal values, but the actual timeout  will
    decrease in accuracy as the specified timeout increases in deci‐
    mal precision. See also the -m, --max-time option.

    If this option is used several times, the last one will be used.

und:

-m, --max-time <seconds>
    Maximum  time  in  seconds that you allow the whole operation to
    take.  This is useful for preventing your batch jobs from  hang‐
    ing  for  hours due to slow networks or links going down.  Since
    7.32.0, this option accepts decimal values, but the actual time‐
    out will decrease in accuracy as the specified timeout increases
    in decimal precision.  See also the --connect-timeout option.

    If this option is used several times, the last one will be used.

Standardeinstellungen

Hier (unter Debian) wird nach 2 Minuten nicht mehr versucht, eine Verbindung herzustellen, unabhängig von der mit --connect-timeout Angegebenen Zeit, und obwohl der Standardwert für das Verbindungszeitlimit 5 Minuten zu sein scheint. gemäß dem Makro DEFAULT_CONNECT_TIMEOUT in lib/connect.h .

Ein Standardwert für --max-time Scheint nicht zu existieren, sodass curl ewig auf eine Antwort warten muss, wenn die erste Verbindung erfolgreich ist.

Was ist zu verwenden?

Sie interessieren sich wahrscheinlich für die letztere Option --max-time. Stellen Sie für Ihren Fall 900 Ein (15 Minuten).

Es könnte auch eine gute Idee sein, die Option --connect-timeout Für etwas wie 60 (Eine Minute) anzugeben. Andernfalls versucht curl immer wieder, eine Verbindung herzustellen, anscheinend unter Verwendung eines Backoff-Algorithmus.

367
scai

Es gibt ein Zeitlimit:/usr/bin/timelimit - begrenzt effektiv die absolute Ausführungszeit eines Prozesses

 Options:

 -p      If the child process is terminated by a signal, timelimit
         propagates this condition, i.e. sends the same signal to itself. 
         This allows the program executing timelimit to determine 
         whether the child process was terminated by a signal or 
         actually exited with an exit code larger than 128.
 -q      Quiet operation - timelimit does not output diagnostic 
         messages about signals sent to the child process.
 -S killsig
         Specify the number of the signal to be sent to the 
         process killtime seconds after warntime has expired.  
         Defaults to 9 (SIGKILL).
 -s warnsig
         Specify the number of the signal to be sent to the 
         process warntime seconds after it has been started.  
         Defaults to 15 (SIGTERM).
 -T killtime
         Specify the maximum execution time of the process before 
         sending killsig after warnsig has been sent.  Defaults to 120 seconds.
 -t warntime
         Specify the maximum execution time of the process in 
         seconds before sending warnsig.  Defaults to 3600 seconds.

 On systems that support the setitimer(2) system call, the 
 warntime and killtime values may be specified in fractional 
 seconds with microsecond precision.
18
perpetuity

Besser als --max-time sind die --speed-limit und --speed-time Optionen. Zusamenfassend, --speed-limit gibt die minimale Durchschnittsgeschwindigkeit an, die Sie akzeptieren möchten, und --speed-time gibt an, wie lange die Übertragungsgeschwindigkeit unter dieser Grenze bleiben kann, bevor die Übertragung abläuft und abgebrochen wird.

13
Alex D

Wenn Sie Coreutils unter MacOS installiert haben, können Sie den Befehl GNU timeout) verwenden, der in diesem Paket enthalten ist. Den Tools GNU] wird vor allen ein g also wäre die CLI gtimeout.

gtimeout --help
Usage: gtimeout [OPTION] DURATION COMMAND [ARG]...
 or:  gtimeout [OPTION]
Start COMMAND, and kill it if still running after DURATION.

Beispiel

$ gtimeout 1s curl -I http://www.google.com/
HTTP/1.1 200 OK
Date: Wed, 31 Oct 2018 03:36:08 GMT
Expires: -1
Cache-Control: private, max-age=0
Content-Type: text/html; charset=ISO-8859-1
P3P: CP="This is not a P3P policy! See g.co/p3phelp for more info."
Server: gws
X-XSS-Protection: 1; mode=block
X-Frame-Options: SAMEORIGIN
Set-Cookie: 1P_JAR=2018-10-31-03; expires=Fri, 30-Nov-2018 03:36:08 GMT; path=/; domain=.google.com
HttpOnly
Transfer-Encoding: chunked
Accept-Ranges: none
Vary: Accept-Encoding
3
slm

Einige Lösungen in BASH4 +

# -- server available to check via port xxx ?  --
function isServerAvailableNC() {
    max_secs_run="${3}"
    if timeout $max_secs_run nc -z ${1} ${2} 2>/dev/null >/dev/null; then
        #echo "${1} ✓"
        true
   else
        #echo "${1} ✗"
        return
   fi
}


# -- server available to check via port xxx ?  --
# -- supported protocols (HTTP, HTTPS, FTP, FTPS, SCP, SFTP, TFTP, DICT, TELNET, LDAP or FILE) --
#/usr/bin/curl -sSf --max-time 3 https://ifwewanted.to.confirm.https.com/ --insecure

function isServerAvailableCURL() {

    max_secs_run="${3}"

    proto="http://"
    if [ ! -z ${2} ] || [ ${2} -gt 80 ] ;then
        proto="https://"
    fi

    if /usr/bin/curl -sSf --max-time "${max_secs_run}" "${1}" --insecure 2>/dev/null >/dev/null; then
        #echo "${1} ✓"
        true
    else
        #echo "${1} ✗"
        false
    fi
}

Beispielverwendung:

EMPFEHLEN SIE, DASS NC verwendet wird, wenn wir einen bestimmten Port benötigen

Host="1.2.3.4"
if isServerAvailableCURL "$Host" "80" "3";then
    check_remote_domain_cert "$Host"
fi


Host="1.2.3.4"
if isServerAvailableNC "$Host" "80" "3";then
    check_remote_domain_cert "$Host"
fi
0
Mike Q