Questa pagina fornisce strategie per la risoluzione dei problemi e soluzioni per alcuni errori comuni.
Quando risolvi i problemi di Knative serving, verifica innanzitutto di poter eseguire l'immagine container in locale.
Se la tua applicazione non viene eseguita in locale, dovrai diagnosticare e risolvere il problema. Utilizza Cloud Logging per eseguire il debug di un progetto di cui è stato eseguito il deployment.
Durante la risoluzione dei problemi di Knative serving, consulta le sezioni seguenti per scoprire le possibili soluzioni al problema.
Controllo dell'output della riga di comando
Se utilizzi Google Cloud CLI, controlla l'output comando per verificare se è riuscito o meno. Ad esempio, se il deployment è stato terminato senza successo, dovrebbe comparire un messaggio di errore che descrive il motivo dell'errore.
Gli errori di deployment sono probabilmente dovuti a un manifest configurato in modo errato o a un comando errato. Ad esempio, l'output seguente indica che devi configurare la percentuale di traffico della route su 100.
Error from server (InternalError): error when applying patch:</p><pre>{"metadata":{"annotations":{"kubectl.kubernetes.io/last-applied-configuration":"{\"apiVersion\":\"serving.knative.dev/v11\",\"kind\":\"Route\",\"metadata\":{\"annotations\":{},\"name\":\"route-example\",\"namespace\":\"default\"},\"spec\":{\"traffic\":[{\"configurationName\":\"configuration-example\",\"percent\":50}]}}\n"}},"spec":{"traffic":[{"configurationName":"configuration-example","percent":50}]}}
to:
&{0xc421d98240 0xc421e77490 default route-example STDIN 0xc421db0488 264682 false}
for: "STDIN": Internal error occurred: admission webhook "webhook.knative.dev" denied the request: mutation failed: The route must have traffic percent sum equal to 100.
ERROR: Non-zero return code '1' from command: Process exited with status 1
Controllo dei log per il servizio in corso...
Puoi utilizzare Cloud Logging o la pagina Knative serving nella console Google Cloud per controllare i log delle richieste e i log dei container. Per informazioni dettagliate, consulta Logging e visualizzazione dei log.
Se utilizzi Cloud Logging, la risorsa su cui devi filtrare è Container Kubernetes.
Controllo dello stato del servizio in corso...
Esegui questo comando per ottenere lo stato di un servizio Knative serving di cui è stato eseguito il deployment:
gcloud run services describe SERVICE
Puoi aggiungere --format yaml(status)
o --format json(status)
per ottenere lo stato
completo, ad esempio:
gcloud run services describe SERVICE --format 'yaml(status)'
Le condizioni in status
possono aiutarti a individuare la causa dell'errore.
Le condizioni possono includere True
, False
o Unknown
:
- Pronto:
True
indica che il servizio è configurato e pronto a ricevere traffico. - ConfigurationReady:
True
indica che la Configurazione sottostante è pronta. PerFalse
oUnknown
, devi visualizzare lo stato dell'ultima revisione. - RoutesReady:
True
indica che la route sottostante è pronta. PerFalse
oUnknown
, devi visualizzare lo stato del percorso.
Per ulteriori dettagli sulle condizioni dello stato, consulta Knative Error Signaling.
Verifica dello stato del percorso
Ogni servizio Knative serving gestisce una route che rappresenta lo stato di routing attuale rispetto alle revisioni del servizio.
Puoi verificare lo stato generale della route osservando lo stato del servizio:
gcloud run services describe SERVICE --format 'yaml(status)'
La condizione RoutesReady in status
fornisce lo stato della route.
Puoi eseguire un'ulteriore diagnosi dello stato della route eseguendo questo comando:
kubectl get route SERVICE -o yaml
Le condizioni in status
forniscono il motivo dell'errore. Vale a dire:
Pronto indica se il servizio è configurato e se ha backend disponibili. Se è
true
, il percorso è configurato correttamente.AllTrafficAssigned indica se il servizio è configurato correttamente e se ha backend disponibili. Se il valore
status
di questa condizione non èTrue
:Prova a controllare se la suddivisione del traffico tra le revisioni del tuo servizio è pari al 100%:
gcloud run services describe SERVICE
In caso contrario, modifica la suddivisione del traffico utilizzando il comando
gcloud run services update-traffic
.Prova a controllare lo stato delle revisioni per le revisioni che ricevono traffico.
IngressReady indica se l'oggetto Ingress è pronto. Se
status
di questa condizione non èTrue
, prova a controllare lo stato del traffico in entrata.CertificateProvisioned indica se è stato eseguito il provisioning dei certificati Knative. Se il valore
status
di questa condizione non èTrue
, prova a risolvere i problemi relativi a TLS gestito.
Per ulteriori dettagli sulle condizioni di stato, consulta Condizioni di errore e reporting di Knative.
Controllo dello stato del traffico in entrata in corso...
Knative serving utilizza un servizio di bilanciamento del carico denominato
istio-ingressgateway
, responsabile della gestione del traffico in entrata
dall'esterno del cluster.
Per ottenere l'IP esterno per il bilanciatore del carico, esegui questo comando:
kubectl get svc istio-ingressgateway -n ASM-INGRESS-NAMESPACE
Sostituisci ASM-INGRESS-NAMESPACE con lo spazio dei nomi in cui si trova il traffico in entrata di Cloud Service Mesh. Specifica istio-system
se hai installato Cloud Service Mesh utilizzando la configurazione predefinita.
L'output risultante è simile al seguente:
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) istio-ingressgateway LoadBalancer XX.XX.XXX.XX pending 80:32380/TCP,443:32390/TCP,32400:32400/TCP
dove il valore EXTERNAL-IP è il tuo indirizzo IP esterno del Load Balancer.
Se EXTERNAL-IP è pending
, consulta la sezione
EXTERNAL-IP è pending
per un lungo periodo di tempo di seguito.
Controllo dello stato della revisione in corso...
Per ottenere l'ultima revisione del tuo servizio Knative serving, esegui questo comando:
gcloud run services describe SERVICE --format='value(status.latestCreatedRevisionName)'
Esegui questo comando per ottenere lo stato di una revisione di Knative serving specifica:
gcloud run revisions describe REVISION
Puoi aggiungere --format yaml(status)
o --format json(status)
per ottenere lo stato completo:
gcloud run revisions describe REVISION --format yaml(status)
Le condizioni in status
forniscono i motivi di un errore. Vale a dire:
- Pronta indica se le risorse di runtime sono pronte. Se è
true
, la revisione è configurata correttamente. - ResourcesAvailable indica se è stato eseguito il provisioning delle risorse Kubernetes sottostanti.
Se il valore
status
di questa condizione non èTrue
, prova a controllare lo stato del pod. - ContainerHealthy indica se il controllo di idoneità della revisione è stato completato.
Se il valore
status
di questa condizione non èTrue
, prova a controllare lo stato del pod. - Attiva indica se la revisione sta ricevendo traffico.
Se il valore di status
di queste condizioni non è True
, prova a controllare lo stato del pod.
Controllo dello stato dei pod
Per ottenere i pod per tutti i tuoi deployment:
kubectl get pods
Dovrebbe essere visualizzato un elenco di tutti i pod con stato breve. Ad esempio:
NAME READY STATUS RESTARTS AGE
configuration-example-00001-deployment-659747ff99-9bvr4 2/2 Running 0 3h
configuration-example-00002-deployment-5f475b7849-gxcht 1/2 CrashLoopBackOff 2 36s
Scegline una e utilizza il comando seguente per visualizzare informazioni dettagliate relative a status
. Alcuni campi utili sono conditions
e containerStatuses
:
kubectl get pod POD-NAME -o yaml
EXTERNAL-IP è <pending>
per molto tempo
A volte potresti non ricevere un indirizzo IP esterno subito dopo aver creato un cluster, ma vedere l'IP esterno come pending
. Ad esempio, puoi verificarlo richiamando il comando:
Per ottenere l'IP esterno per il bilanciatore del carico, esegui questo comando:
kubectl get svc istio-ingressgateway -n ASM-INGRESS-NAMESPACE
Sostituisci ASM-INGRESS-NAMESPACE con lo spazio dei nomi in cui si trova il traffico in entrata di Cloud Service Mesh. Specifica istio-system
se hai installato Cloud Service Mesh utilizzando la configurazione predefinita.
L'output risultante è simile al seguente:
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) istio-ingressgateway LoadBalancer XX.XX.XXX.XX pending 80:32380/TCP,443:32390/TCP,32400:32400/TCP
dove il valore EXTERNAL-IP è il tuo indirizzo IP esterno del Load Balancer.
Ciò potrebbe significare che hai esaurito la quota di indirizzi IP esterni in Google Cloud. Per verificare la possibile causa, richiama:
kubectl describe svc istio-ingressgateway -n INGRESS_NAMESPACEdove INGRESS_NAMESPACE è lo spazio dei nomi del traffico ASM in entrata che per impostazione predefinita è "istio-system". Questo genera un output simile al seguente:
Name: istio-ingressgateway Namespace: INGRESS_NAMESPACE Labels: app=istio-ingressgateway istio=ingressgateway istio.io/rev=asm-1102-3 operator.istio.io/component=IngressGateways operator.istio.io/managed=Reconcile operator.istio.io/version=1.10.2-asm.3 release=istio Annotations: kubectl.kubernetes.io/last-applied-configuration={"apiVersion":"v1","kind":"Service","metadata":{"annotations":{},"labels":{"addonmanager.kubernetes.io/mode":"Reconcile","app":"istio-ingressgateway","... Selector: app=istio-ingressgateway,istio=ingressgateway Type: LoadBalancer IP: 10.XX.XXX.XXX LoadBalancer Ingress: 35.XXX.XXX.188 Port: http2 80/TCP TargetPort: 80/TCP NodePort: http2 31380/TCP Endpoints: XX.XX.1.6:80 Port: https 443/TCP TargetPort: 443/TCP NodePort: https 3XXX0/TCP Endpoints: XX.XX.1.6:XXX Port: tcp 31400/TCP TargetPort: 3XX00/TCP NodePort: tcp 3XX00/TCP Endpoints: XX.XX.1.6:XXXXX Port: tcp-pilot-grpc-tls 15011/TCP TargetPort: 15011/TCP NodePort: tcp-pilot-grpc-tls 32201/TCP Endpoints: XX.XX.1.6:XXXXX Port: tcp-citadel-grpc-tls 8060/TCP TargetPort: 8060/TCP NodePort: tcp-citadel-grpc-tls 31187/TCP Endpoints: XX.XX.1.6:XXXX Port: tcp-dns-tls 853/TCP TargetPort: XXX/TCP NodePort: tcp-dns-tls 31219/TCP Endpoints: 10.52.1.6:853 Port: http2-prometheus 15030/TCP TargetPort: XXXXX/TCP NodePort: http2-prometheus 30944/TCP Endpoints: 10.52.1.6:15030 Port: http2-grafana 15031/TCP TargetPort: XXXXX/TCP NodePort: http2-grafana 31497/TCP Endpoints: XX.XX.1.6:XXXXX Session Affinity: None External Traffic Policy: Cluster Events: Type Reason Age From Message ---- ------ ---- ---- ------- Normal EnsuringLoadBalancer 7s (x4318 over 15d) service-controller Ensuring load balancer
Se l'output contiene un'indicazione che la quota IN_USE_ADDRESSES
è stata superata, puoi richiedere una quota aggiuntiva accedendo alla pagina IAM e amministrazione nella console Google Cloud per richiedere una quota aggiuntiva.
Il gateway continuerà a riprovare finché non viene assegnato un indirizzo IP esterno. L'operazione potrebbe richiedere alcuni minuti.
Risoluzione dei problemi relativi a domini personalizzati e TLS gestito
Segui i passaggi di risoluzione dei problemi elencati di seguito per risolvere i problemi generali relativi ai domini personalizzati e alla funzionalità dei certificati TLS gestiti.
Domini personalizzati per reti interne private
Se hai mappato un dominio personalizzato al cluster o ai servizi Knative serving all'interno di una rete interna privata, devi disabilitare i certificati TLS gestiti, altrimenti la configurazione del tuo dominio non riuscirà a raggiungere lo stato ready
. Per impostazione predefinita, il bilanciatore del carico interno non è in grado di comunicare esternamente con l'autorità di certificazione.
Controllare lo stato di una mappatura di domini specifica
Per verificare lo stato di una mappatura di domini specifica:
Esegui il comando:
gcloud run domain-mappings describe --domain DOMAIN --namespace NAMESPACE
Sostituisci
- DOMAIN con il nome del dominio che stai utilizzando.
- NAMESPACE con lo spazio dei nomi che utilizzi per la mappatura del dominio.
Nei risultati di
yaml
generati da questo comando, esamina la condizione del campoCertificateProvisioned
per determinare la natura dell'errore.Se viene visualizzato un errore, dovrebbe corrispondere a uno degli errori riportati nella tabella seguente. Segui i suggerimenti nelle tabelle per risolvere il problema.
Errori di configurazione utente
Codice di errore | Dettagli |
---|---|
DNSErrored | Messaggio:
Il record DNS non è configurato correttamente. Occorre mappare il dominio [XXX] all'IP XX.XX.XX.XX
Segui le istruzioni fornite per configurare correttamente il tuo record DNS. |
RateLimitExceeded | Messaggio:
acme: urn:ietf:params:acme:error:ratelimited: Errore durante la creazione del nuovo ordine
:: troppi certificati già emessi per l'insieme esatto di domini: test.your-domain.com: consulta https://letsencrypt.org/docs/rate-limits/ La quota Let's Encrypt è stata superata. Devi aumentare la quota del certificato Let's Encrypt per l'host. |
InvalidDomainMappingName | Messaggio:
Il nome DomainMapping %s non può essere uguale all'host dell'URL di route %s.
Il nome DomainMapping non può essere esattamente uguale all'host della route su cui viene mappato. Utilizza un dominio diverso per il nome DomainMapping. |
ChallengeServingErrored | Messaggio: Il sistema non è riuscito a gestire la richiesta HTTP01.
Questo errore può verificarsi se il servizio
|
Errori di sistema
Codice di errore | Dettagli |
---|---|
OrderErrored
AuthzErrored ChallengeErrored |
Questi 3 tipi di errori si verificano se la verifica della proprietà del dominio da parte di Let's Encrypt non va a buon fine.
In genere si tratta di errori temporanei che vengono tentati da Knative serving. Il ritardo tra i tentativi è esponenziale, con un minimo di 8 secondi e un massimo di 8 ore. Se vuoi riprovare manualmente a risolvere l'errore, puoi eliminare manualmente l'ordine non riuscito.
|
ACMEAPIFailed | Questo tipo di errore si verifica quando Knative serving non riesce a chiamare Let's Encrypt. In genere si tratta di un errore temporaneo che verrà riprovato da Knative serving.
Se vuoi riprovare manualmente a risolvere l'errore, elimina manualmente l'ordine non riuscito.
|
UnknownErrored | Questo errore indica un errore di sistema sconosciuto, che dovrebbe verificarsi molto raramente nel cluster GKE. Se visualizzi questo messaggio, contatta l'assistenza Cloud per ricevere aiuto per il debug. |
Verifica lo stato dell'ordine
Lo stato dell'ordine registra il processo di interazione con Let's Encrypt e quindi può essere utilizzato per eseguire il debug dei problemi relativi a Let's Encrypt. Se necessario, verifica lo stato dell'ordine eseguendo questo comando:
kubectl get order DOMAIN -n NAMESPACE -oyaml
Sostituisci
- DOMAIN con il nome del dominio che stai utilizzando.
- NAMESPACE con lo spazio dei nomi che utilizzi per la mappatura del dominio.
I risultati conterranno i certificati emessi e altre informazioni se l'ordine è andato a buon fine.
Timeout ordine
Un oggetto Order scadrà dopo 20 minuti se non è ancora in grado di ottenere i certificati.
Verifica lo stato della mappatura dei domini. Per un timeout, cerca un messaggio di errore simile al seguente nell'output dello stato:
order (test.your-domain.com) timed out (20.0 minutes)
Una causa comune del problema di timeout è che il record DNS non è configurato correttamente per mappare il dominio in uso all'indirizzo IP del servizio in entrata. Esegui questo comando per controllare il record DNS:
host DOMAIN
Controlla l'indirizzo IP esterno del bilanciatore del carico in entrata:
Per ottenere l'IP esterno per il bilanciatore del carico, esegui questo comando:
kubectl get svc istio-ingressgateway -n ASM-INGRESS-NAMESPACE
Sostituisci ASM-INGRESS-NAMESPACE con lo spazio dei nomi in cui si trova il traffico in entrata di Cloud Service Mesh. Specifica
istio-system
se hai installato Cloud Service Mesh utilizzando la configurazione predefinita.L'output risultante è simile al seguente:
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) istio-ingressgateway LoadBalancer XX.XX.XXX.XX pending 80:32380/TCP,443:32390/TCP,32400:32400/TCP
dove il valore EXTERNAL-IP è il tuo indirizzo IP esterno del Load Balancer.
Se l'indirizzo IP esterno del tuo dominio non corrisponde all'indirizzo IP in entrata, riconfigura il record DNS in modo che venga mappato all'indirizzo IP corretto.
Una volta che il record DNS (aggiornato) diventa effettivo, esegui questo comando per eliminare l'oggetto Order e riattivare il processo di richiesta di un certificato TLS:
kubectl delete order DOMAIN -n NAMESPACE
Sostituisci
- DOMAIN con il nome del dominio che stai utilizzando.
- NAMESPACE con lo spazio dei nomi che utilizzi.
Errori di autorizzazione
Gli errori di autorizzazione possono verificarsi quando un record DNS non viene propagato a livello globale in tempo. Di conseguenza, Let's Encrypt non riesce a verificare la proprietà del dominio.
Controlla lo stato dell'ordine. Trova il link authz nel campo
acmeAuthorizations
dello stato. L'URL dovrebbe essere simile al seguente:https://acme-v02.api.letsencrypt.org/acme/authz-v3/1717011827
Apri il link. Se viene visualizzato un messaggio simile a questo:
urn:ietf:params:acme:error:dns
il problema è dovuto a una propagazione DNS incompleta.
Per risolvere l'errore di propagazione DNS:
Controlla l'indirizzo IP esterno del bilanciatore del carico in entrata:
Per ottenere l'IP esterno per il bilanciatore del carico, esegui questo comando:
kubectl get svc istio-ingressgateway -n ASM-INGRESS-NAMESPACE
Sostituisci ASM-INGRESS-NAMESPACE con lo spazio dei nomi in cui si trova il traffico in entrata di Cloud Service Mesh. Specifica
istio-system
se hai installato Cloud Service Mesh utilizzando la configurazione predefinita.L'output risultante è simile al seguente:
NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) istio-ingressgateway LoadBalancer XX.XX.XXX.XX pending 80:32380/TCP,443:32390/TCP,32400:32400/TCP
dove il valore EXTERNAL-IP è il tuo indirizzo IP esterno del Load Balancer.
Verifica il record DNS del dominio eseguendo questo comando:
host DOMAIN
Se l'indirizzo IP del record DNS non corrisponde all'IP esterno del bilanciatore del carico in entrata, configura il record DNS per mappare il dominio dell'utente all'IP esterno.
Una volta che il record DNS (aggiornato) diventa effettivo, esegui questo comando per eliminare l'oggetto Order e riattivare il processo di richiesta di un certificato TLS:
kubectl delete order DOMAIN -n NAMESPACE
Sostituisci
- DOMAIN con il nome del dominio che stai utilizzando.
- NAMESPACE con lo spazio dei nomi che utilizzi per la mappatura del dominio.
Errore di deployment in cluster privato: errore di chiamata del webhook non riuscito
Il firewall potrebbe non essere configurato correttamente se il deployment in un cluster privato non riesce e visualizza il messaggio:
Error: failed calling webhook "webhook.serving.knative.dev": Post
https://webhook.knative-serving.svc:443/?timeout=30s: context deadline exceeded (Client.Timeout
exceeded while awaiting headers)
Per informazioni sulle modifiche al firewall necessarie per supportare il deployment in un cluster privato, consulta Abilitazione dei deployment in un cluster privato.
Stato del report dei servizi di IngressNotConfigurad
Se nello stato del servizio viene visualizzato IngressNotConfigured
, potresti dover riavviare il deployment di istiod
nello spazio dei nomi istio-system
se utilizzi Cloud Service Mesh del piano di controllo nel cluster. Questo errore,
che è stato osservato più spesso su Kubernetes 1.14
, può verificarsi se
i servizi vengono creati prima che istiod
sia pronto per iniziare il lavoro di
riconciliazione di VirtualServices
e push della configurazione di Envoy ai
gateway in entrata.
Per risolvere il problema, fai lo scale in e poi lo scale out di nuovo del deployment utilizzando comandi simili ai seguenti:
kubectl scale deployment istiod -n istio-system --replicas=0
kubectl scale deployment istiod -n istio-system --replicas=1
Mancano metriche per conteggio delle richieste e latenza delle richieste
Il tuo servizio potrebbe non segnalare il conteggio delle richieste di revisione e le metriche di latenza della richiesta se hai abilitato Workload Identity e non hai concesso determinate autorizzazioni all'account di servizio utilizzato dal tuo servizio.
Puoi risolvere il problema seguendo i passaggi nella sezione Attivare le metriche in un cluster con Workload Identity.