Menyelesaikan masalah proxy/webhook file bantuan di Anthos Service Mesh
Bagian ini menjelaskan masalah umum Anthos Service Mesh dan cara menyelesaikannya. Jika Anda memerlukan bantuan tambahan, lihat Mendapatkan dukungan.
Anthos Service Mesh berisi dua webhook:
- Memvalidasi webhook memastikan konfigurasi Istio yang diterapkan valid.
- Webhook yang bermutasi menetapkan injeksi file bantuan otomatis pada pod baru.
Masalah konfigurasi di salah satu webhook ini dapat menyebabkan pod baru gagal dimulai, atau kubectl apply
menghasilkan pesan error.
Masalah injeksi file bantuan
Injeksi file bantuan tidak berfungsi dengan benar jika Anda melihat salah satu dari hal berikut:
- pod yang dijadwalkan tanpa bantuan
- pod yang harus memiliki file bantuan yang dimasukkan tidak akan pernah muncul saat menggunakan
kubectl get pods
, tetapi replika terkait yang ditetapkan darikubectl get replicaset
ada.
Gunakan langkah-langkah berikut untuk memecahkan masalah injeksi file bantuan.
Pastikan namespace atau pod memiliki label injeksi yang benar.
Jika Anda menjalankan Istio revisi tunggal (default), pastikan namespace atau spesifikasi pod memiliki label istio-injection=enabled.
Jika Anda menjalankan Istio beberapa revisi (untuk migrasi tanpa periode nonaktif, beberapa bidang kontrol, dll.), pastikan namespace atau spesifikasi pod Anda memiliki label
istio.io/rev=REVISION
yang sesuai, dengan REVISION sebagai nomor revisi Anthos Service Mesh diistiod
yang sesuai dengan versi Anthos Service Mesh yang dipilih. Untuk informasi selengkapnya tentang label revisi, lihat Memasukkan proxy file bantuan.Pastikan webhook injeksi sidecar istio Anda ada dan memiliki paket CA.
Webhook injektor file bantuan (yang digunakan untuk injeksi file bantuan otomatis) memerlukan paket CA untuk membuat koneksi yang aman dengan server API dan
istiod
. Paket CA ini di-patch ke dalam konfigurasi olehistiod
, tetapi terkadang dapat ditimpa (misalnya, jika Anda menerapkan kembali konfigurasi webhook).Anda dapat memverifikasi keberadaan paket CA menggunakan perintah berikut. Perintah tersebut menyertakan
istio-sidecar-injector-asm-1233-2
, yang dikhususkan untuk versi Anthos Service Mesh ini. Pastikan untuk menggunakan revisi yang sebenarnya jika berbeda.kubectl get mutatingwebhookconfigurations.admissionregistration.k8s.io istio-sidecar-injector-asm-1233-2 -o=jsonpath='{.webhooks[0].clientConfig.caBundle}'
Jika output tidak kosong, paket CA akan dikonfigurasi. Jika paket CA tidak ada, mulai ulang
istiod
agar paket tersebut memindai ulang webhook dan menginstal ulang paket CA.Periksa kegagalan injeksi file bantuan.
Jika Anda telah mengaktifkan injeksi, tetapi tidak melihat penjadwalan pod, periksa status tingkat abstraksi yang lebih tinggi berikutnya. Misalnya, jika Anda menjalankan deployment tetapi tidak ada pod yang dijadwalkan, periksa status kumpulan replika yang sesuai menggunakan perintah berikut:
kubectl -n my-namespace describe replicaset your-deployment-name
Jika kumpulan replika ada, periksa log peristiwa di bagian bawah deskripsi untuk menemukan error. Jika error berkaitan dengan injeksi file bantuan, periksa log
istiod
untuk mengetahui indikasi penyebab error.Jika masalah berlanjut, masalahnya mungkin salah satu dari hal berikut:
- Konfigurasi yang buruk diteruskan ke injektor
- Masalah konfigurasi firewall
- Terjadi masalah pada kode Istio itu sendiri
Lihat Memecahkan masalah Istio untuk mengetahui langkah-langkah diagnostik lainnya.
Proxy envoy tidak menerima konfigurasi dari istiod
Ada beberapa masalah yang dapat mencegah proxy menerima konfigurasi
dari istiod
.
istiod
tidak akan mengirim konfigurasi ke proxy envoy jika mengalami masalah, seperti masalah RBAC yang mencegahnya membaca resource konfigurasinya.Alamat penemuan salah (error 'hulu yang tidak responsif')
Alamat penemuan yang diberikan ke injektor sidecar salah. Jika Anda melihat log yang menyebutkan
gRPC config stream closed, no healthy upstream
, periksa apakah alamat penemuan di meshProxyConfig
sudah benar dan mengarah ke layananistiod
Anda.Konfigurasi yang tidak valid dikirim ke proxy. Dalam hal ini, konfigurasi berhasil dikirim ke proxy, tetapi konfigurasinya tidak valid. Anda akan melihat pesan berulang yang mirip dengan berikut ini:
Envoy proxy is NOT ready: config not received from Pilot (is Pilot running?): cds updates: 1 successful, 0 rejected; lds updates: 0 successful, 1 rejected
Dalam contoh ini,
cds
adalah Layanan Penemuan Cluster (yang melaporkan 1 update yang dikirim dariistiod
), danlds
adalah Layanan Penemuan Pemroses (yang melaporkan 1 update ditolak dariistiod
). Sering kali, Anda akan melihat pesan error sebelumnya yang menjelaskan alasan penolakan, yang biasanya dimulai dengan peringatan tentang konfigurasi envoy atau yang serupa.Untuk memperbaiki masalah ini, selidiki penyebab konfigurasi ditolak. Salah satu penyebab umumnya adalah resource
EnvoyFilter
yang buruk. Jika tidak ada alasan yang jelas, kirimkan laporan bug dengan dump konfigurasi proxy.
Pembuatan pod gagal
Jika Anda mengamati bahwa pod tidak berhasil dibuat, cari pesan error yang mungkin dapat memberikan petunjuk tentang akar masalah, menggunakan perintah berikut:
kubectl describe replicaset YOUR_REPLICA_SET
Pesan error webhook umum
Pesan error yang dihasilkan oleh perintah kubectl apply
dapat memberikan petunjuk tentang akar masalahnya. Lihat tabel berikut untuk pesan error umum, penyebab, dan kemungkinan penyelesaiannya.
Pesan error | Penyebab | Resolusi |
---|---|---|
net/http: request canceled while waiting for connection (Client.Timeout exceeded while awaiting headers) |
Ini mungkin hanya masalah konektivitas jaringan. | Pastikan aturan firewall Anda menyediakan konektivitas ke `istiod` pada port 15017. |
no endpoints available for service 'istiod' |
Hal ini dapat terjadi jika pod `istiod` tidak tersedia atau belum siap. | Periksa pod `istiod` untuk memastikan pod berjalan dan siap. |
Service "istiod" not found |
Hal ini dapat terjadi jika layanan `istiod` tidak ada. | Verifikasi bahwa penginstalan Istio Anda berhasil dan benar. |
x509: certificate signed by unknown authority |
Ini mungkin yang menyebabkan masalah sertifikat webhook. | Pastikan caBundle ditetapkan dengan benar di webhook. |
Failed to update validatingwebhookconfiguration
istio-validator-asm-[version-n]-istio-system (failurePolicy=Fail,
resourceVersion=[version]): Operation cannot be fulfilled on
validatingwebhookconfigurations.admissionregistration.k8s.io
"istio-validator-asm-[version-n]-istio-system": the object has been
modified; please apply your changes to the latest version and try
again. |
Webhook yang memvalidasi dari Istio atau Anthos Service Mesh versi lama yang telah di-uninstal dapat mengganggu upgrade atau penginstalan. | Pastikan semua webhook masih berada di cluster dan hapus semua webhook yang mereferensikan versi yang tidak lagi diinstal. |
Error from server (InternalError): Internal error occurred: failed
calling webhook "rev.namespace.sidecar-injector.istio.io": Post "https://istiod-asm-1122-0.istio-system.svc:443/inject?timeout=10s": context deadline exceeded |
Untuk cluster pribadi, port 15017 harus terbuka. Pesan error ini menunjukkan bahwa port 15017 mungkin tidak terbuka. | Pastikan aturan firewall Anda menyediakan konektivitas ke Istiod pada port 15017. Untuk informasi selengkapnya, lihat Membuka port di cluster pribadi. |