国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn)

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn) 剛接手 Kubernetes 那陣我對kubectl get pod的輸出基本是無條件信任的STATUS 是 RunningREADY 是 1/1就覺得這 Pod 穩(wěn)了。直到有一次線上事故所有 Pod 看起來全是 Running 1/1結(jié)果業(yè)務(wù)錯誤率猛漲最后定位到根因是進程活著但業(yè)務(wù)線程池已經(jīng)掛了而那個服務(wù)壓根沒配就緒探針。從那時候起我開始較真kubectl get pod里的 READY 和 STATUS 這兩列到底是從哪來的先說結(jié)論它們都不是 API Server 里某個現(xiàn)成字段的直接透傳而是 kubectl 客戶端把 Pod 對象里一堆狀態(tài)字段匯總之后按照一定優(yōu)先級當場算出來的展示值。這篇文章我?guī)惆堰@套計算邏輯徹底拆開——分別看它們讀的是哪些底層字段、STATUS 列各種顯示值背后的決策樹是什么、以及怎么利用這套機制把排障效率提上去。適合所有被0/1、CrashLoopBackOff、ContainerCreating折磨過的 K8s 使用者和運維同學(xué)。1. 先把 kubectl get pod 的輸出和底層數(shù)據(jù)對上號kubectl get pod默認展示的列是 NAME、READY、STATUS、RESTARTS、AGE。加-o wide之后會多出 IP、NODE、NOMINATED NODE、READINESS GATES 這幾列。但不管顯示幾列它們的源頭都是同一個東西API Server 返回的 Pod 對象 JSON。想看到完整的原始數(shù)據(jù)最直接的方式是kubectl get pod pod-name -o json這段 JSON 里包含一個龐大的status結(jié)構(gòu)。我們只挑和本文相關(guān)的字段列出來JSON 字段含義影響哪一列metadata.deletionTimestampPod 被標記刪除的時間戳STATUSTerminatingmetadata.deletionGracePeriodSeconds優(yōu)雅刪除寬限期STATUSTerminatingstatus.phasePod 生命周期的大階段STATUS基礎(chǔ)值Pending/Running/Failed 等status.reason節(jié)點或控制器上報的具體原因STATUS如 Evicted、NodeLoststatus.conditions[]Pod 級別的條件集合包括 Ready、ContainersReady、Initialized、PodScheduled與 READY 列間接相關(guān)status.containerStatuses[]每個業(yè)務(wù)容器的詳細狀態(tài)state、ready、restartCount、lastStateREADY 列、STATUS 列status.initContainerStatuses[]每個初始化容器的詳細狀態(tài)READY 列初始化期間、STATUS 列Init 相關(guān)這里面最關(guān)鍵的一個認知是kubectl get 顯示的是客戶端渲染出來的視圖不是服務(wù)端存了一個顯示用字段。你進 etcd 里翻 Pod 對象找不到一個叫 STATUS 列 的東西能找到的只有上面這些結(jié)構(gòu)化字段。換句話說kubectl get pod的打印邏輯本質(zhì)上是把 Pod 狀態(tài)翻譯成人話的過程。kubectl 的這套打印邏輯對應(yīng)源碼里的staging/src/k8s.io/kubectl/pkg/printers/internalversion/printers.go核心函數(shù)是printPod。接下來我按 READY 和 STATUS 兩條線分別拆。2. READY 列容器就緒狀態(tài)的聚合統(tǒng)計READY 列的格式是X/Y比如1/1、0/2。很多人以為它表示Pod 里有多少容器在運行其實不準確它統(tǒng)計的是容器的 Ready 字段也就是就緒狀態(tài)和進程是否活著是兩個維度。2.1 X 和 Y 分別是怎么算出來的Y 的分母很簡單spec.containers數(shù)組的長度也就是普通業(yè)務(wù)容器的數(shù)量。注意Init 容器不算在內(nèi)這個后面細說。X 的算法大概是這樣的readyContainers : 0 for _, cs : range pod.Status.ContainerStatuses { if cs.Ready { readyContainers } } totalContainers : len(pod.Spec.Containers) // 如果 Pod 還在初始化階段READY 列固定顯示 0/N所以1/1表示Pod 里定義了 1 個業(yè)務(wù)容器且這個容器的ContainerStatuses[*].Ready為 true。這里有個容易踩的坑Pod 在初始化的過程中即使業(yè)務(wù)容器已經(jīng)創(chuàng)建了READY 也會顯示0/N。因為初始化階段有個硬邏輯——只要 Init 容器還沒全部跑完kubectl 就不去統(tǒng)計普通容器的就緒數(shù)直接輸出0/業(yè)務(wù)容器總數(shù)。所以看到0/2別急著下結(jié)論先看 STATUS 列是不是Init:1/2或者PodInitializing。2.2 容器 Ready 到底由誰決定一個容器的 Ready 屬性由 kubelet 維護具體判斷方式取決于你有沒有配探針沒配任何探針容器啟動進入 Running 狀態(tài)后kubelet 會很快把 Ready 置為 true。進程活著就等于就緒。配了 readinessProbe就緒探針容器進程活著還不夠必須探針連續(xù)成功一次Ready 才會變 true。探針一旦失敗Ready 立刻變 false。配了 startupProbe啟動探針容器啟動后先跑 startupProbe成功之前 readinessProbe 根本不生效Ready 保持 false。這就解釋了最常見的詭異現(xiàn)象STATUS 是 RunningREADY 卻是 0/1。容器確實在跑但 readinessProbe 一直失敗kubelet 只負責(zé)執(zhí)行探針并同步 Ready 狀態(tài)并不會因為你業(yè)務(wù)沒就緒就把 STATUS 改成別的。所以 READY 列本質(zhì)上是一個業(yè)務(wù)是否被判定為可服務(wù)的開關(guān)聚合而不是進程是否存活的聚合。真正決定這個開關(guān)的是 Kubelet 的探針機制這也是為什么很多正式環(huán)境強制要求核心服務(wù)必須配 readinessProbe 的原因——沒有探針一個依賴下游超時的服務(wù)依然會對外顯示 1/1但請求進來全掛在等待上。2.3 readinessGatesPod 級別的另類就緒門控除了容器自身的 ReadyPod 還可以通過spec.readinessGates聲明額外的就緒條件。比如spec: readinessGates: - conditionType: example.com/healthy如果聲明了這個 gatePod 的 Ready condition 必須同時滿足所有容器 Ready和所有 gate 對應(yīng)的 condition 為 True才能算 Pod 就緒。這個機制常被用來讓自定義控制器參與就緒判定比如某些網(wǎng)絡(luò)組件會在 CNI 配置沒就緒時寫一個 False 的 condition。不過要注意一個細節(jié)readinessGates 影響的是 Pod 的 Ready condition不一定直接影響 READY 列的數(shù)字。因為 READY 列統(tǒng)計的是容器級containerStatuses[*].Ready而不是 Pod 級 Ready 條件。你可能會看到 READY 1/1 但 Pod Ready condition 是 False 的情況此時這個 Pod 依然不會進 Service 的 Endpoints。這種顯示正常但實際不服務(wù)的場景排查時很容易被忽略。2.4 restarts 對 READY 的短暫影響容器重啟期間舊容器被終止、新容器在創(chuàng)建新容器的 Ready 會短暫為 false。所以 CrashLoopBackOff 里 Pod 的 READY 長期是 0/1一旦某個周期內(nèi)容器能撐夠時間READY 會短暫跳到 1/1然后又掉回 0/1。這個變化用kubectl get pod -w看得非常清楚。3. STATUS 列一套客戶端決策樹算出來的印象分STATUS 列是所有 K8s 新手最先看的列也是誤解最多的列。先說個讓人意外的事實STATUS 顯示什么并不是 API Server 告訴 kubectl 的而是 kubectl 自己根據(jù) Pod 的一堆字段按優(yōu)先級現(xiàn)場決策的。3.1 printPod 的決策優(yōu)先級把printPod的邏輯簡化成一個決策樹大概是這樣的1. 如果滿足刪除中條件 - Terminating節(jié)點失聯(lián)場景可能顯示 Unknown而不是 Terminating 2. 如果 Init 容器還沒全部成功退出 - 某個 init 容器失敗Init:Error / Init:ExitCode:x / Init:Signal:x - 某個 init 容器正在運行Init:N/MN已成功退出數(shù)M總數(shù) - 某個 init 容器在等待PodInitializing 3. 上面都不滿足時遍歷普通容器但只看第一個容器 - 如果它處于 Waiting 且 reason 非空用這個 reason 當作 STATUS 比如 ContainerCreating、CrashLoopBackOff、ErrImagePull - 如果它處于 Terminated 且 reason 非空用這個 reason 當作 STATUS 比如 Completed、Error、OOMKilled 4. 如果上面都沒拿到有意義的 reason退回 Pod.Status.Reason再退回 Pod.Status.Phase - phase Succeeded - Completed - phase Failed - Error - phase Running - Running - phase Pending - Pending這個順序里最容易被忽略的兩點STATUS 列只看第一個普通容器。如果 Pod 里有多個容器第二個、第三個容器即使 CrashLoopBackOff只要第一個容器在 RunningSTATUS 依然可能是 Running。這種多容器 Pod 的狀態(tài)顯示盲區(qū)是排障時最坑的細節(jié)。容器處于 Running 但 readiness 失敗時STATUS 不會顯示 NotReady。kubectl 沒有為readiness 失敗單獨設(shè)計一種顯示值所以 Running 0/1 是同時出現(xiàn)的。很多人看到 Running 就覺得 OK其實問題就藏在這里。3.2 各種 STATUS 顯示值到底對應(yīng)什么底層狀態(tài)我整理了一張速查表基本覆蓋日常最常見的 STATUS 值STATUS 顯示底層狀態(tài)常見誘因PendingphasePending沒有其他 reason 覆蓋調(diào)度失敗、資源不足、等待存儲ContainerCreating第一個容器 Waiting reasonContainerCreating鏡像拉取、sandbox 創(chuàng)建、CNI 配置ErrImagePull容器 Waiting reasonErrImagePull鏡像不存在、倉庫認證失敗、地址錯誤ImagePullBackOff容器 Waiting reasonImagePullBackOff鏡像拉取連續(xù)失敗后的退避階段CrashLoopBackOff容器 Waiting reasonCrashLoopBackOff容器啟動后反復(fù)崩潰kubelet 退避重啟Running第一個容器處于 Running 狀態(tài)正?;蛘咛结樜磁渲?探針失敗但容器存活Completed容器 Terminated reasonCompleted 且 phaseSucceededJob 正常結(jié)束Error容器 Terminated reasonError或 phaseFailed啟動腳本出錯、探針失敗導(dǎo)致重啟等OOMKilled容器 Terminated reasonOOMKilled內(nèi)存超過 cgroup 限制被內(nèi)核殺掉TerminatingdeletionTimestamp 已設(shè)置執(zhí)行了 delete等待優(yōu)雅退出或卡刪除Unknown節(jié)點失聯(lián)且 Pod 設(shè)置了 NodeLost 相關(guān) reasonkubelet 長時間不上報狀態(tài)Evictedstatus.reasonEvicted節(jié)點資源壓力驅(qū)逐這個表里的值不是隨便拍的它們要么直接來自containerStatuses[*].state.waiting.reason要么來自state.terminated.reason要么來自status.reason/status.phase。所以你會發(fā)現(xiàn)STATUS 列其實是一個第一個異常狀態(tài)的快速入口——它的設(shè)計目標是讓你一眼看出最值得關(guān)注的容器問題而不是告訴你整個 Pod 的健康全貌。3.3 一個補充STATUSRunning 但 READY0/1 的官方解釋回到開頭那個現(xiàn)象。容器狀態(tài)機里有一個獨立的維度叫State分為 Waiting、Running、Terminated 三態(tài)。readiness 是另一個獨立的布爾維度。kubectl 在渲染 STATUS 列時看的是 State 相關(guān)字段在渲染 READY 列時看的是 Ready 布爾值。兩邊各行其是所以會出現(xiàn)容器 StateRunningReadyfalse - STATUSRunningREADY0/1容器 StateWaiting(reasonCrashLoopBackOff)Readyfalse - STATUSCrashLoopBackOffREADY0/1理解了這個兩套維度各算各的設(shè)計很多所謂的詭異顯示就都能解釋通了。比如容器剛被 OOM 殺掉State 變成 Terminated reasonOOMKilled但 kubelet 正在重啟它STATUS 可能短時間閃過 OOMKilled 然后變成 CrashLoopBackOff。4. 三層狀態(tài)模型phase、conditions、containerState 的關(guān)系如果你覺得上一節(jié)的決策樹有點繞那可能是因為還沒建立 Pod 狀態(tài)的整體模型。我習(xí)慣把 Pod 狀態(tài)拆成三層來看排障時一層一層剝。4.1 第一層Pod Phase階段status.phase是 Pod 生命周期最粗粒度的描述只有五個值PendingPod 已被 API Server 接受但還沒有完成調(diào)度或者某些容器還沒啟動。RunningPod 已綁定節(jié)點所有容器已被創(chuàng)建且至少有一個容器在運行或正在啟動。Succeeded所有容器都以退出碼 0 正常結(jié)束且不會被重啟。Failed所有容器都已終止至少有一個容器以非 0 退出碼結(jié)束。UnknownAPI Server 長時間無法從 kubelet 獲取 Pod 狀態(tài)一般是節(jié)點失聯(lián)。Phase 是一個控制面視角的粗分類你不會從這里知道鏡像拉到了沒有探針過了沒有它太粗了。4.2 第二層Pod Conditions條件status.conditions是一組更細的布爾條件標準的有四個PodScheduledPod 是否已成功調(diào)度到節(jié)點。Initialized所有 Init 容器是否已執(zhí)行完成。ContainersReady所有業(yè)務(wù)容器是否都 Ready。Ready整個 Pod 是否就緒等價于 ContainersReady 且所有 readinessGates 滿足。每個 condition 都有statusTrue/False/Unknown、reason和message。查看方式kubectl get pod pod-name -o jsonpath{.status.conditions[*].type}{.status.conditions[*].status}{\n}或者看 YAMLkubectl get pod pod-name -o yaml | grep -A 12 conditions如果你的 Pod 被寫入了自定義 condition比如某些控制器會寫example.com/healthy那它也會出現(xiàn)在這個數(shù)組里。Pod 的 Ready condition 是控制器、Service Endpoints 是否收錄該 Pod 的依據(jù)之一。4.3 第三層Container State容器狀態(tài)容器層狀態(tài)是排障時信息量最大的一層。每個容器在status.containerStatuses[]里都有一個state字段三選一state : { waiting: { reason, message } running: { startedAt } terminated: { exitCode, reason, signal, startedAt, finishedAt } }值得專門做一張 reason 速查表state 字段的 reason含義ContainerCreatingkubelet 正在創(chuàng)建容器可能卡在 sandbox 或卷掛載CrashLoopBackOff容器啟動后崩潰kubelet 正在退避等待下一次重啟ErrImagePull首次拉取鏡像失敗ImagePullBackOff鏡像拉取連續(xù)失敗進入退避CreateContainerConfigError容器配置有問題比如 ConfigMap/Secret 不存在StartError容器運行時啟動失敗OOMKilled容器因超限被殺Completed容器正常退出退出碼 0Error容器異常退出除此之外lastState字段很有價值。它記錄的是容器上一次的狀態(tài)快照。當容器處于 CrashLoopBackOff 時當前 state 多半是 waiting但上一次的 terminated 信息里能看到 exitCode 和 OOMKilled 標志這是定位崩潰根因的鑰匙。kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState三層之間是遞進關(guān)系容器 State 決定容器的 Ready 和 Phase 的走向容器 Ready 聚合出 ContainersReadyContainersReady 加上 readinessGates 得出 Pod Ready。所以當你看到 STATUS 列異常時往下一層找容器 State 的 reason往往比盯住 STATUS 文案更高效。5. 從這兩列出發(fā)的實戰(zhàn)排障鏈路知道數(shù)據(jù)來源之后排障思路就清晰了。下面按最常見的 5 個狀態(tài)場景給出一步步的排查命令鏈。5.1 STATUS 是 ContainerCreatingREADY 是 0/1先看完整事件別急著看日志kubectl describe pod pod-name | tail -30 kubectl get pod pod-name -o json | jq .status.containerStatuses[0].state.waiting kubectl get events --sort-by.lastTimestamp | tail -30這個狀態(tài)最常見的兩個原因創(chuàng)建 sandbox 失敗事件里會看到類似failed to create pod sandbox: rpc error: code unknown desc failed to create...的信息。這種一般是容器運行時或 CNI 網(wǎng)絡(luò)插件的問題需要上節(jié)點看 containerd 日志。鏡像拉取慢或被限流事件里會有Failed to pull image ...或exceeded retry limit, last status: 429 too many requests之類。429 這類限流在鏡像倉庫層很常見排查時留意 registry mirror、拉取憑證是否配置。5.2 STATUS 是 CrashLoopBackOffREADY 是 0/1這個狀態(tài)說明容器已經(jīng)啟動過但反復(fù)崩潰kubelet 進入退避。核心動作是看兩樣?xùn)|西# 看上一次退出時的日志 kubectl logs pod-name --previous # 看終止時的退出碼和 reason kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState.terminated退出碼很能說明問題127啟動命令或依賴找不到檢查 image 里的可執(zhí)行文件路徑。137SIGKILL通常是 OOMKilled或者被系統(tǒng) cgroup 殺掉的信號檢查內(nèi)存 limit 和實際占用。143SIGTERM常見于探針失敗觸發(fā) kill或者業(yè)務(wù)收到終止信號后沒正常退出。退出碼是 0 但仍在重啟大概率是 livenessProbe 失敗kubelet 認為容器不健康主動重啟。這時候要去看探針配置kubectl get pod pod-name -o json | jq .spec.containers[0].livenessProbe5.3 STATUS 是 Running但 READY 是 0/1這就是我們前面講的假健康狀態(tài)。第一件事確認是不是探針問題# 查看就緒探針配置 kubectl get pod pod-name -o json | jq .spec.containers[0].readinessProbe # 查看容器就緒條件 kubectl get pod pod-name -o json | jq .status.conditions[] | select(.typeReady) # 手動模擬探針請求按你探針配置的協(xié)議來 kubectl exec -it pod-name -- curl -sf http://127.0.0.1:8080/healthz如果探針地址確實不通那是應(yīng)用沒就緒去查應(yīng)用日志。如果應(yīng)用地址通但 READY 還是 0/1檢查一下探針的initialDelaySeconds和periodSeconds是否設(shè)置合理以及探針是否寫錯了端口或路徑。另一個可能被忽略的情況是 readinessGates如果 Pod 里定義了 gate但對應(yīng)的 condition 一直沒被外部控制器置為 True那 Pod Ready 也是 False。這時候去查kubectl get pod pod-name -o json | jq .spec.readinessGates kubectl get pod pod-name -o json | jq .status.conditions[]5.4 STATUS 是 Terminating一直在刪除中Pod 設(shè)置了 deletionTimestamp但遲遲沒消失。先用一條命令看清全貌kubectl get pod pod-name -o json | jq {finalizers: .metadata.finalizers, deletionTimestamp: .metadata.deletionTimestamp, grace: .metadata.deletionGracePeriodSeconds, phase: .status.phase}常見的卡刪除原因容器主進程不響應(yīng) SIGTERM超過 grace 期只能等 SIGKILL但 SIGKILL 后還卡住一般是容器運行時問題。有 finalizer 掛在 metadata 上需要對應(yīng)的控制器清理完成后才會移除。底層卷還沒完成 detach或者節(jié)點失聯(lián)導(dǎo)致狀態(tài)更新停滯。如果業(yè)務(wù)可以允許強刪再考慮兜底命令kubectl delete pod pod-name --grace-period0 --force但要清楚強刪可能造成容器進程殘留、卷鎖不釋放等后遺癥生產(chǎn)環(huán)境慎用。更穩(wěn)妥的方式是先查 finalizer 歸屬等對應(yīng) controller 清理或者先把節(jié)點的問題處理掉。5.5 STATUS 是 Pending一直沒有 RunningPending 最常見的是調(diào)度階段就出問題。重點看調(diào)度事件kubectl describe pod pod-name | grep -A 20 Events kubectl get events --field-selector involvedObject.namepod-name --sort-by.lastTimestamp如果事件里持續(xù)刷FailedScheduling跟著 message 走常見的幾類Insufficient cpu/memory節(jié)點資源不夠擴容或減小 request。node(s) had taint節(jié)點有污點Pod 沒有對應(yīng)容忍。didnt match node selector / affinity rules調(diào)度約束無法滿足。如果調(diào)度已經(jīng)成功Pod 卻還停在 Pending那說明問題轉(zhuǎn)移到卷掛載或容器創(chuàng)建階段。這時再去翻 containerStatuses 的 message看是不是FailedMount之類的問題。5.6 用 custom-columns 直接拿原始狀態(tài)排障時如果不想被 STATUS 列的展示值誤導(dǎo)可以繞過它直接輸出原始字段kubectl get pods -o custom-columns\ NAME:.metadata.name,\ PHASE:.status.phase,\ POD_READY:.status.conditions[?(.typeReady)].status,\ CONTAINER_READY:.status.containerStatuses[*].ready,\ WAIT_REASON:.status.containerStatuses[*].state.waiting.reason,\ RESTARTS:.status.containerStatuses[*].restartCount,\ DELETION:.metadata.deletionTimestamp這能讓你同時看到容器級 Ready 數(shù)組、Pod 級 Ready 條件、等待 reason 和刪除時間戳多容器 Pod 的狀態(tài)盲區(qū)也一覽無余。6. 平時最容易忽略的細節(jié)和我的實操建議最后聊幾個分散在細節(jié)里的經(jīng)驗都是我在實際維護中踩過或見過別人踩的。多容器 Pod 的 STATUS 列盲區(qū)前面提過值得再強調(diào)一次kubectl 在選代表容器時只挑第一個普通容器排在后面的容器就算炸了STATUS 也可能紋絲不動。所以凡是多容器 Pod我習(xí)慣直接-o json配合 jq 看全量容器狀態(tài)或者用custom-columns把所有容器的 reason 都打出來。肉眼盯著 STATUS 單列是真的會看漏。RESTARTS 列和 READY 列的關(guān)系也要理解。RESTARTS 是所有containerStatuses[*].restartCount的累加值。容器被 OOM 殺掉后重啟RESTARTS 會 1如果后端是 sandbox 或網(wǎng)絡(luò)重建可能連累 Init 容器也計一次重啟。所以看到 RESTARTS 很高別只想到業(yè)務(wù)崩潰也要看是不是基礎(chǔ)設(shè)施層在不斷重建。初始化階段 READY 恒為 0/N 這種行為偶爾會引發(fā)誤判。尤其是 Init 容器比較多、單個 Init 執(zhí)行很慢的 Pod你可能會看到 STATUS 一直是Init:2/5READY 一直是0/1持續(xù)十幾分鐘。這時候別急著重啟或強刪先看 Init 容器日志kubectl logs pod-name -c init-container-nameSTATUS 列顯示 Unknown 的時候絕大多數(shù)情況是節(jié)點失聯(lián)而不是 Pod 本身出問題。先去看節(jié)點狀態(tài)kubectl get node kubectl get node node-name -o json | jq .status.conditions[] | select(.typeReady)節(jié)點 NotReady 會連帶一堆 Pod 顯示 Unknown 或 Terminating這時候先恢復(fù)節(jié)點再處理 Pod 狀態(tài)。版本差異也要留個心眼。不同 Kubernetes 小版本之間kubectl 的打印邏輯偶爾會有細微調(diào)整比如原生 sidecar 容器K8s 1.28的 RESTARTS 統(tǒng)計方式、初始化階段 READY 的分母算法都隨版本演進改過。遇到和文檔描述不一致的輸出優(yōu)先看當前 kubectl 對應(yīng)版本的源碼而不是懷疑自己的集群壞了。還有一個老生常談但我必須再提一次的建議不要把 STATUS 和 READY 這兩列當成業(yè)務(wù)健康度的最終答案。它們的設(shè)計目標是快速概覽不是健康證明。真正判斷服務(wù)能不能接流量的指標應(yīng)該是Pod 的 Ready condition 是否為 TruePod 是否出現(xiàn)在 Service 的 Endpoints 列表里應(yīng)用自身的健康檢查接口、錯誤率、延遲是否正常。如果你有監(jiān)控系統(tǒng)我建議直接把kube-state-metrics暴露的kube_pod_status_ready、kube_pod_container_status_ready這些指標接入告警比每天對著終端刷kubectl get pod靠譜得多。這兩年排查 Kubernetes 問題下來我最大的體會是狀態(tài)列是給人快速瀏覽用的但每個奇怪的顯示背后都有一套非常機械的計算邏輯。搞清楚kubectl get pod里 READY 和 STATUS 的每一層來源之后很多玄學(xué)其實都是可預(yù)測、可復(fù)現(xiàn)的。遇到問題別盯著狀態(tài)文案猜拉著原始字段看——-o json加 jq基本能回答你 80% 的疑問。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
粉嫩绯色AV一区二区在线| 91天天看| 久久国产精品一级二级三级| 一区操逼日比视频| 久久久九| 91天美传媒精品| 日韩探花精品在线视频| 天天综合欧美| 91春色| 人妻日日干| 人人看欧美性爱| 超碰4A| 国产精品熟女AV中文字幕在线播放| 久久久久亚洲av综合波多野制衣| 91bbbbbb| 青青欧洲黑| 大香交伊人网| 亚洲成人碰碰| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 3PAV乱伦视频| 女性91网站| 欧美激情内射| 97免费在线观看视频| 国产人人干| 2019精品国产无码成人| 香蕉精品二区二区 | 久久香蕉综合一本到3atv| 日韩成人高清一区二区| 欧美色九九| 97在线公开视频| 久久九九精品一区二区| 久久久啊啊啊| 九月丁香综合网| 欧美综合娱乐久久| 色呦呦呦在线观看视频| 免费a级毛片av无码久久精品中文字幕| 欧美大色交| 九九热视频在线观看| 久操不卡视频| 天天操夜夜操| 高清有码一区二区| 亚洲欧美综合网| 国产丝袜美女诱惑| 免费网站观看www在线观| 国模精品一区二区三区苹果色戒| 色婷婷色99国产综合精品| 色婷五月| 亚洲在线| 三级日本一区二区三区| 婷婷丁香九月| 三级三级三级日本99| 日本岛国黄色网址| 中文字幕精品久久久久人妻红杏ⅰ| 中国熟女91| 日韩 女同 综合| 国内毛片四区| 日韩在线性爱免费视频| 狠狠久久亚洲欧美专区| 亚洲欧洲无码97久久精品| 亚洲色图日韩丝袜制服一区二区五月在线| 无码人妻精品一区二区三区99不卡| 欧亚性爱在线视频| 毛片一区二区| AV 少妇 人妻 偷拍| 欧美在线视频播放| 在线a v| 亚洲天堂性爱| 青青在线视频日韩欧美| 天天插天天插| 91美女小视频| 色综合一区二区三巨| 91制服丝袜| 亚洲第一综合| www熟女乱伦com| 亚洲国产中文字幕| 2020中文字幕| 在线国产一区二区av| 天色综合网| 天天澡天天狠天天天做| 亚洲最大的黄色电影网站。| 中文字幕啊啊啊在线观看视频| 99色日| 国产毛片久久久久久久| 北条麻妃性愛视频| 久久婷婷亚洲| 91视频综合网| 啊啊啊啊操死我了| 日美免费黄片| 亚洲黑人在线| 午夜毛片高清免费不卡| 天天精品| 韩国一级做a久久久久| 清清一区二区三区四区不卡视频| 91操熟女| 久久99干一本高清| 精彩国产视频播放1区2区| 伊人黄色片| 色偷偷男人的天堂麻豆| 天天日天天插| 日本精品高清一二区一本到| 久久精品电影在线| 日日噜噜夜夜久久亚洲一区二区 | 18啪啪手机免费性爱| 亚州欧美综合| 老鸭窝黄色视频网站| 精品久久人妻成人网| 五月天亚洲色图| 久久久久网站-538在线视频-欧美永久乱码 | 亚洲欧美综合区自拍另类| 亚洲中文国际强奸字幕| 国产精品久久| 高精欧美色| 色婷婷淫色网| 亚洲国产综合久久久性感熟妇| 亚洲乱伦图片视频| A级片日韩欧美国产欧美视频精选观看| 色情亚洲日本成人| 自拍盗摄一区| 韩国女主播青草福利视频| 大香网站| 色诱中文字幕| 久久久少妇| 99国产精品自在自在| 97超碰免费人人性爱| 区一二区日韩亚洲乱码av电影| 精品99999久久久久久| 麻豆久久视频在线地址| 91人妻丝袜无码| 91精品电影18| 色哟哟1区2区| 日本高清视频在线观看黄已三辽| 揉揉日日日日| 国产精品ⅴ无码大片在线看.| 三级色综合| 亚洲AV无码国产精品久久久久| 91丨熟女丨丰满熟女| 插欧洲美女欧美精品| 亚洲高潮少妇| 国产情色第一第二页在线观看| 日本黄页视频在线观看| 农村女一级毛卡片| 日韩激情中文字幕有码| 青娱乐导航AV| 丝袜高跟澳门91视频| 97中文字幕九区| а√天堂资源官网在线资源| 亚洲啪啪视频一区二区| 夜夜爽77777| 日韩美女,国产传媒,视频一区| 国产精品久久久久久久久久二区三区| 少妇色欲综合网2| 中文字幕第2页| 日韩免费av片高清无码| 色狠狠色| 日韩欧美偷拍美女视频| 九热中文字幕| 色色色网站| 色偷偷色偷偷欧美日韩| 粉嫩av一区二区三区天美传媒| 国产又粗又大硬免费色网视频| 精品人体无圣光凹凸| 大香樵伊人网| 97超碰影音| 免费一级精品啪啪视频| 在线女人91| 欧美亚洲清纯| 伊人丁香五月婷婷| Av色五月| 91色插| 日本欧美一区二区三区免费| 中文字幕视频2区| 色噜噜狠狠色综无码久久| 色哟哟 日韩精品| 国产激情综合五月久久| 国产天天噜一噜久久久| 天天操夜夜嗨| 91国产大片| 九九九九AV| 欧美性爱十八禁| 亚洲精品欧洲精品| 亚洲阿v天堂无码z2018| 密臀在线免费观看| 国产综合久久久麻桃个| 日韩啪啪网| 秋霞鲁丝午夜无码一区二区三| 日韩欧美福利视频看看| 亚洲。日韩。欧美| J?P?NESEHD熟女熟妇伦| 一本色道综合久久欧美日韩精品| 亚洲av国产av综合av卡| 天天综合网久久ww| 搡老熟女免费视频| 美女人妻色网站| 黄页av| 91色久| 久啪视频| 色妺妺在线视频| 久久婷婷成人综合色怡春院| 五月婷婷综合在线| 青青草国产欧美非洲黑人 | 91爆操视频| 春色校园综合网| 黑人猛交| 伊人伊人LD| 亚洲欧美自拍偷拍| 超碰在线综合97| 丁香五月久久| 最新制服中文第一页| 亚洲av无码成人精品国产| 青青草在线视频播放器| 色丁香五月婷婷| 亚洲色宗合| 九月丁香婷婷| 成人精品一区二区91毛片不卡| 亚洲另类色图片| 成 人片 黄色大片| 日本中文字幕一区| 免费看一级a性色生活片久久无| 激情久久日韩精品中文字幕麻豆| 美女操逼福利视频| 青青草色AV| 国产刺激视频| 98精品国产乱码久久久久久| 欧美三级中文字幕hd| 国产中文字幕在线| 日韩草久视频| 日韩精品在线观看观看| 全国男人天堂网| 男人兔费天堂| 中字幕人妻一区二区三区| 综合网97| 色噜噜综合在线| 亚洲国产91精品一区二区久久| 91美女视频在线免费观看| 国产亚洲色婷婷久久99精品91葵花宝典| 天天综合网亚洲综合网| 一区中文字幕二区日韩| 大地资源在线观看中文第二页| 亚洲熟女一区二区| 性色av一区二区| 欧美综合区| 又粗又长又大国产不卡| yazhouzaixian| 91N欧美| www亚洲免费| 97超碰国产亚洲精品| 淫妻综合网| 国产精品久久99日日| 揉揉日日日日| 亚洲的天堂网| 99久久com免费视频′| 国产人妻精品一区二区三区秋霞| 91丨九色丨东北熟女| 亚洲色欲天天天堂色欲网女| 亚洲人妻精品一区二区| 97超色| 观看免费区二区三区二| 免費黃色視頻觀看一| 久操91视频| 欧美图片色五月天| 久久熟女久| 人妻精品综合中文字幕在线| 国产精品99久久久www| 另类亚洲一区二区三区| 97天堂| 青草伊人久久| 神马久久69| 天天舔天天 | 久久成人国产| 日韩精品在线观看观看| 亚洲AV麻豆Aⅴ无码电影一| 蜜桃传媒视频第一区入口在线看| 免费亚洲国产精品久久一区| 日han少妇无码| 人妻丝袜无 码视频专区| 日韩精品在线观看网站| 亚洲最大成人a毛毛片| 三久久久四久久久久| 极品美女嘿咻| 国产精品久久久午夜夜伦鲁鲁| 91黑丝美女| 人妻在线臀日韩| 丁香五月偷拍| 91N欧美| 欧美日韩99| 国产理论视频在线播放| 少妇啪啪自拍| 国产专区第一页| A片大香蕉在线| 欧美人与动性人交a| 欧美91在线| 91成人无码| 精品少妇99| 欧美色图20P| 久久久女人| 久久精品无码熟妇一区二区三区视频导航 | 欧美日韩国产成人高清| 国产欧美精选自拍一区| 欧美强奸乱能| 免费啪啪一级视频| 亚洲AV小说| 久操综合在线| 欧美老妇女内射网址| 欧美香蕉视xxx| 欧美有码亚洲中文字幕一区二区三区四区| 极品丝袜无码| 中文字幕88av在线| 是还免费视频1727我| 国产欧美黑人丰满在线| 少妇高潮喷水无套久久久久久| 997色在线| 亚洲清纯综合| 婷婷五月天激情四射| 亚洲无992tv| 精品国产Av无码久久久亚洲| 370p日韩欧美亚洲精品| 全免费a敌肛交毛片免费| 日韩成人大片在线观看| 97色插| 亚洲码和欧洲精品激情系列| 亚洲国内精品成人不卡| 亚洲美腿丝袜香蕉影视欧美成人| 熟女熟妇一区二区三四区| 91美女网站| 久热精品在线国产| AV无码久久久精品| 黄页18禁| 99re6在线视频精品免费完整版安卓版| 97在线亚洲| 东京热男人的天堂| 久操网无码在线| 亚洲欧美国产日本一区二区三区| 九九毛片这里只有精品| 99re这里| 亚洲久久久久| 女人 A一级| 操狠狠| 自拍亚洲综合| 欧美少妇人妻| 成人av动漫在线观看| 91在线页| 欧美性视频二区三区| 美女诱惑久久| 91高清无码下载| 超碰av人人人| 精吧天堂| 人人操人人插人人摸人人干| 天天添天天干电影| 日韩三级性| 2019天天干| 久久激情亚洲精品无码?V| 国产熟女少妇一区| 青青草中出视频 | 天堂网亚洲区手机版| 久久无码一区二区二三区性色| 无码抄逼网| 白丝少妇一区二区| 97色碰| 91 亚洲 欧美 日韩 国产 综合| 一区二区三区精品黑丝白丝酒店对鸡| 青操影院| 日韩成人精品| 日韩久久超碰色| 人人妻人人玩人人澡人人爽| 日韩啪啪网| 加勒比伊人综合| 在线毛片片免费观看| 日韩精品一二三四| 夜夜嗨一区| 国产av又色又爽又黄| 国产白领连续中出在线观看| 殴美性天天| 综合久久欧美| 人妻 欧美亚洲| 久久91视频| 欧美熟女激情| 国产传媒午夜理伦精品| 欧美亚洲丝袜美女电影| 日本一级真人黄色性爱视频| 高清无码网址| 超碰97护士| 一本道综合色图| 一卡二卡三卡| 人人摸人人干| 日韩精品人妻| 色呦呦、国产精品| 欧美gv在线观看| 北条麻妃99精品青青久久| www.男人的天堂| 东京热亚洲一区二区| 亚洲色图欧美色18直播在线| 激情网五月天| 久久一区二区三区四区五区| 欧美熟爽综合| 中文AV制服乱伦| 国产suv精品一区二区四| 另类图片天天影视| 麻豆精品A片免费观看| 一级片视频啪啪| 97干色天堂| 久久国产逼| 亚州精品丝袜-不卡成人免费| 激情五月综合开心五月| 无码操逼天堂| www.色婷婷| 91综合色| 97在线青| 国产亚洲99久久精品| 夜夜爽夜夜操| 日日夜夜国产综合| 欧美性爱三区二区| 国产白丝网站| 亚洲中文字幕乱码无码一区二区| 国产一区二区精品久久99| 天天拍天| 欧美色五月| 国产精品久久久吖| 日韩毛片9| 无码9区| 亚洲黄片免费在线播放| 亚洲成人AB| 男人的天堂在线有码| 91视频精品| 亚洲黄色网址| 亚洲欧美精品一区天堂久久| 操操逼视频| 伊人9| 久极品在线观看| 日韩在线性爱免费视频| 少妇色欲综合网2| 国产精品小视频一区二区三区| 在线国产福利网址导航| 91第一页| 久久一本大香蕉 | 精品久久在线区一区| 精品毛片av一区二区| 中出91视频| 精品国产72| www激情| 蜜乳AV.COM| 97在线观| 97精品网站| 91在线美女| 91精品无码人妻系列| 狠狠操狠狠操操| 亚洲区限制级 99| 99999精品视频| 色婷婷综合网站| 亚洲精品性爱片| 午夜超碰| 欧美91网| av天堂加勒比| 人妻熟妇久草在线| 91欧美美女日韩国产婷婷| 屌逼传媒| 99无码视频| 欧美 亚洲 偷拍自拍| 免费?级毛片无码?∨蜜芽试看| 国产免费内射视频| 99999国产| 插插综合网天天影视网| 国产精品3| 97精品97| 粉嫩小泬久久久一区二区| 亚洲精品97在线| 女同在线视频一区| 99色视频| 天天爱天天操| 超碰91在线| 久久久久国产一区二| 日韩A优精品在线观看| 中文AV制服乱伦| 免费岛国一级片| 亚洲无992tv| 啊啊啊啊网站| 最新亚洲黄色免费电影| av激情亚洲五月天| 蜜乳AV免费观看| 一二三区操逼国产91| 欧美性第一页| 精品九九九| 国产高清亚洲日韩一区| 97无码视频在线播放| 天天日天天干天天操| 国产性爱强奸乱伦大全| а√天堂资源官网在线资源| 久久这里只精品免费福利| 51国产午夜精品视频| 日本性感人妻91| 欧美性生活男人的天堂| 亚洲日本激情| 日本在线视频导航| 五月天婷婷久久| 丝袜美腿欧美| 9久久美女首页| 亚洲精品白丝| 欧美同性恋 的搜索结果 - 91n| 亚洲自拍小说| 91情色| 青娱乐福利99| 在线A日本| 亚洲欧洲综合av在线| 国产乱人伦AVA麻豆软件.| 秋霞蝌科网日本一区| 每日更新AV| 东京日日夜夜| 色月天AV导航| 久草在| 色噜噜人妻av中文字幕| 人爽不卡视频| 天天操天天干美女网址导航| 久久久久夜夜夜夜| 欧美视频一| 精品偷拍13p欧美dodk视频| 日韩不卡在线一区二区| 亚洲夜夜欢无码一区二区| 韩国久久97| 东北女人被操| 亚洲色棕合| 日韩视频中文字幕| 手机在线播放国产福利| 影音先锋视频在线| 91粉芽高清在线一区二区 | 欧美,日韩,亚洲视频| 免费综合亚洲中文| 九九九综合精品| 91路www| 南澳成人一级片在线播放| 欧美极品美女aaaaaa级黄片| 日韩久久.一级黄色片| 大香蕉久操| 青青草啪啪网| 天天日天天干天天摸天天操| 久久AV无码AV| 免费黄色视频网址| 成人综合网 欧美| 日本 情色 1区| 欧美人人曰人人操人人射射| 日韩中文字幕视频在线观看| 久久精品一区| 91亚洲影视| 免费观看国产小粉嫩喷水精品午| 青青11操操操操操操操操| 精品免费国产二区三区| 600国产精品视频| 一级人妻性爱视频| 亚洲色婷婷| 91 国产丝袜在线播放-百度| 亚洲一区二区在线观看91| 国产高清成人mv在线观看| 日韩伦理视频| 亚州,欧美在线| 91中文字幕制服丝袜免费视频| 在线看的av| 欧美日韩m| 九九九九九九综合| 岛国片国产成人亚洲播放| 性欧美另类高清| 啊啊啊慢点| 再深点灬舒服灬太大了添视频 | 性爱av网站| juliaann丝袜大战黑鬼| 国产精品福利资源在线尤物| 日本九九九九| 看看日B真人视频| 欧美不卡在线一区二区| 嗯嗯啊啊亚欧精品| 久久夜夜| 天天影视综合网欧美精品| 啊啊啊水好多| 久久‘黄片视频| 日韩淫色网| 中文字幕日韩电影人妻| 大香蕉综合| 欧美日韩在线视频网站| 男人的天堂2010| 极品少妇久久久久| 九九av| 国产中文日韩欧美一区二区三区人妻丝袜美腿| 日本欧美一区二区三区免费| 97干在线看| 精品无码一区二区| 国产精品无码AV网站| 久久精品国产亚洲AV清纯| 国产中文精品一区二区在线观看| 欧美一区二区三区大综合| 天天拍夜夜| 国产剧情一区在线观看| 精品人妻一区二区三区视频在线| 亚洲一本大道中文字幕无码在线| 亚洲。天堂。日本在线观看| 欧美精品xxxwww| 啊啊啊啊啊好舒服视频| 精品中文字幕一区二区l - 百度| 成人熟女区| av无码精品久久久久| 都市激情人妻一区二区青青操视频| 亚洲一曲日韩精品| 中文幕97| 特级丰满少妇一级AAAA爱毛片| 91 国产丝袜在线播放-百度| 久久久无码av精| 天天看人人操屄犊摸阴| 啪啪资源网| 啊啊啊啊啊啊啊网址在线观看| 亚洲无码久久久久久久| 加勒比无码毛片| 久久婷婷视频| 亚洲天堂在线怕怕视频| 欧美情色贴图| 99啪啪视频| 欧美综合色,www| 资源在线观一 二| 超碰在线欧美性爱激情| 欧美亚洲日韩16色| 2020国产精品| 婷婷超| 青青青青草av在线观看| 手机看av网站在线看| 啊啊啊慢点| 国产极品久久久| 福利在线观看一区二区| 亚洲黄色电影| 九九九久久久久| 黄片在线免费在线观看| 黄片www视频免费| 亚洲欧美日韩国产丝袜自拍中文| 国产高清成人传媒影视| 9久在线视频只有精品| 日韩人妻精品中文字幕| 色欧美天天| 国模无码人体一区二区三| 国模91| juliaann精品熟女一区| 强奸国产在线| 国产在线观看一区二区三区| 一级黄碟| 激情第四色| 日韩精品在线视频在线观看| 国产97av| 欧美色图人妻| 啊啊啊 在线观看| 韩国一级婬片A片AAAAA| 97操| 日韩综合色网| 99亚亚热| 立川理惠无码一区二区| 丁香婷婷五月| 久久久久久久| 骚逼一区二区| 北京专精特新企业招聘信息| 国产成人www免费人成看片| 成人一道本免费视频| 欧美性性性| 精品熟妇视频一区二区| 粉嫩AV一区夜夜嗨| 久7色| 精品久久99| 国产区91柔拿会所技师| 26uuu国产亚洲综合| 久久久精品网| 亚洲系列欧美| 有码色中文字幕在线观看| 久99热| 亚洲 日本 国产 综合| 亚洲在线欧美| 四方色播| 欧日韩一二三f区| 91精品操美女| 997色在线| 超碰这里有精品| 97久久久精品| 欧美日韩青操| 嗯嗯,好大,好爽,好骚 | 九九亚洲色在线观看| 好吊色一区| 97视频620| 久久伊人在线五区| 国产天天骚| 中文久久一区| 久久综合精品一区二区三区| 天天综合影院91| 伊人大香蕉在线| 亚洲国产一级中文综合久久天堂在线免费观看| 六月婷婷综合| 无码在线亚洲| 九九性视频| 97精品综合| 亚洲色图91欧美日韩| 成人资源中文字幕在线观看天天 | 精品国产乱码| 欧美日韩国产黄色片| 大香蕉一区二区在线观看.| 国产一区二区三区久久久精品| 亚洲欧洲日本精品中文a∨| 青草综合| 99婷婷一区二区| 91久久九九精品国产综合| 国产日韩欧美中文在线播放| 国产极品精品美女视频| 久久久精品无码亚免费| 伊人色综合网电影| 日韩乱码Av| 中文字幕乱碼在线| 黄色污污污污污污网站| 91骚妇| 久久爱超碰网| 中文字幕免费在线观看| 91欧美网| 国产精品点击进入在线影院| 国产精品黄色三级av| 九九99精品视频在线观看| 久热久| 久久手机好看网站| 9久精品视频在线观看| www.acm成人黄色毛片| 亚洲91色| 日韩美女啪啪一区| 久热九九| 97色97好| 久久久一区二区三区麻豆| 欧美色青| 91色综合| 日韩不卡a级视频专区| 久久久久9999| 亚洲Av噜噜一区二区三区妖精| 蜜桃臀AV在线| 成人小说另类在线| 日本视频在线观看污污污| 亚洲五月丁香花狠狠干一区二区三区| 男人的天堂.com| 97资源免费视频| 狠狠色五月亚洲91| 92性色国产午夜福利在线661 | 久久久久夜夜夜夜| 欧美亚洲尤物久久| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 欧美亚洲首页| 欧洲欧美视频一区二区| 亚洲精品视频在线播放| 国产白领连续中出在线播放| 我要色综合网站| 日韩精品碰碰| 日韩精品区二区三区不卡| 91久久堂| 神马久久久久久久| 亚洲国产成人精品无码专区| 91亚洲精品青草| 亚洲极品| 欧美强奸乱能| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 日韩淫色网| 日韩强奸av| 五月丁香激情综合| 97久久国产精品| 100啪啪视频大全| 97天天爽| 国产91美女视频| 久久男女激情视频网站| 色色99| 午夜舔阴达高潮视频免费看| 色小视频蜜乳| 超碰久久综合| 97在线精品观看视频| 久久国产视频专区一二三| 操一对老熟妇爽上天视频| 色综合天天| 麻豆伊人网| 国产精品女aA片爽爽视频| 日韩人妻资源在线看| 久久久9 9 9精品| 操逼逼中文字幕| 久操操| 翔田千里一区二区三区奶水| 美腿色图| 天天夜躁日日躁狠狠2002| 97人肏| 天天综合-91入口| 99色色网| 久久久精品网站| 六九九九| 国产自制av蜜乳| 美女露胸露尿口| 偷拍精品一区二区三区| 中文字幕第页| 欧美欧美啪啪视频| 蜜色网色哟哟| 欧美爱三级日韩久久| 韩国轻伦国内自拍一区| 久操97| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 麻豆这里只有精品| 日韩av情韩国爱禁区av一区二区| 人妻系列无码专区中文有码| 亚洲国内精品成人不卡| 777奇米影视777四色| 狠狠爱AV| 久久婷五月天| 久热这里只有精品9| 国产熟女少妇一区| 日本操逼视频免费| 亚热日本熟女| 国产人妖视频一区在线观看| 亚洲少妇自拍中文字幕懂色| 超碰91在线| 高颜值美女口爆高潮浪叫| www久| 韩日自拍| 在线另类| 日韩日本欧美在线观看| 97干日韩| 在线有码中文字幕| 日本三级韩国三级美三级91| 国产精品久久久久无码AV会牛| 好涩综合| 久久九九一区二区三区成人| 啪啪啪精品视频| 欧美天堂在线| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 国产黄色动态精品| 日韩丝袜二区| 中文字幕在线免费观看| 黄色不卡视频| 免费看久久久性性| 亚洲欧美日韩中文播放| 天操老女人| 天天日夜夜| 亚洲AV无码乱码| 久久精品女同亚洲女同13| 少妇超碰在线| 一区二区三区探花在线观看| 麻豆天美在线| 9精品久久| 婷婷五月天基地| 青娱乐亚洲自拍| 日韩十八禁| 五十路人妻在线| 亚洲五月丁香花狠狠干一区二区三区 | a人欧美综合天堂麻豆| 五月丁香综合激情| 人妻一二三区| 久久大黄片| 天天干夜夜肏| 日产中文字幕2020| 99热精品在线| 岛国视频免费在线观看| 91色图| 日本亚洲嫩草影院啪啪| 欧州激情视频在线一区二区| 大香蕉123| 精品一区二区综合熟妇| 国内偷拍精品一区二区| 密臀国产在线| 日韩中文字幕宗合在线| 国产九月婷婷| 9久久精品| 日韩激情啪啪啪| 国语对白露脸XXXXXX| 国产超碰97| 十八禁电影伊人网| 日本少妇va7777| 天天91~综合入口| 亚洲国产一级精品毛一级精品看免费视频| 国内精品嫩模A∨私拍小视频| 国产又粗又长又大的视频| 九九九热精品| 97国产精品国| 亚洲 欧美都市激情| 大香蕉五月天| 国产精品成人蜜臀AV在线| 九九精品99| 久久产精品一区二区三区电影| 极品肉射| 婷婷10月天青娱乐| 蜜臀99久久精品| 啊啊啊啊啊啊啊在线| 黄色不卡视频| 日本少妇va7777| 欧美成不卡网| 欧美性天天影视| 亚码激情| 丁香五月天堂网| 久久久人妻| 曰韩无码777| 久久激情五月| 欧亚在线视频| 中国一区二区亚洲人妻| 黄片无码在线制服| 国产99久久99热这里只有精品15| 美女写真| 97国产高清视频在线观看| 东京热男人的天堂精品| 密乳AV免费观看| 日韩欧美中文日韩欧美色| 99久国产精品午夜性色福利| 国产传媒午夜理伦精品| 亚洲啪啪视频免费| 欧美黄色片在线播放| 无码人妻精品一区二区三区99不卡| 三级日本一区二区三区| 一区AV| 亚洲自拍天堂| 深夜激情无码| 久久草在线综合视频| 久久五月天婷婷| 91色情黑丝搞鸡在线观看一区二区三区三州| www.婷婷六月天| 天天干少妇| 九久9热| 欧美天天综| 欧美激情久久久久| 日本最新1区2区3区| 青青操日韩| 日本一级真人黄色性爱视频| 日本韩高清无砖码22o| 久久久久久久伊人精品| 国产高清精品一区二区三区毛片 | 死我十八禁| 99re久久| 99久久亚洲精品无码毛片潘甜甜| 久久av一级av少妇av高潮| 激情五月天社区| 色优久久| 人人澡综合涩| 精品国产乱码久久久久久日本公司| 蜜臀Av一区二区三区| 精品久久久久综合无码| 亚洲一区日韩精品| 日本性爱不卡视频| 老鸭窝亚洲毛片| 成人综合网 欧美| 啊啊啊啊在线播放| 男女无套 免费网站| 秋霞成人一级在线观看| 五月丁香六月婷综合成人综合| 亚洲人成网www| 天美传媒Av在线| 超碰色大香蕉| 欧美的性爱网站免费| 久久99久久99久久99人受| 91丝袜美腿网站| 少妇丝袜在线观看AV| 78精品| 激情综合二| 五月天开心网| 久久亚洲色图中文字幕| 亚洲影视第一页| 亚洲欧美高清无码| 色婷婷网| 骚熟女吞| 日韩欧美亚洲自拍偷拍| 在线观看岛国有码| 激情图片亚洲色图| 在线观看午夜婷婷久久久久清性观看| 亚洲se91| 成人国产精品三级A片| 桃色六月天| 麻豆亚洲AV成人无码久久精品| 91搞逼视频| 麻豆黄色五月天| 久偷拍欧美日韩三区| 日韩啊V| 丁香五月成人| x97av| 成人小说视频在线精品欧美| 久9热| 97国产精品久久久久| 青草精品视频日本久久久久网站在线| 91成人在线免费视频| 久草毛片电影怡| 五十路熟女人妻一区二区三区四区五| 操逼网站视频漫画国产| 欧美激情超碰777| 人妻夜夜爽天天爽三区麻豆AV网站| 717影院理论午夜伦八戒| 97免费视频网| 9色国产精品一区粉嫩| AV九九| 狠狠躁久久躁| 久久久亚洲欧美综合| 亚洲限制级| 7777奇米影视久久| 中文字幕一区二区三区蜜臀| 97欧美综合| 欧美啪啪女女| 国产97在线播放| 日韩成人大片在线观看| 吉川爱美亚洲二区在线| 亚洲天天做日日做天天谢日日| 天天综合网国产| 亚洲天堂男人天堂网| h4610国产人妻| 东京热精品97综合网| 免费啪啪av| 97硬碰| 在线岛| 激情文学欧美| 岛国激情视频软件| 天堂亚洲精品久久老牛| 乱伦一二三区| 青女在线| 国产精品露脸在线观看| 无码视频一区二区| 国产专区第一页| 美女干逼2| 欧美日韩操操操| 精品久久九| 亚欧Av| 欧亚三区动漫| 另类视频在线| 天天肏视频| 狼天天狼天天大香蕉| 亚洲最新Av| 人妻 欧美 中文| 日本操色导航| 人妻大香蕉| 人人插人人搞人人操| 亚洲成人ab| 亚洲综合网图| 久久久一区二区三区三州| 极品色电影院| 久久男人精品| 欧美人妻熟女在线| 麻豆人妻精品一区二区| 国产熟妇 码视频户外直播| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 美國A片| 黑人在线91| 天天看综合网| 久久东京伊人一本到鬼色| 美日韩一二三区| 日韩激情啪啪| 精品97久久| 91精品成人| 国产综合操逼高清| 黄页| 牛牛久久国产精品视频一二三| 精品亚洲成人免费在线| 精品久久9| 日韩pv中文| 人人做天天爱| 日韩内| 欧美日韩亚洲高清不卡一区二区三区| 操日韩第| 久久久久久久九九九九| 天天摸夜夜摸| 国内精品久久久久影院亚洲| av毛片aaaaa免费看| 日韩精品人妻中文字有码在线| 日日爽夜夜爽| 性影在线视频| 麻豆亚洲AV成人无码久久精品| 亚洲第一色页夜| 欧美 亚洲 偷拍自拍| 日韩一区二区精彩视频| 男人天堂毛片| 青青草十区九区爱夜| 五月婷婷啪啪| 国产操偷| 亚欧成人一级片在线播放| 九九九精品色乱九九九| 亚洲无线码一区国产欧美国| 色哟哟AⅤ| 欧美性爱一区二区三区| 欧美熟妇操操视频| 首页亚洲国产高跟丝袜诱惑视频| 日韩性爱毛片操骚逼| 噜噜噜噜久久久精品免费| 97se综合| 天美一二三在线观看Av| 操逼逼无码| 女同女同恋久久级三级| 操熟女91| 亚洲在线A| 欧美人人天天网| 精品久久久九九九孕妇| 亚洲中文字幕网| 天天干夜夜一操| 欧美成人性爱视频在线播放 | 欧美 日韩 婷婷 五月| 熟女精品一区二区三区| 国产午夜激片Av毛片不卡| av天堂加勒比| 亚洲在钱| 亚洲精品人伦一区二区| 任我爽视频在线观看| 99热综合| 超碰91在线| 色哟哟511老熟女| 欧美一区二区三区入口| 亚洲电影中字一区二区| 97干在线视频| 成人一二三区| 国产精选视频| 日韩丨制服丨中文|在线| 日日做夜狠狠爱欧美黑人| A啊啊在线观看| 蜜色网色哟哟| 久视频在线观看| 三级片大波波| 成人五月香网在线| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 中日韩欧美精品无码AⅤ一区二区| 女同女同恋久久级三级| 性久久久| 亚州综合网| 91视频在线观看18| 激情小说在线视频| 中文字幕成人乱码熟女精品国50| 欧美的精品的视频| 大香蕉伊人75| 老熟女综合网| 草草草视频| 亚洲色图欧美色图另类图片| 欧美激情1区| 久久男人的天堂| 在线日韩日本亚洲国产| 好涩综合| 中文字幕在线观| 黄片www视频免费| …亚洲黄色厕厕女女在线播…| 91 丝袜在线播放| 亲子敌伦对白在线播放| 久久春色| 无码不卡八戒| 日韩久久.一级黄色片| 天天操夜夜嗨| 睡产熟女乱伦| 99激情| 欧日韩不卡视.频| 人妻插插人妻人| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 都市激情人妻一区二区青青操视频 | 色情成人五月天| 日韩激情中文字幕有码| 综合五月婷婷| 熟妇高潮一区二区免费视频| 天天日天天舔天天喷天天射| 久久久亚洲精品电影免费看| 一区 欧美 日韩 麻豆| 日韩懂色网| 亚洲。天堂。日本在线观看| 久夜操| 91黑人狂躁丰满熟妇| 啪啪视频免费在线观看| 天天看天天在线精品| 免费看日本操逼视频| 五月婷色| 麻豆性爱视频在线播放| 超碰成人国产| 欧美三级偷拍| 欧美日韩传媒| av天堂精品久久| 九九综合久久| 男人下部插入女人下部| 欧美性综合| 一区二区三区麻豆| 欧美日韩大香蕉| 人人操人人大香蕉| 久久久啊啊|