亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn)

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn) 剛接手 Kubernetes 那陣我對kubectl get pod的輸出基本是無條件信任的STATUS 是 RunningREADY 是 1/1就覺得這 Pod 穩(wěn)了。直到有一次線上事故所有 Pod 看起來全是 Running 1/1結(jié)果業(yè)務(wù)錯誤率猛漲最后定位到根因是進程活著但業(yè)務(wù)線程池已經(jīng)掛了而那個服務(wù)壓根沒配就緒探針。從那時候起我開始較真kubectl get pod里的 READY 和 STATUS 這兩列到底是從哪來的先說結(jié)論它們都不是 API Server 里某個現(xiàn)成字段的直接透傳而是 kubectl 客戶端把 Pod 對象里一堆狀態(tài)字段匯總之后按照一定優(yōu)先級當場算出來的展示值。這篇文章我?guī)惆堰@套計算邏輯徹底拆開——分別看它們讀的是哪些底層字段、STATUS 列各種顯示值背后的決策樹是什么、以及怎么利用這套機制把排障效率提上去。適合所有被0/1、CrashLoopBackOff、ContainerCreating折磨過的 K8s 使用者和運維同學(xué)。1. 先把 kubectl get pod 的輸出和底層數(shù)據(jù)對上號kubectl get pod默認展示的列是 NAME、READY、STATUS、RESTARTS、AGE。加-o wide之后會多出 IP、NODE、NOMINATED NODE、READINESS GATES 這幾列。但不管顯示幾列它們的源頭都是同一個東西API Server 返回的 Pod 對象 JSON。想看到完整的原始數(shù)據(jù)最直接的方式是kubectl get pod pod-name -o json這段 JSON 里包含一個龐大的status結(jié)構(gòu)。我們只挑和本文相關(guān)的字段列出來JSON 字段含義影響哪一列metadata.deletionTimestampPod 被標記刪除的時間戳STATUSTerminatingmetadata.deletionGracePeriodSeconds優(yōu)雅刪除寬限期STATUSTerminatingstatus.phasePod 生命周期的大階段STATUS基礎(chǔ)值Pending/Running/Failed 等status.reason節(jié)點或控制器上報的具體原因STATUS如 Evicted、NodeLoststatus.conditions[]Pod 級別的條件集合包括 Ready、ContainersReady、Initialized、PodScheduled與 READY 列間接相關(guān)status.containerStatuses[]每個業(yè)務(wù)容器的詳細狀態(tài)state、ready、restartCount、lastStateREADY 列、STATUS 列status.initContainerStatuses[]每個初始化容器的詳細狀態(tài)READY 列初始化期間、STATUS 列Init 相關(guān)這里面最關(guān)鍵的一個認知是kubectl get 顯示的是客戶端渲染出來的視圖不是服務(wù)端存了一個顯示用字段。你進 etcd 里翻 Pod 對象找不到一個叫 STATUS 列 的東西能找到的只有上面這些結(jié)構(gòu)化字段。換句話說kubectl get pod的打印邏輯本質(zhì)上是把 Pod 狀態(tài)翻譯成人話的過程。kubectl 的這套打印邏輯對應(yīng)源碼里的staging/src/k8s.io/kubectl/pkg/printers/internalversion/printers.go核心函數(shù)是printPod。接下來我按 READY 和 STATUS 兩條線分別拆。2. READY 列容器就緒狀態(tài)的聚合統(tǒng)計READY 列的格式是X/Y比如1/1、0/2。很多人以為它表示Pod 里有多少容器在運行其實不準確它統(tǒng)計的是容器的 Ready 字段也就是就緒狀態(tài)和進程是否活著是兩個維度。2.1 X 和 Y 分別是怎么算出來的Y 的分母很簡單spec.containers數(shù)組的長度也就是普通業(yè)務(wù)容器的數(shù)量。注意Init 容器不算在內(nèi)這個后面細說。X 的算法大概是這樣的readyContainers : 0 for _, cs : range pod.Status.ContainerStatuses { if cs.Ready { readyContainers } } totalContainers : len(pod.Spec.Containers) // 如果 Pod 還在初始化階段READY 列固定顯示 0/N所以1/1表示Pod 里定義了 1 個業(yè)務(wù)容器且這個容器的ContainerStatuses[*].Ready為 true。這里有個容易踩的坑Pod 在初始化的過程中即使業(yè)務(wù)容器已經(jīng)創(chuàng)建了READY 也會顯示0/N。因為初始化階段有個硬邏輯——只要 Init 容器還沒全部跑完kubectl 就不去統(tǒng)計普通容器的就緒數(shù)直接輸出0/業(yè)務(wù)容器總數(shù)。所以看到0/2別急著下結(jié)論先看 STATUS 列是不是Init:1/2或者PodInitializing。2.2 容器 Ready 到底由誰決定一個容器的 Ready 屬性由 kubelet 維護具體判斷方式取決于你有沒有配探針沒配任何探針容器啟動進入 Running 狀態(tài)后kubelet 會很快把 Ready 置為 true。進程活著就等于就緒。配了 readinessProbe就緒探針容器進程活著還不夠必須探針連續(xù)成功一次Ready 才會變 true。探針一旦失敗Ready 立刻變 false。配了 startupProbe啟動探針容器啟動后先跑 startupProbe成功之前 readinessProbe 根本不生效Ready 保持 false。這就解釋了最常見的詭異現(xiàn)象STATUS 是 RunningREADY 卻是 0/1。容器確實在跑但 readinessProbe 一直失敗kubelet 只負責(zé)執(zhí)行探針并同步 Ready 狀態(tài)并不會因為你業(yè)務(wù)沒就緒就把 STATUS 改成別的。所以 READY 列本質(zhì)上是一個業(yè)務(wù)是否被判定為可服務(wù)的開關(guān)聚合而不是進程是否存活的聚合。真正決定這個開關(guān)的是 Kubelet 的探針機制這也是為什么很多正式環(huán)境強制要求核心服務(wù)必須配 readinessProbe 的原因——沒有探針一個依賴下游超時的服務(wù)依然會對外顯示 1/1但請求進來全掛在等待上。2.3 readinessGatesPod 級別的另類就緒門控除了容器自身的 ReadyPod 還可以通過spec.readinessGates聲明額外的就緒條件。比如spec: readinessGates: - conditionType: example.com/healthy如果聲明了這個 gatePod 的 Ready condition 必須同時滿足所有容器 Ready和所有 gate 對應(yīng)的 condition 為 True才能算 Pod 就緒。這個機制常被用來讓自定義控制器參與就緒判定比如某些網(wǎng)絡(luò)組件會在 CNI 配置沒就緒時寫一個 False 的 condition。不過要注意一個細節(jié)readinessGates 影響的是 Pod 的 Ready condition不一定直接影響 READY 列的數(shù)字。因為 READY 列統(tǒng)計的是容器級containerStatuses[*].Ready而不是 Pod 級 Ready 條件。你可能會看到 READY 1/1 但 Pod Ready condition 是 False 的情況此時這個 Pod 依然不會進 Service 的 Endpoints。這種顯示正常但實際不服務(wù)的場景排查時很容易被忽略。2.4 restarts 對 READY 的短暫影響容器重啟期間舊容器被終止、新容器在創(chuàng)建新容器的 Ready 會短暫為 false。所以 CrashLoopBackOff 里 Pod 的 READY 長期是 0/1一旦某個周期內(nèi)容器能撐夠時間READY 會短暫跳到 1/1然后又掉回 0/1。這個變化用kubectl get pod -w看得非常清楚。3. STATUS 列一套客戶端決策樹算出來的印象分STATUS 列是所有 K8s 新手最先看的列也是誤解最多的列。先說個讓人意外的事實STATUS 顯示什么并不是 API Server 告訴 kubectl 的而是 kubectl 自己根據(jù) Pod 的一堆字段按優(yōu)先級現(xiàn)場決策的。3.1 printPod 的決策優(yōu)先級把printPod的邏輯簡化成一個決策樹大概是這樣的1. 如果滿足刪除中條件 - Terminating節(jié)點失聯(lián)場景可能顯示 Unknown而不是 Terminating 2. 如果 Init 容器還沒全部成功退出 - 某個 init 容器失敗Init:Error / Init:ExitCode:x / Init:Signal:x - 某個 init 容器正在運行Init:N/MN已成功退出數(shù)M總數(shù) - 某個 init 容器在等待PodInitializing 3. 上面都不滿足時遍歷普通容器但只看第一個容器 - 如果它處于 Waiting 且 reason 非空用這個 reason 當作 STATUS 比如 ContainerCreating、CrashLoopBackOff、ErrImagePull - 如果它處于 Terminated 且 reason 非空用這個 reason 當作 STATUS 比如 Completed、Error、OOMKilled 4. 如果上面都沒拿到有意義的 reason退回 Pod.Status.Reason再退回 Pod.Status.Phase - phase Succeeded - Completed - phase Failed - Error - phase Running - Running - phase Pending - Pending這個順序里最容易被忽略的兩點STATUS 列只看第一個普通容器。如果 Pod 里有多個容器第二個、第三個容器即使 CrashLoopBackOff只要第一個容器在 RunningSTATUS 依然可能是 Running。這種多容器 Pod 的狀態(tài)顯示盲區(qū)是排障時最坑的細節(jié)。容器處于 Running 但 readiness 失敗時STATUS 不會顯示 NotReady。kubectl 沒有為readiness 失敗單獨設(shè)計一種顯示值所以 Running 0/1 是同時出現(xiàn)的。很多人看到 Running 就覺得 OK其實問題就藏在這里。3.2 各種 STATUS 顯示值到底對應(yīng)什么底層狀態(tài)我整理了一張速查表基本覆蓋日常最常見的 STATUS 值STATUS 顯示底層狀態(tài)常見誘因PendingphasePending沒有其他 reason 覆蓋調(diào)度失敗、資源不足、等待存儲ContainerCreating第一個容器 Waiting reasonContainerCreating鏡像拉取、sandbox 創(chuàng)建、CNI 配置ErrImagePull容器 Waiting reasonErrImagePull鏡像不存在、倉庫認證失敗、地址錯誤ImagePullBackOff容器 Waiting reasonImagePullBackOff鏡像拉取連續(xù)失敗后的退避階段CrashLoopBackOff容器 Waiting reasonCrashLoopBackOff容器啟動后反復(fù)崩潰kubelet 退避重啟Running第一個容器處于 Running 狀態(tài)正?;蛘咛结樜磁渲?探針失敗但容器存活Completed容器 Terminated reasonCompleted 且 phaseSucceededJob 正常結(jié)束Error容器 Terminated reasonError或 phaseFailed啟動腳本出錯、探針失敗導(dǎo)致重啟等OOMKilled容器 Terminated reasonOOMKilled內(nèi)存超過 cgroup 限制被內(nèi)核殺掉TerminatingdeletionTimestamp 已設(shè)置執(zhí)行了 delete等待優(yōu)雅退出或卡刪除Unknown節(jié)點失聯(lián)且 Pod 設(shè)置了 NodeLost 相關(guān) reasonkubelet 長時間不上報狀態(tài)Evictedstatus.reasonEvicted節(jié)點資源壓力驅(qū)逐這個表里的值不是隨便拍的它們要么直接來自containerStatuses[*].state.waiting.reason要么來自state.terminated.reason要么來自status.reason/status.phase。所以你會發(fā)現(xiàn)STATUS 列其實是一個第一個異常狀態(tài)的快速入口——它的設(shè)計目標是讓你一眼看出最值得關(guān)注的容器問題而不是告訴你整個 Pod 的健康全貌。3.3 一個補充STATUSRunning 但 READY0/1 的官方解釋回到開頭那個現(xiàn)象。容器狀態(tài)機里有一個獨立的維度叫State分為 Waiting、Running、Terminated 三態(tài)。readiness 是另一個獨立的布爾維度。kubectl 在渲染 STATUS 列時看的是 State 相關(guān)字段在渲染 READY 列時看的是 Ready 布爾值。兩邊各行其是所以會出現(xiàn)容器 StateRunningReadyfalse - STATUSRunningREADY0/1容器 StateWaiting(reasonCrashLoopBackOff)Readyfalse - STATUSCrashLoopBackOffREADY0/1理解了這個兩套維度各算各的設(shè)計很多所謂的詭異顯示就都能解釋通了。比如容器剛被 OOM 殺掉State 變成 Terminated reasonOOMKilled但 kubelet 正在重啟它STATUS 可能短時間閃過 OOMKilled 然后變成 CrashLoopBackOff。4. 三層狀態(tài)模型phase、conditions、containerState 的關(guān)系如果你覺得上一節(jié)的決策樹有點繞那可能是因為還沒建立 Pod 狀態(tài)的整體模型。我習(xí)慣把 Pod 狀態(tài)拆成三層來看排障時一層一層剝。4.1 第一層Pod Phase階段status.phase是 Pod 生命周期最粗粒度的描述只有五個值PendingPod 已被 API Server 接受但還沒有完成調(diào)度或者某些容器還沒啟動。RunningPod 已綁定節(jié)點所有容器已被創(chuàng)建且至少有一個容器在運行或正在啟動。Succeeded所有容器都以退出碼 0 正常結(jié)束且不會被重啟。Failed所有容器都已終止至少有一個容器以非 0 退出碼結(jié)束。UnknownAPI Server 長時間無法從 kubelet 獲取 Pod 狀態(tài)一般是節(jié)點失聯(lián)。Phase 是一個控制面視角的粗分類你不會從這里知道鏡像拉到了沒有探針過了沒有它太粗了。4.2 第二層Pod Conditions條件status.conditions是一組更細的布爾條件標準的有四個PodScheduledPod 是否已成功調(diào)度到節(jié)點。Initialized所有 Init 容器是否已執(zhí)行完成。ContainersReady所有業(yè)務(wù)容器是否都 Ready。Ready整個 Pod 是否就緒等價于 ContainersReady 且所有 readinessGates 滿足。每個 condition 都有statusTrue/False/Unknown、reason和message。查看方式kubectl get pod pod-name -o jsonpath{.status.conditions[*].type}{.status.conditions[*].status}{\n}或者看 YAMLkubectl get pod pod-name -o yaml | grep -A 12 conditions如果你的 Pod 被寫入了自定義 condition比如某些控制器會寫example.com/healthy那它也會出現(xiàn)在這個數(shù)組里。Pod 的 Ready condition 是控制器、Service Endpoints 是否收錄該 Pod 的依據(jù)之一。4.3 第三層Container State容器狀態(tài)容器層狀態(tài)是排障時信息量最大的一層。每個容器在status.containerStatuses[]里都有一個state字段三選一state : { waiting: { reason, message } running: { startedAt } terminated: { exitCode, reason, signal, startedAt, finishedAt } }值得專門做一張 reason 速查表state 字段的 reason含義ContainerCreatingkubelet 正在創(chuàng)建容器可能卡在 sandbox 或卷掛載CrashLoopBackOff容器啟動后崩潰kubelet 正在退避等待下一次重啟ErrImagePull首次拉取鏡像失敗ImagePullBackOff鏡像拉取連續(xù)失敗進入退避CreateContainerConfigError容器配置有問題比如 ConfigMap/Secret 不存在StartError容器運行時啟動失敗OOMKilled容器因超限被殺Completed容器正常退出退出碼 0Error容器異常退出除此之外lastState字段很有價值。它記錄的是容器上一次的狀態(tài)快照。當容器處于 CrashLoopBackOff 時當前 state 多半是 waiting但上一次的 terminated 信息里能看到 exitCode 和 OOMKilled 標志這是定位崩潰根因的鑰匙。kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState三層之間是遞進關(guān)系容器 State 決定容器的 Ready 和 Phase 的走向容器 Ready 聚合出 ContainersReadyContainersReady 加上 readinessGates 得出 Pod Ready。所以當你看到 STATUS 列異常時往下一層找容器 State 的 reason往往比盯住 STATUS 文案更高效。5. 從這兩列出發(fā)的實戰(zhàn)排障鏈路知道數(shù)據(jù)來源之后排障思路就清晰了。下面按最常見的 5 個狀態(tài)場景給出一步步的排查命令鏈。5.1 STATUS 是 ContainerCreatingREADY 是 0/1先看完整事件別急著看日志kubectl describe pod pod-name | tail -30 kubectl get pod pod-name -o json | jq .status.containerStatuses[0].state.waiting kubectl get events --sort-by.lastTimestamp | tail -30這個狀態(tài)最常見的兩個原因創(chuàng)建 sandbox 失敗事件里會看到類似failed to create pod sandbox: rpc error: code unknown desc failed to create...的信息。這種一般是容器運行時或 CNI 網(wǎng)絡(luò)插件的問題需要上節(jié)點看 containerd 日志。鏡像拉取慢或被限流事件里會有Failed to pull image ...或exceeded retry limit, last status: 429 too many requests之類。429 這類限流在鏡像倉庫層很常見排查時留意 registry mirror、拉取憑證是否配置。5.2 STATUS 是 CrashLoopBackOffREADY 是 0/1這個狀態(tài)說明容器已經(jīng)啟動過但反復(fù)崩潰kubelet 進入退避。核心動作是看兩樣?xùn)|西# 看上一次退出時的日志 kubectl logs pod-name --previous # 看終止時的退出碼和 reason kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState.terminated退出碼很能說明問題127啟動命令或依賴找不到檢查 image 里的可執(zhí)行文件路徑。137SIGKILL通常是 OOMKilled或者被系統(tǒng) cgroup 殺掉的信號檢查內(nèi)存 limit 和實際占用。143SIGTERM常見于探針失敗觸發(fā) kill或者業(yè)務(wù)收到終止信號后沒正常退出。退出碼是 0 但仍在重啟大概率是 livenessProbe 失敗kubelet 認為容器不健康主動重啟。這時候要去看探針配置kubectl get pod pod-name -o json | jq .spec.containers[0].livenessProbe5.3 STATUS 是 Running但 READY 是 0/1這就是我們前面講的假健康狀態(tài)。第一件事確認是不是探針問題# 查看就緒探針配置 kubectl get pod pod-name -o json | jq .spec.containers[0].readinessProbe # 查看容器就緒條件 kubectl get pod pod-name -o json | jq .status.conditions[] | select(.typeReady) # 手動模擬探針請求按你探針配置的協(xié)議來 kubectl exec -it pod-name -- curl -sf http://127.0.0.1:8080/healthz如果探針地址確實不通那是應(yīng)用沒就緒去查應(yīng)用日志。如果應(yīng)用地址通但 READY 還是 0/1檢查一下探針的initialDelaySeconds和periodSeconds是否設(shè)置合理以及探針是否寫錯了端口或路徑。另一個可能被忽略的情況是 readinessGates如果 Pod 里定義了 gate但對應(yīng)的 condition 一直沒被外部控制器置為 True那 Pod Ready 也是 False。這時候去查kubectl get pod pod-name -o json | jq .spec.readinessGates kubectl get pod pod-name -o json | jq .status.conditions[]5.4 STATUS 是 Terminating一直在刪除中Pod 設(shè)置了 deletionTimestamp但遲遲沒消失。先用一條命令看清全貌kubectl get pod pod-name -o json | jq {finalizers: .metadata.finalizers, deletionTimestamp: .metadata.deletionTimestamp, grace: .metadata.deletionGracePeriodSeconds, phase: .status.phase}常見的卡刪除原因容器主進程不響應(yīng) SIGTERM超過 grace 期只能等 SIGKILL但 SIGKILL 后還卡住一般是容器運行時問題。有 finalizer 掛在 metadata 上需要對應(yīng)的控制器清理完成后才會移除。底層卷還沒完成 detach或者節(jié)點失聯(lián)導(dǎo)致狀態(tài)更新停滯。如果業(yè)務(wù)可以允許強刪再考慮兜底命令kubectl delete pod pod-name --grace-period0 --force但要清楚強刪可能造成容器進程殘留、卷鎖不釋放等后遺癥生產(chǎn)環(huán)境慎用。更穩(wěn)妥的方式是先查 finalizer 歸屬等對應(yīng) controller 清理或者先把節(jié)點的問題處理掉。5.5 STATUS 是 Pending一直沒有 RunningPending 最常見的是調(diào)度階段就出問題。重點看調(diào)度事件kubectl describe pod pod-name | grep -A 20 Events kubectl get events --field-selector involvedObject.namepod-name --sort-by.lastTimestamp如果事件里持續(xù)刷FailedScheduling跟著 message 走常見的幾類Insufficient cpu/memory節(jié)點資源不夠擴容或減小 request。node(s) had taint節(jié)點有污點Pod 沒有對應(yīng)容忍。didnt match node selector / affinity rules調(diào)度約束無法滿足。如果調(diào)度已經(jīng)成功Pod 卻還停在 Pending那說明問題轉(zhuǎn)移到卷掛載或容器創(chuàng)建階段。這時再去翻 containerStatuses 的 message看是不是FailedMount之類的問題。5.6 用 custom-columns 直接拿原始狀態(tài)排障時如果不想被 STATUS 列的展示值誤導(dǎo)可以繞過它直接輸出原始字段kubectl get pods -o custom-columns\ NAME:.metadata.name,\ PHASE:.status.phase,\ POD_READY:.status.conditions[?(.typeReady)].status,\ CONTAINER_READY:.status.containerStatuses[*].ready,\ WAIT_REASON:.status.containerStatuses[*].state.waiting.reason,\ RESTARTS:.status.containerStatuses[*].restartCount,\ DELETION:.metadata.deletionTimestamp這能讓你同時看到容器級 Ready 數(shù)組、Pod 級 Ready 條件、等待 reason 和刪除時間戳多容器 Pod 的狀態(tài)盲區(qū)也一覽無余。6. 平時最容易忽略的細節(jié)和我的實操建議最后聊幾個分散在細節(jié)里的經(jīng)驗都是我在實際維護中踩過或見過別人踩的。多容器 Pod 的 STATUS 列盲區(qū)前面提過值得再強調(diào)一次kubectl 在選代表容器時只挑第一個普通容器排在后面的容器就算炸了STATUS 也可能紋絲不動。所以凡是多容器 Pod我習(xí)慣直接-o json配合 jq 看全量容器狀態(tài)或者用custom-columns把所有容器的 reason 都打出來。肉眼盯著 STATUS 單列是真的會看漏。RESTARTS 列和 READY 列的關(guān)系也要理解。RESTARTS 是所有containerStatuses[*].restartCount的累加值。容器被 OOM 殺掉后重啟RESTARTS 會 1如果后端是 sandbox 或網(wǎng)絡(luò)重建可能連累 Init 容器也計一次重啟。所以看到 RESTARTS 很高別只想到業(yè)務(wù)崩潰也要看是不是基礎(chǔ)設(shè)施層在不斷重建。初始化階段 READY 恒為 0/N 這種行為偶爾會引發(fā)誤判。尤其是 Init 容器比較多、單個 Init 執(zhí)行很慢的 Pod你可能會看到 STATUS 一直是Init:2/5READY 一直是0/1持續(xù)十幾分鐘。這時候別急著重啟或強刪先看 Init 容器日志kubectl logs pod-name -c init-container-nameSTATUS 列顯示 Unknown 的時候絕大多數(shù)情況是節(jié)點失聯(lián)而不是 Pod 本身出問題。先去看節(jié)點狀態(tài)kubectl get node kubectl get node node-name -o json | jq .status.conditions[] | select(.typeReady)節(jié)點 NotReady 會連帶一堆 Pod 顯示 Unknown 或 Terminating這時候先恢復(fù)節(jié)點再處理 Pod 狀態(tài)。版本差異也要留個心眼。不同 Kubernetes 小版本之間kubectl 的打印邏輯偶爾會有細微調(diào)整比如原生 sidecar 容器K8s 1.28的 RESTARTS 統(tǒng)計方式、初始化階段 READY 的分母算法都隨版本演進改過。遇到和文檔描述不一致的輸出優(yōu)先看當前 kubectl 對應(yīng)版本的源碼而不是懷疑自己的集群壞了。還有一個老生常談但我必須再提一次的建議不要把 STATUS 和 READY 這兩列當成業(yè)務(wù)健康度的最終答案。它們的設(shè)計目標是快速概覽不是健康證明。真正判斷服務(wù)能不能接流量的指標應(yīng)該是Pod 的 Ready condition 是否為 TruePod 是否出現(xiàn)在 Service 的 Endpoints 列表里應(yīng)用自身的健康檢查接口、錯誤率、延遲是否正常。如果你有監(jiān)控系統(tǒng)我建議直接把kube-state-metrics暴露的kube_pod_status_ready、kube_pod_container_status_ready這些指標接入告警比每天對著終端刷kubectl get pod靠譜得多。這兩年排查 Kubernetes 問題下來我最大的體會是狀態(tài)列是給人快速瀏覽用的但每個奇怪的顯示背后都有一套非常機械的計算邏輯。搞清楚kubectl get pod里 READY 和 STATUS 的每一層來源之后很多玄學(xué)其實都是可預(yù)測、可復(fù)現(xiàn)的。遇到問題別盯著狀態(tài)文案猜拉著原始字段看——-o json加 jq基本能回答你 80% 的疑問。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
福利社区午夜一区二区| 欧美九九九| 伊人aaa| 日本孕妇孕交| 欧美第五页| 日韩无码第3页| 色吧5亚洲| 国产超碰AV在线精品| 2018天天干在线视频| 日本性爱少妇| 女同亚洲欧美一二三区久久电影| 国精综合一二三区影视| 91久久久久| 啊啊啊啊啊啊啊啊在线观看| 亚洲av综合色| 天堂日本亚洲欧美| 久久久96精品| 无码137片内射在线影院| 岛国艾薇凹凸视频天堂| 67194无码不卡| 日本九九久久99| 99热销国产这里有精品| 久久精品国产亚洲AV无码做| 99色综合| 国精综合一二三区影视| 91天天| 免费A V在线播放| 亚洲五月天激情| 熟女自慰久久久| 国产女主播视频在线观看| 亚洲精品欧洲色| 国产乱伦亚洲| 国产污视频麻豆传媒一区二区 | 四虎884a| 蜜臀久久99精品久久久久久酒店| 久久久久免费看少妇A片特黄| 探花激情视频| 大香网伊人久久综合网eew| 久久久免费视频18| www.亚洲黄色| 丁香五月影院| 激情小说亚洲视频| 操逼无码操逼| 在线 制服丝袜中出 人妻| 人人妻人人色| 久久黄色性爱视频| 久久久不能久久久久| 性色高清..……| 操逼无码操逼| 91 亚洲 欧洲| 骚熟女AV网| 热无码中文亚洲H一道本一区二区| 中文字幕在线观看视频www| 亚洲国产一级中文综合久久天堂在线免费观看| 熟人人妻少妇精品久久| 色播丁香| 欧美精品亚洲精品日韩传电影| 人妻一区二区三区四区视频| 插入综合网| 小电影欧美91| 在线 制服丝袜中出 人妻| 久久精品99| 欧美探花网| 欧美极品少妇交| 九七毛片九九毛片| 精品久久久久久无码| 色色五月天激情| 91路www| 激情小说日韩无码| 肥臀熟女福利视频一区二区| 美女诱惑久久| 伊人AAA| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 中文字幕在线免费观看 | 久久久中文| 999 久久久| 中文字幕精品一区二| 九九色色| 九九九九精品视频| 日本天天操| 一区二区三区一亚洲中文字幕、综合区灬| 欧美日韩操操操| 北京美女一区二区| 欧美福利视频啊啊啊啊| 99爱久久视频频| 国产精品福利视频| 91色艳| 欧在线一二区| 内射日韩大臀美女| 强奸抽插av| 亚91亚洲网| 国产精品乱码久久| 大胆91| 亚洲高清自拍| 男女打扑克高清网站| 国产在线激情| 成年女人一区| 最新国产精品| 国产高清不卡视频| 国内毛片婷婷六月色| 亚洲污污网站| 性色av婷婷久久一区二区点复制| 欧美情色亚洲| 老熟女91av| 极品销魂美女一区二区| 国产精品视频| 国产精品亚洲一区二区三区四区| 伊人性在线视频| 国产激情久久久| 蜜臀久久99精品久久久久久酒店 | 女人爽到高潮潮喷18禁网站| 91白嫩| 国产欧美日韩在线不卡第一页| 丝袜狂射91| 艹比视频国产精品| 97视频一区| 青青草原人妻| 久久无码成人| 无卡一区=区| 一区二区三区免费岛国片| 91欧美经典| 手机av天堂久久久久| 亚洲AV操| 乱论91| A片A5445444| 国产精品熟女一区二区三区| 久久99九九九九6666免费观看软件| 色五月激情AV在线| 秋霞鲁丝午夜无码一区二区三| 97超碰逼| 撸撸成人在线视频| 免费网站观看www在线观| 翔田千里av一区二区三区| 青草草免费网站av| av最新免费中文字幕| 精品人妻中文字幕高清| 视频一区二区免费在线| 老司机福利青青草| 欧美精品精品一区二区| 久久久精品91八戒| 草草网站影院白丝内射| 久久美女国产| 中国探花熟女| caorenqi shipin| 国产偷拍自拍在线视频| 操逼日韩无码 | 欧美一区二区一级岛国大片| 欧美αv.com| av一区二区三区四区| 精品国产乱码| 自拍视频一区在线观看| 伊人久久大香线蕉无码| 国产精品无码AV网站| 亚洲天堂7777| 日本在线不卡一二区| 欧美很很操视频| 天天爽人人综合免费7799| 黄片直播三级黄片两女一男| 天天综合,91综合永久| 黄色污污污污污污网站| 中文字幕 一区二区 亚洲无码| 欧插网站| 久草婷婷| 岛国激情视频在线观看| 日本孕妇一区二区视频操逼免费看 | 熟妇视频一区二区三区在线观看| 97精品国产97久久久久久户外免费| 国产精品国产自产拍高清AV| 西西美女视频网| 热热色国产一二区AV| 天美久久久久| 中文字幕高清精品一区| 精品一啪| 黄页18禁| 玖玖超碰熟| 国内成人圈中文字幕无码视频| 97se亚洲综合自| 99热在线观看| 人妻无一区二区三区| 日本熟妇人妻中出视频| 天天欧美欧美亚洲网| 欧美色图私拍91| 91影视亚洲| 亚洲综合97| 久久久久人妻二区精品叶可怜| 亚洲精品无码久久AV| 色噜噜综合网| 亚洲 无码 有码 中文字幕| 久久久四区| 国产女同视频在线播放| 丁香五月成人| 日韩 欧美 国产 麻豆| 亚洲国产天堂| 干干干天天| 综合婷婷| 四虎在线免费视频| 97在线免费观看视频| 亚洲无码?第一页| 久久久人体| 亚洲999综合| 精品国产乱码久久久| 欧美偷拍区| 欧美强奸乱| 影音综合网| 福利大香蕉| 操屄日韩| 久久久爆乳翘臀一线天伦理视频| 精彩久久中文| 精品国产无码中文| 超碰日本97美女人妻人人玩人人爱| 欧美亚洲涩涩| 国产午夜在线观看| 思思热在线视频精品| 超碰98综合网| 天天射夜夜骑| 综合久久欧美| 热热色色综合| 2017人人操,人人摸| 亚洲中文制服诱惑| 亚州男人天堂| 久久综合九九| 天天日骚逼熟女| 人妻 丝袜美腿 中文字幕| 97九色人妻| 殴美色网| 日韩AC| 欧洲精品久久| 在线播放一级无码视频| 草b在线 | 日本精品一级二级三级| 人妻激情偷乱视频一区二区三区 | 欧美图片偷拍| 久久高潮妇女视频| 开心五月婷婷激情| 欧美色另类| 亚瑟国产精品久久无码| 久久99手机免费视频| 欧美性天天| 激情综合五月天| 91色射| 久久无码电影| 91美女视频电影| 黄片视频,下载| 激情文学 国产一二三aV| 久男人久久| 一级aaaaa欧美中文字幕录像片| 2011国产精品| 亚洲av噜噜噜噜噜噜| 又黄又爽在线观看视频| 91另类| 日韩pv中文| 97综合网| 久9久9精品| 亚洲天天做日日做天天谢日日| 天天摸夜夜摸| 777AV电影| 日韩人妻丝袜美腿中文| 婷婷五月天小说| 欧美91变态| 亚洲少妇喷视频看| 中文字幕国产在线天堂| 天天综合网在线| 国产无码久久高清| 国产偷人妻精品一区二区在线| www.av在线视频| 精彩久久中文| 国产精品自在线发布| 超碰97首页| 探花视频免费观看国产专区| 99青青草国产视频| 激情熟女12P| 久久99精品九九久久久婷婷| 成人av动漫在线观看| 日韩99999| 97操97色| ..日韩av毛片精品久久久| 超碰久在线天天做| 激情小说五月天| 秋霞Av理论一级在线| 中文字幕片| 无码高清操逼| 国产成人精品午夜福利| 99视频自拍| 69麻豆天美| 四虎国产成人精品免费一女五男| 婷婷91| 亚洲美女AV无码| 午夜天堂精品久久| 欧美色五月| 国产精品一二三区18| 国产精品久久久久久久免牛肉蒲团| 牛黄色久午久| 人人操,人人液| 久久夜嗨| 国产成人网站在线观看| 黄色电影在线播放综合网站| 新怡红院| 天天综合网1| 天天插天天射| 国产久久av| 嗯嗯啊啊好爽| 超碰欧美97资源| 亚洲色图超碰在线| 欧美日韩国产色图在线| 国产精品久久久久婷婷二区次| 亚洲激情 欧美色图| 人人插人人摸人人| 国产拍偷精品网站| 91精品人妻一区二区三区蜜臀| 亚洲91网站| 色妹子A V| 國產尤物AV尤物在線觀看| 啪啪啪综合网| 绑缚麻绳人妻寝取完整版| 国产树林里野战在线看| 国产精品无码久久久久2025| 久久精品无码不卡| 色阁阁AV综合网| 91男女啊啊啊| 操操碰| 男人a天堂手机在线版| 人人性爱视频免费| 亚洲色图A| 天天干夜夜肏| 国产精品视频在线播放 | 亚洲交换| 欧美性,色九九| 色九九综合| 人人人人插| 超碰免费人妻人人| 久久久96| 精品传媒在线一区| 97超碰色情| 97精品97久久| 加勒比日本在线| 玖玖人人爱| 99日韩| www.人人cao| 亚洲AV无码AV吞精久久久久| 翔田千里无码中出中文字幕| 欧美性夜| 国产免费内射视频| 97ai亚洲| 日韩日韩日韩-国产乱码精品一区二区| 久久999久| 超碰97网址| 久久免费中文字幕在线观看| 3571色综合一区二区二区| 成人午夜无码视频| 性爱av网站| 国产福利精品最新在线| 丁香六月东京热| 久久 国产 无码| www.亚洲黄色| 国产高清精品一区二区三区毛片| 国产乱伦亚洲| 人妻中文字幕日韩电影| 国产精品黑人一区二区三区| 98人妻精品一区二区色欲| 91精品国产一区三一| 精精品人妻一区二区三区| 东京热毛片调教| 国产又粗又长又大的视频| 国产精品另类一区大香蕉| 天天操福利视频综合网站| 色天堂在线观看| 午夜无码熟妇丰满人妻| 亚洲中文字幕一区| 台湾佬大香蕉| 一级一性爱免费视频| 欧美成人免费在线观看| 日韩黄色片子| 久草网站免费在线观看| 一个色导综合| 一区二区三区黄色片a| 日韩色欲久久一二三四区| 91人妻中文| 日韩去日本高清在| 久久99热这里只频精品6学生| 91美女丝袜诱惑视频| 麻豆 欧美 日韩| 国产精品制服丝袜中文字幕日韩一区二区三区 | 情色日播放AV| 一区 欧美 日韩 麻豆| 人人搡人人肉久久精品| 亚洲欧洲无码一区夜| 久欲AV| 日韩精品人妻中文字幕不卡乱码| 亚洲图片欧美色| 精品国产Av无码久久久伦古装| 四虎午夜影院| 亚洲AV成人无码一区二区三区在线观看| A片 AV一级在线播放观看免费| 色色婷婷丁香| 亚洲激情 欧美色图| 91久久久视| 精品二区三四区五电影| 亚洲 暴爽 AV人人爽日日碰| 久久av无码| 特级丰满少妇一级AAAA爱毛片| 亚洲激情四射| 性色高清在线| 一本色道久久综合狠狠操| 97久久超碰亚洲| 日产操逼| 欧美大香蕉专区网| 久久嫩草国产成人一区| 大茄子熟女AV导航| 夜夜草天天| 国产 三级自拍| 高凊专区人人操| 风月影院男女十八禁| 2019天天干| 99老司机精品视频在线观看| 亚洲av夫妻操穴网| 97视频在线免费播放| 女人综合网| 色情乱伦AV| 日本不卡三级网在线播放| 国产熟女自拍| 操逼操2| 日韩av在线播放不卡| 日韩中文字幕熟妇人妻| 久久久性爱| 欧美不卡五十路| 久久 国产精品 一区| av亚洲天堂资源网站| 快灬快灬 一下爽蜜桃在线观看| 一级做受视频免费是看美女| 96AV精品| 欧美精品庄| 欧美人妻一区| 欧美精品偷拍| 2018天天干在线视频| 26uuu最新| 日韩大香蕉| 欧美中日韩XXXX| 老熟妇一区二区三区| 淫乱图区 | 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 国产精品999zyz| 亚洲第一页色| 亚洲。天堂。日本在线观看| 乱伦1色页| xxx亚洲午夜天堂| 91无码精品| 日本精品一区二区中文字幕| 久久精品中文| 国产精品毛片?v一区二区三区 | 激情欧美日韩女同久久| 亚洲精品人体| 男人天堂2019亚洲| 久久久久99999| 这里都是精品在线观看| 色天欧美| av在线免费一区二区| 麻豆激情综合| 午夜福利av电影在线| 久操操| 日韩激情无码影院| 欧美国产视频| 亚洲国产精品成人综合| 国产精品久久久视频| 91青青草| 嗯嗯嗯不要不要免费视频| 久久97超碰| 天天射网| 东京热男人天堂| 蜜桃久久一区二区三区| 欧美96精品在线| 天天综合网国产| 亚州综合| 精品久久久久瑟瑟| 小视频国产| 超碰久久草| 凹凸视频在线观看伊人| 玖玖爱伊人玖玖爱| 97人人模人人爽人人| 国偷自 一区| 国产情侣自拍在线播放| 最新制服中文第一页| 男人天堂2019亚洲| 亚洲欧美高清无码| 日本A级视频| 在线a v| 91网站18+| 成片免费播放| 试看日韩黄片| 97bbn| 亚洲国产精品有声| 久热这里| 999狠狠综合| 久久久久久久免费A片国产成a人亚洲精∨品无码 | ss久久| 久久神马影院| 成人资源中文字幕在线观看| 中日韓欧美高清| 一级AV性爱| 国产一区二区欧美日本| 久久色人体| 九九AV| 中文字幕一区 二区三四五 区日 日骚| 亚洲日韩在线a不卡99精品| 97欧美色资源| 9九九九九视频在线观看| 国产欧美伊人| av情色影音| 蜜屁Av| 国产精品色约约| 野狼福利社区| 插穴性爱视频在线观看| 另类在线| 青青欧洲黑| 传媒在线观看一区二区三区| 久久精品国产亚洲AV清纯| A一区片| 99精品久久久久久久婷婷蜜桃| 99热免费| 91熟女视频网| 八戒午夜福利理论片| 欧美一级色| 青苹果影院男人的天堂| 中文字幕欧洲有码| 日韩av免费一级电影| a在线观看| 成人在线视频二区| 涩亚洲欧洲| 999久久久免费精品国产牛牛| 国产成人欧美精品在线| 99国产精品久久久在线播放| 性爱av在线免费观看| 久久国产AⅤ| 欧美激情亚洲情色| 高凊专区人人操| 国产精品久久久久亚洲av| 精品福利| 肉丝中文无码高清| 亚洲美女30b| 久久久蜜桃一区二区三区| 脫衣舞一区二区三区| 久久久亚洲| 久久精品操| 欧美熟女丝袜| 日本一天色道久久久精品视频| 国产精品天美传媒| 久久激情视频| 国产精品午夜高潮呻吟久久av| 最新av网站在线观看| 国产精品白丝| 色九久| 免费男人的天堂| 日日干男人的天堂| 国产又大又粗又长视频在线| 久久久久婷婷| 久久鲁干| 国产 热久久久久国产精品| 搡老女人老91妇女老熟女| 久久久免费懂色| 久久中日麻豆| 国产天天看| 五月丁香啪啪| 婷婷五月天激情四射| 亚洲操人| 亚洲精品国产精品乱码不99| A片 AV一级在线播放观看免费| 校园春色综合网| 91夜色| 又大又大又大又粗爽高潮观看 | 香蕉精品二区二区| 一二三区精品视频| 99久草| 九九九九九九九九九国产精品 | 粉嫩久久久极品| 久偷拍欧美日韩三区| 日韩精品第3页| 天天摸夜夜摸| 成人一区二区三区四区| 东北女人操比视频| 色妇91| 欧美综合传媒| 蜜桃香蕉久草精品在线| 日韩成人小视频| 性色aV一区二区三区噜噜| 欧美在线天堂| 婷婷色综合欧美日韩| av激情亚洲五月天| 蜜乳视频网站| 成人性爱视频在线看| 日亚韩精品视频二区三| 五月婷婷丁香| 国产久久一区二区午夜| 国产夜夜艹| 日韩中文字幕av在线播放| 久久m| 日韩电影中文字幕| 久久一区二区蜜桃| 亚洲伊人久久综合97| 91精品久久久| 一区二区三区视频在线观看免费| 五月天激情网图片| 亚洲s在线观看| 一本大道综合伊人精品热热| 97超碰中文字幕| 蜜臀99精品国产高清在线观看| 国产成人在线观看网址| 亚洲精品毛片在线观看| 久久香蕉国产线看观看猫咪av| 9久精品| 九九热精品在线| 亚洲在高跟鞋自慰久久在色线| 九久久精品| 淫荡网址| 三级网色| 天天爽爽爽爽| 国产精品不卡一区二区三区| 少妇精品| 丁香九月 婷婷| 日韩中文字幕二区| 97青娱乐超碰久久| 丰满熟女人妻一区二区三五十一路| 亚洲黄色电影| 99久久精品无码一区二区毛片免费 | 波多野结衣一级视频| 91超级碰碰碰| 青青操少妇| 天天影视综合色| 亚洲无码 国产无码| 亚洲天堂7777| 91老熟女逼| 久久久天堂| 成人av福利在线观看| www.色婷婷色综合| 四虎视频在线观看| 免费在线视频97| 国产特级毛片AAAAAA高潮流水| 亚州色图第三区| 男人的亚洲天堂| 免费国产视频| 国产91乱伦| 91在线美女| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 久久男人精品| www.yw尤物| 亚洲日产专区婷婷| 欧美v亚洲v综合v国产v妖精| 五月婷丁香| 亚洲男人综合网| 蜜臀一区二区三区在线 | 成人性爱免费播放| 九九99精品| 久草精品一区 | 日本久久女同性恋视频| 香蕉久久国产AV一区二区| 98精品国产乱码久久久久久| 国语对白露脸XXXXXX| 五月丁香婷婷综合| 久久九九精品一区二区| 熟妇的味道HD中文字幕| 中日无幕一二三四区| 久久99干一本高清| 一区二区三区视频在线观看免费| 国产美女激情| 亚洲乱码精品一区二区| 激情六月天| 久久久久久人| 欧美日本国产日韩激情视频| 情侣操 逼视频99| 夜夜操美女| 午夜福利久久久噜久噜久久综合 | 亚洲国产一区二区三区在线 | www.久久| 九九热三级片| 色婷婷电影| 五月天人妻综合| 亚洲高清无码在线桃色| AV在线资源| 精品国产乱码久久| 久久亚洲骚逼综合| 色欧洲| 天天日夜夜| 久久高潮妇女视频| 婷婷五月天小说| 精品69网| 91色艳| 青草精品视频-日本久久久久网站| www.丁香五月| 天天躁日日躁狠狠狠躁| 日本熟妇人妻中出视频| 亚洲精品97p| 国产亚洲精品自在线亚洲情侣| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 97超碰超| 91视频国品一二三区| 亚洲资源站| 亚洲天堂东京热| 国产高清成人免费视频| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 人人操人人摸人人骑| 91色碰| 国产91亚洲精品一区二区三区| 后入人妻一区| 在线观看成人性爱免费小视频| 麻豆精品A片免费观看| 一本大道不卡一二三区| 欧美超碰人妻97| 日韩av影片在线观看| 狠狠躁久久躁| 久久久久久久久久久人妻| 黑丝日韩av丝袜av| 天天操夜夜操狠很操| 国产情色在线| 久久伦理视频久久大香蕉视频| ,国产乱人伦精品一区二区三区| 欧美第一页性| 欧美中出| 国产日本熟女顶级一区二区三区视频| 天天射天天操天天干天天吃2018| 亚洲视频小说| 中文字幕 国产区| 97欧美在线| 男生女生啊啊啊啊| 亚洲色图欧美视频| 午夜在线播放| 麻豆国产成人精品| 精品-91人妻子系列| 超碰2017| 欧美中字二区| 免费看日本操逼视频| 亚洲午夜未满十八勿入网站日本又色又爽又黄 | 麻豆一区二区三区精品| 911粉嫩人妻| 欧美天天影院| 欧美 日韩 国产传媒| 人人人人插| 久久岛国| AV99热18这里只有精品| 久久久激情| 性爱视频啪啪啪啪| 九久久精| 中 文字幕一区二区三四 五 区日 日 骚| 亚洲αv一区二区三区| 超碰久超碰久| 国产老熟女| 日本在线不卡v二区| 欧美日韩在线小说| 亚洲天堂日本| 97午夜剧场日韩| 日韩精品在线观看网站| 中国一级αV| 啊啊啊啊啊舒服| 青青草吊丝| 综合久| 日本性爱视频一级| 国产精品久久蜜乳av| 伊人aaa| 亚洲一区二区三区久久 亚洲一区二区| 国产传媒操逼视频| 女人天堂av在线播放| 黄色交缠性感爆操91国产精品免费一区二区三区| 青青草自拍视频在线播放| 岛国艾薇凹凸视频天堂| J?P?NESEHD熟女熟妇伦| 超碰天天去日穴| 99国产在线绯色一区| 欧美国产日韩清纯唯美| 亚洲精品影视老司机| 一级一性爱免费视频| www.人人摸在线视频| 性老妇一区二区三区| 少妇国产不卡| 欧美国产日韩清纯唯美| 新婚人妻扶着粗大强行坐下| 98人妻精品一区二区色欲| 亚洲男人在线观看天堂| 精品女同一区| 亚洲视频二区| 久久一二三级一一一| 天天爽爽爽爽| 色婷婷基地| 黄网在线播放| 五月丁香社区婷婷日韩欧美精品影院 | 国产91精品在线免费| 四虎免费在线播放| 后入式视频国产自| 美女91在线观看| 亚洲精品色| 国产视频一区二区在线| 97电影院超碰| 日韩精品中文字幕二区| 大伊香蕉在线视频免费| 亚洲国产成人精品999| 好属操| 免费视频一二三区| 91亚洲欧美激情| 96久久久久| 国产精品夜夜| 人人妻人人澡人人爽久久av| 97视频一区| 成人久久久精品| 国产91专区| 日韩精彩视频| 日本高清一本二本免费不卡| 人妻少妇久久| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 99操| 婷婷香网站| 欧洲与亚洲欧美精品中文字幕| 啊啊啊不要啊啊受不了了视频在线| 日本三级小说中文字幕| 欧美大香蕉在线观看| 校园春色制服丝袜中文字亚洲 | 亚欧洲一区二区视频| 国产熟女高潮一区二区三区| 玖玖爱综合网| 色婷婷淫色网| 91精品少妇搡搡搡| 天天搞欧美| 东京热,男人的天堂| 欧美日韩小说| 夜夜躁狠狠躁日日躁av| 91无遮挡| 一级婬片120分钟试看| 成·人免费午夜在线观看| 美日韩男女操屄视频| 八戒无码国产午夜福利| 嗯啊抽插大香蕉网页| 8050无码八戒| 亚州少妇| 中文字幕人妻色偷偷久久皮 | 国产精品久久发布| 亚洲色性情三级| 久久人妻无码毛片A片麻豆| 欧美日日人人天天| 日韩精品一区二区人人人| 超碰97丝袜| 中文字幕日韩专区精品系列 | 91小视频| 丁香五月成人| 久久视网78| 日韩中文字幕宗合在线| 亚州高清AV| 亚洲国产成人精品女人久久久| 翔田千里爆乳巨臀无码| 国产偷拍自拍在线视频| 五月婷婷激情| 亚洲淫乱骚妇AV| AV在线播放网址| 99re28在线观看| 四虎国产精品永久在线囯在线| 亚洲制服aⅴ中文字幕| 柠檬AV导航| 天堂资源欧美| 999久久久久久久久| 国产一级内射高清视频 | 中日韩久久久| 五月婷婷激情网| 怡春苑东京热| 蜜臀AV午夜精品久| 久久久久久人妻一区精品色欧美| 91精品伊人久久久大香线蕉91| 成人情色一区二区| 春色校园综合网| 四虎精品永久在线观看| 日韩无码一级黄色av片| 亚洲一区二区中文字幕| 亚洲一区二区三区久久 亚洲一区二区| 秋霞一区二区三区四区五区六区七区| 久肏视频字幕| 久久性爱精品一区| a久久| 精品人妻视频一区二区三区蜜桃视频| 久9综合在线| 精品人妻视频入口| 香蕉久久国产AV一区二区| 日韩pv中文| 天天综合网视频91| 国产91av在线播放| www.色五月| 不卡码视频| 日日操夜夜操天天操免费观看麻豆| 亚洲欧美日韩免费电影| 亚州伊人色综台| 欧洲精品欧洲精品| 色婷婷六月丁香七月婷婷| 99亚洲天堂| 色网1| 男插女青青影院| 国产亚洲人妻综合日韩 久久| 操91| av一区二区三区四区| 玖玖视频在线资源一区二区三区| 日夜尻逼网| 日本性爰一道本| 搡老女人老妇女老妇老熟女怎么读| 91插B网站| 新婚人妻扶着粗大强行坐下| 97天天做| 亚洲美女av无码| 黄污污污污| 操一对老熟妇爽上天视频| 18禁网站在线播放| 日本一天色道久久久精品视频| 啊啊啊啊啊啊在线观看| 亚洲欧美精品一区天堂久久| 大香交| 亚洲古典另类欧美在线| 97在线青| 天天色天天干天天射| 天美一二三在线观看Av| 欧美在线91| 无码免费一区二区三区啪啪| 97chaopengongkai| 99久在线精品99re8热| 91激情国产| 天天做天天爱夜夜爽毛片试看| 精品视频日日夜夜| 欧美精品97| 激情小说五月天| 日韩97精| 国产超碰人人操| 台湾佬中文娱乐网久久久久久久久久com | AA丁香综合激情| 素人伊尹大香蕉免费下载视频| 全球成人中文在线| 97超碰色中文字幕| 国产精品香蕉热久久新品| 在线情色电影 91大 | 午夜精品久久久久| WWW操逼| 亚洲欧洲无码97久久精品| 亚洲码在线中文在线观看| 中文字幕一区二区三区蜜臀| 2020久久免费视频| 午夜呻吟欧美| 中文字幕一区二区三区字幕| 免费网站观看www在线观| 免费a级毛片av无码久久精品中文字幕| 久久久久精| 不卡中文字幕aⅴ在线| 操B久久| 中文字幕乱码人妻二区三区| 九九热精品在线| 人妻偷拍一区二区三区| 蜜臀久久久| 中文字幕一区二区韩| 亚州五月| 加勒比大香蕉视频在线| 91无遮挡| 欧美在线啊啊啊 | 操逼无码操逼| 嗯嗯啊好大| 国产男人又猛又粗又爽| 综合色欧美| 青青青国产| 正在播放国产精品一区| 97天天在线| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 密臀视频一区二区三区| caoni国产亚洲av| 精品无av| 黑丝91视频| 精品国产www久久| 日韩无码第3页| 在线观看十八禁| 少妇一级婬片免费放一级a性色.| 国产成人啪一区二区| 色综合久久久久| 91夜色| 操淫穴亚洲五月丁香 | 亚洲精品官网在线观看| 精品免费成人久久| 欧美精品在线观看| 无色无码| 91亚洲网| 性交一区二区在线播放| 婷婷激情五月综合| 欧美亚洲第一页| 97久久超碰亚洲| 9999伦理视频| 免费作爱一级视频| 神马久久久久久久| 色天堂在线观看| 女优视频第10页| 亚洲欧美在线观看免费| 亚洲高清色综合| 性色av一区二区| 婷婷五月天激情四射| A 在线网址| 花花AV导航| 中文字幕女同在线| 精品久久久久,69国产成人精| 亚洲囯产精品女人久久久| 日本幼女18+| 超碰 av 女人天堂| 香蕉在线一区二区三区| 国产网红精品| 久久精品一区二区一8| 国产超碰97| 99久久综合| 日本在线一二 | 操美女高潮抽搐白浆| 在线毛片片免费观看| 18精品一二区| 五毛骚逼极品美女怕怕| 日本天天人人狠狠在线日美女 | 91人妻少妇| 9久9久9久9久视频网站| 91伊人大香蕉| 先锋精品av色鲁| 中文人妻av高清一区| 亚州91| 密臀成人视频久久久| 成人在线视频一区| 国产13区| 丝袜 亚洲 偷拍| 色爱三区| 丁香五六月啪啪| 亚州91| 日本熟妇人妻一区二区三区| 98福利在线视频| 99精品热| 人妻精品综合中文字幕在线 | 中文久久一区| 操99| JIZZJIZZ国产精品喷水| 国产精品一区av在线| 欧美色999| 欧美色图 色综合图| 亚洲色图片区| 国产成人精品一区| 九九九九九九九九九九九九九九九女| 厕所偷拍在线| 97色伦欧美| 亚洲色图亚洲无码强奸乱伦| 国产熟女完整版中字 | 亚州少妇| 日本久久网| 99日韩| 婷婷性爱| 69精品人人人人| 亚洲欧洲综合视频在线| 簧片免费看视频| 丰满人妻一区二区三区大胸懂色 | 热热热热日日漂亮永久永久国产日| 国产农村妇女精品一| 亚洲熟妇图片| Av色五月| 亚洲欧美天堂在线| 九九九午夜| 青青草原人妻| 狠狠干综合| 国产91美女高潮| 蜜臀av一区二区三区免费观看| 91超级碰碰| 蜜臀少妇一区二区| 98色网| 麻豆天美国美国产| 欧美色图片91| 爽爽爽免费视频| 91成人在线| 9长久久精品| jiujiujiujingpin| 97超碰精品成| 国产精品天干天干综合网麻豆 | 免费精品福利在线观看| 黄片免费看黄片免费看| 亚洲午夜福利视频| 日韩无码黄色片| 1769精品一区二区三区| 成人性爱全视频观看| 中国探花熟女| 久热伊人| 人妻啊啊人妻啊啊| 91人人看| 91人妻视频| 综合97久久| 色九九久九九| 欧美黑人熟妇精品91| 人人妻碰人人免费| 无码人妻精品一区二区中文| 欧美日韩国产中文精品字幕自在自线| 国产成人自拍视频在线| 91久久婷婷| 久久9精品视频| 欧美999999| 色噜噜日韩精品| 欧美色宗合| 欧美一级国产一级| 国内毛片免费h片在线| 日本福利社| 欧美操逼视频二区| 亚州欧美综合| 99热这里都是精品| A一区片| 黄色性爱网网| 亚洲精品 大香蕉| 国产成人主播| www.成人无码| 美女被啪到深处抽搐视频| 亚洲色图欧美色图日韩色图| 日本一级性爱| 麻豆亚洲Av成人无码一区精品| 97色涩| 欧美伊人电影| 视频一区二区三区精品| av天堂手机版追回| 成年女人一区| 色www精品视频在线观看| 97神马久久| se吧提供国产乱老熟视频胖女人 | 人人色人人射人人妻| 亚洲男人的天堂AV| 成人无码欧美一级A片狼牙直播| 成年人网站在线免费观看| 熟女人妇一区二区三区| 亚洲天堂电影精品一区| 精品国产国产AV| 天久久久噜噜噜久久国产精品爽爽| 日本色色视频网站| 亚洲免费看片| 啊操爽品善一区二区三区| 丝袜美腿丝袜| 亚洲国产精品99久久久| 色色婷| 日韩精品高清资源在线| 亚洲一区中文字幕| 蜜乳AV.COM| 97超碰色五月| 久久久久久无码人妻中文字幕| 中文字幕在线免费观看2| 精品一区二区成人动漫| 国产亚卅97| 嗯嗯嗯啊啊啊操的我好爽| 2020中文字幕在线| 超碰精品国产无码| 大香蕉免费乱伦视频| 色香阁在线| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 717影院理论午夜伦八戒| 大香蕉 222| 91亚洲人| 国产 v乱码一区二| 大香网伊人久久综合网eew| 欧美色偷偷| 日韩九区| 91精品成人| 国产精品女aA片爽爽视频| 亚洲图片欧美在线视频| 超碰97在线中文| 牛牛AV人人夜夜澡人人爽| 久久98| 激情四射婷婷六月天| 伊人操你| 久久色激情一区二区三区| 密臀在线一区尤物| 国内精品伊人久久久久影院会| 亚洲欧美日韩电影网站一区 | 少妇毛片久久| 五月情色天| 亚洲欧美精品91|