久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn)

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn) 剛接手 Kubernetes 那陣我對kubectl get pod的輸出基本是無條件信任的STATUS 是 RunningREADY 是 1/1就覺得這 Pod 穩(wěn)了。直到有一次線上事故所有 Pod 看起來全是 Running 1/1結(jié)果業(yè)務(wù)錯誤率猛漲最后定位到根因是進程活著但業(yè)務(wù)線程池已經(jīng)掛了而那個服務(wù)壓根沒配就緒探針。從那時候起我開始較真kubectl get pod里的 READY 和 STATUS 這兩列到底是從哪來的先說結(jié)論它們都不是 API Server 里某個現(xiàn)成字段的直接透傳而是 kubectl 客戶端把 Pod 對象里一堆狀態(tài)字段匯總之后按照一定優(yōu)先級當場算出來的展示值。這篇文章我?guī)惆堰@套計算邏輯徹底拆開——分別看它們讀的是哪些底層字段、STATUS 列各種顯示值背后的決策樹是什么、以及怎么利用這套機制把排障效率提上去。適合所有被0/1、CrashLoopBackOff、ContainerCreating折磨過的 K8s 使用者和運維同學(xué)。1. 先把 kubectl get pod 的輸出和底層數(shù)據(jù)對上號kubectl get pod默認展示的列是 NAME、READY、STATUS、RESTARTS、AGE。加-o wide之后會多出 IP、NODE、NOMINATED NODE、READINESS GATES 這幾列。但不管顯示幾列它們的源頭都是同一個東西API Server 返回的 Pod 對象 JSON。想看到完整的原始數(shù)據(jù)最直接的方式是kubectl get pod pod-name -o json這段 JSON 里包含一個龐大的status結(jié)構(gòu)。我們只挑和本文相關(guān)的字段列出來JSON 字段含義影響哪一列metadata.deletionTimestampPod 被標記刪除的時間戳STATUSTerminatingmetadata.deletionGracePeriodSeconds優(yōu)雅刪除寬限期STATUSTerminatingstatus.phasePod 生命周期的大階段STATUS基礎(chǔ)值Pending/Running/Failed 等status.reason節(jié)點或控制器上報的具體原因STATUS如 Evicted、NodeLoststatus.conditions[]Pod 級別的條件集合包括 Ready、ContainersReady、Initialized、PodScheduled與 READY 列間接相關(guān)status.containerStatuses[]每個業(yè)務(wù)容器的詳細狀態(tài)state、ready、restartCount、lastStateREADY 列、STATUS 列status.initContainerStatuses[]每個初始化容器的詳細狀態(tài)READY 列初始化期間、STATUS 列Init 相關(guān)這里面最關(guān)鍵的一個認知是kubectl get 顯示的是客戶端渲染出來的視圖不是服務(wù)端存了一個顯示用字段。你進 etcd 里翻 Pod 對象找不到一個叫 STATUS 列 的東西能找到的只有上面這些結(jié)構(gòu)化字段。換句話說kubectl get pod的打印邏輯本質(zhì)上是把 Pod 狀態(tài)翻譯成人話的過程。kubectl 的這套打印邏輯對應(yīng)源碼里的staging/src/k8s.io/kubectl/pkg/printers/internalversion/printers.go核心函數(shù)是printPod。接下來我按 READY 和 STATUS 兩條線分別拆。2. READY 列容器就緒狀態(tài)的聚合統(tǒng)計READY 列的格式是X/Y比如1/1、0/2。很多人以為它表示Pod 里有多少容器在運行其實不準確它統(tǒng)計的是容器的 Ready 字段也就是就緒狀態(tài)和進程是否活著是兩個維度。2.1 X 和 Y 分別是怎么算出來的Y 的分母很簡單spec.containers數(shù)組的長度也就是普通業(yè)務(wù)容器的數(shù)量。注意Init 容器不算在內(nèi)這個后面細說。X 的算法大概是這樣的readyContainers : 0 for _, cs : range pod.Status.ContainerStatuses { if cs.Ready { readyContainers } } totalContainers : len(pod.Spec.Containers) // 如果 Pod 還在初始化階段READY 列固定顯示 0/N所以1/1表示Pod 里定義了 1 個業(yè)務(wù)容器且這個容器的ContainerStatuses[*].Ready為 true。這里有個容易踩的坑Pod 在初始化的過程中即使業(yè)務(wù)容器已經(jīng)創(chuàng)建了READY 也會顯示0/N。因為初始化階段有個硬邏輯——只要 Init 容器還沒全部跑完kubectl 就不去統(tǒng)計普通容器的就緒數(shù)直接輸出0/業(yè)務(wù)容器總數(shù)。所以看到0/2別急著下結(jié)論先看 STATUS 列是不是Init:1/2或者PodInitializing。2.2 容器 Ready 到底由誰決定一個容器的 Ready 屬性由 kubelet 維護具體判斷方式取決于你有沒有配探針沒配任何探針容器啟動進入 Running 狀態(tài)后kubelet 會很快把 Ready 置為 true。進程活著就等于就緒。配了 readinessProbe就緒探針容器進程活著還不夠必須探針連續(xù)成功一次Ready 才會變 true。探針一旦失敗Ready 立刻變 false。配了 startupProbe啟動探針容器啟動后先跑 startupProbe成功之前 readinessProbe 根本不生效Ready 保持 false。這就解釋了最常見的詭異現(xiàn)象STATUS 是 RunningREADY 卻是 0/1。容器確實在跑但 readinessProbe 一直失敗kubelet 只負責(zé)執(zhí)行探針并同步 Ready 狀態(tài)并不會因為你業(yè)務(wù)沒就緒就把 STATUS 改成別的。所以 READY 列本質(zhì)上是一個業(yè)務(wù)是否被判定為可服務(wù)的開關(guān)聚合而不是進程是否存活的聚合。真正決定這個開關(guān)的是 Kubelet 的探針機制這也是為什么很多正式環(huán)境強制要求核心服務(wù)必須配 readinessProbe 的原因——沒有探針一個依賴下游超時的服務(wù)依然會對外顯示 1/1但請求進來全掛在等待上。2.3 readinessGatesPod 級別的另類就緒門控除了容器自身的 ReadyPod 還可以通過spec.readinessGates聲明額外的就緒條件。比如spec: readinessGates: - conditionType: example.com/healthy如果聲明了這個 gatePod 的 Ready condition 必須同時滿足所有容器 Ready和所有 gate 對應(yīng)的 condition 為 True才能算 Pod 就緒。這個機制常被用來讓自定義控制器參與就緒判定比如某些網(wǎng)絡(luò)組件會在 CNI 配置沒就緒時寫一個 False 的 condition。不過要注意一個細節(jié)readinessGates 影響的是 Pod 的 Ready condition不一定直接影響 READY 列的數(shù)字。因為 READY 列統(tǒng)計的是容器級containerStatuses[*].Ready而不是 Pod 級 Ready 條件。你可能會看到 READY 1/1 但 Pod Ready condition 是 False 的情況此時這個 Pod 依然不會進 Service 的 Endpoints。這種顯示正常但實際不服務(wù)的場景排查時很容易被忽略。2.4 restarts 對 READY 的短暫影響容器重啟期間舊容器被終止、新容器在創(chuàng)建新容器的 Ready 會短暫為 false。所以 CrashLoopBackOff 里 Pod 的 READY 長期是 0/1一旦某個周期內(nèi)容器能撐夠時間READY 會短暫跳到 1/1然后又掉回 0/1。這個變化用kubectl get pod -w看得非常清楚。3. STATUS 列一套客戶端決策樹算出來的印象分STATUS 列是所有 K8s 新手最先看的列也是誤解最多的列。先說個讓人意外的事實STATUS 顯示什么并不是 API Server 告訴 kubectl 的而是 kubectl 自己根據(jù) Pod 的一堆字段按優(yōu)先級現(xiàn)場決策的。3.1 printPod 的決策優(yōu)先級把printPod的邏輯簡化成一個決策樹大概是這樣的1. 如果滿足刪除中條件 - Terminating節(jié)點失聯(lián)場景可能顯示 Unknown而不是 Terminating 2. 如果 Init 容器還沒全部成功退出 - 某個 init 容器失敗Init:Error / Init:ExitCode:x / Init:Signal:x - 某個 init 容器正在運行Init:N/MN已成功退出數(shù)M總數(shù) - 某個 init 容器在等待PodInitializing 3. 上面都不滿足時遍歷普通容器但只看第一個容器 - 如果它處于 Waiting 且 reason 非空用這個 reason 當作 STATUS 比如 ContainerCreating、CrashLoopBackOff、ErrImagePull - 如果它處于 Terminated 且 reason 非空用這個 reason 當作 STATUS 比如 Completed、Error、OOMKilled 4. 如果上面都沒拿到有意義的 reason退回 Pod.Status.Reason再退回 Pod.Status.Phase - phase Succeeded - Completed - phase Failed - Error - phase Running - Running - phase Pending - Pending這個順序里最容易被忽略的兩點STATUS 列只看第一個普通容器。如果 Pod 里有多個容器第二個、第三個容器即使 CrashLoopBackOff只要第一個容器在 RunningSTATUS 依然可能是 Running。這種多容器 Pod 的狀態(tài)顯示盲區(qū)是排障時最坑的細節(jié)。容器處于 Running 但 readiness 失敗時STATUS 不會顯示 NotReady。kubectl 沒有為readiness 失敗單獨設(shè)計一種顯示值所以 Running 0/1 是同時出現(xiàn)的。很多人看到 Running 就覺得 OK其實問題就藏在這里。3.2 各種 STATUS 顯示值到底對應(yīng)什么底層狀態(tài)我整理了一張速查表基本覆蓋日常最常見的 STATUS 值STATUS 顯示底層狀態(tài)常見誘因PendingphasePending沒有其他 reason 覆蓋調(diào)度失敗、資源不足、等待存儲ContainerCreating第一個容器 Waiting reasonContainerCreating鏡像拉取、sandbox 創(chuàng)建、CNI 配置ErrImagePull容器 Waiting reasonErrImagePull鏡像不存在、倉庫認證失敗、地址錯誤ImagePullBackOff容器 Waiting reasonImagePullBackOff鏡像拉取連續(xù)失敗后的退避階段CrashLoopBackOff容器 Waiting reasonCrashLoopBackOff容器啟動后反復(fù)崩潰kubelet 退避重啟Running第一個容器處于 Running 狀態(tài)正?;蛘咛结樜磁渲?探針失敗但容器存活Completed容器 Terminated reasonCompleted 且 phaseSucceededJob 正常結(jié)束Error容器 Terminated reasonError或 phaseFailed啟動腳本出錯、探針失敗導(dǎo)致重啟等OOMKilled容器 Terminated reasonOOMKilled內(nèi)存超過 cgroup 限制被內(nèi)核殺掉TerminatingdeletionTimestamp 已設(shè)置執(zhí)行了 delete等待優(yōu)雅退出或卡刪除Unknown節(jié)點失聯(lián)且 Pod 設(shè)置了 NodeLost 相關(guān) reasonkubelet 長時間不上報狀態(tài)Evictedstatus.reasonEvicted節(jié)點資源壓力驅(qū)逐這個表里的值不是隨便拍的它們要么直接來自containerStatuses[*].state.waiting.reason要么來自state.terminated.reason要么來自status.reason/status.phase。所以你會發(fā)現(xiàn)STATUS 列其實是一個第一個異常狀態(tài)的快速入口——它的設(shè)計目標是讓你一眼看出最值得關(guān)注的容器問題而不是告訴你整個 Pod 的健康全貌。3.3 一個補充STATUSRunning 但 READY0/1 的官方解釋回到開頭那個現(xiàn)象。容器狀態(tài)機里有一個獨立的維度叫State分為 Waiting、Running、Terminated 三態(tài)。readiness 是另一個獨立的布爾維度。kubectl 在渲染 STATUS 列時看的是 State 相關(guān)字段在渲染 READY 列時看的是 Ready 布爾值。兩邊各行其是所以會出現(xiàn)容器 StateRunningReadyfalse - STATUSRunningREADY0/1容器 StateWaiting(reasonCrashLoopBackOff)Readyfalse - STATUSCrashLoopBackOffREADY0/1理解了這個兩套維度各算各的設(shè)計很多所謂的詭異顯示就都能解釋通了。比如容器剛被 OOM 殺掉State 變成 Terminated reasonOOMKilled但 kubelet 正在重啟它STATUS 可能短時間閃過 OOMKilled 然后變成 CrashLoopBackOff。4. 三層狀態(tài)模型phase、conditions、containerState 的關(guān)系如果你覺得上一節(jié)的決策樹有點繞那可能是因為還沒建立 Pod 狀態(tài)的整體模型。我習(xí)慣把 Pod 狀態(tài)拆成三層來看排障時一層一層剝。4.1 第一層Pod Phase階段status.phase是 Pod 生命周期最粗粒度的描述只有五個值PendingPod 已被 API Server 接受但還沒有完成調(diào)度或者某些容器還沒啟動。RunningPod 已綁定節(jié)點所有容器已被創(chuàng)建且至少有一個容器在運行或正在啟動。Succeeded所有容器都以退出碼 0 正常結(jié)束且不會被重啟。Failed所有容器都已終止至少有一個容器以非 0 退出碼結(jié)束。UnknownAPI Server 長時間無法從 kubelet 獲取 Pod 狀態(tài)一般是節(jié)點失聯(lián)。Phase 是一個控制面視角的粗分類你不會從這里知道鏡像拉到了沒有探針過了沒有它太粗了。4.2 第二層Pod Conditions條件status.conditions是一組更細的布爾條件標準的有四個PodScheduledPod 是否已成功調(diào)度到節(jié)點。Initialized所有 Init 容器是否已執(zhí)行完成。ContainersReady所有業(yè)務(wù)容器是否都 Ready。Ready整個 Pod 是否就緒等價于 ContainersReady 且所有 readinessGates 滿足。每個 condition 都有statusTrue/False/Unknown、reason和message。查看方式kubectl get pod pod-name -o jsonpath{.status.conditions[*].type}{.status.conditions[*].status}{\n}或者看 YAMLkubectl get pod pod-name -o yaml | grep -A 12 conditions如果你的 Pod 被寫入了自定義 condition比如某些控制器會寫example.com/healthy那它也會出現(xiàn)在這個數(shù)組里。Pod 的 Ready condition 是控制器、Service Endpoints 是否收錄該 Pod 的依據(jù)之一。4.3 第三層Container State容器狀態(tài)容器層狀態(tài)是排障時信息量最大的一層。每個容器在status.containerStatuses[]里都有一個state字段三選一state : { waiting: { reason, message } running: { startedAt } terminated: { exitCode, reason, signal, startedAt, finishedAt } }值得專門做一張 reason 速查表state 字段的 reason含義ContainerCreatingkubelet 正在創(chuàng)建容器可能卡在 sandbox 或卷掛載CrashLoopBackOff容器啟動后崩潰kubelet 正在退避等待下一次重啟ErrImagePull首次拉取鏡像失敗ImagePullBackOff鏡像拉取連續(xù)失敗進入退避CreateContainerConfigError容器配置有問題比如 ConfigMap/Secret 不存在StartError容器運行時啟動失敗OOMKilled容器因超限被殺Completed容器正常退出退出碼 0Error容器異常退出除此之外lastState字段很有價值。它記錄的是容器上一次的狀態(tài)快照。當容器處于 CrashLoopBackOff 時當前 state 多半是 waiting但上一次的 terminated 信息里能看到 exitCode 和 OOMKilled 標志這是定位崩潰根因的鑰匙。kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState三層之間是遞進關(guān)系容器 State 決定容器的 Ready 和 Phase 的走向容器 Ready 聚合出 ContainersReadyContainersReady 加上 readinessGates 得出 Pod Ready。所以當你看到 STATUS 列異常時往下一層找容器 State 的 reason往往比盯住 STATUS 文案更高效。5. 從這兩列出發(fā)的實戰(zhàn)排障鏈路知道數(shù)據(jù)來源之后排障思路就清晰了。下面按最常見的 5 個狀態(tài)場景給出一步步的排查命令鏈。5.1 STATUS 是 ContainerCreatingREADY 是 0/1先看完整事件別急著看日志kubectl describe pod pod-name | tail -30 kubectl get pod pod-name -o json | jq .status.containerStatuses[0].state.waiting kubectl get events --sort-by.lastTimestamp | tail -30這個狀態(tài)最常見的兩個原因創(chuàng)建 sandbox 失敗事件里會看到類似failed to create pod sandbox: rpc error: code unknown desc failed to create...的信息。這種一般是容器運行時或 CNI 網(wǎng)絡(luò)插件的問題需要上節(jié)點看 containerd 日志。鏡像拉取慢或被限流事件里會有Failed to pull image ...或exceeded retry limit, last status: 429 too many requests之類。429 這類限流在鏡像倉庫層很常見排查時留意 registry mirror、拉取憑證是否配置。5.2 STATUS 是 CrashLoopBackOffREADY 是 0/1這個狀態(tài)說明容器已經(jīng)啟動過但反復(fù)崩潰kubelet 進入退避。核心動作是看兩樣?xùn)|西# 看上一次退出時的日志 kubectl logs pod-name --previous # 看終止時的退出碼和 reason kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState.terminated退出碼很能說明問題127啟動命令或依賴找不到檢查 image 里的可執(zhí)行文件路徑。137SIGKILL通常是 OOMKilled或者被系統(tǒng) cgroup 殺掉的信號檢查內(nèi)存 limit 和實際占用。143SIGTERM常見于探針失敗觸發(fā) kill或者業(yè)務(wù)收到終止信號后沒正常退出。退出碼是 0 但仍在重啟大概率是 livenessProbe 失敗kubelet 認為容器不健康主動重啟。這時候要去看探針配置kubectl get pod pod-name -o json | jq .spec.containers[0].livenessProbe5.3 STATUS 是 Running但 READY 是 0/1這就是我們前面講的假健康狀態(tài)。第一件事確認是不是探針問題# 查看就緒探針配置 kubectl get pod pod-name -o json | jq .spec.containers[0].readinessProbe # 查看容器就緒條件 kubectl get pod pod-name -o json | jq .status.conditions[] | select(.typeReady) # 手動模擬探針請求按你探針配置的協(xié)議來 kubectl exec -it pod-name -- curl -sf http://127.0.0.1:8080/healthz如果探針地址確實不通那是應(yīng)用沒就緒去查應(yīng)用日志。如果應(yīng)用地址通但 READY 還是 0/1檢查一下探針的initialDelaySeconds和periodSeconds是否設(shè)置合理以及探針是否寫錯了端口或路徑。另一個可能被忽略的情況是 readinessGates如果 Pod 里定義了 gate但對應(yīng)的 condition 一直沒被外部控制器置為 True那 Pod Ready 也是 False。這時候去查kubectl get pod pod-name -o json | jq .spec.readinessGates kubectl get pod pod-name -o json | jq .status.conditions[]5.4 STATUS 是 Terminating一直在刪除中Pod 設(shè)置了 deletionTimestamp但遲遲沒消失。先用一條命令看清全貌kubectl get pod pod-name -o json | jq {finalizers: .metadata.finalizers, deletionTimestamp: .metadata.deletionTimestamp, grace: .metadata.deletionGracePeriodSeconds, phase: .status.phase}常見的卡刪除原因容器主進程不響應(yīng) SIGTERM超過 grace 期只能等 SIGKILL但 SIGKILL 后還卡住一般是容器運行時問題。有 finalizer 掛在 metadata 上需要對應(yīng)的控制器清理完成后才會移除。底層卷還沒完成 detach或者節(jié)點失聯(lián)導(dǎo)致狀態(tài)更新停滯。如果業(yè)務(wù)可以允許強刪再考慮兜底命令kubectl delete pod pod-name --grace-period0 --force但要清楚強刪可能造成容器進程殘留、卷鎖不釋放等后遺癥生產(chǎn)環(huán)境慎用。更穩(wěn)妥的方式是先查 finalizer 歸屬等對應(yīng) controller 清理或者先把節(jié)點的問題處理掉。5.5 STATUS 是 Pending一直沒有 RunningPending 最常見的是調(diào)度階段就出問題。重點看調(diào)度事件kubectl describe pod pod-name | grep -A 20 Events kubectl get events --field-selector involvedObject.namepod-name --sort-by.lastTimestamp如果事件里持續(xù)刷FailedScheduling跟著 message 走常見的幾類Insufficient cpu/memory節(jié)點資源不夠擴容或減小 request。node(s) had taint節(jié)點有污點Pod 沒有對應(yīng)容忍。didnt match node selector / affinity rules調(diào)度約束無法滿足。如果調(diào)度已經(jīng)成功Pod 卻還停在 Pending那說明問題轉(zhuǎn)移到卷掛載或容器創(chuàng)建階段。這時再去翻 containerStatuses 的 message看是不是FailedMount之類的問題。5.6 用 custom-columns 直接拿原始狀態(tài)排障時如果不想被 STATUS 列的展示值誤導(dǎo)可以繞過它直接輸出原始字段kubectl get pods -o custom-columns\ NAME:.metadata.name,\ PHASE:.status.phase,\ POD_READY:.status.conditions[?(.typeReady)].status,\ CONTAINER_READY:.status.containerStatuses[*].ready,\ WAIT_REASON:.status.containerStatuses[*].state.waiting.reason,\ RESTARTS:.status.containerStatuses[*].restartCount,\ DELETION:.metadata.deletionTimestamp這能讓你同時看到容器級 Ready 數(shù)組、Pod 級 Ready 條件、等待 reason 和刪除時間戳多容器 Pod 的狀態(tài)盲區(qū)也一覽無余。6. 平時最容易忽略的細節(jié)和我的實操建議最后聊幾個分散在細節(jié)里的經(jīng)驗都是我在實際維護中踩過或見過別人踩的。多容器 Pod 的 STATUS 列盲區(qū)前面提過值得再強調(diào)一次kubectl 在選代表容器時只挑第一個普通容器排在后面的容器就算炸了STATUS 也可能紋絲不動。所以凡是多容器 Pod我習(xí)慣直接-o json配合 jq 看全量容器狀態(tài)或者用custom-columns把所有容器的 reason 都打出來。肉眼盯著 STATUS 單列是真的會看漏。RESTARTS 列和 READY 列的關(guān)系也要理解。RESTARTS 是所有containerStatuses[*].restartCount的累加值。容器被 OOM 殺掉后重啟RESTARTS 會 1如果后端是 sandbox 或網(wǎng)絡(luò)重建可能連累 Init 容器也計一次重啟。所以看到 RESTARTS 很高別只想到業(yè)務(wù)崩潰也要看是不是基礎(chǔ)設(shè)施層在不斷重建。初始化階段 READY 恒為 0/N 這種行為偶爾會引發(fā)誤判。尤其是 Init 容器比較多、單個 Init 執(zhí)行很慢的 Pod你可能會看到 STATUS 一直是Init:2/5READY 一直是0/1持續(xù)十幾分鐘。這時候別急著重啟或強刪先看 Init 容器日志kubectl logs pod-name -c init-container-nameSTATUS 列顯示 Unknown 的時候絕大多數(shù)情況是節(jié)點失聯(lián)而不是 Pod 本身出問題。先去看節(jié)點狀態(tài)kubectl get node kubectl get node node-name -o json | jq .status.conditions[] | select(.typeReady)節(jié)點 NotReady 會連帶一堆 Pod 顯示 Unknown 或 Terminating這時候先恢復(fù)節(jié)點再處理 Pod 狀態(tài)。版本差異也要留個心眼。不同 Kubernetes 小版本之間kubectl 的打印邏輯偶爾會有細微調(diào)整比如原生 sidecar 容器K8s 1.28的 RESTARTS 統(tǒng)計方式、初始化階段 READY 的分母算法都隨版本演進改過。遇到和文檔描述不一致的輸出優(yōu)先看當前 kubectl 對應(yīng)版本的源碼而不是懷疑自己的集群壞了。還有一個老生常談但我必須再提一次的建議不要把 STATUS 和 READY 這兩列當成業(yè)務(wù)健康度的最終答案。它們的設(shè)計目標是快速概覽不是健康證明。真正判斷服務(wù)能不能接流量的指標應(yīng)該是Pod 的 Ready condition 是否為 TruePod 是否出現(xiàn)在 Service 的 Endpoints 列表里應(yīng)用自身的健康檢查接口、錯誤率、延遲是否正常。如果你有監(jiān)控系統(tǒng)我建議直接把kube-state-metrics暴露的kube_pod_status_ready、kube_pod_container_status_ready這些指標接入告警比每天對著終端刷kubectl get pod靠譜得多。這兩年排查 Kubernetes 問題下來我最大的體會是狀態(tài)列是給人快速瀏覽用的但每個奇怪的顯示背后都有一套非常機械的計算邏輯。搞清楚kubectl get pod里 READY 和 STATUS 的每一層來源之后很多玄學(xué)其實都是可預(yù)測、可復(fù)現(xiàn)的。遇到問題別盯著狀態(tài)文案猜拉著原始字段看——-o json加 jq基本能回答你 80% 的疑問。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
91精品导航| 亚洲操操操无码| 操死我了啊啊啊| 亚洲激情片| 欧美v亚洲v综合v国产v妖精| 在线看免费无码AV天堂的| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 久久精品国产亚洲AV无码做| 在现视频女上位好爽| 97精品97久久| 欧美性爱免费短视频| 五月婷在线| 熟妇高潮一区二| 中文字幕丰满子伦无码专区在线视频最新 | 亚洲精品国产熟女| 啊啊啊97视频| 国产日产精品久久快鸭的功能介绍| 九九内射在线| 青青草原香蕉日本Ap| 伊人久久大香线蕉无码| 91 丝袜在线| 深夜激情 | 影音先锋乱伦资源| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 亚洲综合激情五月久久| 麻豆天美在线喷水AV| 亚洲一区操| 免费视频在线观看啊啊啊啊啊| 啊啊啊好大好湿| 在线免费观看高清无码视频| 99丝袜福利在线播放| 超碰导航97| 成人av免费观看| 人妻在线大香蕉| 日韩欧洲操屄视频| 高清肉丝中文无码| 久久久久国产精品喷潮免费观看臀| 歐美性天天| 午夜AV人气不卡| 欧美日韩国产电影| 国产精品一级片在线看| 欧美一区二区三区成人性生活| 久操com| 亚洲熟久久| 黑人无码一区二区| 欧美色性情| 精品超碰中文在线| 国产精品99精品视频网站| 亚洲天天影视综合网| 八人操人人摸人人看| 后入式999| 丁香六月婷婷| 2017人人操,人人摸| 久日91在线| 中文字幕人成乱码熟女香港| 91综合网站| 国产专区路线| 高清国产av无码| 亚洲视频精选| 欧美日韩青操| 99久re热视频精品98| 91爱啪| 久久蜜桃综合网| 在线国产福利网址导航| 久久久一区二区三区麻豆| 九九热超碰| 人人性爱视频免费| 人人九九精| 亚洲AV成人在线| 插入逼91| 亚洲情欲| 五月天人妻综合| 日韩AV一区二区三区四四| 夜色91| 情色五月天就去干| 日本一二三高清| 欧美黄片欧美黄片xxx| av网站免费看| 97日视频| 国产视频三区四区| 亚洲色综合| 人人干黄色| 日日AV加勒比| 久久综合激情| 琪琪精品免费一区二区三区| 欧美成97爱| 中文字幕一区二区三区蜜臀| 熟女五十路一区二区三| 黄色操人| 九t超碰| 国产久久一区二区| 黄色成品网站| 视频二区美腿丝袜制服人妻欧美| 人人操人人摸人| 日韩欧美福利视频看看| WWW.操逼.COM| 超碰91在线| 极品色电影院| 欧日韩在线观看| 婷婷色在线| 亚洲少妇综合在线播放| 色噜噜人妻丝袜a∨先锋影| 色综合国产在线观看| 97资源亚洲| 日夜尻逼网| 蜜臀99999| 亚洲综合网图| 红桃视频高潮| 欧亚乱色熟一区二区三四区| www.色操逼| 日韩精品碰碰| 国产精品人人爽人人做可爱福利| 91久久免费视频互動交流| 91美| 麻豆成人AV| 亚洲图片视频小说| 欧美在线亚洲| 人妻久久一区二区三区 | 91综合无码| 性高潮久久久久久久久久久| 最新av在线| 青青草精品| 成人综合色网| 丁香九月激情啪| 国产小u女在线观看| 色官网在线| 新久久AV| 2018天天干在线视频| 一个国产在线综合网站| 狠狠中文字幕| 午夜理论片在线观看免费| 蜜乳AV一区| 大香蕉欧美| 日韩熟女精一区二区三区不卡| 青青青在线高清视频在线一二三四区| 97欧美精品| 农村女一级毛卡片| 久久久久免费看少妇A片特黄| 欧美色图亚洲激情| 97超碰人人操人人操| 亚洲色图尤物视频| 亚洲欧美自拍偷拍| 97在线视频观看| 欧美日韩性感| 亚洲欧美精品一区天堂久久 | 色噜噜狠狠色综无码久久合欧美| 国产夜夜艹| 亚洲妇色| 啊啊啊操死我了| 看看日B真人视频| 91热| 亚洲国产欧美一区二区潘金莲 | 岛国黄片网站| 午夜影美女日鸡鸡天天视频国产| 九九热精品| 俺去久久| 黑人精品久久97| 夜夜做夜夜爽精品视频| 日韩综合成人免费视频| 把腿张开老子CAO烂你| 久久激情综合| 美女的肌被草喷水视频| 舔人妻中文免费视频| 午夜超碰| 亚一综合久久久久久久久久| 日韩三级网址| 超碰97导航| 97欧美色| av中亚| 国产精品一区午夜福利| 久久久久精| 9999九九九久久久| 97干在线看| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 欧美综合自拍| 天天日B夜夜干B时时操B| 天天看综合网| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 97资源视频| 亚洲精品久久久久久久蜜桃臀| 天天干天天日天天射黄色| 一本色道久久综合熟妇| 韩国免费播放一级毛片| 久久国产视频性吧| 羞答答AV中文字| 亚洲黄色视频在线观看视频| 日韩精品一区二区三区四虎影视| 国产欧洲精品亚洲午夜拍精品| 国产97亚洲| 无码国产Av| 射丝袜高跟鞋99| 久久人人爽av亚洲精品天堂桃色| 欧美性爱精品七区| 二区熟妇韩日| 久久永久无码人妻视频| 口爆综合网| 伊人久久久日韩一区| 综合网 欧美| 九九性爱网| 日韩精品人妻中文字有码在线 | 97精选久久| 91AV入口| 台欧久久精品视频| 97国产精品| 婷婷亚洲色| 97超碰亚洲| 日韩精品字幕| 一区久久久二区| 丰满人妻一区二区三区蜜桃视频| 射 色综合| 精品免费囯产一区二区三区| 日韩精品一区二区三区色欲 | 自怕偷自怕亚洲精品| 久久久999网站| 狠狠爱夜夜| 中文字幕在线观看丝袜| 亚洲色图欧洲| 人人色97| 国产1024在线播放| 97国伦国色| 欧美黄色手机在线观看| 九九亚洲精品| 美女尤物人人操| 欧美高潮在线| 欧美日韩另类在线播放| 色爱欲亚洲| 成人av性爱电影在线观看| 97硬碰| 成人小说视频在线精品欧美| 福利大香蕉| 中文字幕 码精品视频网站| 亚洲午夜蜜臀| 久久一二区四| 岛国视频一二三区| 久久久无码精品人妻二区| 国产97色在线| a片自拍直播视频| 色狠人在线99| 日韩在线观看中文字幕视频| 四虎国产精品永久在线囯在线| 亚洲精品色| 另类亚洲一区二区三区| 欧美久久久| 天堂а√在线最新版在线| 嗯嗯啊啊的视频| 亚洲中文字幕三级在线| 中文字幕美女91| 精品九九九九九九九| 乱欲一区二区| 天天综合欧美| 91 国产丝袜在线播放-百度| 亚州伊人色综台| 欧美A片中文字幕| 另类欧美| 综合熟女| 亚洲国产一级精品毛一级精品看免费视频 | 亚洲黄色电影| 欧美狠狠鲁| 强免费黄色网址| 97久久久| 国产极品久久久| 国产精品无码AV网站| 夜夜欢天天干| daxiangjiao你懂的| 色婷婷丁香五月| 午夜a成v人电影| 东京热毛片调教| 色第一页| 久久精品亚洲成a人天堂| 日韩免费中文字幕视频| 亚洲成人帖图| 国产成自自拍在线观看| 五月激情小说| 亚洲五码一区二区三区| 妇女性内射冈站HDWWWCOM| 91热色| 四虎884a| 综合日韩激情另类图片| 五月天偷拍| 色综合天天| 欧美综合第一页| 天天爱综合网| 亚洲精品97中文字幕| 天天影视色香色欲| 国产免费一区在线观看| 亚洲97在线| 青木玲在线不卡| 亚洲成熟国产精品美女| 欧美加勒比| 青青草国产一区二区三区| 日本不卡高清免v欧美日韩在线观看| 福利伊人玖玖国产| 欧美一级特黄淫片在线观看| 欧美亚洲国产91在线| 精精品人妻一区二区三区| 国产欧美黑人丰满在线| 午夜精品久久久久久久99热影院| 男人兔费天堂| 天天色,天天干,天天干| 26uuu成人影片| 91天堂网| 超碰色老头| 久草看看看| 亚洲做性| 欧美成人贴图| 啊啊啊好大好深| 美女上床网站| 黑丝制服中文字幕| 人妻第一页| 国产又粗又长视频| 97超碰超碰| 91黑人狂躁丰满熟妇| 女生久久网| 一起草视频在线| 亚洲激情在线| 极品国产内射| 国产精品不卡高清在线观看| 麻豆综合一区av| 日韩熟女无码| 国产无码高清操逼视频| 放黄片放3级黄片没穿衣服| JuliaAnnXXX888| 日本性一区| 久久久久无码一妻区| 日韩视频小说在线观看 | 激情五月丁香五月| 欧美制服另类丝袜| 欧美日韩亚洲天堂网| 天天插夜夜爽| 青青青草原| 黑人性暴力毛片| 欧美线天码中字| 日本韩国五十路六十路七十路老熟女作爱视频网站 | 91 丝袜在线| 久久綜合很很很| 黄色高清久久无码依人| 智利AV在线网| 婷婷午夜清品久久久久久久性色视频观| 97超碰9| 91色综合| 婷婷丁香五月天综合东京热| 天天看综合网| 蜜桃狠狠色伊人亚洲综合| 白嫩白嫩的午夜九久久久久久久久久久久成人剧场 | 男人天堂免费| 久久久久夜夜夜夜| 正在播放国产精品一区| 99熟女| 日韩国产十八禁| 欧美91久久久久| 亚洲 欧美综合| 91香蕉国产尤物视频| 国产福利电影| 五月天婷婷色| 欧美青青视频| 亚洲熟女人妻中文字幕一区二区 | 亚洲中文字幕噜噜噜久久久| 久久爽爽精品| 色爱天堂| 日本视频一区二区三区| 精品一区二区三区蜜桃臀赵总 | a级成人毛片免费视频高清| 欧美色棕合| 亚洲黄色网址| 久久神马| 另类天堂| 蜜臀一区二区三区在线| 96AV精品| 久久久久久人| 蜜桃av综合网发布| 久久久草草精品| 精品成人av一区二区三区在线| 天天操天天干美女网址导航| 秋霞操逼片| 一本道综合色图| 天天操人人操骚逼网站| 国产精品久久久久无码Av网曝门| 丁香五月电影| 欧美激色| 欧美另类精品xxxx| 另类TS人妖一区二区三区| 精品视频久久久久九九九九9999| 国偷自 一区| 国产成人自拍视频视频| 国产人伦精品一区二区三区| 神马久久午夜| 91精品久久久久久综合五月天| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 99爱久久视频频| 久一区久久蜜桃| 在线性黄高清免费视频| 九九九精品一区二区无码| 偷拍 欧美 日韩| 五月天激情网图片| av2014 日韩在线中文字幕| 亚洲日韩美国人妻| 亚洲日韩乱码中文无码蜜桃臀网站| 欧美综合网| 99亚洲天堂| 97精品一区| 国产三级日产三级韩国三级| 97久久国产亚洲精品超碰热| 2021久久国产综合精品青草| 日本精品九九九| 岛国视频一二三区| 欧美中字不卡| 日本色色色色色视频| 九九九精品一区二区无码| 国产三级在线现体验区| 一区二区不卡| 影音先锋视频在线| 丰满丝袜少妇AV| 国产精品女久久久久av爽| 色网在线| 91成人精品在线播放| 亚洲中文电影| 国产色精品午夜大片| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 自拍啪啪视频| 久久xx| 精精品人妻一区二区三区| 久碰视频| 亚洲成人黄色在线观看| 日韩国产十八禁| 中文字幕奈奈美被公侵犯| 久久久久久久久久精| 18禁免费视频| 亚洲精品国产拍免费91在线| 色色亚洲| 一级二级三级黑人无码| 2020中文字幕在线| 天天欧美欧美亚洲网| 老熟女91| 久久久久网站-538在线视频-欧美永久乱码| 国产高清亚洲日韩一区| 在线观看视频91| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 97干色| 人妻天天操天天爽视频免费| 精品国产Av无码久久久伦古装| 综合熟女| 狠狠色伊人亚洲综合网站色| 无码男人天堂| yellow网站免费观看日韩高清无码| 亚洲精品白丝| 97久久视频| 无码高清操逼| 性生活性生大爱77AV国产| 一级久久久久久久久久久| 鸥美中出| 四虎在线免费视频| 综合网,亚洲,欧美| 在线观看色视频| 超碰美女97| 超碰在线97国产| 婷婷色色五月天| 国产91会所女技师在线观看| 久久精品无码熟妇一区二区三区视频导航| AV一二区| 天天插天天插| jizzjizz欧美| 日韩亚洲欧美中文字幕| 99天天超碰| 久久免费精彩视频| 亚欧视频在线| 99re98| 亚州图片第一页| 久久久亚洲精品电影免费看| 国产免费一区在线观看| 亚洲阿v天堂无码z2018| 亚洲九九九| 9久9久9久9久视频网站| 国产精品丝袜久久亚洲不卡| 欧美综合97www| 亚洲黄网在哪免费看| 级做a爱无码性色永久免费| 91久久国产精品| 神马久久啊啊| 美女淫穴| 九九碰九九爱97| 操逼啊啊啊91| 久久精品欧美一区二区三区不卡| 91n处女在线观看| 久久草视频污视频| 四虎免费看黄| 综精品久久久aaaa| 国产精品国产自产拍高清AV| 日韩国语字幕| 亚洲 日本 一 二 三| 91丝袜视频在线观看| 新精精品久久精品| 九九九九九九视频| 999综合色| 韩国女主播青草在线| 亚洲伊人久久精品狠狠在线| 天综合中文| 插欧洲美女欧美精品| caoni国产亚洲av| 人妻 丝袜美腿 中文字幕| 偷拍 欧美 日韩| 中文乱码字字幕在线第5页| 91精品丝袜久久久久久| 密臀在线一区尤物| 中日韓欧美高清| 91A欧美电影网站| 国际精品久久久| 日本久久久久久久久久| 91色人| 久久久久久无码人妻中文字幕| 国产成人精品午夜福利| 超碰久草| 亚洲丝袜在线观看| 98久久| 97超碰人人操人人操| 日产操逼| 日韩欧美午夜一区二区| 久久国产性爱| 久久久久亚洲AV无码专区少妇| 国产成人精品必看 | 日韩精品人妻中文字幕久久久| 99综合自拍| 欧天美中出| 欧美一二级| 色偷偷男人的天堂麻豆| 久久99精品九九久久久婷婷| 性感美女啊啊啊在线| 99这里只有精品| 超碰人妻97| 亚洲成人黄色在线观看| 99国产在线 精品 视频| www.色婷婷色综合| 欧美日韩91| 青青11操操操操操操操操| 91偷拍欧美亚洲| 国产精品久久久久久久久久久久久久久久 | 伊人一区二区在线播放| 日韩一级特黄av毛片| 八戒无码国产午夜福利| 自拍偷拍2025在线观看| 日韩97视频!在线| 欧美精品偷拍| 久久久一二三四区| а√天堂资源官网在线资源| 夜嗨影院| 天天插天天射| 女人的天堂大香蕉网| 亚洲中文字幕久久无码精品| 视频国产欧美在线播放| 日本黄色大片一级视频免费麻豆| ?亚洲伊人伊成久久人综合网| 亚洲中文字幕精品久久久久久直播 | 97伦综合| 国产一区在线观看无码AV| 成人无遮挡毛片免费看| 亚洲日本韩国在线| 日韩ab网| 诱惑网综合| 日韩人妻播放| 人人手机欧洲亚洲国产人妻| 日韩人人精品| 久久中文字幕不卡人妻| 亚洲超碰在线| 天天躁狠狠躁av| 日本影视久久免费| 制服乱伦| 色偷综合| 性饥渴少妇av无码毛片| 91狠婷| 久久99干一本高清| 干超碰碰熟女| 亚洲综合九九| 日本熟妇色熟妇在线视频播放| 亚洲天天操| 一起草精品人妻| 色999亚洲人成色| 98福利在线视频| 亚洲欧洲自拍图片专区满春格| 中文字幕在线日亚州9| 伦在线97| 秋霞一级A片黄色视频| 久/久精品99看9| 无码人妻一区二区一牛影视| 伊人在线大香蕉二。| 亚洲成a人v欧美综合天堂下载| 日日碰狠狠添天天爽超| 荡小穴在线观看| 天天影视网色欲色香| A片大香蕉在线| 人妻久久久| 日韩十八禁| 中文字幕jul-617人妻熟女| 97超碰这里只有精品| 久久久久久人妻一区精品色欧美| 中文乱码99| 99久久99九九99九九九| 国内三级自拍小视频在线观看 | 乱伦AVxx| 国产免费一区| 日韩人成网站在线播放| 懂色av中文字幕一区二区三区天美| 精品国产一区二区三区四区在线看| 资源在线观一 二| 超碰欧美97| 久热伊人99re| 亚洲视频中文一区| 亚洲中文字幕乱码无码一区二区| 中文字幕在线免费观看2| 嗯嗯嗯嗯啊啊啊好紧好大| 激情综合五月天| 综合伊人激情| 蜜臀久久在线视频| 在线有码中文字幕| 亚av顶级裸体一区二区三区四区五区| 呦呦一区| 精品国产99| 精品成人无码| 亚洲 欧美 综合 91| 日本精品成人无码| 亚洲综合999| 少妇毛片久久| 大象AV在线| 黄色大片一区二区密桃丝袜| 八戒无码国产午夜福利| 国产精品3| 色五月亚洲| 国产精品久久久久久亚洲色欲| 国产精品熟女九九九| 精品欧美А∨无码黑人大荫蒂| 久久久草草精品| 99久久婷婷国产综合精品草原| 好吊色综合| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 中文操嬖片。| 国产2.3.4区| 色诱avtt| 亚州AV无码国产精品| 资源新线在线天堂| 97视频网站在线观看| 熟女激情综合网| 老鸭窝日丰县女人| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 91青视频| 久久久国产亚洲精品系列| 欧美精品系列| 欧美日韩人人精品| 人人摸人人叼| 日本潮催一卡操| 亚洲日产专区婷婷| 欧洲色色| 国产av又色又爽又黄| 美女久久久久久久久久久| 超碰精品| 日本超碰在线国产一区| 思思热在线cao| 97国产精品一区二区传媒公司| 日韩三级在线观看mp4| 日本 欧美 国产一区| 国产日韩精品suv| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 女人精品内射国产99| 偷拍片久久| 久久久久国产亚洲一区欧美色图日韩| 91动漫操逼视频| 人妻性爱一区二区| 草久在线| 啊啊啊啊啊好舒服视频| 红桃视频高潮| 五月婷婷色| 欧美日韩国内不卡| 日本成人A片免费看| 青草成人免费视频一com| 福利五区| 久久视频少妇美女| 大香蕉国产中文自拍| 久久久九97| 亚洲αv一区二区三区| 岛国在线免费视频| 免费精品国偷自产在线在线 | 九九热九九| 人妻精品免费一二三区| 蜜臀中文字幕| 怡红院成人视频| 少妇久久久免费| 亚洲无限观看| 日欧毛片久久| 鸥美精品一区二区久久婷婷| 国产无码一二三区| 97欧美性爱| 无码av永久免费专区网站| 精品久久久久久AV无码| 欧美黄色手机在线观看| 老司机福利青青草| 亚洲国产精品成人久久蜜臀| 免费视频97| 天天干嫩逼网| 国产精品农村妇女| 天天摸天天操视频| 亚洲欧洲激情| 人人九九精| 亚洲熟女乱色一区二区三区久久久| 91丝袜激情在线| 狠狠躁AV| 污到发麻的视频 国产| 久久久久无码| 综合激情97| 久久夜夜夜夜| 97精品国产精品免费观看| 裸体1区| 色 亚洲 91| 无码视频一区二区| 大乔未久88一区| 欧美天天综合站| 东京日日夜夜| 18一区二区三区| 在线黄页看毛片| 色播五月丁香| 国语av最新自产拍在线观看| 国产福利影视| 日韩人妻少妇 一区二区三区| 日韩97超碰中文字幕| 久久精品视频久久久| 97精品久久久久久久| 亚洲素人网| 97资源站国产精品| 97免费在线视频| 在线观看无码三级少妇| 粉嫩av在线一区二区| 熟女精品va中文字幕| 黄色一级视| 久久超碰爱| 日韩在线97| 青娱乐 青青青操 日逼| 男人天堂电影院| 最新av网站在线观看| 亚洲中文日韩精品| 丁香五月电影| 国产偷仑| 日韩精品三级| 肏逼福利网站| 欧美人妻久久精品二区三区| 亚洲色五月| 欧美天天谢综合网| 久久久久久久9最新免费视频观看| 性欧美91| 欧美激情综合| 美女写真| 欧美 亚洲 综合 制服| 熟妇最新先锋一二三区| 国产欧美黑人丰满在线| 青娱乐91| 日韩肏逼视频| 黄色免费网页无码| 久久久9品一区二区三区| 91老熟女91老女人| 日韩欧无码一区二区三区免费不卡| 一类av片在线看| 日韩成人精品中文字幕| 日韩在线97| 999久久久国产精品| 岛国黄| 91在线综合网| 天天爱综合网| 国产丝袜欧美在线视频| 91碰碰| 欧美成人一区二区| 张柏芝国产一区在线观看| 天天躁日日躁XXXXYY| 亚洲色9| 99夜夜操| 99久久精品无码一区二区| 男人的天堂成人的社区| 东京太热男人的天堂久久久| 双插性欧美一二三区| 日韩二级| 熟女人妻精品一区二区视频 | 插老姨肥穴| 一区二区视频在看| 亚洲制服欧美另类内射| 亚州久久9| 午夜啪| 天美传媒国产原创中文字幕亚洲欧美另类 | 精品少妇高潮久久| 久久人人爽爽人人爽人人片αV| 久久久久久中文字幕中文字幕最新| 欧美综色欧| 国产无套粉嫩白浆在| 9长久久精品| 丁香九月 婷婷| 岛国AV一区二区电影| 亚洲丝袜诱惑| 色色色热| 日韩小电影| 日本久久精品| 欧色网址| 婷婷综合五月| 941超碰| 黄色高清无码无码破解免费暗网| 色哟哟1区2区| av在线免费一区二区| 午夜后入| 国产一区二区a毛片| 人妻人人澡人人爽人人| 手机看片日韩人妻| 欧美 日韩 婷婷 五月| 亚洲无线码欧洲精品区别| 久久这里都是精品| 国产强奸乱伦无码视频| 亚洲一二三精品久久网| 亚洲中文字幕在线视频一区二区| 91九九九馒头| 91久久久亚洲| 美女91在线观看| 国产在线视频午夜精华在| 熟女精品va中文字幕| 天天干1区2区在线| 欧美日韩性爱无码| 加勒比av网| 亚洲激情AV| 屁股久久久久久久| 嫩草 人人网精品| 黄色片一区二区三区四区五区 | 亚洲无吗在线视频| 四虎免费看黄| 青青操狠狠撩| 蜜臀久久99精品久久久久久婷婷 | 好舒服视频| 在线精品福利免费播放| 少妇激情一区二区三区视频| 老女人爆菊| 免费观看网黄| 97欧美色综合| 五月天综合网| 91五十路| 大香蕉综合| 免费一级特黄特色大片在线观看看| 久久久久久裸体| 资源在线观一 二| 91搞逼视频| 欧美人妻中出| 久久久九九网站| 亚洲中文字幕在线视频一区二区| 青青草白白色| 国产超碰人人操| 性综合网| 最新9久久久9免费视频| 97电影院超碰| 一级片在线观看高清无码| 941超碰| 日本一区二区电影网站| 91成人久久| 男人天堂新在线| 四虎视频在线观看| 99热只有这里有精品| 大JI巴好深好爽又大又粗视频| 亚洲精品一卡二卡三卡福利视频网站 | 本道在线| 亚洲精品一二三四区| 亚洲制服欧美另类内射| 国产精品内射婷婷一级二| 欧美青青草视频| 午夜大香蕉| 高清无码一区二区三区| 97亚洲在线| 少妇色综合| 97干在线看| 99热只有这里有精品| 被窝影院午夜看片无码| 激情五月天校园春色网| 爆乳免费黄网站| 婷婷亚洲综合| 欧美日韩国产三级黄色| 丰满人妻-区二区三区免费看 | 爽 好舒服 无码刺激久久| 女人天堂av在线播放| 午夜精品久久久99热蜜桃的功能特点| 91丝袜美女| 涩五月婷婷| 国产 无码 一区二区| 视频一区二区三区精品| 蜜臀99久| 粉嫩AV输入| 日韩伦理久 久久 清纯| 九九99久久| 亚洲精品国产无码高清| 成人久久久| 精品人妻少妇| 懂色av中文字幕一区二区三区天美| 啊啊啊97视频| 偷拍亚洲高清图片| 蜜桃成人1区2区3区| 国产精品久久久久久片| 91国产操逼视频| 午夜噜噜噜| 啊啊啊啊啊啊啊网址在线观看| 国产久久日韩网站导航| 天天干2区3区| 亚洲成人碰碰| 国产高清成人传媒影视| 强奸乱伦麻豆| 久久精品国产亚洲AV嘿嘿| 久久中文字幕一区不卡| 欧美日韩在线视频网站| 色综合加勒比| 麻豆三极片| 亚洲精品久久久久毛片A片拉屎 | 男啪女色黄无遮挡免费观看| 精品天堂| 九七超碰人人乐| 亚洲色图综合网| baisiav| 中文字幕日产av人| 日韩99999色| 强上我不卡卡| 懂色AV中文| 午夜激情床戏激情| 日韩精品三区四区| 亚洲最大无码中文字幕网站 | 亚热日本熟女| 午夜精品久久久99| 欧美精品91| 天天澡天天爽日日av| 中文字幕一区二区三四五区日日骚| 东京热激情视频一二三区| 95精品在线| 欧美狠狠操| 精品小视频在线| 伊人大香蕉在线| 蜜臀久久99'精品久久久| 蜜臀久久99精品久久久久| 91无码西班牙视频在线| 亚洲国产精品成人综合| 丰满岳乱妇一区二区三区| 青娱乐福利99| 自拍偷拍国产欧美日韩韩| 国产精品一区二区亚洲人成毛片 | 国产13区| 久久久久久久六六| 国产一区二区精品久久久不卡蜜臀| 久热这里只有精品9| 久久精品国产亚洲AV先锋| 美国三级日本三级久久99| 免费超碰97久久| 蜜臀av网址| 国产sv美女内射| 国产精品国产精品国产| 亚洲色图尤物视频| 欧亚免费视频| 日本午夜精品理论片A级APP发布| 日韩欧美女优电影| 无码人妻精品一区二区三区九九| 亚洲天堂电影网99999| 免费一二区| 亚洲制服aⅴ中文字幕| 婷婷色婷婷| 久久成年精品| 精品少妇一区二区| 久久精品国产亚洲AV清纯| 欧美aaaaaaa| 日韩三级一区| 久久国模av| 丝袜足交视频| 99性爱在线观看| 日本有码久久| 99日免费视频中文字幕| 亚洲精品久久久久久久蜜桃臀| 8x福利精品第一福利视频导航| 色婷婷久久| 啪啪视频mP4| 中文字幕人乱码中文字的预防方法| 欧美丝袜中文字幕07在线| 香港澳门日本三级网站| Sekablack无码一区| 熟女突然公开看18禁影片| 九色 人妻 大香蕉| 人妻喷水| 国产一区二区三区白丝| 91精品综合久久久久久五月丁香| 亚洲成人色情五月天丁香花| 熟女人妻一区二区三区| 丝袜美腿制服人妻二区中文字幕 | 91天天| 留下AⅤ黄色片| 国产又大又粗又长视频在线| 国产熟女一区二区| 国产美女销魂在线观看不卡| 伊人久久婷婷| 色臀aV| 亚洲一区二区三区春色| 亚洲黄色影视| 中文欧丝袜诱惑| 五月婷亚洲精品天堂| 东京热免费视频| 91网站在线播放| 国产亚洲精品久久久久小| 天天综合~91入口| 婷婷人妻激情| 亚洲欧美一区二区三区一猛片| 人妻久久久久久| 精品无码一区二区三区| 蜜乳AV.COM| 亚洲色欲一区二区三区| 一区二区高清视频| 午夜婷婷| 97久久久网站| 日本熟女中文| 久久精品六区| 久久性爱大全| 激情久久日韩精品中文字幕麻豆| 一区二区视频在看| 日本欧美一区二区三区免费| 日日夜夜青青草母狗| 欧美18老人禁| 啊嗯好大视频在线观看| 日韩av无码网站| 久久国产视频性吧 | 牛黄色久午久| 麻豆国产成人精品| 欧美日韩黄片精品在线| 麻豆天美传媒在线视频天堂| 中文?日韩?免费?精品| www.色婷婷| 亚洲在线A| 99熟女| 狠狠爱夜夜| 大香蕉五月天婷婷| 久热伊人| 97色伦欧美| 国产精品久久久 | 天天操天天射青青草| 91久久久老司机| 夜色AV无码手机在线影院| 精品无码产区一区二| a在线视频免费观看| 女生看匆91网站| 国产欧美日韩女同性恋ww喷水精品 | 国产后入式在线观看| 成人性爱电影网| 麻豆一区二区三区在线看 | 五十路一区无码| 96久久科窝| 日本操逼视频不卡直接放| 成人十八禁日韩欧美一二三| 人人艹亚洲| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 亚洲色综合| 国产久久久| 天美一二三在线观看Av| 中国国产精品一区视频| 五毛骚逼极品美女怕怕| 丁香五月自拍| 3PAV乱伦视频| 97精品国产精品免费观看| 国内自拍 日韩激情 99| 中文字幕视频在线观看| 色鬼在线综合| 亚洲一区二区精品福利| 欧美宗合色| 双插在线| 大香蕉免费3| 无码九九九九| 殴美牲| 天天干人人看综合| 老熟妇综合| 啪啪资源网| 深夜视频| 久久同城AV| 伊人成人中文字幕久久网| 日本人妻伦在线中文字幕| 97干天天| www黄片免费看com| 亚洲九九九| 久久精品电影| 欧美另类色| 欧美麻豆成人同性GⅤ在线| 日韩射精| 无码九九| 中文字幕视频一区视频二区| 亚洲黄网在哪免费看| av网站国产主播在线| 亚洲AV在线资源| 五月丁香社区婷婷日韩欧美精品影院| 欧洲亚洲人妻无码久久三区四区| 97 亚洲 日韩 欧美 在线| 乱伦3P视频| 欧美双插| 欧美色道啊| 亚洲官网在线| 亚洲精品成人激情在线| 最新国内自拍av免费| 亚洲天天更新| 看看日B真人视频| 欧美中文字幕一区| 丁香六月婷婷综合| 国产99久久99热这里只有精品15| 九九九久久久| 97超色| 俺去久久| 8050无码八戒| 日韩无码人妻| 亚欧美色图| 青青草日本中文字幕| 黄色网址久久精品欧美喷水| 中文字幕日本久久| av强奸乱轮| 13小男生GAY自慰脱裤子| 色97欧美| 国厂麻豆77q4| 国产四虎在线| 99热免费| 色狠狠色| 夜夜影视四色| 国产av强奸美女| 思思视频免费看网站| 中国少妇啪啪视频| 东京热激情视频一二三区| 婷婷中文网| 很黄很色的视频在线观看| 亚洲欧美国产va在线播放频| 欧美人妻制服| 九九九国产| 精品无码久久| 日韩成人人妻网站| 久湿久久| 美女91色黄18| 内射黑丝袜| 97超碰天天爱天天爱| 亚洲不卡AV在线| 久久亚洲av成人无码国产| 99性爱在线观看| 99这里只有精品国产| 免费观看成人www精品视频| 精品十八在线观看| 亚州色阁| 老鸭窝黄色视频网站| 九九英色视频| 91九久| 欧美黑人性猛交91| 嗯嗯啊啊视频在线看| 久久一区二区三区入口| 永久免费发布性爱网| 中文字幕精品免费一区二区| 精品国产Av无码久久久伦古装| 精品人妻一区二区三区日产| 91伊人| 欧美高清无码免费视频高清版| 999久久久免费精品国产牛牛| 四虎国产精品永久入口| 女同女同恋久久级三级| 在线免费观看日韩一区| 太久视频| 欧美刺激色黄片免费看| 色婷婷狠狠| 久视频在线观看| 制服少妇欧美| 拍拍拍拍大尺度黄色三级片拍拍拍拍拍照 | 亚洲欧美日韩免费观看| 国产精品分类在线观看| 久久东京伊人一本到鬼色| 日本精品无码三级网站| 日韩精品永久在线观看|