久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99国产在线 精品 视频| 性欧美| 伊人午夜福利视频| 蜜臀99久| 美国精品国产精品| 日韩av影片在线观看| 99色在线视频| 91N综合在线| 夜夜 中文视频rt| 一本色道久久综合狠狠操| 91白嫩| 天天爽夜夜爽夜夜爽精| 操逼操网| 亚洲人在线成线成人| 久久久专区| 婷婷丁香人妻| 国产在线观看91精品一区| 欧美日韩国产三级黄色| 欧美色综合影院| 精品人妻一区二区免费蜜桃| 久久久久久中文| 精品无码久久久久久久杏吧| 日本护士高潮| 欧美中字二区| 三级色影综合网| 日韩国产欧美伦理在线| 国产成人亚洲精品自产在线| 粉嫩小泬久久久一区二区| 青青草这里只有精品| 中文字幕日韩人妻视频| 色婷五月| 少妇三P| 麻豆 美女 丝袜 人妻 中文| 金莲网址| 久久不卡一区二区| 亚洲久久久| 日韩A优精品在线观看| 五月婷婷六月丁香| 99精品高潮| 亚洲国产丝袜熟女av| 成人aⅴ一区二区三区| 婷婷色在线| 熟女精品一区二区在线观看| 国产精品久久久啊| 99热这里只有精| 国产精品电影推荐| 一级AV性爱| 综合五月天| 日产成人久久| 大香蕉一线视频| 久久视网78| 这里只有精品97| 国产99久久99热这里只有精品15 | 极品人妻少妇综合| 人人人人插| 亚洲av总站| 色97干| 91三级理论片播放器| 日本一区二区三区精品| 久久久性少妇| a片久久久久久久久久久久 | 777超碰| 自拍偷拍 日韩无码| 操b网站亚洲无码| 3PAV乱伦视频| 丰满精品人妻少妇久久字幕| 97精品熟女少妇一区| 男人下部插入女人下部| 丰满美女一级毛片在线播放| 久久婷婷色综合一区二区三区| 激情婷婷丁香网| 亚洲色图欧美色图日韩色图| 白丝jkav| 嗯啊视频免费在线观看| 色情亚洲日本成人| 粉嫩av平台| 久操热线| 九九九九九精品视频| 97综合在线| 九九九国产精品| 亚洲 一区二区 自拍| 国厂麻豆77q4| 性在久久久久久| 久久久久久久久久久久黄色| 人妻中文字幕精品无码| 久久啊啊啊视频| 自拍偷拍国产欧美日韩韩| 啊啊啊啊啊在线观看网址| 另类欧美色| 日本三级黄页| 亚洲成人激情小说视频| 99热免费精品| 中文字幕日韩电影人妻| 夜夜骑天天燥| 探花一区在线| 九九操久久国产免费视频| 狠狠色噜噜狠狠狠狠狠色综合久久 | 欧美日韩电影一区二区| 日韩三A大片在线观看| 久久综合日韩亚洲欧美| 亚洲激情在线观看一区| 天天干人妻| 欧美日韩性爱无码| 东京热,男人的天堂| 五月激情小说| 亚洲码在线中文在线观看| 97久久久精品| 伊人久操| 91综合天天看| AV中文在线可看| 久久一区二区三区四区五区| 中文字幕55555| 91亚洲综合| 欧美性色综合网| 免费一级精品啪啪视频| 熟女熟妇一区二区三区视频| 国产欧美一区二区| 日本免费专区| 99999国产| 久久国产三区| 日韩精品永久在线观看| 久久国产精品m码| 日韩素人无码一区二区三区三州| 久久精品日韩| 欧美日韩亚洲少妇寂寞影院正在播放| 嗯嗯啊中文字幕| 欧美日韩大香蕉| 性交一区二区在线播放| 人妻嗯啊啊在线播放| 3PAV乱伦视频| 69人妻精品丰满熟女区| 久久99人妖视频国产| 97操b| 怡红院怡春院| 999国产精品999| 亚洲激情视频| 欧美日韩精品久久久久东北老熟妇| 97超碰jingpin| 国产午夜在线观看| 国产外初女出血视频| www.91色综合| 青青久久手机线视频| 自拍啪啪视频| 97大色网| 婷婷操逼| 人人看人人爰人人操| 久久婷婷一区| 97视频7| 污污汅18禁网站在线永久免费观看 | 美欧老女人97| 超碰三级秋霞| 欧美日韩中文亚洲v在线综合| 欧美AB在线| 久草新免费| 丁香五月天激情| 成年人网站在线免费观看| 久久久专区| 狠狠色丁香| 成人a级高清视频在线观看| 91日韩网站| 性色av一区二区| 69精品少妇一区二区三区蜜桃| 亚洲一区在线观看欧洲| 久久久久白虎| 熟女久久| 青青草一区二区三区四| 午夜啊啊啊| 大香蕉操久久| 亚洲啪啪性视频| 无码久久亚洲高清,| 老鸭窝成人| 欧美香蕉视xxx| 久热91| 91亚洲欧美| 99超碰网| 天天干夜夜操一区二区| 1024手机看片欧美日韩| 亚洲色图久久成人| 色婷婷电影网| 一区二区三区精品视频| 密乳AV免费观看| 老熟女91| 九久9精品| 97超视频在线观看| 亚洲丝袜色图| 日本三级韩三级99久久| 91日韩在线| 性开放中文AV高清无码免费看| 一级乱伦网站| 久久久人妻| 夜夜骑日日| 色综合99999| 人人妻人人色| 天天综合有色网| 99自拍视频| 国产成人在线观看综合| 成人免费在线网站| 深夜国产一区二区三区在线看| 国产精品久久妻无码网站| 97免费视频在线观看| 玖玖爱视频网站| 亚洲好色人妻| 熟女91网| 国产久久久久影院老熟女| 色综和网| 青青草日韩免费观看高清在线| 亚洲天堂另类美腿| 99999精品视频| 小少妇| 久久人妻视频网| 99视频只有精品| 青青草操逼逼视频| 亚洲午夜免费狠狠干| 欧美黑人精品一区二区| 国产精品一级毛片不卡视| 人人看欧美性爱| 内射夫妻三片| 精品无码久久久久久国产浪潮| 91东京热男人的天堂| 国产丝袜欧美在线视频| 国产精品女生av| 中日亚韩免费视频| 久久99午夜精品一区人妻| 日本日皮视频逼| 日本亚洲熟女视频| 99国产人成精品| 丝袜AV一二三区| 艾草av| 日韩精品熟妇| 亚洲性综合| 亚洲国产97在线精品一区| 亚91网| 精品人妻中文字幕高清| 1769国内精品视频| 欧美一区二区亚洲天堂| 黄污污污污| n1038 一二三区| 国产天天看| 亚洲污污网站| 日韩精品-原创伙伴| 国产在线视频午夜精华在| A一区片| 黄色区免费观看中文字幕| 中文字幕aⅴ在线视频| 中日高清无码操逼视频| 欧美亚洲玖玖玖| yazhousetuoumei| 小骚逼被操的爽不爽| 啊啊啊 在线| 2020中文字幕在线观看| 三级特黄60分钟播放| 青青操狠狠撩| 2019天天操天天爽天天拍| 亚洲黄色网址| 蜜臀久久99精品久久久久久婷婷| 强奸乱伦AV一天堂网| 国产自产自拍| 无码9区| 午夜性| 天天干1区2区在线| 啊啊啊啊网站| 久久毛卡| 97亚洲综合电影| 金典av| 欧美丝袜中文字幕07在线| 日韩免费av片高清无码| 国产宅男宅女在线观看| 亚洲nv男人的天堂网| 夜夜嗷嗷一区二区| 九七超碰人人乐| 思思视频免费看网站| 天天精品| 免费人人搞97| 亚洲交性| 美国一区二区免费视频| 密臀在线免费观看| 91精品人妻一品二品三品| 正在播放国产精品一区| 99在线免费观看| 伊人伊人LD| 九九九成人| 一个国产在线综合网站| 五月丁香六月激情| 久草精品一区 | 麻豆国产尤物AV| 久久久99999久网站| 高清视频一区| 日韩欧美国产一区二区三区四区| 九九九九九九九九九九九免费国产| 亚洲在高跟鞋自慰久久在色线| 91丝袜美女视频| 久久男女激情视频网站| 久久宗合亚洲| 中国AV美女| 99色| 中文字幕一区二区无码成人| 无码高清专| 久久夜嗨| WWW.操逼.COM| 亚洲人成网www| 中文字幕精品亚洲熟女| 国产精品露脸在线观看| 日本一二区免费| 亚洲色图A| 日韩国产中文字幕| 97超碰欧美手机在线| 国产成人无码a| 国产四虎在线| 99999精品| 人妻嗯啊啊在线播放| 爱丝福利| 亚洲高清无码AAA久久久精品| 久操热| 另类欧美| 日人妻视频91| 后入式视频国产自| 国产一区二区三区视频在线看| 综合网,亚洲,欧美| 丰满少妇一区二区三区免费看| 欧日a| 天天日美女的B| 日韩av不卡在线看| 97精品97| 一类无码操逼视频| 日韩精品人妻中文字有码在线| 午夜福利1区2区3区| 国产视频三区四区| 人人操人人肉久久精品| 防屏蔽在线视频| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 男人的天堂欧美| 久久内射| 999狠狠综合| 熟妇熟女一区二区三区| 天美传媒一二三区永久网站| 成人怡红院| av中文在线| 国产精品农村妇女| 日本久久网| 91天天综合日韩欧美| 在线黄页看毛片| 最新制服中文第一页| 婷婷久久大香蕉| 国产激情在线| 欧美黄色大香蕉一区二区| 亚洲骚男同com| 日本一区二区不卡精品| 日日爽熟女| 五月婷婷激情网| 加勒比aⅴ| 亚洲宅男天堂| 精品免费视频国产一区| 国产一区二区久久| 99久在线精品99re8热| 少妇激情AV| 国产免费一区在线观看| 天堂成人网| 国产怡红院| 天天狠操| 亚洲少妇视频| 中文字幕加勒比海高清无码免费视频| 26uuu性物| asc国产精品| 色色无码| 99视频这有这里有精品| 97少妇人妻中文字幕久久| 日韩午夜啪啪视频| 激情小说在线视频| 好看的久久不射无码影视影院| 亚洲无码一二三区| 日日摸日日碰夜夜爽视频| www鬼畜国产男人的天堂| 五月婷亚洲精品天堂| 在线视频五十市| 亚欧无码在线| 99久久99九九99九九九| 美女大乳久久久久久久女人18| 无码日韩人妻av一| 97网色| 蜜臀人妻少妇久久在线观看| 亚洲精品亚洲人成在线麻豆| 97se亚洲综合自| 伊人综合色网| 色网在线视频观看免费| 欧美男人的天堂| 国产精品久久久蜜臀| 国产亚洲色婷婷久久99精品91葵花宝典| 日比av无码| 亚洲精品欧洲精品| 懂色天天爱天天日天天射天天澡| 色五月av| 99热18这里只有精品| 2010男人的天堂| 国产精品爽爽v| 超碰97国产欧美| 国产13区| 在线观看免费视频国产| 亚洲人妻久久| 91欧美丝袜| 久久久久性熟视频| 中文字幕av乱伦| 国产黄色视频久久| 亚洲人妻一区二区三区| 韩国三级理论在线| 久久产精品一区二区三区电影| 在线情色电影 91大| 丁香五月天社区| 国产亚洲女v在线观看| 伊人九九九| 亚洲性综合| 夜夜夜久久| a级理论午夜日本| 国产精品一区二区手机看片| 99999亚洲另类| 性爱AV天堂| 粉嫩国产精品久久粉嫩| 久久99亚洲精品久久99果| 激情小说图片亚洲首页| 色97干| 男人的天堂日韩| 宗合情欲网| 五月天色图影视| 搡老熟女老女人老熟妇免费视频| 高清无码一区二区三区| 一级毛片电影免费看| 少妇高潮一区二区三区在线| 大屁股国产在线视频| 综合 青草 伊久久 影院 综合| 亚洲精品色| 日本中文字幕在线视频 | 狠狠干狠狠色| 天天谢天天干| 欧美亚洲情色| 激情小说激情视频| 综合视频91| 国产嫩草精品A88AV在线| 少妇超碰在线| 9999久久久久| 日本精品成人无码| 欧美极度丰满熟妇hd| 免费一级特黄特色大片在线观看看| 家庭乱伦麻豆| 91精品国产91久久青草| 超碰97护士| 91精品91久久久中77777| 亚洲综合图片在线| 亚洲精品 欧美精品| 69综合网| 九一精品牛牛一区二区| 国产成自自拍在线观看| 久久超碰免费的| 91丝袜在线观看视频在线观看| 日本三级久| 曰韩精品九九无码| 欧美日不卡| 男人的天堂2010| 久热91| 香蕉婷婷| 超碰人人妻| 一区二区三区四区色图| 夜夜操二区| 久久久久久亚洲精品不卡人乳| 中文字幕黑人大片| 超碰超碰欧美| 久久成年精品| 国产白丝在线| 欧洲性人爱视频| 老熟妇一区二区三区| 国产精品午夜精品| 91美女片在线| 人妻铁牛TV| 国产精品人妻无码久久久老鸭窝| 凹凸视频在线一区二区| 強姦亂倫a| 色翁荡息又大又硬又粗又爽| 333kkkk·亚洲com久久| 欧美综合区| 日本色色网| 91爱综合| 99久久无色码| 国产乱码精品久久久久久| 色呦色呦色精品| 超碰 欧美| 中文字幕一区二区无码成人| 91少妇| 日韩欧美操逼xxx| 人人潮人人摸| 日韩av在线免费网站| 毛片电影一区二区三区| 国产熟女少妇一区| 麻豆AV96熟妇人妻| 亚洲高清在线se| 水滴偷拍| 日韩簧片免费看| 欧美偷拍区| 秋霞一级视频在线观看免费| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 欧美性生活男人的天堂| 鸡巴插逼视频| 精品在线观看视频在线| 欧美少妇熟女| 日本新免费二区三区| 亚洲天堂少妇| 婷婷伊人五月| 自拍鲍鱼一区在线高清观看免费| 熟妇女人妻呻吟久久AV| 超碰一区二区| 天天干人人看综合| 操我无码| 69超碰综合| 少妇被玩视频二三区| 九9热伊人| 久草午夜| 国产精品岛国片在线观看| 丁香激情网| 在线视频五十市| 亚洲丨在线| 国产无码高清操逼视频| 久久久久久欧美精品se一二三四| 国产精品午夜成人福利| 欧美激情内射| 国产精品制服丝袜清纯唯美| 一区黄二区黄| 婷婷10月天青娱乐| 久久久久久久伊人精品| 五月丁香| 午夜AV污污污| 日韩福利综合一区| 日韩性爱播放| 91真人天天在线| 97国产超碰| 大香蕉免费乱伦视频| 一色网男人的天堂| 久久久久幕乱码| 精品久久久久久无码| 六月丁香网| 天天日美女的B| 黄色无码高清黄色无码网站| 成片免费播放| 青青国产在线拍揄自揄拍| 亚洲天堂男| 欧美日韩国产高清在线一二三区| 日韩一区二区熟女| 久久精品国产亚洲av水密被窝| 最好看的中文字幕在线2018| 五月开心网| 色哟哟av| 日韩乱伦影音先锋| 日韩欧美被操黄免费观看| 97超碰色色| 激情网色| 麻豆国产第一| 人妻夜夜爽天天爽三区麻豆AV网站| 国产精品岛国片在线观看| 国产亚洲色婷婷99精品91| 久久亚洲AV无码白度| 97人人草| 一区二区三区一亚洲中文字幕、综合区灬| 韩国成人精品久久久免费看| 人人手机欧洲亚洲国产人妻| 四虎免费在线观看| 精品国产一级久久| silk lablo在线观看一区二区| 精品无码久久久久久久久果冻糖心 | 亚洲第一视频 欧美风情 日韩| 美国人人操人人操| 久久久熟妇熟女国产| 老熟女综合网 | 亚洲国产精品有声| 欧美日韩少妇色情| 国产精品操| 亚洲欧美精品一区天堂久久 | 探花激情视频| 国产青青综合伊人| 国产高潮AA片免费看| 欧美亚洲涩涩| www.黄色在线| 豆1无夜无码| 国产精品自在线发布| 日韩天天本| 欧美 日韩 亚洲 春色| 97爱b| 伊人网青青| 日产中文字幕2020| 国产多人在线观看视频| 亚洲中文制服诱惑| 97碰| 久久av网| 人人潮人人摸| 夜色97| 黄色高清无码无码破解免费暗网| 日韩无码服务区| 蜜乳AV色欲AVAV无码| 欧美色老汉| 欧美日韩成人在线| 亚洲av青草久久一区二区| 中文一区二区婷婷视频| 人人看黄色视频| 欧美成人综合| 加勒比久久综合网高清| 欧美在线视频播放| 日韩不卡a级视频专区| 老司机福利社视频在线观看| 欧美激情综合| 欧美色999| 日本不卡二三区| 日本高清_区二区三区| 蜜臀Av一区二区三区| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 欧美激情内射| 青娱乐av在线| 十八禁的黄污污免费网站| 91老熟女91老女人| 欧美性爱五月天| 91网站18禁| 婷婷情色五月天| 成人美女av| 久9九综合在线| 亚洲美女30b| 留下AⅤ黄色片| 91天天综合日韩欧美| 欧美久久婷婷| 静品嫩模一区二区| 日本一级特级毛片视频| 偷拍2020| 黄色AV影视| 日韩激情毛片一级久久久| 日日日骚女人精品| 蜜臀av在线播放一区二区三区| 欧美亚洲国产91在线| 夜色97| 中文字暮97| 免费看国产曰批40分钟怎么下载| 亚洲黄色电影| 好舒服视频| 色色操| 亚洲欧洲综合成人av一区| 新怡红院| 秋霞男人网| 强奸乱亚洲| 男女日B国产| 欧美偷| 极品少妇99| 99色热| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 日韩性爱1级片视频| 97欧美综合网| 97超碰资源网| 久热伊人99re| 自慰白浆在线观看| 人人做天天爱| 亚洲国产97| 婷婷九月国产| 婷婷激情一区二区三区俺也去| 97人人干人人操| 人人操人人操人人人操| 九九九九精| 久久久三区二区一区| 综合网久久| 五月天激情婷婷| 人人操人人叉人人插人人| 人人人干干人人干| 日韩本不卡视频在线观看 | 国产1769在线| 眼镜人妻101.com| 性色aV一区二区三区噜噜| 91青青在线视频| 色噜噜人妻丝袜AV资源| 亚 欧 美 综合| 中日高清无码操逼视频| 女人被男人桶爽视频网站| 欧美色图片| 欧美的精品的视频| 天天综合网亚洲综合网| 国产十八禁视频| 久久天天躁日日躁狠狠躁 | 人人妻人人玩人人澡人人爽| 久久久三区二区一区| 伊人 俄罗斯 a v| 禁止观看美女黄| 五月天激情综合网| 久久九九网| 欧美一区二区三区蜜桃| 精品久久久久久中文字幕三区| 试看60秒 爽| 人人妻人人爽| 男人天堂新在线| 美女91网| 在线观看啊啊啊啊啊| 夜夜免费视频| 久久久国产精品亚洲精品| 亚洲最大的黄色电影网站。| 精品久久久久,69国产成人精| 亚洲成人综合在线| 欧美黑人精品在线播放| 欧美精品成人在线播放| 黑人精品一区二区在线播放| 97欧美综合| 久久久久久久唑| AV女优男人的天堂| 丝袜美腿91| 国产中文字幕在线观看| 99热国产精品| 人妻激情视频| 欧美色蜜桃97| 操熟女91| 加勒比综合网| 男女啪啪网站免费视频| 国产偷人伦激情在线观看| 亚洲无码精品AV久久久| 污色区网站| 97日韩| 97香蕉网| 欧美夜夜草视频| 天天懆天天日| 岛国免费黄色网址| 国产精品熟女九色九色蜜臀| 密乳AV免费观看| 综合免费无码中文| 丁香婷婷九月| 激情五月综合网| 一二三四免费视频| 蜜桃臀 后入 一区 二区 三区 在线| 九九精品美女高溯喷水| 久久久久久性爱视频| 精品九九九九九九九| 欧美天堂超碰97| 亚洲综合伊人| 久久久久成人网| 97超碰香蕉| 亚洲欧美国产va在线播放频| 370p日韩欧美亚洲精品| 欧美另类精品xxxx| 亚洲最大无码中文字幕网站| 一区二区三区在线资源| 久久9亚洲| 一区 欧美 日韩 麻豆| 青青欧洲黑| 俺也射| 亚洲欧美不卡线| 男女做爰猛烈动高潮A片免费应用| 天天激情综合站| 国产一区二区在线电影| 久久久人妻| 一区二区三区四区五区高清无码永久视频| 亚熟hd视频在线| 超碰综合97在线| 99热在线播放| 中文色综合| 亚洲色诱惑| 天天操女人| 在线一区| 九九久久玖玖| 自怕偷自怕亚洲精品| 日韩激情啪啪| 中文字幕一区二区三区人妻少妇在线| 超碰碰激情97+久| 97欧美久久久久久久| 诱惑网综合| 一级黄色视频网| 日本狠狠干| 在线黄色污污网站| 欧美色吧综合| 久久日韩精品一区二区| 亚洲AV无码国产精品久久久久| 日韩一级片| 五月天色电影| 亚洲做性| 欧美18 在线观看| 久久久夜夜嗨免费视频| 中文字幕丝袜美腿| 91综合天天看| 翔田千里无码一区| 亚洲成人一区二区精品| 欧美成人9797| 国产AV人人夜夜澡人人爽麻豆| 加勒比综合网| 国产偷拍自拍在线视频| 欧美大香蕉卡久久| 日本不卡免费二区| 国产精品不卡一区二区三区av| 在线人人人人人人精品超| 岛国小电影| 91痴汉| 99re国产精品视频| 97人肏| 九九超碰综合网| 91看黄片| 日本三级韩三级99久久| 中文字幕人妻色偷偷久久皮 | 日韩欧美中文字| 啪啪啪综合网| 97久久视频| 亚洲资源网| 免费岛国一级片| 九月婷婷综合| 中文欧丝袜诱惑| 极品综合| 大香蕉碰| 日本一卡二区在线| 91高清无码下载| 免费人人搞97| 午夜九九九九九九| 人人干人人搞人人摸| 少妇一区二区三区在线观看| 日本色日夜干| 2024人人操人人摸| 少妇特黄一区二区三区| 人妻一二三区| 啊啊啊啊啊操我视频| 久艹日日日| 日本久久精品| 亚洲 欧美 日本 国内 首页| 成人性爱视频在线看| 久久夜色一区二区| 一二三区操逼国产91| 狠狠色色| 欧亚韩国999| 插穴性爱视频在线观看| 少妇人妻无码| 中文字幕日韩专区精品系列 | 色偷综合| a一区二区三区乱码在线| 女同性恋一区二区三区精品视频| 亚洲精品99999| 综合色图区| 水滴偷拍| 久久久婷| 97chaopengongkai| 91久操| 色色九区| 五月婷在线| 超碰色大香蕉| 思思热在线视频精品| 大茄子熟女AV导航| av九九| 久久精品导航| 青青草操逼逼视频| 老熟女91视频| 亚洲色图91欧美日韩| 亚洲激情综合另类| 亚洲情色电影网| 国产强奸乱伦第1页| 欧美有码激情视频一区二区三区| 水滴偷拍| 国产999精品久久久久久| 大香蕉淫人| 五月丁香| 黄页av| 麻豆 欧美 日韩| 91福利网在线观看| 打av高清| 中文字幕人成乱码熟女香港| 午夜成人福利影视| 精品无码不卡视频| 久久高清无码夜夜操| 欧美疯狂做爰xxxx| 欧美性色欧美| 中文字幕av色| 日韩极品无码B| 91N综合在线| 亚洲综合中文字幕有码| 九九五月天| 六九九九| 欧美高清18A片| 亚洲素人网| 中文字幕在线观看二区三区| 欧美综合色图网| 亚洲色图91欧美日韩| 国产精品美女视频诱惑| 一区二区 日韩 欧美 国产 传媒| 成年无码动漫av片无尽在线| 欧美黑人猛交春色影视大全| 乱伦熟女专区| 激情四射熟女丝袜| 任你爽视频| 成人线上超碰| AV中文字幕剧情1区2区3| 国产成人精品日本视频| 欧美草草高清日韩视频| 中日无幕一二三四区| 无码外流操逼视频| 97网站在线观看| AV天天在线观看| 日韩精品一区二区日韩| 日韩AV噜噜噜一区二区三区四区 | 天美av在线观看| 老司机天天操| 老鸭窝在线视频播放| 欧美.亚洲.另类.丝袜.制服.诱惑| 婷婷色色五月天福利| 丰满人妻一区二区中文| 色色五月婷婷| 一个国产在线综合网站| 五月天人妻综合| 亚洲人精| 在线欧美69V免费观看视频| 精品人妻高清麻豆av| 欧美性战999| 无码国产精品久久久久| 国产老太乱伦一区| 久久99深爱久久99精品| 青青国产精品在线| 色欲三区| 久9爱精品| 久久亚洲不卡一区二区三区| 九九性爱网| a片自拍直播视频| 肉丝中文无码高清| 青青草吊丝| 激情五月天社区| AV一起草在线| 97欧美日韩综合| 青青青艹在线视频| 七久久久| 亚洲一本色道中文无码aV天美| 夜夜骑夜夜操| 亚洲人久久久网| 狠狠躁AV| 黄色av一区二区在线| 免费少妇一区二区| 96麻豆精品一区二区三区| 久久宗合亚洲| 日韩丝袜人妻AV| 亚洲操人| 视频黄色国产一级| 国产女同在线观看视频| 久久久91福利姬| 女人一区| 天天影视色香色欲| 国产精品色片一区二区| 无码高清少妇久久| 97欧美在线| 青青草原伊人网| 久久久久9| 97人亚洲综合字幕| 屌色在线97视频| 搡老熟女老女人老熟妇免费视频| 内射老妇BBWX0C0CK| 超碰地址久久| 日韩淫色网| 99re95| 亚洲精品97在线| 深夜激情无码| 美国人人操人人操| 亚洲中文字幕精品一区| 91热| 四虎影视国产精品| 国产精品电影推荐| 天天享受天天看| 天天射网| 伊人成人中文字幕久久网| 天天做日日爱夜夜爽| 最好看的中文字幕在线2018| 日韩性爱小视频| 青草成人免费视频一com| 91少妇高潮| 男人的天堂三级| 97网址97| 草伊人高潮喷水超碰| 亚洲天堂人妻一区二区| 国产成人www免费人成看片| 在线国产福利网址导航| 自拍偷拍 日韩欧美| 秋霞午夜成人福利片片| 日韩猛交| 欧美性Fer办公室秘书| 最新无码国产| 大奶啊啊好爽| 午夜啊啊| 99热婷婷| 久久中文字幕人妻熟av女蜜柚| 国产日本一区二区三区蜜臀在线观看| 亚洲精品aa久久伊人| 久草综合视频| 家庭乱伦国产| 亚欧中文字幕在线视频| 超碰在线人人射| 婷婷五月天成人网| 亚洲开心网| 久久久久久久 九九九九九九九| 99色热| 亚洲免费成人在线高清无码视频| 99综合免费视频| 亚洲熟妇无码一区二区三区| 亚洲男人的天堂va亚洲男人社| 青青草精品| 亚洲91少妇| 2019精品国产无码成人| 在线天堂资源亚洲| 欧美 亚洲精品首页| 欧美激情在线观看视频| 精品久9| 免费视频一二三区| dy888午夜老子影视达达兔 | 爆操无码| 黄色性爱网网| 色色婷婷五月| 天天综合91在线| 日本不卡三级网在线播放| 欧美亚洲第1页| 歐美性天天| 人妻丝袜肏逼| 丝袜视频网国产90| 四虎av在线| 男人午夜天堂| 亚欧无码线免费观看视频| 成人自拍三级在线观看| 国产日韩在线播放av| 国产三级日产三级韩国三级| 亚洲一区中文字幕一区| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 日本最新1区2区3区| 天天综合网亚洲综合网| 好涩综合| 国产成人欧美精品在线| 加勒比在线观看一区二区| 青娱乐国产精品| 丁香婷婷大香蕉| 97人肏| 97超碰在线资源网站| 天天在线91| 亚洲在线欧美| 国产精品久久久啊| 操逼日批| 亚洲欧洲综合视频在线| 夜夜爽爽爽| 怡春苑东京热| 日本天天干天天日一区| 久久久不卡| 国产亚洲精品激情| 日韩中文字幕人妻视频| 欧美疯狂做爰xxxx| 久操大香蕉手机视频在线看| 欧美性战999| 天天操天天7| 51一区二区三区| 天天躁日日躁狠狠躁| 久久久久亚洲av综合波多野制衣| 超碰成人国产| 久久人妻四季| 日韩熟女视频二区| 欧美天天| 色色色欧美| 另类综合另类| 91色色综合| 欧美中文字幕精品人妻| 国产女人极品高潮毛片| 天天干天天拍| 国产精品丝袜久久亚洲不卡| 99re6在线视频播放免费精品| 亚洲春色欧美激情自拍| 国产情侣自拍在线播放| 91 丝袜在线| 东北女人操比视频| 欧美性暴力猛交| 亚洲性爱免费电影| 在线观看综合精品亚洲| 一二三四免费视频| 我中文字幕6区| 人妻铁牛TV| 午夜福利一区二区影院| 激情九月婷婷| 午夜福利区| 性91| 黄色av网站在线播放| 五月综合激情网| 亚洲综合骚逼| 亚洲综合影院| 妺妺跟我一起洗澡没忍住| 亚洲精品欧洲精品| 九九九999久久久网站| 欧美少妇性爱网站| 日本高清电影欧美色图| 亚洲情色综合网| 精品国产乱码| 亚洲综合小说另类图欧美视频激情小说色五月天 | 亚洲另类久操网| 欧美性第1页| 免费精品中文字幕| 亚洲色堂免费视频| 日韩天天综合| 黄色AAAAA欧美| 91精品人妻一区二区三区蜜桃臀| 亚洲国产蜜臀系列在线观看| 亚洲无码国产探花在线观看| 久久精品国产精品亚洲艾通辽熟妇 | 九九热午夜欧亚国产视频| ji熟女.com| 精品一区二区三区蜜桃臀赵总 | 国产天天看| 亚洲毛片基地专区| 激情色色| 九九人妻| 国产Aα| 超碰资源亚洲97| 好涩综合| 精品久久久亚洲AV成人网站| 9999九九九久久久| 嫩草在线视频| 夜夜操天天肏| 毛片一区二区| 伊人色综合网电影 | 国产高清成人免费视频| 91日本在线观看| 爱丝福利| 无码av永久免费专区网站| 男人 天堂 日 亚洲| 亚洲中文字幕在现观看| 免费看毛片操穴| 蜜臀99久| 99热精品在线| 老司机香蕉| 激情久久av一区av二区av| 搡老熟女国产1000部| 国产强奸乱伦xd| 中文字幕人妻色偷偷久久皮| 欧美一区二区三区互相| 亚洲AV免费在线观看| 校园春色 欧美| 丝袜美腿诱惑亚洲欧美视频在线观看| 伊色久人大在线| 激情第四色| 亚洲高清欧美总合| 95人妻爽爽人人做人人澡| 国产人妻久久精品一区二区三区| 强奸xx国产| 欧美极品少妇| 亚卅熟女乱色| 黑人性欧美| 99久热| 天天日夜干| 97人人草| 偷拍 亚洲 欧美| 偷窥自拍亚洲色图| 3PAV乱伦视频| 婷婷三区| 校园春色综合网| 国产性刺激| 波多野结衣被操50分钟免费视频 | 日本曲间由美性生活片| 麻豆久久精品亚洲精品88| 国产suv精品一区二区四| 91夜色| 97se综合网| 啪啪AV导航| av 模特一区了| 亚卅熟女乱色| 久久黄黄黄| 91狠婷| 精品美女久久久久| 天美精品一区二区三区四区在线观看| 久久久久久电影| 在线观看A啊啊啊| 亚洲人妻中文高清| 97se亚洲| 国产女上位好爽在线| 免费观看性欧美一级| 婷婷久草| 国产99热|