久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐 nginx 1.29.6 發(fā)布了作為主線版本這算得上是今年值得仔細(xì)看的一次更新。我在生產(chǎn)環(huán)境里維護(hù)著一批 nginx 網(wǎng)關(guān)從 1.16 一路追到 1.28每次主線版本發(fā)版我都會先翻 changelog再拿測試機(jī)驗(yàn)證確認(rèn)沒有坑之后才考慮要不要跟。這次 1.29.6 最讓我關(guān)注的有兩件事一是 upstream 終于支持原生粘性會話二是性能與穩(wěn)定性方向有一批改進(jìn)。這兩個點(diǎn)對搞負(fù)載均衡、多節(jié)點(diǎn)部署的朋友來說屬于能直接改變架構(gòu)選型的內(nèi)容。粘性會話這個詞搞過后端的人應(yīng)該不陌生。應(yīng)用多節(jié)點(diǎn)部署之后用戶的登錄狀態(tài)、購物車數(shù)據(jù)、臨時上傳進(jìn)度都存在某臺服務(wù)器上如果負(fù)載均衡把請求隨機(jī)分到不同節(jié)點(diǎn)輕則用戶反復(fù)掉線重則直接把業(yè)務(wù)打崩。以前 nginx 官方不支持這個能力大家只能用第三方模塊或者用 ip_hash、hash 指令硬湊?,F(xiàn)在 1.29.6 官方主線直接支持意味著以后在標(biāo)準(zhǔn)環(huán)境里就能做會話保持不用再為了一個 sticky 模塊去編譯維護(hù)一堆第三方代碼了。這篇文章我會先把這次更新的核心內(nèi)容拆開講清楚然后重點(diǎn)聊粘性會話的原理和配置再補(bǔ)上性能調(diào)優(yōu)和升級后的常見坑。適合正在用 nginx 做反向代理和負(fù)載均衡的運(yùn)維、后端開發(fā)以及準(zhǔn)備升級主線版本但心里沒底的團(tuán)隊(duì)參考。1. 1.29.6 的核心看點(diǎn)官方粘性會話為何等了這么久1.1 為什么粘性會話此前一直靠第三方模塊nginx 官方在很長一段時間里反代負(fù)載均衡只有輪詢、權(quán)重、ip_hash、最少連接這幾種策略。這些策略的共同點(diǎn)是“負(fù)載均衡優(yōu)先”每個請求盡量均勻分發(fā)給后端不關(guān)心請求來自哪個用戶、和之前的請求有沒有關(guān)聯(lián)。這在純 API 網(wǎng)關(guān)場景沒問題但一旦涉及 Session、Cookie、長連接就很容易捅婁子。社區(qū)很早就有解決方案。老牌的 nginx-sticky-module-ng很多人編譯過稍微新一點(diǎn)的做法是用 hash 指令自己按 Cookie 或 Header 做一致性哈希。但這些方案都有比較明顯的毛病。第三方模塊要跟隨 nginx 版本重新編譯每次 nginx 升級模塊編譯失敗的情況我都遇到過不止一次。hash 方案呢能用但對節(jié)點(diǎn)增刪不友好調(diào)整后端的瞬間會有大量請求漂移到其他節(jié)點(diǎn)Session 直接丟失。這背后其實(shí)有 nginx 官方的取舍。官方對核心模塊的穩(wěn)定性要求極高一個新特性要進(jìn)主線得先解決權(quán)限模型、模塊加載機(jī)制、與健康檢查的協(xié)作方式等一系列問題。粘性會話不像輪詢那樣無狀態(tài)它天然引入“用戶和后端節(jié)點(diǎn)綁定”的概念這會和故障轉(zhuǎn)移產(chǎn)生沖突——如果用戶綁定的那臺后端掛了請求到底該轉(zhuǎn)發(fā)到哪里這個問題處理不好官方寧可不做。所以這次 1.29.6 上線粘性會話從產(chǎn)品決策到協(xié)議設(shè)計都花了不少心思。1.2 新增粘性會話后哪些場景直接受益第一類明顯受益的場景是帶登錄態(tài)的傳統(tǒng) Web 應(yīng)用。比如企業(yè)內(nèi)部系統(tǒng)、CMS、電商網(wǎng)站用戶登錄之后 Session 存在本機(jī)內(nèi)存里Session 沒有做共享這種架構(gòu)下粘性會話幾乎是剛需。以前沒有官方支持要么在應(yīng)用層做 Session 復(fù)制要么引入 Redis 共享 Session要么就忍著用戶隨機(jī)掉線?,F(xiàn)在只需要在 nginx 層做一次配置把同一個用戶的請求固定到同一臺后端節(jié)點(diǎn)應(yīng)用層基本不用動。第二類是 WebSocket 和長連接場景。nginx 代理 WebSocket 已經(jīng)非常成熟但長連接比普通 HTTP 請求更需要會話保持。一個 WebSocket 連接建立之后后端的進(jìn)程和前端是保持雙向通信的一旦連接被轉(zhuǎn)發(fā)到另一臺節(jié)點(diǎn)這條鏈路就會斷裂。比如用 nginx 代理 FreeSWITCH 的 WS 端口、IM 服務(wù)的推送通道這類業(yè)務(wù)天然需要粘性會話。第三類是文件上傳下載、分片傳輸這類有狀態(tài)流。大文件分片上傳每一片都希望落到同一臺后端否則合并的時候找誰要數(shù)據(jù)粘性會話能把同一用戶的流式請求穩(wěn)穩(wěn)固定在一臺節(jié)點(diǎn)上省掉很多應(yīng)用層的合并邏輯。1.3 性能與穩(wěn)定性提升的實(shí)際價值其實(shí)每次主線版本更新changelog 里都會有一批性能優(yōu)化和穩(wěn)定性修復(fù)。這種更新通常不會大張旗鼓宣傳但對生產(chǎn)環(huán)境的影響非常直接。從我追蹤版本的經(jīng)驗(yàn)來看這類改動主要集中在這幾個方向。一是連接生命周期相關(guān)的問題。包括連接復(fù)用、空閑連接回收、異常連接釋放等。生產(chǎn)環(huán)境中經(jīng)常出現(xiàn)的 TIME_WAIT 堆積、worker 連接數(shù)緩慢上漲、長時間運(yùn)行后連接池膨脹基本都是這類問題引起的。新版本往往會在 upstream 連接的復(fù)用策略和等待隊(duì)列上做調(diào)整讓整個并發(fā)連接模型更平滑。二是 HTTP/2 和 HTTP/3 的實(shí)現(xiàn)完善。HTTP/2 已經(jīng)普及但多路復(fù)用下的流量控制問題、連接并發(fā)導(dǎo)致的性能回退問題不同版本的表現(xiàn)差異很大。HTTP/3 也就是 QUIC 協(xié)議nginx 一直在推進(jìn)每一次主線更新都會帶上 QUIC 相關(guān)的修復(fù)和改進(jìn)。如果你打算開啟 HTTP/3這類底層的協(xié)議棧完善對穩(wěn)定性幫助很大。三是內(nèi)存使用和 worker 進(jìn)程的穩(wěn)定性。nginx 對內(nèi)存的控制一直很嚴(yán)格但應(yīng)對極端流量、大量非法請求、畸形報文的時候偶發(fā)的高內(nèi)存占用和 worker 崩潰也沒有完全絕跡。主線版本通常會在這些邊緣場景上打補(bǔ)丁所以“穩(wěn)定性全面提升”這種說法其實(shí)是落到這些具體場景里的。2. 粘性會話的原理與選型從 Cookie 到一致性哈希2.1 粘性會話解決的核心矛盾負(fù)載均衡的核心邏輯是把流量分散開讓每臺后端都能吃飽但又不能撐死。問題來了請求可以隨便分用戶的數(shù)據(jù)狀態(tài)卻不能隨便分。用戶登錄之后Session 存在 A 節(jié)點(diǎn)下一次請求如果被負(fù)載均衡分到 B 節(jié)點(diǎn)B 節(jié)點(diǎn)查不到這個 Session就只能讓用戶重新登錄。粘性會話的思路很簡單在負(fù)載均衡層加一個“綁定關(guān)系”讓同一個用戶的請求盡量落到同一臺后端。這與 Session 共享是兩種不同的解決路徑。Session 共享是讓所有節(jié)點(diǎn)都能訪問同一份狀態(tài)屬于“數(shù)據(jù)搬家”粘性會話則是把用戶綁死在固定的節(jié)點(diǎn)上屬于“人不搬家”。兩種方式?jīng)]有絕對的好壞但粘性會話在改動成本上更低尤其適合改造老系統(tǒng)。只要 nginx 層配置一下業(yè)務(wù)代碼完全不用動不香嗎2.2 Cookie 粘性如何工作Cookie 粘性是實(shí)現(xiàn)粘性會話最常見的方式。流程大概是這樣的用戶第一次訪問某個服務(wù)nginx 所在的負(fù)載均衡層發(fā)現(xiàn)這個請求沒有攜帶粘性 Cookie就按照當(dāng)前策略選擇一臺后端節(jié)點(diǎn)接收請求并在響應(yīng)里種一個 Cookie比如 srv_idbackend-a。用戶接下來的請求都會帶著這個 Cookienginx 看到 Cookie 里的值之后直接把請求轉(zhuǎn)發(fā)到 backend-a完成綁定。這里有個細(xì)節(jié)需要理解nginx 并不需要真的去后端存儲里確認(rèn)這個 Cookie 是否有效。它維護(hù)的是一個映射關(guān)系即“某個 Cookie 值對應(yīng)哪個后端節(jié)點(diǎn)”。這個映射可以放在共享內(nèi)存里也可以把后端節(jié)點(diǎn)信息直接編碼在種下去的 Cookie 值中后者避免了大量連接狀態(tài)占用內(nèi)存。生產(chǎn)環(huán)境里更推薦后一種方式即使 nginx 重啟、worker 重新調(diào)度Cookie 值仍然有效不影響粘性。還有一類是基于一致性哈希的實(shí)現(xiàn)。不種 Cookie而是根據(jù)請求里的某個穩(wěn)定標(biāo)識比如用戶 ID、來源 IP、特定的 Header做哈希計算算出來的結(jié)果就是后端節(jié)點(diǎn)的編號。這種方式的優(yōu)點(diǎn)是沒有額外的 Cookie也不依賴瀏覽器是否支持 Cookie缺點(diǎn)是如果后端節(jié)點(diǎn)數(shù)量變化哈希結(jié)果會大面積漂移。2.3 幾種粘性策略怎么選不同策略的選型主要看你的業(yè)務(wù)形態(tài)和現(xiàn)有基礎(chǔ)設(shè)施我整理了一個對比表格策略實(shí)現(xiàn)方式優(yōu)點(diǎn)缺點(diǎn)適用場景Cookie 粘性種 Cookie 并映射到節(jié)點(diǎn)精確、用戶經(jīng)驗(yàn)好、不受代理 IP 影響依賴瀏覽器 Cookie無 Cookie 客戶端不適用帶登錄態(tài)的 Web 應(yīng)用、購物車、企業(yè)系統(tǒng)ip_hash按來源 IP 哈希無需額外配置天然支持多出口 IP 會把用戶全塞到一臺節(jié)點(diǎn)出口 IP 單一的內(nèi)網(wǎng)服務(wù)、IPv6 場景Hash Key按 Header/參數(shù)/指定 key 哈希靈活可針對業(yè)務(wù)標(biāo)識進(jìn)行哈希節(jié)點(diǎn)變更時哈希漂移Session 容易丟無 Cookie 的 API 網(wǎng)關(guān)、需要按租戶隔離的場景第三方 sticky 模塊編譯第三方模塊功能成熟可自定義升級跟隨成本高模塊質(zhì)量參差不齊舊環(huán)境暫時無法升級到新版本我在實(shí)際項(xiàng)目里給電商類站點(diǎn)用的是 Cookie 粘性種一個短期 Cookie 就好給內(nèi)部 API 網(wǎng)關(guān)用的是基于 Header 的哈希比如按 X-User-Id 哈希不用管 Cookie也不會因?yàn)闉g覽器禁用 Cookie 而失效。這個選擇邏輯很簡單有明確用戶身份的優(yōu)先用 Cookie 粘性按來源 IP 和入口網(wǎng)關(guān)做聚合的就用 ip_hash 或 Hash Key。3. 升級 1.29.6 與粘性會話配置實(shí)操3.1 升級前的檢查與備份升級之前我習(xí)慣先做三件事。第一明確當(dāng)前版本。命令是nginx -v如果發(fā)現(xiàn)當(dāng)前是某個很老的穩(wěn)定版跳版本升級要格外注意配置兼容性。第二完整備份配置。不僅僅是復(fù)制一份 nginx.conf而是把 conf.d 下的所有 conf 文件、證書目錄、還有編譯時的模塊列表全部記錄下來。第三確認(rèn)回滾路徑。git 里留一份當(dāng)前可用的 nginx 二進(jìn)制和配置萬一新版本有兼容性問題能在一分鐘內(nèi)回到舊版本。還有一點(diǎn)容易被忽略就是確認(rèn)第三方模塊兼容性。如果你當(dāng)前環(huán)境編譯過第三方模塊升級到 1.29.6 之后這些模塊大概率要重新編譯。有些模塊原作者已經(jīng)不怎么維護(hù)了在新版本上編譯可能直接報錯。建議升級前先在新版本源碼上跑一次./configure加上原有參數(shù)看看模塊能不能編譯通過。這一步卡住的話就別急著上生產(chǎn)先解決模塊兼容性問題。3.2 平滑升級的完整流程如果你用的是官方源碼編譯方式平滑升級流程相對成熟。先把 1.29.6 的源碼包下載下來解壓沿用之前的編譯參數(shù)重新 configure 并編譯新二進(jìn)制然后用新二進(jìn)制替換舊二進(jìn)制。保險起見替換前可以把舊二進(jìn)制備份為 nginx.old。替換完成后執(zhí)行kill -USR2 舊master進(jìn)程PID讓新老版本同時運(yùn)行再kill -WINCH 舊master進(jìn)程PID優(yōu)雅關(guān)閉舊 worker最后kill -QUIT 舊master進(jìn)程PID退出舊的 master。用系統(tǒng)自帶軟件源安裝的 nginx升級方式會更簡單直接執(zhí)行包管理器的升級命令就行。但要注意RedHat 系和 Debian 系默認(rèn)的 nginx 版本往往比主線版落后不少。如果你等不到官方源更新可以自行添加 nginx 官方源或者直接使用編譯安裝的方式。我這里更推薦編譯安裝因?yàn)榭梢跃_控制編譯參數(shù)還能把第三方模塊一起編進(jìn)去。升級完成之后我的驗(yàn)證順序是nginx -t校驗(yàn)配置nginx -V確認(rèn)版本和編譯參數(shù)然后 reload 一次觀察 error.log 有沒有新增告警再通過壓測或者線上小流量驗(yàn)證基礎(chǔ)功能。3.3 配置一個帶粘性會話的 upstream假設(shè)我們有兩個后端節(jié)點(diǎn)部署了同一個 Java Web 應(yīng)用用戶登錄狀態(tài)存在本機(jī) Session。配置粘性會話之后同一用戶的請求會穩(wěn)定落到同一臺節(jié)點(diǎn)。生產(chǎn)環(huán)境下的配置大致長這樣upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h maxage1h; server 192.168.1.10:8080 max_fails2 fail_timeout10s; server 192.168.1.11:8080 max_fails2 fail_timeout10s; } server { listen 80; server_name app.example.com; location / { proxy_pass http://app_backend; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } }這里有一個我踩過的坑升級到 1.29.6 之后如果配置sticky指令報 unknown directive說明你使用的這個版本可能還沒編譯粘性會話模塊或者指令名有細(xì)微差異。畢竟 nginx 不同版本的模塊名和參數(shù)會有調(diào)整保險做法是先看當(dāng)前版本的官方文檔確認(rèn)模塊名再按文檔語法來配置。我在測試機(jī)上試過第一次配置時就是因?yàn)橹噶蠲麑戝e導(dǎo)致 nginx -t 直接報錯。另一個關(guān)鍵參數(shù)是expires。Cookie 粘性會給客戶端種一個 Cookie這個 Cookie 的過期時間要設(shè)計好。太短的話用戶沒過多久就失效還得重新綁定太長的話后端節(jié)點(diǎn)要下線維護(hù)時用戶可能還掛在舊節(jié)點(diǎn)上請求頻繁失敗。我的經(jīng)驗(yàn)是業(yè)務(wù) Session 持續(xù)多久Cookie 就設(shè)置多久最多不要超過一天。電商場景設(shè)置 30 分鐘到 1 小時比較合適管理后臺這類長會話可以設(shè)置 8 小時。3.4 驗(yàn)證粘性是否生效的兩種方法配置完粘性會話怎么確認(rèn)是真的生效了我常用的方法是先看 Set-Cookie 響應(yīng)頭再用帶 Cookie 的請求做連續(xù)性驗(yàn)證。第一步不帶 Cookie 請求一次登錄接口打開抓包工具或者直接用 curlcurl -sI http://app.example.com/login | grep -i set-cookie正常響應(yīng)里應(yīng)該能看到 nginx 下發(fā)的 Cookie比如srv_idbackend-a。如果看到的是業(yè)務(wù)自己種的其他 Cookie沒有 srv_id說明粘性模塊可能沒生效或者被業(yè)務(wù)層覆蓋了。第二步把第一步拿到的 Cookie 值原樣帶回去連續(xù)請求幾次業(yè)務(wù)接口curl -s -b srv_idbackend-a http://app.example.com/api/user/info curl -s -b srv_idbackend-a http://app.example.com/api/order/list這時候去后端的 access log 里查請求來源 IP 或者響應(yīng)時間兩個請求應(yīng)該都落在 backend-a 節(jié)點(diǎn)上。如果第二次請求落到了 backend-b說明粘性配置有問題或者 Cookie 在瀏覽器側(cè)被清了。多節(jié)點(diǎn)場景最好給每個后端節(jié)點(diǎn)配置獨(dú)立的 access_log方便做這種驗(yàn)證。4. 性能與穩(wěn)定性調(diào)優(yōu)的落地姿勢4.1 長連接與 keepalive 的正確參數(shù)nginx 1.29.6 這類主線版本在 upstream 長連接處理上通常會有改進(jìn)但你的配置如果一直沒調(diào)再好的改動也發(fā)揮不出來。之前排查過一次線上問題后端 Tomcat 的連接數(shù)經(jīng)常被打滿后來發(fā)現(xiàn) nginx 每次請求都重新建連沒有啟用 upstream keepalive。補(bǔ)上之后連接數(shù)和后端負(fù)載同時降了不少。upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h; server 192.168.1.10:8080; server 192.168.1.11:8080; keepalive 32; } server { listen 80; location / { proxy_pass http://app_backend; proxy_http_version 1.1; proxy_set_header Connection ; } }這里有兩個容易忽略的細(xì)節(jié)。第一必須設(shè)置proxy_http_version 1.1否則 nginx 到后端默認(rèn)走 HTTP/1.0連接無法復(fù)用。第二proxy_set_header Connection 必須清空不然頭信息里留著 Connection: closekeepalive 照樣不生效。這兩個點(diǎn)少一個keepalive 就等于沒配。keepalive 參數(shù)也不是越大越好。32 條空閑連接看后端能承受多少。后端 Tomcat 并發(fā)線程通常就 200 左右你在一臺 nginx 上 keepalive 設(shè)置 100意味著每臺后端要維護(hù) 100 條空閑連接后端連接池的負(fù)擔(dān)會很大。合理的設(shè)置是先看后端連接池上限再給 nginx 配一個合適的值一般 16 到 64 之間比較穩(wěn)妥。4.2 HTTP/3 要不要現(xiàn)在就上1.29.6 主線版本里 HTTP/3 和 QUIC 的支持又往前走了一步很多朋友已經(jīng)開始糾結(jié)要不要開啟。我的判斷是HTTP/3 確實(shí)能提升弱網(wǎng)環(huán)境下的用戶體驗(yàn)尤其針對移動端和跨地域用戶但生產(chǎn)環(huán)境直接全量上線安全隱患和兼容性問題都不少。最常見的坑是中間設(shè)備攔截。運(yùn)營商網(wǎng)絡(luò)或者企業(yè)防火墻里有些老設(shè)備不認(rèn)識 QUIC 報文直接把 UDP 443 丟掉導(dǎo)致瀏覽器報net::err_quic_protocol_error。這個問題在辦公網(wǎng)、校園網(wǎng)尤其明顯。另一個坑是監(jiān)控體系。HTTP/3 的請求在抓包工具和 Web 日志里的形態(tài)和 TCP 完全不一樣監(jiān)控、日志分析都要跟著調(diào)整如果監(jiān)控沒跟上出了問題定位會很痛苦。我建議的做法是漸進(jìn)式開啟。先在某個測試域名或者對部分用戶開啟 HTTP/3觀察訪問成功率、報錯率、頁面加載時間跑一段時間穩(wěn)定之后再逐步擴(kuò)大流量。如果業(yè)務(wù)對網(wǎng)絡(luò)穩(wěn)定性要求極高暫時不開也不丟人HTTP/2 TLS1.3 在絕大多數(shù)場景下已經(jīng)夠用了。4.3 SSL 握手性能優(yōu)化清單升級到新版本之后SSL/TLS 相關(guān)的優(yōu)化也值得重新過一遍。nginx 默認(rèn)配置在手寫環(huán)境下往往沒有展示出真正的性能幾個改動能明顯減少握手時間和 CPU 占用。第一個是ssl_session_cache。這個參數(shù)非常關(guān)鍵它讓 nginx 在本地緩存 TLS 會話票據(jù)后續(xù)客戶端重新建連可以直接復(fù)用省掉一次完整的 TLS 握手。生產(chǎn)環(huán)境建議設(shè)置為shared:SSL:10m10MB 共享內(nèi)存大約能存 8 萬多個會話。如果你發(fā)現(xiàn)客戶端頻繁握手、頁面加載偏慢多半是這個沒設(shè)好。第二個是ssl_protocols和ssl_ciphers。建議只開啟 TLSv1.2 和 TLSv1.3把 SSLv3、TLSv1.0、TLSv1.1 全部關(guān)閉。TLSv1.3 在握手輪次和加密效率上比老版本強(qiáng)太多只要客戶端兼容優(yōu)先開啟。這個操作放在 nginx 配置里只是一個指令但對安全合規(guī)和性能都有實(shí)際提升。第三個是證書鏈優(yōu)化。證書鏈里有中間證書和根證書nginx 每次握手要發(fā)送整條證書鏈。證書鏈太長、證書文件過大握手時間就會增加。把證書文件整理成 PEM 格式并檢查證書鏈完整性雖然不起眼但訪問速度會有體感提升。5. 升級后常見問題與排查實(shí)錄5.1 排查工具與應(yīng)急思路升級過程中不管做多少準(zhǔn)備上線后還是可能出問題。我的排查思路一般都是自底向上先看 error.log再看 access.log最后才動具體請求驗(yàn)證。查看 error.log 時建議帶上時間線定位到一個比較長的時間窗口用tail -f或者grep篩選關(guān)鍵字。常見的錯誤信息格式大概是[error]、[crit]、[emerg]等嚴(yán)重級別從低到高。[emerg]出現(xiàn)意味著配置錯誤nginx 起不來[crit]出現(xiàn)在磁盤寫滿、內(nèi)存不足等系統(tǒng)級問題[error]則多是業(yè)務(wù)請求相關(guān)的錯誤。看到報錯先別急著百度先認(rèn)真讀一遍日志內(nèi)容大多數(shù)情況下報錯信息已經(jīng)很明確了。排查連接問題時nginx -T非常有用。它可以導(dǎo)出 nginx 加載后的完整配置比直接看散落的配置文件更清楚能看清sticky、keepalive、proxy_pass這些指令最終生效的值避免因?yàn)?include 引入多個配置文件時出現(xiàn)覆蓋和沖突。配合curl -v看請求頭能直接確認(rèn) Cookie、響應(yīng)頭是否符合預(yù)期。5.2 高頻問題速查表問題可能原因解決辦法配置 sticky 后 nginx -t 報 unknown directive粘性模塊未編譯或模塊名寫錯確認(rèn)當(dāng)前版本是否包含對應(yīng)模塊查閱官方文檔修正指令名粘性會話不生效用戶反復(fù)掉線瀏覽器禁用了 Cookie、多個域名間 Cookie 未共享、代理層多次轉(zhuǎn)發(fā)檢查 Set-Cookie 路徑和域名用 curl 模擬帶 Cookie 請求驗(yàn)證后端節(jié)點(diǎn)添加或刪除后大量 Session 丟失節(jié)點(diǎn)變更導(dǎo)致哈希映射漂移舊用戶被重定向到新節(jié)點(diǎn)規(guī)劃好維護(hù)窗口結(jié)合一致性哈希的前綴保留策略逐步調(diào)整升級后部分接口 403/404配置文件不兼容server_name、location 匹配規(guī)則有變化grep 對比新舊配置文件差異重點(diǎn)檢查 location 和 rewrite 規(guī)則開啟 HTTP/3 后瀏覽器訪問報 err_quic_protocol_error中間網(wǎng)絡(luò)設(shè)備攔截 UDP 443 報文暫時關(guān)閉 HTTP/3或限制到測試域名小流量驗(yàn)證高并發(fā)下 error.log 出現(xiàn) worker_connections are not enoughworker_connections 設(shè)置過小根據(jù)系統(tǒng) ulimit 調(diào)大 worker_connections配合調(diào)整 worker_processesreload 后連接瞬間斷掉worker 進(jìn)程重啟長連接被回收業(yè)務(wù)側(cè)實(shí)現(xiàn)重連機(jī)制避免在流量高峰時 reload5.3 幾個來自實(shí)踐的避坑經(jīng)驗(yàn)第一升級前一定要在一臺獨(dú)立測試機(jī)跑一遍全量回歸。我在一次升級中吃過虧新版本配置校驗(yàn)通過但舊配置里的某個第三方指令在新版本中行為變化了上線后即時接口出現(xiàn)了路徑漂移?;貧w用例要覆蓋至少一遍登錄、上傳、WebSocket 連接等核心場景不能只壓測不驗(yàn)功能。第二粘性會話的 Cookie 名稱不要和業(yè)務(wù) Cookie 沖突。業(yè)務(wù)本身可能種了一個名為 srv_id 的 Cookienginx 又種了一個同名 Cookie后種的值會覆蓋前種的值導(dǎo)致粘性失效。我在一次配置時把粘性 Cookie 命名為 app_srv_id從源頭上避免沖突。第三升級后不要立即清空舊版本二進(jìn)制。保留 nginx.old保留舊配置備份至少保留到新版本穩(wěn)定運(yùn)行一周以上再清理。真出了兼容性問題回滾路徑遠(yuǎn)比修復(fù)問題更可靠。6. 從 1.29.6 看主線版本選型與演進(jìn)6.1 主線版和穩(wěn)定版怎么選nginx 的版本發(fā)布節(jié)奏里主線版本和穩(wěn)定版本是并行的。主線版本更新頻繁新功能都在主線里先出現(xiàn)但并不意味著不穩(wěn)定只是更新迭代速度快。穩(wěn)定版本更保守只做嚴(yán)重安全修復(fù)和 bug 修復(fù)不引入新功能。很多團(tuán)隊(duì)對主線版本有心理顧慮覺得“穩(wěn)定版才適合生產(chǎn)”這個觀念在早期確實(shí)是主流但現(xiàn)在 nginx 官方對主線版本的定位已經(jīng)非常成熟生產(chǎn)環(huán)境用主線版本的團(tuán)隊(duì)越來越多。如果你所在團(tuán)隊(duì)對新技術(shù)接受度較高且有一定的測試能力我建議直接跟隨主線版本。粘性會話、HTTP/3 改進(jìn)這些新東西只有主線版本才有穩(wěn)定版要等很久才會合入。如果你所在的行業(yè)對變更極度敏感或者你只有一臺核心網(wǎng)關(guān)、沒有測試環(huán)境那還是保守一點(diǎn)等穩(wěn)定版發(fā)布之后驗(yàn)證沒問題再升級也不遲。我的個人習(xí)慣是測試環(huán)境永遠(yuǎn)用最新主線版本生產(chǎn)環(huán)境比主線版本滯后一個版本等社區(qū)反饋穩(wěn)定之后再跟進(jìn)。這樣既不會錯過新特性又能用社區(qū)的問題反饋?zhàn)鳛楸芸右罁?jù)。6.2 nginx 在網(wǎng)關(guān)生態(tài)里的位置從 1.29.6 這次的更新其實(shí)能看到 nginx 的演進(jìn)方向官方對網(wǎng)關(guān)層能力越來越重視。粘性會話過去是商業(yè)版 nginx Plus 的賣點(diǎn)之一現(xiàn)在進(jìn)了主線說明官方在把一些高頻需求逐步下沉到開源版本里。這對開發(fā)者來說肯定是個好消息。但也要清醒看到nginx 核心的定位始終是高性能反向代理和 Web 服務(wù)器它不會變成一個功能冗雜的應(yīng)用網(wǎng)關(guān)。像灰度發(fā)布、熔斷限流、服務(wù)發(fā)現(xiàn)集成、自定義鑒權(quán)這類能力純 nginx 配置會越寫越復(fù)雜維護(hù)成本很高。如果你的業(yè)務(wù)發(fā)展到那個階段可以考慮在 nginx 生態(tài)的基礎(chǔ)上引入 OpenResty 或 APISIX、Kong 這類基于 nginx 的 API 網(wǎng)關(guān)它們復(fù)用 nginx 的高性能內(nèi)核同時在上層提供了更豐富的擴(kuò)展能力。還有一部分團(tuán)隊(duì)在使用 KubernetesIngress Controller 底層很多就是 nginx。這種情況下粘性會話的能力可以通過 Ingress 注解來配置不一定直接操作 nginx.conf。理解 nginx 底層的粘性會話實(shí)現(xiàn)對排查 Ingress 場景下的會話問題依然有幫助畢竟最終干活的是同一套引擎。聊到最后我還是想強(qiáng)調(diào)一點(diǎn)任何新版本、新功能都不要急著全量上生產(chǎn)。這次的粘性會話我就是在測試環(huán)境先跑了一周覆蓋了登錄、購物車、文件上傳幾個核心場景確認(rèn) Cookie 流轉(zhuǎn)、故障轉(zhuǎn)移都符合預(yù)期之后才在新項(xiàng)目里啟用。因?yàn)?nginx 是流量入口改出問題影響的就是所有業(yè)務(wù)。升級前備份好配置規(guī)劃好回滾路徑先把變化控制在最小范圍等驗(yàn)證通過再一步步擴(kuò)大。這比追求新版本帶來的性能數(shù)字更重要生產(chǎn)環(huán)境穩(wěn)定跑著比什么都值。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月天伊人| 嗯嗯啊啊用力视频免费| 免费观看国产小粉嫩喷水精品午| 大香蕉99热| 日本一区二区三区四区免费观看| 欧美性暴力| 亚州春色| 天无日色综合| 最新日韩黄片| 亚洲午夜未满十八勿入网站日本又色又爽又黄 | 男人的天堂不卡一区二区| 91色综合| 久久超碰日韩精品| 色阁阁AV综合网| 一道本久久棕合爱| 亚洲一区二区三区春色| 狠狠色五月亚洲91| 黄日韩| 亚洲另类综合欧美| 国产乱人伦AVA麻豆软件.| 欧美男人天堂| 亚洲图片小说欧洲| 97视频在线观看网站| 秋霞久久亚洲精品成人| 色偷综合| 久久精品中文字幕无码l| 国产精品久久发布| 人妻二区| 久久啊哟| 老熟妇一区二区三区啪啪| 嫩草 人人网精品| 国产第11页| 91人妻精华帖| 久久亚洲中文字幕视频| 日韩特一级久久| 久久精品免费| 亚洲丝袜色| 精品国产一区二区三区四区在线看 | 性老妇一区二区三区| 97久久精品亚洲| 91天堂色男人的天堂| 国产午夜在线观看视频| 伊人网免费视频| 色九久| 蜜桃臀AV在线| 久久人妻少妇| 91M一社| 久久人妻少妇| 国产精品久久久久久夜夜夜夜| 久久色一区| 九月丁香| 亚洲国产高清福利视频| 一区二区三区看视频| 99热国产精品| 伊人午夜福利视频| 久久一二三四五六七八九区区| 无码heyzo高清一区| 久久性爱城| 97精品熟女少妇一区| V A在线| 超碰色大香蕉| 九九热精品| 少妇大屁屁| 综合av影片| 高潮嗯啊性感美女久久久| 九九玖玖精品| 欧美久久婷| 精品无码一区二区| 精彩国产视频播放1区2区| 国产精品一区人妻精品阁在线| 丁香五月影院| 99在线免费视频| 深爱五月天| 婷婷久久综合久| 亚洲 国产 精品一区| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 婷婷久月| 欧美性天天| 麻豆久久一区二区三区| 2024年最新色情网站在线观看| 天天影视亚洲| 性欧美91| 97视频免费在线观看| 欧美九九九九九| 欧美亚洲综合999| 日本三级韩国三级美三级91| 激情欧美97| 99热在线观看| 高清一区AV无码| 免费观看国产不卡av| 女人 A一级| 国内毛片无码一级毛片| 亚洲成人一区二区精品| 五月婷婷AV| 99爱在线视频| 蜜桃精品一区二区三区ww| 久久99国产综合精品女同| 激情露脸爱| 亚洲自拍欧美国产首页网曝| 97av,com| 日本韩国五十路六十路七十路老熟女作爱视频网站 | www.色五月| 久久97| 日韩97超碰中文字幕| 九一亚洲国产免费| 91九九九吃| 久久久9 9 9精品| 91蜜桃传媒精品久久久一区二区| 一区二区高清视频| 在线亚洲 欧美 日本专区| A级毛片在线看免费| 国产区性爱在线视频秋霞豆| 熟女丰满人妻一区| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 97资源制服丝袜| 亚洲骚女一区二区三区| 中文字日本乱码| 亚洲s在线观看| 日韩三级一区| h在线看免费版在线看| 99热久| 伊人五月天激情| 四虎AV在线播放| 99这里都是精品| 国产精品情侣啪啪| www超碰| 日本天天人人狠狠在线日美女 | 国产农村妇女精品1区二区| 日韩钢筋无码高清啾啾啾| 中国的操老妇女| 久久风骚城市人| 黑人娇小av在线播放| av天堂精品久久| 搞中出久久| 色噜噜综合网| 伊人伊人LD| henhen91| 亚洲欧美在线观看免费| 亚洲一区二区三区麻豆传媒| 精品久久9| 91宗合网| 成人综合久久精品色婷婷| 999在线电影香蕉| 大香蕉啪啪啪啪在线| 国产蜜臀精品一区二区尤物| 午夜超爽| 日欧美色| 婷婷五月天色网| 欧美日韩1234| 国产免费永久精品无码| 亚洲男人天堂2016| 久久九色| 日本操逼视频导航| 91麻豆天美国产| 日本黄色天堂| 呦呦影院| 欧美性,色九九| 黄色成年| 激情五月丁香五月| 久久一本大香蕉| 久久专区| 大香樵伊人网| 蜜臀99久久国产| 日本黄色大片一级视频免费麻豆| 性一交一乱一交A片久久四色| 超碰天天久久79| 欧美色青| 亚洲五月天激情| 久久一本大香蕉 | 精品午夜福利导航| 丁香五月影院| 热G综合热G中文| 亚洲中文字幕精品一区| 久久久999日本大片| 丰满熟妇大乳做爰| 91人妻做a观看视频| 4141514逼喷水三级片| 97亚洲色图| 97人人操人人摸人人爱| 99re这里| 国产精品视频麻豆入口| 超碰在线91| 欧美淫乱视频| 亚洲乱码尤物193YW| 97这里都是精品| 亚洲色宗合| 91精品黄在线观看| 精品丰满熟妇人妻一区| 日本成人A片网站| 丝袜喷水在线| 欧美日产国产在线成人第一区| 麻豆国产av网| 色综合av综合久久| 中文高清一区二区的| AV男人天堂网| 亚洲精品人妻吞精av| 日日日大屁股骚女人精品| 操逼无码操逼| 一二三四视频在线社区中文字幕| 波多野42部无码喷潮在线观看| 丁香五月天啪啪| 天天性射网| 欧美人妻精品一区二区| 亚洲伊人久久精品影院| 国产一区二区三三视频| 97色色国产视频| 国产辣妈在线视频福利| 天天碰操中国年青熟妇| 国产精品视频91久久| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 97超碰在线资源网站| 黑人美精品 A片| 狠狠躁天天躁日日躁| 国产亚洲日韩欧| 一区 欧美 日韩 麻豆| 综合久久久久久久久91| 有码免费观看| 五月天久久综合网| 欧美亚洲国产日本在线,久久精品国产| 国产精品亚洲美女久久久久| 亚洲激情久久| 欧成人精品H无码| 插入综合网| 囯产精品久久久久久久久久梁医生 | 羞答答AV中文字| 国产亚洲精品第一最新| 久草综合视频| 99老司机精品视频在线观看| 日韩精品国模| 99热最新网址| 黄色无码高清黄色无码网站| 伊蕉97蜜桃97狠狠综合干| 成人性爱av.com| 中文字幕在线第二页| 国产欧美一区激情交| 黄页av| 日韩中文字幕熟妇人妻| 日韩 欧美 视频 在线 一区| 91美女视频直播| 伊人99热| 无码免费在线观看黄色片| 久啪| 五月婷婷激情综合| 亚洲婷婷丁香在线| 亚熟hd视频在线| 中文字幕在线高清男人的天堂| 国产精品动态一区二区三区四四| 欧美一级三级| 欧美综合娱乐久久| 日韩精品 欧美激情| 日韩三级久久久| 天天澡天天狠天天天做| 四季AV一区二区凹凸精品小说| 亚洲中文日韩欧美大香蕉视频| 亚洲天堂少妇| 欧美AB在线观看| 欧美v亚洲v综合v国产v妖精| 久久精品成人一区二区三区蜜臀| 性爱av在线免费观看| 欧美96精品在线| 91总综合网| 你懂得91| 91爱| 大香蕉之青青草原| 天天色粽合合合合合合合| 日韩人妻一区二区| 久久久91福利姬| 台欧久久精品视频| 欧美黄片欧美黄片xxx| 日韩在线观看AV| 99re3这里只有精品| 日韩在线观看字幕精品| 东京热一区二区中文字幕| 91美女在线精品视频| 伊人精品久久网站| 精品人妻久久久久一区二区三区| 九九无码久久精品视频| 国产极品一区二区三区三州| 日韩性爱一级片| 久久久成人免费av电影| 熟妇视频一区二区三区在线观看| 污污汅18禁网站在线永久免费观看 | 色五月丁香五月| 视频国产欧美在线播放| 亚洲综人网| 91爱综合| 曰韩无码777| 日本1区2区不卡视频| 东北女人性交| 天天综合网AV91| 九九毛片这里只有精品| 99热日本| 成人乱码一区二区三少妇| 国产91精品在线免费| 91老妇女| 成人天天爽| 不卡九肏| 亚洲激情av| 无码天天操| 百度百度日本操逼| 色噜噜日韩精品| 97在线青| 天天爽夜夜欢视| 婷婷五月天成人| 天天做日日做| 被窝影院午夜看片无码| 亚洲欧美日韩激情不卡| 久9爱精品| 97一区二区三区视频| 亚洲美女精品| 久久女人视频| 男人的天堂亚洲| 日本视频一区二区三区| 日韩无码操逼片| 97视频在线| 后入式视频国产自| 目产99999久久999| 久操网址| 尤物黄色在线观看网站| 亚洲h片在线免费观看| 97干在线| 日韩中文字幕视频| 粉嫩粉嫩一区性色AV片| 久久大香蕉| 91麻豆天美国产欧美| 天堂日本亚洲欧美| 91国精产品| 伊人伊人LD| 日本一二三高清| 国产黄色影片在线观看| 久久精9| 一起草日韩| 91亚洲综合| 国产9熟妇视频网站| 亚洲九九爱| 1二区9| 97欧美色资源| 欧美日韩少妇色情| 神马午夜久久久| 人人综合| 精品乱码久久久久| 91成人社区| 亚洲熟女一区| 999九九精品| 色天堂综合| 白丝少妇一区二区| 好吊色一区| 欧美亚综合色图| 青青草吊丝| 爱欲AV| 91新在线欧美| 91在线美女| 欧美一二三区四五区| 久久九色| 五月开心网| 日日干夜夜干| ,国产乱人伦精品一区二区三区| 看看小穴| 三上制服丝AV| 日夜干射色啊| 99re6国产精品99re| 精品无码一区二区三区| 鸥美中出| 精品人妻中文字幕高清| 午夜福利一区二区影院| 久久一区二区高清免费| 熟女六十路| 欧美熟女操屄| 日本免费中文一区二区三区四区| 国产精品小视频一区二区三区| 大稥蕉免费视频这里只有精品| 欧洲免费一区二| 婷婷丁香一区二区三区| 99re在线视频国产| 亚洲色婷婷综合久久久久中文| 不卡六六在线91| www色色com| 美國A片| 日韩黄色成人性爱| 中亚精品极乱| 91成人国产综合久久精品蜜月| 亚洲成人色情五月天丁香花| 蜜区区视频79 | 欧洲一级性爱视频在线观看| 欧美日综合| 97精品一二区| 日韩精品9区| 夜夜春夜夜操| 色呦呦国产精品免费看| 操逼1区| 国产情侣自拍在线播放| 免费观看有码高清视频| 99色日| 一本大道久| 欧美日韩中文视频播放| 国产一区在线观看无码AV | 日韩免费福利在线观看| 国产精品视频白浆免费| 欧美日韩夜夜| 午夜精品久久久久久久99| 老鸭窝成人免费毛片视频| 97爱综合| 福利在线观看一区二区| 熟妇熟女视频一区二区三区| 先锋音影AV| 成人九九| 欧美Aⅴ| 婷婷亚洲综合| 成人一区二区三区四区| 日本精品一区二区不卡| 国产一级特黄大片处女| 中文字幕一区av| 后入式在线免费观看60秒| 99久久免费看精品国产一区| 被男人吃奶很爽的毛片| 九月婷婷综合| 超碰无码五月97| 男人的天堂网页| 国产 热久久久久国产精品| 亚洲AV小说| 亚欧美综合网。| 日本精品五区| 在线观看国产黄色| 91爰爱欧美| 超碰九7| 天天视频黄网站| 一区三区啪啪| 人妻色偷色噜| 大香蕉手机在线| 青青草在线视频人人想人人上| 91爆操视频| 综合欧美亚洲| 男人天堂综合| 久久 国产精品 一区| 青青草在线成人视频| 97在线播放| 久操视频在线| 蜜汁欧美| 做爱A级亚欧| 91人妻视频在线| 精品白丝一区| 国产精品无套内谢| 人人污日韩一区二区| 久久久精精精| 日本3级一区二区免费| 欧美暴力猛交| 黄色免费网| 五月色综合| 日韩综合第八区国产精品| 久久久久亚洲av综合波多野制衣| Av色五月| 2017天天拍大香蕉| 亚洲精品色| 9997se| wwwxxx日本爽| 人妻久热在线| 91青青草| 2024人人操人人摸| 亚洲自拍青操视频| 高跟丝袜AV专区国产| 一及黄久一点| 欧美一区二区三区互相| 免費人妻夜夜爽天天爽爽一区| 九九热精品| 91精品国产麻豆国产自产在| 欧美日韩美女精品久草一区二区三区 | 亚洲天堂色图| 亚洲国产精品成人久久蜜臀| 六九九九| 欧美大片91| 九九性爱网| 久久精品成人一区二区三区蜜臀| 九色精品视频导航1| 在线观看A啊啊啊| 国产无码精品成人| 蜜桃中文字日产乱幕4区| 亚洲牲交| 色女网日韩| 操一操摸一摸| 久久一区,青青青青草视频在线播放| 91精片| 最新AVzaixian| 久操电影| 亚洲第一色页夜| 人妻献身系列第54部| 91色噜噜狠狠| 毛片久久| 日日橹狠狠爱欧美超碰| 男女做爰猛烈动高潮A片免费应用| 国产性刺激| 美女被啪到深处抽搐视频| 日韩女优在线| 人妻9117c| 欧美色图天堂网m| 国产又黄又爽又刺激久久久久久| 91爰爱欧美| 玖玖爱免费观看视频| 老女人碰碰在线碰碰视频| 欧美日韩激情无码专区| 97草草| 色色色色网站| 超碰色97| 97综合日韩| 亚洲图片色图欧美另类| 老女人碰碰在线碰碰视频| 中文字幕天堂在线| 91色五月俺来也| 日逼视频日本| 九九九九一区| 亚洲图片欧美日韩| 在线毛片片免费观看| 密臀AV在线| 亚洲五码一区二区三区| 日韩97超碰| 亚州色图第三区| av网站国产主播在线| 夜夜福利| 成人av动漫在线观看| 加勒比综合88| 蜜臀久久在线视频| 欧美人妻久久精品二区三区| 女生看匆91网站| 9l视频自拍9l九色成人| 97超碰人人模人人拍人人| 亚洲老司机123专区| 粉嫩绯色AV一区二区在线| 777超碰| 麻豆天美传媒在线视频天堂| 久久一区二区三区入口| 欧美激情 一区| 不卡超碰护士AV在线免费播放| 中国农村熟妇毛片视频| 精品久操| 不卡码视频| av日韩手机在线影视| 亚洲欧美伦综合| 国内操逼视频二区| 日韩精品一区二区三区色欲| 另类欧美色| blacked精品一区国产| 熟妇女伦乱视频视频| 特污免视频| 美女午夜福利免费视频| 久久欧美激情| 日本999精品| 亚洲蜜桃V妇女| 欧美在线播放| 口爆欧美91| 欧美一区二区三区日韩| 丝袜天堂网| 99这里只有精品国产| 久久人妻丝袜一区二区三| 麻豆色99999| 欧美黑人精品一区二区| 夜夜 中文视频rt| 性暴力欧美猛交在线直播| 亚洲成人精品久久久| 啊啊啊啊啊在线视频| 国产99999久久精品| 亚洲熟女综合一区二区| 亚洲字幕一区二区| 亚洲黄a三级三级三级看三级| 日韩av电影成人在线| 69精品人人人人| 午夜天堂啪啪| 天天摸夜夜添无码小视频| 亚洲天堂男| 欧美第二页午夜| 狠狠中文字幕| 免费人成?大片在线播放| 精品人妻1区| 综合久久99| 亚洲色图综合网| 精品国产自在在线99| 美女被艹尤物视频| 国产女同视频在线播放| 黄骗免费网站| 亚洲中文sv| 国产老熟女| 亚洲一区二区三区欧美日韩| 小日子操bb在线看| 国产品精品自在在线午夜免费| 亚洲脚交| 91路www| 日韩中字av一区| 日韩激情啪啪| 天天色天天干天天射| 性爱视频免费网址| 久草成人| 奶水 人妻 哺乳 在线| 精品妇操一区二区三区| 啊啊啊啊二区好大| 91色艳| 六月丁香啪啪| 国产激情在线观看| 91高清无码下载| 国产午夜在线观看视频| 欧美AB在线| 少妇激情一区二区三区视频| 大色网久久| 午夜精品久久久久久久| 91男人天堂网| 九九国产| 97超碰免费人人性爱| 亚洲AO在线| 精品一区96| 91女人的网站| 天堂岛av| 人妻熟女午夜精品在线| 97人人射| 久久香蕉网| 午夜精品视频777| 激情专区综合| 国产精品亚洲免费| 免费A V在线| 精品亚洲国产成人AV制服丝袜| 嫩草影院在线观看精品 | 97人人中文网| 91neishe| 久久久久久夜夜夜夜夜| 麻豆亚洲Av成人无码一区精品| 91爽啪| 9久超碰| 小明看看网址| 欧美中文字幕一区 | 嗯嗯啊啊啊好爽| 欧美人妻中出| 欧亚第一综合网| 91国产操逼视频| av影片在线观看不卡| 91另类| 日韩无码一区二区三区| 老女人综合网| 91日韩网站| 超碰碰97资源站| 91综合网站| 久久久久久999| 亚洲欧美色图片| 亚洲 欧美 精品专区 极品| 乱人乱色一区二区三区免费| 日夜精品| 狠狠操狠狠操操| 日本爽爽爽爽爽爽免费视频| 亚洲国产91精品一区二区久久| 成人av影院在线观看| 色情乱伦AV| 自偷自拍的亚洲视频| 99在线免费观看| 久久99黄色卞西瓜| 96免费视频在线| 久久夜嗨| 久久综合久色欧美综合狠狠 | 一级毛片电影免费看| 999久久久| 日韩欧视频| 啊啊啊久久久视频| 91精品免费| 欧美一区二区传媒| 免费自拍三级综合| 人人操 欧美| 91激情国产| 久久超碰天天| 久久久少妇诱惑精品视频| 香港久久久| 日本一区不卡| 免费超碰97在线观看| 精品免费一区| 午夜啪啪片| 欧美 亚洲 偷拍自拍| 麻豆精品久久久久久久| 久久久久久久久久久久黄色| 黑人粗大V S日韩女优视频| 东京热av影院| 欧美另类色图片| 国产蜜臀精品一区免费尤物| 粉嫩久久久久| 亚洲自拍小说| 欧美国产精品久久九九| 九月丁香婷婷色| 怡红院一区二区熟女人妻| 天天摸,夜夜摸| 亚州中文字幕超碰97| 一本色道久久综合狠狠操| 鸥美精品一区二区久久婷婷| 99成人| 久久99操天天日| 玖玖爱视频网站| 丝袜美腿操av| 内射老妇BBWX0C0CK| 亚洲国产高清福利视频| 99999久久久久9国产精品| 天堂在线一区二区| 国产AAAAAABBBBB| 亚洲无码久久久久久久| 欧美亚洲国内自拍| 97精品97久久| 在线97视频| 大色综合| 亚洲一卡2卡3卡4卡乱码网站| 国产精品经典一卡久久久| 2020国产精品| 99国产精品久久久久久久成人热| 97se综合| WWW.操逼.COM| 亚洲精品久久久久久久蜜桃臀| 亚洲国产综合久久天堂| 91天天美女| 国产午夜福利专区综合| 国产精品国产拍高清AV| 综合干干干av久久久综合网| 国产久久天堂资源| 永久免费发布性爱网| 亚洲欧洲美腿丝袜| 91成人久久| 在线视频 亚洲精品| 日韩欧美一级特黄大片| 91色黑人少妇| 亚洲综合在线91| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 97色在线视频| 日韩乱伦AⅤ| 久久久久久久极品香蕉视频| 久久综合久色欧美综合狠狠 | 青青草在线视频美女| 免费岛国一级片| 99热啪啪| 本道在线| 欧美日韩亚洲一区二区在线观看| 青青草在线成人视频| 四虎av在线| 成人八戒网站| 青娱乐蜜桃臀AV色婷| 欧美色宗合| 亚洲欧洲综合av在线| 桃色六月天| 玖玖爱影院| 欧洲熟妇xxXx欧美老妇裸体 | 色99视频| 大香蕉手机在线| 日韩人妻播放| 欧美72网页| 国产毛片毛片4p懂色| 色五月综合网| 激情另类激情| 爱av免费| 蜜桃精品一区二区三区久在线| 天天插夜夜操| 青青草国产亚洲精品久久 | 男人午夜天堂| 综合色播| 亚洲资源吧| 女人双腿搬开让男人桶| 激情人妻另类| 精品人妻一区二区视频| 69视频福利导航| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 亚洲成人一二三区| 中文字幕99999| 国产呦精品系列在线观看| 亚洲欧美精品一区天堂久久| 精品视频久久| 天天插天天干| 天美传媒AV在线| 亚洲国产尤物yw在线观看| 神马午夜久久久| 正在播放国产精品一区| 亚洲人成色9999精品久久| 久草在线| 欧美一级三级| 舔足天天操天天射| 操操AV电影| 久久无码精品| 97超碰碰碰| 日比av无码| 国产精品麻豆成人AV艾秋| 97在线免费视频观看| 人人操av| 亚洲欧美首页| 殴美综合色88| 天天干天天燥| 熟妇国产免费一区| 国产激情av女片自拍| 好爽要喷了| 久久99亚洲精品久久99果| 欧美大战久久久伊人| 日韩 欧美 另类 人妻| 蜜臀av中文字幕| 国产亚洲精品自在线亚洲情侣| 天美传媒精品久久视频| 久久久久人妻| 粉嫩av在线| 国产精品网站www| 国产亚洲深夜激情| 69久久久久久久久久久久久| 国产呦精品一区二区三区下载| 色娱乐色呦呦夜夜夜夜av| 欧美人妻一区| 国产精品久久久亚洲第一牛牛_在线观看| 男人久久精品| 天天综合网一91网| 很很热性爱视频| 日本一区二区中文字幕久久| 亚洲性综合11| 狠狠躁天天躁日日躁| 丁香激情五月| 欧美性巨大╳╳╳╳╳高跟鞋| 亚洲伊人成综合成人网| 四虎免费视频| 超碰97最新人妻| 色五天伊人| 超碰在线91| 亚洲有码第一页| 国产精品亚洲美女久久久久| 欧美精品日韩久久久九| 69视频入口| 青草青青久久久久久国产| 国产熟女无套内射| 无码一区二区三区四区五区六区七区八区九区十区视频 | 337p大胆噜噜噜噜噜91Av| 国产97色在线| 极品少妇99| 黄色高清无码无码破解免费暗网| 我想要 啊 啊 啊| 国产欧美伊人| 台湾成人无码AV| 99热这里只有精品1| 九九热九九热| 久久久久久日韩| 天天操天天干美女网址导航| 亚洲天堂另类美腿| 国产人伦a片信息免费片| 国产精品久久久久久久久久二区三区| 九九热精品视频在线观看| 粉嫩av平台| 夫妻AV网站| 欧美色图私拍91| 熟女突然公开看18禁影片| 亚洲成a人v欧美综合天堂下载| 青青草字幕AV| 伊人成人中文字幕久久网| 国产精品原创巨作?v网站| 果冻传媒A片一二三区| 另类综合另类| 国产第25页在线观看| 国产精品视屏| 嗯嗯啊啊的视频| 丝袜内射| 欧美做爰无码A片视频| 99久久亚洲精品无码毛片潘甜甜| 欧美91久久久久| 欧美日韩操逼嗦吊| 丁香五六月啪啪| 天天舔日美女视频| 五十路二区在线| 麻豆人妻精品一区二区| 欧美亚洲小说| 九一国产精品| 超碰 另类 欧美 | 成人A片男人的天堂| 美国一区二区免费视频| 免费A片三p视频| 天天影视91看看| 亚洲最大的黄色电影网站。| 麻豆国产免费影片| 翔田千里一区二区三区奶水| 精品九区| 久久爽爽精品| 嗯嗯嗯啊啊啊在线免费观看| 久久一区二区三区入口| 亚洲欧洲激情卡通另类文学四射小说网站| 亚洲天堂美臀在线| 精彩视频日韩| 综合激情婷婷| 成人亚欧免费视频| 久久精品人人做人人看| 欧美性91| 亚洲s在线观看| 色噜噜婷婷| 亚洲αv一区二区三区| 四虎国产精品永久在线囯在线| 国产9熟妇视频网站| 日本新免费二区三区| 啊啊啊啊啊啊啊国| 日本 欧美 国产一区| 影音先锋视频在线| 88xx成人精品视频| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 99热综合| 秋霞曰韩R级| 国产久久av| 秋霞一级A片黄色视频| 人妻蜜桃臀| 日韩丝袜高跟制服在线观看| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 特级大荫道BBwBBwBBW| 丁香五月大香蕉| 手机看片1025| 福利伊人玖玖国产| 国产精品久久久久亚洲av| 澳门黄片一香蕉视频| 网友自拍第1页| 加勒比aⅴ| 亚洲 中文 欧美 日韩 在线| 亚洲区限制级 99| 韩日精品福利视频一区不卡在线免| 亚洲射综合网| juliaann精品熟女一区| 久久理论字幕视频| 熟女人妻av在线资源,黄色的资源| 激情国产乱伦Av| 两性色网| 影音先锋视频在线| 日韩无码黄色片| 亚洲乱伦图片视频| 精品中文字幕第一页| 中文字幕一区二区三区字幕| 精品久久久久久AV无码| 国产亚洲99久久精品熟| 99久久亚洲精品无码毛片潘甜甜| 一级一性爱免费视频| 99色网| 国产精品99999| 亚洲激情深爱文学小说网站| 成人精品水蜜桃久久久久久久| 青操影院| 超碰 欧美| 天堂射| 丝袜天堂网| 亚洲天堂久| 91无码人妻| 九九亚洲色在线观看| Aa东京男人的天堂| 天天爱综合网| 91亚.色| 人妻激情视频| 999久久久国产精品| 国产精品网址| 色综合国产在线观看| 国产二区三区免费视频| 影音先锋乱伦资源| 强被迫伦姧在线观看无码网站| 大肥女高潮bbwbbwhd视频| 香港澳门日本三级网站| 三级精品三级在线观看| 亚洲欧美自拍偷拍| 精品性爱一二三区| 青娱乐日韩无码| 狠狠狠狠狠狠| 99久久com免费视频′| 日韩AV一区二区三区三州三州| 精品然女一区二区| 色偷综合| 久久久久久久久9| 夜夜精品视频| 亚洲AV成人无码一二三久久| 精品中文字幕一区二区| 一级特黄aaa大片在线观看成人一级片在线观看 | 9997se| 日韩欧视频| 国产99999| Sekablack无码一区| 国产AAAAAABBBBB| 婷婷丁香五月天亚洲天堂网| 五月天久久久| 欧美最婬乱婬爆婬性视频| 天天综合网1| 天操天操夜操夜月月年年操操 | 亚洲天天影视色综合| 成人情色综合网| 亚洲网站一区二区在线| 国产野战露脸在线播放| 丁香婷婷啪啪| 亚洲。日韩。欧美| 亚洲天堂日本| 91情色在线| 中文字幕AV乱伦| 日韩午夜精品一区二区三区电影| 先锋精品av色鲁| 日韩美女久久一区二区三区| 久久亚洲天天做| 夜夜春夜夜操| 操b在线观看| 亚洲最大的综合性av| 亚洲丝袜色| 国产成人主播| 国产精品乱码久久久久久久久| 嗯嗯不要 视频| 香港澳门日本三级网站| 国产女人操逼视频| 99热综合在线| 欧美中字不卡| 操一操摸一摸| 国产精品无码在线| 99亚洲精品| 女生自91网站| 久久久91| 久久久久亚洲三级电影| 伊人久久大香大香线蕉中文| 五月婷婷五月天| 久久久久久久久久久999| 狠狠爱夜夜干| 国产区在线| 91在线超高颜值国产| 777AV电影| 亚洲av在线免费观看| 插入粉嫩少妇视频| 精品无码久久久久久久杏吧| 久久一级无码精品毛片6| 久久熟女人| 国产超碰欧美| 亚洲欧美人妻| 国产精品视频精品一二| 久久久久久91香蕉国产| 精品免费囯产一区二区三区| 欧美片第一页| 久久九九网| 中文字幕文字幕无码一区二区三区电影99| 青青青在线高清视频在线一二三四区 | 性色avv| 玖玖爱伊人玖玖爱| 欧美人黑A片无码免视费| 91精品女厕偷拍视频| 大香蕉九九| 亚洲凸凹超碰成人| 麻豆综合一区av| 婷婷六月色开| 日欧美色| 97精品一区二区三区免费| 黄片aaaaa一区| 超硑97精品| 好吊色青靑草| 久久久精品无码亚免费| 91红杏| 99视频自拍区| 青娱乐亚洲自拍| 国产自产91区13区| 熟女熟妇伦久久影院毛片一区二区| 国产精品午夜福利亚洲综合网| 欧美激情综合色综合啪啪五月| 欧美日韩国产高清在线一二三区| 亚洲AV无线| 国产又色又爽又舒服的三级视频| 亚洲日产专区| 操死我了嗯嗯嗯| juliaann欧美丝袜办公室| 欧美日韩制服| 日韩字幕一区| 亚洲精品毛片在线观看| 爆操无码| 禁止观看美女黄| 久久亚洲色图中文字幕| 久久三区四区| 日韩偷拍一区二区三区| AV在线性爱| 大奶啊啊好爽| 精品9区| 天堂成人网| 秋霞 色色| aaa亚无码专区| 国产精品久久久无码AV网站| 久久久久久夜夜夜夜夜| 国产男女边吃边摸视频网站| 韩国女主播青草在线| 屌妞视频久久久久久久久久久久| 东北女人高潮视频| 国产中文大片资源中文字幕| 中文字幕在线观看网页| 97超碰站| 色噜噜人妻丝袜a∨先锋影| 午夜欧美J进J出白浆流出久久久 | 国产精品96| 999岛国大片| 青草园大香蕉| 丰满岳乱妇一区二区三区| 激情终合网| 日本熟妇浓毛hdsex| 九九色综合| 超碰超碰超碰超碰的大鸡吧操黑丝袜| 天天做日日爱夜夜爽| 岛国不卡超碰护士AV在线播放| 国产亚洲精品美女久久久久久2021| 无码男人天堂| 岛国色情视频在线观看| 97超级欧美| 国产精品爽爽v| 狠狠2050在线观看| 又大又长又粗又爽又黄| 亚爽爽爽爽爽爽爽爽| 男女激烈网站最新| 成人熟女区| 国产欧美精选激情视频| 嗯嗯嗯啊啊啊干死我吧| 国产精品成人福利在线| 亚洲色入欧美| 伊人精品久久网站| 好舒服视频| 亚洲黄色网址视频| 日产123区精品免费观看| 操逼逼福利视频| 俺去啦自拍| 国产AV激情无码久久无码 | 亚洲资源一区| 屌逼麻豆| 91综合色噜噜| AV高清一区| 97超碰超碰| 丝袜熟女2P| 91丨人妻丨国产丨丝袜| 嗯阿好爽好紧| 日韩三A大片在线观看| 丝袜美腿射精91| 日本日皮视频逼| 色区97| 日本久久久久久久久| 乱抡国产91| 射欧美综合| 操www| 狠狠中文字幕| 久久草草亚洲蜜桃臀| 亚洲天堂日本| 强奸乱伦AV网址| 可以在线观看AV的网站| 国产精品欧美激在线| 国语对白露脸XXXXXX| 国产视频一区二区在线观看| 超碰在线人妻中文字幕| 欧美亚洲se91| 中文字幕 国产 精品| 国产精品网址| 超碰97欧美在线| 国产亚洲精品A在线观看下载| 欧美传媒一区| 激情五月婷| 日韩性爱一级片| AV男人天堂网| 久久久久成人蜜桃精品| 日韩强奸av| 国产精品在线一区二区| 六月婷婷五月丁香| 国产成人精品必看| 亚洲老司机123专区| 97av在线视频| 亚洲欧洲激情卡通另类文学四射小说网站 | 明星性猛交ⅹxxx乱大交| 97超碰巨乳| 婷婷丁香五月综合| 亚洲?V无码专区在线电影| 少妇丝袜在线观看AV| 色情综合| 欧美一级美片在线观看免费| 伊人在线大香蕉二。| 97超碰碰碰| 性色av蜜臀av色欲aV| 密臀成人视频久久久| 色情综合网| 收看日本人日bb| 欧美午夜熟妇黑人精品91| 五月激情综合网| 一区不卡在线观看av| 国产精品伦理|