久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

手寫一個輕量級C/C++內(nèi)存檢測工具:從原理到實(shí)戰(zhàn)

手寫一個輕量級C/C++內(nèi)存檢測工具:從原理到實(shí)戰(zhàn) 做嵌入式或者系統(tǒng)級開發(fā)的朋友大概率都有過被內(nèi)存問題折磨到抓狂的經(jīng)歷。程序跑著跑著內(nèi)存持續(xù)上漲、隨機(jī)出現(xiàn)段錯誤、某個模塊退出時(shí)崩潰……這類問題查起來極其磨人。Valgrind、AddressSanitizer 都是好工具但總有那么一些場景它們不太適用交叉編譯環(huán)境跑不了、性能開銷大到無法接受、或者你用的分配器根本不是 glibc 默認(rèn)的那個。于是我自己動手做了一個自定義內(nèi)存檢測工具在項(xiàng)目里實(shí)測下來幫我定位了不少隱藏很深的泄漏和越界問題今天就把這套思路完整分享出來。這個工具解決的核心問題是在不放慢程序太多、不依賴特殊運(yùn)行時(shí)的情況下給 C/C 項(xiàng)目加一層“內(nèi)存分配監(jiān)控網(wǎng)”。它能查泄漏、查越界寫、查重復(fù)釋放、查未初始化讀取而且最關(guān)鍵的是——它是可定制的。你可以按自己的項(xiàng)目場景調(diào)整檢測粒度、開關(guān)特定檢查項(xiàng)、對接自定義內(nèi)存池。適合被內(nèi)存問題困擾的 C/C 開發(fā)者、嵌入式工程師、游戲引擎/client 端開發(fā)者以及任何想搞懂“內(nèi)存檢測工具底層到底怎么工作”的人。1. 為什么我要自己寫一個內(nèi)存檢測工具1.1 現(xiàn)成工具的短板什么時(shí)候它們不夠用先把話說清楚Valgrind 和 AddressSanitizer 都是極其優(yōu)秀的工具我至今還在用它們。但它們有幾個在實(shí)際項(xiàng)目里很難繞開的限制交叉編譯平臺上跑不了。Valgrind 需要針對目標(biāo)架構(gòu)編譯它的運(yùn)行時(shí)很多嵌入式平臺根本編譯不過去。ASan 雖然支持交叉編譯但要在目標(biāo)板上跑起來對工具鏈版本要求很苛刻。性能開銷太高。Valgrind 平均會拖慢程序 10 到 50 倍在大型 GUI 程序或圖像處理項(xiàng)目里這種速度基本上沒法做實(shí)時(shí)操作。ASan 大概拖慢 2 倍左右但內(nèi)存占用會翻好幾倍。對自定義內(nèi)存分配器“無感”。如果你的項(xiàng)目用了內(nèi)存池、對象池、tlsf 這類自定義分配器Valgrind 和 ASan 默認(rèn)是看不到池內(nèi)部的分配和釋放行為的。你唯一能看到的是池一次性向系統(tǒng)申請了大塊內(nèi)存池內(nèi)部誰泄漏了、誰越界了它們管不著。團(tuán)隊(duì)環(huán)境不統(tǒng)一。開發(fā)機(jī)、CI 機(jī)器、客戶現(xiàn)場環(huán)境各不相同讓所有人都部署一套 Valgrind 不太現(xiàn)實(shí)。相比之下一個集成在項(xiàng)目內(nèi)部的、用宏和鏈接器包裝實(shí)現(xiàn)的自定義內(nèi)存檢測工具可以在任何平臺上編譯開銷可控還能專門針對自己的內(nèi)存池做定制檢測。它的定位不是替代 Valgrind而是填補(bǔ) Valgrind 在特定場景下覆蓋不到的空檔。1.2 自定義內(nèi)存檢測工具的定位輕量、可控、貼合場景我做的這個東西本質(zhì)上是一個“包裹層”。它包在系統(tǒng)分配器或你的自定義分配器外層每次分配和釋放都經(jīng)過它記賬然后在關(guān)鍵節(jié)點(diǎn)上做校驗(yàn)。設(shè)計(jì)目標(biāo)有三個輕量。不用在每次分配時(shí)做太重的操作記錄文件行號和簡要調(diào)用棧就夠了不追求像 Valgrind 那樣精確到每條指令。可控。通過編譯開關(guān)控制檢測項(xiàng)。比如發(fā)布版本可以直接退化成“僅統(tǒng)計(jì)內(nèi)存占用”不用做任何越界檢查。貼合場景。項(xiàng)目里用到的對象池、固定塊分配器、線程局部緩存都能掛接到這個框架下做統(tǒng)一記賬。這些目標(biāo)決定了后面所有的設(shè)計(jì)決策。2. 設(shè)計(jì)思路先想清楚怎么“接”進(jìn)項(xiàng)目2.1 核心原理攔截分配與釋放做簿記內(nèi)存檢測的根本原理說白了就一句話把每一次分配和釋放都記下來。你只要能在分配時(shí)知道“誰在哪個文件的哪一行分配了多少字節(jié)”在釋放時(shí)知道“這塊內(nèi)存是否真的合法”就能推導(dǎo)出很多結(jié)論。實(shí)現(xiàn)攔截有三種主流方案宏替換。在頭文件里#define malloc(size) my_malloc(size, __FILE__, __LINE__)。這是最簡單直接的方案能拿到文件和行號但有一個致命弱點(diǎn)只能攔截“包含這個頭文件”的代碼。第三方庫、同事的 .c 文件如果沒包含就直接繞過檢測了。鏈接器符號包裝。GCC/Clang 提供--wrapmalloc選項(xiàng)鏈接時(shí)把所有對malloc的調(diào)用都重定向到__wrap_malloc你在__wrap_malloc里記賬然后調(diào)__real_malloc干正事。這個方案能攔截整個程序里所有對 malloc 的調(diào)用不依賴頭文件包含非常干凈。dlsym(RTLD_NEXT) 運(yùn)行時(shí)劫持。運(yùn)行時(shí)通過動態(tài)鏈接器找到真正的 malloc 地址然后自己定義同名函數(shù)。方案很靈活但實(shí)現(xiàn)復(fù)雜還容易在非 glibc 平臺上踩坑。我最終的做法是宏替換 鏈接器包裝雙管齊下。項(xiàng)目自己的代碼用宏替換拿到文件行號第三方庫的分配行為用--wrap兜底。兩個方案互不沖突因?yàn)楹晏鎿Q后調(diào)的是my_malloc而鏈接器包裝只攔截符號名malloc。2.2 關(guān)鍵數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)在分配塊上“貼條”攔截到分配之后必須把簿記信息存下來。我的方案是在每個分配塊的前面加一個頭部結(jié)構(gòu)這就是所謂的“貼條”typedef struct mem_header { uint32_t magic; // 魔數(shù)用于識別合法頭部 size_t size; // 用戶請求的字節(jié)數(shù) const char *file; // 分配點(diǎn)文件名 int line; // 分配點(diǎn)行號 void *return_addr; // 調(diào)用點(diǎn)返回地址用于自定義調(diào)用棧 struct mem_header *next; // 全局分配鏈表的 next struct mem_header *prev; // 全局分配鏈表的 prev uint32_t head_guard; // 數(shù)據(jù)前的哨兵字節(jié) } mem_header; #define HEADER_GUARD_PATTERN 0xFDA4A5D5用戶拿到的指針是(char*)header sizeof(mem_header)。釋放檢查時(shí)用用戶指針減去頭部大小就能找到 header。head_guard和塊尾的tail_guard合起來用于越界檢測。這個鏈表的每個節(jié)點(diǎn)都記錄了分配信息而且是一個雙向鏈表方便在釋放時(shí) O(1) 摘除節(jié)點(diǎn)。實(shí)際項(xiàng)目里分配次數(shù)可能上百萬次如果從頭遍歷找節(jié)點(diǎn)一次釋放就是 O(n)整體會變成 O(n^2)程序基本跑不動。所以雙向鏈表是必須的。2.3 檢測能力設(shè)計(jì)泄漏、越界、重復(fù)釋放、統(tǒng)計(jì)一份工具要實(shí)用必須明確自己能輸出什么結(jié)論。我把檢測能力拆成四塊泄漏檢測退出時(shí)遍歷全局分配鏈表把未被釋放的節(jié)點(diǎn)按文件行號聚合并打印直接告訴你哪個文件哪一行泄漏了 N 次、總字節(jié)數(shù)多少。越界檢測分配時(shí)在用戶數(shù)據(jù)前后各放一段哨兵字節(jié)0xFD 模式釋放時(shí)逐一對比任何一個字節(jié)被改動就說明發(fā)生了越界寫。塊尾哨兵尤其容易踩到因?yàn)閿?shù)組越界寫是最常見的內(nèi)存錯誤。重復(fù)釋放檢測釋放時(shí)檢查 header 的 magic 是否還是有效值如果是 0 或別的說明這塊內(nèi)存已經(jīng)被釋放過。更嚴(yán)謹(jǐn)一點(diǎn)釋放后把 magic 改成0xDEADBEEF同時(shí)把用戶區(qū)填成 0xDD這樣再次釋放和“釋放后使用”都能被捕捉。內(nèi)存統(tǒng)計(jì)維護(hù)全局的已分配字節(jié)數(shù)、峰值、分配次數(shù)、釋放次數(shù)。這些數(shù)據(jù)對定位內(nèi)存持續(xù)增長問題非常關(guān)鍵——如果你發(fā)現(xiàn)分配次數(shù)和釋放次數(shù)之差在增長即使沒看到明顯的泄漏點(diǎn)也能確認(rèn)方向。3. 核心實(shí)現(xiàn)一步步把工具擼出來3.1 入口層鏈路包裝與宏定義先看頭文件memtrack.h的設(shè)計(jì)。這是用戶唯一需要 include 的頭文件#ifndef MEMTRACK_H #define MEMTRACK_H #include stddef.h #include stdint.h #ifdef MEMTRACK_ENABLED #define malloc(sz) mt_malloc(sz, __FILE__, __LINE__) #define calloc(n, sz) mt_calloc(n, sz, __FILE__, __LINE__) #define realloc(ptr, sz) mt_realloc(ptr, sz, __FILE__, __LINE__) #define free(ptr) mt_free(ptr) void *mt_malloc(size_t size, const char *file, int line); void *mt_calloc(size_t n, size_t size, const char *file, int line); void *mt_realloc(void *ptr, size_t size, const char *file, int line); void mt_free(void *ptr); #else // 禁用時(shí)直接調(diào)系統(tǒng)分配器零開銷 #define mt_malloc(sz, file, line) malloc(sz) #define mt_calloc(n, sz, file, line) calloc(n, sz) #define mt_realloc(ptr, sz, file, line) realloc(ptr, sz) #define mt_free(ptr) free(ptr) #endif #endif這是最經(jīng)典的外層接口。啟用宏替換后項(xiàng)目代碼里每個malloc(1024)都會被展開為mt_malloc(1024, main.cpp, 12)文件行號自然就帶上了。這里要注意宏替換只針對“看到這個頭文件”的翻譯單元所以必須在項(xiàng)目統(tǒng)一包含的頭文件里引入比如common.h。3.2 簿記實(shí)現(xiàn)的完整性接下來是memtrack.c里的核心實(shí)現(xiàn)。先看分配函數(shù)是怎么把 header 和用戶數(shù)據(jù)拼在一起的void *mt_malloc(size_t size, const char *file, int line) { // 在用戶請求大小之外多分配 header 和尾部哨兵的空間 size_t total sizeof(mem_header) size sizeof(uint32_t); mem_header *hdr (mem_header *)real_malloc(total); if (!hdr) return NULL; hdr-magic HEADER_MAGIC; hdr-size size; hdr-file file; hdr-line line; hdr-return_addr __builtin_return_address(0); hdr-head_guard HEADER_GUARD_PATTERN; hdr-next alloc_list; hdr-prev NULL; if (alloc_list) alloc_list-prev hdr; alloc_list hdr; // 頭哨兵之后的區(qū)域是用戶數(shù)據(jù) char *user_ptr (char *)(hdr 1); // 尾部哨兵 uint32_t *tail_guard (uint32_t *)(user_ptr size); *tail_guard HEADER_GUARD_PATTERN; // 新分配的內(nèi)存全部填 0xCD方便識別未初始化讀寫 memset(user_ptr, 0xCD, size); // 記錄統(tǒng)計(jì) total_allocated_bytes size; total_alloc_count; if (total_allocated_bytes peak_allocated_bytes) peak_allocated_bytes total_allocated_bytes; return user_ptr; }這里real_malloc是真正的系統(tǒng)分配器。在宏替換之外我會把real_malloc指向__real_malloc——如果你用-Wl,--wrapmalloc鏈接鏈接器會幫你自動提供__real_malloc這個符號如果沒啟用鏈接器包裝就把它定義為malloc的別名。兩種模式通過宏切換。有人可能會問為什么要多分配一個 header 空間而不是在維護(hù)一個全局哈希表記錄分配信息哈希表方案也能用但問題是釋放時(shí)要通過指針查到對應(yīng)的記錄哈希表 O(1) 查找沒問題但一旦指針被越界寫破壞成一個野值哈希表就直接查無記錄你無法確定到底哪里出了問題。而 header 方案下指針被破壞時(shí)你拿去減掉 header 大小拿到的可能是隨機(jī)值但至少magic校驗(yàn)?zāi)芰⒖谈嬖V你“這塊內(nèi)存的頭被踩了”這對于定位越界寫非常有幫助。3.3 釋放與校驗(yàn)把賬對平釋放時(shí)要做的事情明顯更多這是整個工具最核心的一段邏輯void mt_free(void *ptr) { if (!ptr) return; mem_header *hdr (mem_header *)((char *)ptr - sizeof(mem_header)); // 1. 檢查 head_guard 是否被蹂躪 if (hdr-head_guard ! HEADER_GUARD_PATTERN) { report_error(頭哨兵被破壞指針 %p 可能存在越界寫, ptr); return; // 不繼續(xù)釋放防止二次破壞 } // 2. 檢查 magic 判斷是否重復(fù)釋放 if (hdr-magic ! HEADER_MAGIC) { report_error(重復(fù)釋放或指針非法magic0x%08Xptr%p, hdr-magic, ptr); return; } // 3. 檢查 tail_guard uint32_t *tail_guard (uint32_t *)((char *)ptr hdr-size); if (*tail_guard ! HEADER_GUARD_PATTERN) { report_error(尾部哨兵被破壞: %s:%d 分配的大小為 %zu 字節(jié)寫入越界, hdr-file, hdr-line, hdr-size); } // 4. 將 magic 置為已釋放標(biāo)記并把用戶區(qū)填 0xDD hdr-magic FREED_MAGIC; memset(ptr, 0xDD, hdr-size); // 5. 從全局鏈表中摘除 if (hdr-prev) hdr-prev-next hdr-next; else alloc_list hdr-next; if (hdr-next) hdr-next-prev hdr-prev; // 6. 更新統(tǒng)計(jì) total_allocated_bytes - hdr-size; total_free_count; // 7. 真正釋放給系統(tǒng) real_free(hdr); }這段代碼里有幾個細(xì)節(jié)值得展開講。釋放后填 0xDD 而不是立即還給系統(tǒng)這是個刻意的設(shè)計(jì)。它能讓你在調(diào)試時(shí)一眼看出“這塊內(nèi)存已經(jīng)被釋放了”——0xDD 在調(diào)試器里顯示為“燙燙燙”取決于編碼和工具非常醒目。更重要的是如果釋放后代碼繼續(xù)用這個指針讀到的全是 0xDD很容易和正常數(shù)據(jù)區(qū)分。小概率的 head_guard 失效問題head_guard只能檢測“向后越界寫”。如果前一塊的內(nèi)存越界寫把 header 區(qū)域覆蓋了magic會變但你沒法知道是誰干的。這時(shí)候就要配合“分配塊日志”來查在報(bào)告里打印出鄰近分配的 file:line通常能找到線索。3.4 泄漏報(bào)告退出時(shí)清點(diǎn)現(xiàn)場泄漏報(bào)告在程序退出時(shí)觸發(fā)。我用atexit注冊一個回調(diào)函數(shù)在exit()時(shí)遍歷全局鏈表static void leak_report(void) { mem_header *it alloc_list; int leak_count 0; size_t leak_bytes 0; while (it) { leak_count; leak_bytes it-size; fprintf(stderr, [LEAK] %s:%d 泄漏 %zu 字節(jié) (ptr%p), 調(diào)用返回地址 %p\n, it-file ? it-file : ?, it-line, it-size, (char *)(it 1), it-return_addr); it it-next; } fprintf(stderr, [MEMTRACK] 泄漏塊總數(shù): %d, 總字節(jié)數(shù): %zu\n, leak_count, leak_bytes); }這里有個提升報(bào)告精度的技巧按 file:line 聚合統(tǒng)計(jì)。如果泄漏發(fā)生在循環(huán)里一次性可能打上千條記錄刷屏刷到看不到重點(diǎn)。實(shí)際項(xiàng)目中我用了一個哈希表把相同的 file:line 聚合起來最后只輸出按泄漏字節(jié)數(shù)倒序排序的前 30 行。這個改造對報(bào)告的可讀性提升非常大。3.5 對齊問題的處理不然崩到懷疑人生寫這個工具時(shí)最容易踩的一個大坑就是對齊。C/C 標(biāo)準(zhǔn)里malloc返回的指針必須滿足最嚴(yán)格的對齊要求通常是 16 字節(jié)對齊。如果你簡單地在用戶指針前面放一個mem_header然后返回(char*)hdr sizeof(mem_header)這個地址很可能不再是對齊的。一旦用戶在這個地址上存放double、__m128i這類需要嚴(yán)格對齊的類型程序會直接崩潰。解決辦法是在設(shè)計(jì) header 大小的時(shí)候就讓它成為 16 的整數(shù)倍或者在分配時(shí)額外多分配一個“對齊偏移量”再把用戶地址手動對齊到 16 字節(jié)邊界。簡化版的實(shí)現(xiàn)是#define ALIGNMENT 16 size_t total sizeof(mem_header) ALIGNMENT size sizeof(uint32_t); char *raw (char *)real_malloc(total); uintptr_t user_addr (uintptr_t)(raw sizeof(mem_header) ALIGNMENT) ~(ALIGNMENT - 1); mem_header *hdr (mem_header *)(user_addr - sizeof(mem_header));但這種做法需要額外字段記錄原始分配地址否則釋放時(shí)對齊不回來。最省心的方案還是“header 大小強(qiáng)制對齊”用__attribute__((aligned(16)))修飾結(jié)構(gòu)體保證sizeof(mem_header)是 16 的倍數(shù)然后直接返回hdr 1就是對齊的。這個做法我用了很久沒有再出過對齊崩的問題。4. 實(shí)操中的坑與排查技巧實(shí)錄4.1 性能開銷如何做到可接受的回落最初版本我每次分配都調(diào)用backtrace()采集完整調(diào)用棧結(jié)果程序直接慢了 30 倍完全沒法用。后來我只記錄__builtin_return_address(0)——也就是調(diào)用點(diǎn)上一層的返回地址配合地址轉(zhuǎn)符號表addr2line或者dladdr在報(bào)告階段再解析性能開銷降到了可接受范圍。實(shí)測下來啟用完整檢測后項(xiàng)目運(yùn)行速度大約是原來的 70% 到 80%。這在開發(fā)調(diào)試階段完全可以接受。如果嫌慢還有幾個開關(guān)可以關(guān)尾部哨兵檢查、釋放后填充、調(diào)用地址記錄。關(guān)掉后基本能恢復(fù)到接近原始速度。性能開銷主要來自三個地方全局鏈表的鎖競爭、哨兵字節(jié)的 memset 和對比、統(tǒng)計(jì)變量的原子操作。多線程場景下鎖競爭是最大瓶頸我在 4.3 節(jié)專門講。4.2 重入問題日志打印里藏著的死循環(huán)這是所有內(nèi)存檢測工具都會踩的經(jīng)典坑在 malloc/free 里調(diào)用 printf 打印日志而 printf 內(nèi)部又調(diào)用 malloc于是進(jìn)入無限遞歸。遇到這個問題的第一反應(yīng)是加一個“重入標(biāo)志”static __thread int in_hook 0; void mt_free(void *ptr) { if (in_hook) { // 重入直接放行不記賬 real_free(ptr); return; } in_hook 1; // ...正常檢測邏輯輸出日志 in_hook 0; }__thread保證了多線程下每個線程有自己的標(biāo)志不會互相干擾。這個小小的保護(hù)讓工具的穩(wěn)定性上了一大截。4.3 多線程競爭全局鏈表與鎖策略項(xiàng)目里開了 8 個線程同時(shí)分配內(nèi)存檢測工具的全局鏈表變成了一片戰(zhàn)場。用一把互斥鎖保護(hù)鏈表簡單但會導(dǎo)致線程間嚴(yán)重互斥性能下降明顯。我后來用了一個 64 槽位的哈希表把分配頭按地址 hash 到不同的桶每個桶一把獨(dú)立的小鎖。這樣不同線程分配的塊大概率落在不同桶里鎖爭用大幅下降。槽位數(shù)量怎么定的我參考了“一核一線程一槽位”的粗粒度思路64 個桶對 8 到 16 線程的項(xiàng)目來說足夠了。如果線程更多可以按線程數(shù) * 4調(diào)整桶數(shù)量。更精細(xì)的方案是用線程局部存儲加無鎖鏈表每個線程只操作自己的分配記錄最后匯總。這個實(shí)現(xiàn)復(fù)雜度高不少個人小工具里做不做取決于項(xiàng)目規(guī)模。對我來說哈希桶鎖已經(jīng)解決了實(shí)際問題。4.4 誤報(bào)排查哪些“泄漏”不是真泄漏用這個工具跑了幾天后我開始收到一些“看起來像泄漏”的報(bào)告。排查后發(fā)現(xiàn)有幾類經(jīng)典情況長期存活的單例對象。比如全局配置管理器在程序啟動時(shí) new 一次直到退出才釋放。這類對象嚴(yán)格來說沒被釋放但不會造成內(nèi)存增長不算真泄漏。處理辦法是維護(hù)一個白名單文件把已知的合法長生命周期分配排除掉。靜態(tài)初始化/反初始化順序問題。某些平臺在atexit回調(diào)執(zhí)行時(shí)某些全局對象已經(jīng)被銷毀此時(shí)訪問它的成員會導(dǎo)致崩潰。我的leak_report里有一個小技巧報(bào)告階段通過is_address_freed()檢查文件名字符串指針是否指向已釋放內(nèi)存如果已經(jīng)釋放就打印freed而不是直接訪問。第三方庫內(nèi)部緩存。有些庫會在退出時(shí)保留線程局部緩存以加速下一次調(diào)用。這些緩存必須被特殊標(biāo)記否則會出現(xiàn)“看起來”泄漏但實(shí)際無害的報(bào)表。我在接口里加了一個mt_mark_global(void *ptr)函數(shù)允許外部把一塊分配標(biāo)記為“全局存活”從泄漏報(bào)告里排除。遇到這些“假陽性”關(guān)鍵是先搞清楚泄漏報(bào)告里的分配點(diǎn)是哪里、關(guān)聯(lián)的對象生命周期是怎樣的。不要急著改代碼先加日志確認(rèn)。5. 擴(kuò)展實(shí)戰(zhàn)把檢測工具接到自定義內(nèi)存池上5.1 固定塊分配器為什么標(biāo)準(zhǔn)工具管不到前面提過Valgrind 和 ASan 對自定義內(nèi)存池基本無能為力。但實(shí)際項(xiàng)目中我最需要檢測的恰恰是自己寫的固定塊分配器。這種分配器一般持有一大塊連續(xù)內(nèi)存切成固定大小的塊用空閑鏈表串起來。它向用戶返回的指針來自池內(nèi)不是系統(tǒng)分配器返回的所以系統(tǒng)級工具完全感知不到。我給內(nèi)存池加了一個可選檢測層在池對象里維護(hù)一個位圖1 表示該塊已分配0 表示空閑。每次pool_alloc分配一塊時(shí)對應(yīng)位圖位置置 1每次pool_free釋放時(shí)置 0池析構(gòu)時(shí)掃描位圖凡是仍為 1 的塊就是泄漏塊。這個位圖方案的優(yōu)點(diǎn)是開銷極小每次分配/釋放只需要修改一個 bitO(1) 時(shí)間。對池內(nèi)固定塊的數(shù)量沒有硬性限制本質(zhì)上就是用空間換檢測能力。5.2 把檢測數(shù)據(jù)導(dǎo)出成可視化報(bào)表工具本身只輸出文本日志但項(xiàng)目組有些人就喜歡看圖。我給工具加了一個mt_write_report(FILE *fp)接口把統(tǒng)計(jì)數(shù)據(jù)和聚合泄漏數(shù)據(jù)用 CSV 格式導(dǎo)出。然后可以直接在 Excel 里透視圖或者用 Python/Pandas 腳本畫一張“泄漏熱點(diǎn)圖”——每個文件對應(yīng)一個長條條形高度表示泄漏字節(jié)數(shù)顏色表示泄漏塊數(shù)量。這些圖表在周會上匯報(bào)時(shí)非常直觀能瞬間說服老板“確實(shí)該修內(nèi)存問題了”。CSV 導(dǎo)出格式大致是file,line,leak_count,leak_bytes,total_alloc_count,total_free_count main.c,42,3,1536,1010,1007 network.c,118,1,4096,512,511 texture.c,7,12,24576,1200,1188注意不要把 CSV 的列頭寫得太復(fù)雜保持機(jī)器可讀就好。真要做可視化時(shí)間應(yīng)該花在“從日志里定位問題”上而不是折騰圖表庫。5.3 與項(xiàng)目框架集成的最后一步工具集成到 CMake 項(xiàng)目里非常簡單option(MEMTRACK_ENABLE Enable custom memory tracking OFF) if(MEMTRACK_ENABLE) target_compile_definitions(app PRIVATE MEMTRACK_ENABLED) target_compile_options(app PRIVATE -Wl,--wrapmalloc -Wl,--wrapfree -Wl,--wraprealloc -Wl,--wrapcalloc) endif() target_sources(app PRIVATE memtrack.c)用-Wl,--wrap注意一個細(xì)節(jié)宏替換已經(jīng)把代碼里的malloc變成了mt_malloc但第三方庫內(nèi)部對 malloc 的調(diào)用仍然指向原始符號。--wrap只影響原始符號不影響宏替換后的mt_malloc調(diào)用鏈。也就是說兩套機(jī)制完美互補(bǔ)不會互相打架。6. 工具能力邊界與實(shí)用的建議這個工具并不是萬能的說清楚它的邊界可以讓后來者少走彎路。它查不了“未初始化讀取”因?yàn)閮?nèi)存在分配時(shí)被填了 0xCD但 C 類的構(gòu)造函數(shù)可能把這個值覆蓋掉了檢測不了“讀到了舊數(shù)據(jù)”。它也不擅長查“并發(fā)數(shù)據(jù)競爭”——那是 ThreadSanitizer 的職責(zé)。它最擅長的是泄漏、越界寫、重復(fù)釋放、釋放后使用這些內(nèi)存錯誤里最折磨人的那幾類。根據(jù)我自己的使用經(jīng)驗(yàn)給準(zhǔn)備上手的人幾個建議別一上來就開全量檢測。先開“僅統(tǒng)計(jì) 泄漏報(bào)告”確認(rèn)程序能正常跑完再逐步打開越界檢查、釋放后填充這些重開關(guān)。在 CI 跑測試時(shí)用全量檢查模式跑單元測試和集成測試把報(bào)表存檔。連續(xù)對比幾天的報(bào)表能很早就發(fā)現(xiàn)內(nèi)存回歸。報(bào)告輸出的日志要有明確的級別。我一般按“錯誤級別”輸出哨兵被破壞是 ERROR泄漏是 WARNING統(tǒng)計(jì)信息是 INFO。這樣在日志系統(tǒng)里可以快速過濾。如果在某個版本里引入這個工具后程序反而崩了先關(guān)掉釋放后填充大概率是釋放后仍有讀取操作工具剛好把這個“臟數(shù)據(jù)”暴露出來了。這是工具在幫你發(fā)現(xiàn)問題不是工具本身的問題。最初把這個工具集成到項(xiàng)目里時(shí)報(bào)表輸出是純文本的全靠肉眼看。后來發(fā)現(xiàn)真正好用的檢測工具不是輸出得多而是輸出得“準(zhǔn)”。當(dāng)報(bào)告按文件行號聚合、按泄漏字節(jié)排序、過濾白名單之后每天打開報(bào)告掃一眼就能知道今天有沒有引入新的內(nèi)存問題。這種“一眼看到變化”的體驗(yàn)是 Valgrind 和 ASan 都沒法輕易給的——因?yàn)樗鼈冸x你的項(xiàng)目太遠(yuǎn)了而自定義工具就住在你的代碼里。最后再分享一個讓我收獲很大的小技巧工具開發(fā)出來后我故意在一個測試文件里寫了幾處 bug——一個越界寫、一個泄漏、一個重復(fù)釋放。然后讓人去查看工具能不能準(zhǔn)確報(bào)出來。這個“自測用例”非常有用每次給工具加新功能我都能快速回歸一遍確認(rèn)沒有把之前的檢測能力弄壞。內(nèi)存檢測工具本身也是軟件它也需要測試。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美色97| 凸凹视频在线观看| 久久在线观看免费视频| 国产美女销魂在线观看不卡| 成人性爱美曰韩| 亚洲。天堂。日本在线观看| 偷拍视频青青草在线视频| 欧美色人| 囯产乱伦一区二区三女 | 天天日天天色| 色穴精品| 激情黄色五月天| 精品女同一区二区三区| 日本伦乱九九九综合| 五月天久久综合网| 97综合在线| 久都青青视频| 色综合20p| 中文字幕国产| 天天射天天| 综合免费无码中文| 人妻激情另类| 91N综合网在线| 久久久无码精品人妻二区| 日本精品五区| 强奸乱伦大香蕉网| 五十路熟女工口| 拍拍拍拍大尺度黄色三级片拍拍拍拍拍照| 久久 精品| 强奸乱伦免费网站| 亚洲国产日韩欧美熟妇在线| 青青草原综合久久大伊人精品| 久久草视频污视频| 日日夜夜免费| 亚洲性爱无码乱伦av| 色爱综合网| 无码91| 久久精品99| 熟女人妻av在线资源,黄色的资源| 久久一二三四不卡| se..亚洲欧美| 国产AV久久野战精品| 丁香激情五月天| 色哟哟1区2区| 影音先锋每日最新资源在线观看 | 天美麻豆一区二区三区| 亚洲无线码欧洲精品区别| 色婷婷导航| 亚av顶级裸体一区二区三区四区五区 | 亚洲国产精品久久久久久久久久| 国产精品视频播放| 葡萄牙性视频一二区| 99在线免费公开视频| 99热99色| 日本女人久久久| 国产福利小视频高清在线观看| 超碰久久性爱| 久久精品无码专区| 高清在线偷拍自拍视频| 色五月第四色| 自拍偷拍亚洲熟女妇人精品| 欧美日韩大陆黑人少妇99| 色臀AV| 色牛牛AV| surenchaopeng| 国产 日韩 欧美一区| 亚洲aV性爱| 伊蕉97蜜桃97狠狠综合干| 色姑娘综合网| 久久9久| 熟女字幕| 99爱爱| 亚洲欧洲日韩天堂av| 香蕉99秘 精品一区丁香| 精品人妻视频入口| 亚洲av无码国产精品字幕| 亚洲综合码| 性色av蜜臀av色欲aV| 亚洲日韩视频二区| 在线观看高清AV| 久久亚洲欧美中文字幕国语| 人妻 丝袜美腿 中文字幕| 色色网91| 日本一级婬片试看三分钟| 懂色天天爱天天日天天射天天澡| 顶级丝袜熟女一区二区三区| 中文操嬖片。| 91啪啪| 亚洲五月丁香花狠狠干一区二区三区| 淮穴色AV| 操穴国产| 日韩情色AV| 日产成人久久| 啊啊啊啊,啊啊好多水| 蜜桃网熟妇| 少妇的嫩逼图片| 日韩超碰97| 91亚州| 亚洲网站一区二区在线| 9 9无尺码天堂网| 操淫穴亚洲五月丁香| 丰满人妻一区| 精品久久久久综合无码| 操国产逼| 福利在线观看一区二区| 嗯啊不要在线观看嗯啊| 97色色色综合网站| 九九九九97| 超碰在线在公开超碰在线在公开| 国产精品不卡高清在线观看| 在线a v| 日韩不卡a级视频专区| 五月天大香蕉| 97色论| 日本一久是| 欧美在线|亚洲| 999国产精品999久久久久久| 在线视频免费观看午夜| 日本色色色视频| 国产亚洲精品自在线亚洲情侣| 亚洲天堂,男人| 大香蕉在线视频15| 九九自拍伦理| 啊啊啊水好多| 亚洲av无码国产精品字幕| av强奸乱轮| 日韩人妻无码不卡网站| 一二三四视频中文字幕在线看| 亚洲一区二区三区欧美日韩| 综合色播| 五月天综合网| 午夜传煤十二区精品| 一区二区三区美女超清| 亚洲AV成人在线| 热天堂一区二区| A啊啊在线观看| 尤物AV免费网站| 欧美视频一| 精品一区二区人妖| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 防屏蔽在线视频| 日韩78m视频| 东京男人天堂| 人人弄人人摸| 99综合| 制服少妇欧美| 国产成人91一区二区三区| 国产一级特黄大片处女| 91无码中出人妻视频| 婷婷另类小说| 国产精品。| 亚洲第一免费视频| 欧美伊人电影| 成人精品无码| 国产激情在线观看| 激情露脸爱| 麻豆熟妇乱妇熟色A片在线看| 精品国产Av无码久久久亚洲| 亚洲天堂综合AV| 很很很很操| 日本不卡一区| 色色婷婷五月| 国产精品国产| 色天使亚洲综合在线观看| 色婷婷五月综合激情中文字幕| 美国久久一二三四| 天天综合网91| 欧美性爱五月天| 五十路人妻在线| 12一15性XXXX粉嫩国产| 激情综合五月| 色哟哟av| 大伊香蕉在线视频免费| 五月婷婷hd| 国产毛片片精品天天看视频| 日韩免费人妻色情网站| 中文字幕色AV| 国产AV毛片| 欧美美女在线高潮999| 丰满少妇一区二区三区免费看| 中文字幕精品资源在线| 在线情色电影 91大| 人人么人人操| 人妻少妇蜜桃视频欧美一区| 天天天肏屄肏屄肏屄欧美欧美| 强奸乱伦Av网| 91久久久老司机| 综合伊人激情| 国产男女边吃边摸视频网站| 国产怡红院| 欧美不在线| 乱色视频中文字幕| 久射吧| 大香蕉久| 96国产污污污丝袜| 亚洲色系另类精品国产| 天天天天天天天天综合| 精品国产91av一区二区三区| 天天影视射综合网| 岛国激情视频在线观看| 好看的91视频| 天天躁日日躁成人字幕aⅴ| 青青青操| 伊人黄色片| 久久蜜色情在线视频xxx免费观看| 色哟哟 日韩精品| 神马久久久久眼| 一区二区高清视频| 麻豆 欧美 日韩| 五月天亚洲色图| 大香蕉碰| 午夜福利1区2区3区| 69人妻精品丰满熟女区| 日日操丁香五月天| 爱丝福利| 欧美一级做a爰片免费视频| 久久天堂网| 思思性爱| 国产区在线| 啪啪综合网| 91亚洲人| 综合国产97| 乱伦日本中文自拍| 亚洲另类久操网| 日韩福利综合一区| 麻豆精品天美| 干B网| 久久女人一区二区三区| 一级毛片电影免费看| 日少妇亚洲版| 黄色高清无码无码破解免费暗网| 蜜臀AV一区二区三区| 99在线免费视频| 97国产超碰| 天美一二三在线观看Av| 亚洲天堂7777| 外国免费性情大片| 国产欧美一区二区| 性在久久久久久| 久久国产精品视频| 久久免费老司机精品| 无码久久国产| 性交一区二区在线播放| 欧美性爱另类综合| 97免费视频在线| 超碰97资源大奶| xxxx网站亚洲精品| 精品国产乱码久久久久久久| 欧洲射精91| 人人操肉肉| 久久久久久少妇| 91一起操| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 青青青草伊人精品| 亚洲五月天激情| 超碰免费人妻人人| 中出20p| 6080yy午夜理论三级一区二区三区无码| 久久二| 青青草色情网站视频| 91三级理论片播放器| 麻豆尤物视频网| 久久色激情一区二区三区| 中亚黄色三级大片| 操逼操逼逼操操逼91| 国产精品久久久久综合| 香蕉国产97| 老熟女熟妇| 国产多人在线观看视频| 9久9久| 99re6国产精品99re在线| 久久午夜鲁丝片| 国产天天噜一噜久久久| 色婷婷aV一区二区三区麻豆综合| 亚欧高清在线| 试看日韩黄片| 一二三四区操操Av| 超碰人妻久久人妻中文97| 色官网在线| 人人人摸人人| 淫淫综合网| 色欲色香天天天综合网www-亚洲综合国| 超碰在线看| 一区操逼| 国产97在线 | 亚洲| 成人十八禁日韩欧美一二三| 五月天丁香欧洲日韩| 黄色操人| 欧美精品庄| 亚洲有码第一页| 久久久精品日本一道| 日韩探花精品在线视频| 激情熟女12P| 蜜屁av| 九九成人精品| 亚洲丝袜色| 日本五十路熟女一区二区| 青草一区二区| 亚洲熟女av中文字幕| 天天综合网日韩7799| 91殴美| 青青草玖玖爱| 诱惑人妻欧美一区在线播放| AV天天在线观看| 无码 有码 国产18p| 中文字幕日韩电影人妻| 国色综合天| 国产99999久久精品| 天天综合网在线| 91春色| 快播久久人人aV| 好吊色综合| 亚洲日韩国产欧美综合v| 狠狠爱AV| 思思热在线cao| 麻豆国产第一| 国产精品经典一卡久久久| 色色色999| 欧亚性爱啪啪| 久久毛卡| 国产精品亚洲天堂网址| 日韩欧美大片免费高清啪啪| 天天日天天操天天射河南省| 婷婷五月天久久久| 色欧美色交综合| 清清草影| 韩国三级三级BD在线| 伊人综合色网| 天美传媒一二三区永久网站| 91狠狠综合久久| 国产精品久久久久久久毛片1| 羞涩视频| 午夜爽爽爽| 美女黄色91| 性欧美| 亚洲少妇免费视频\| 97超碰亚洲| 色婷婷成人综合| 强奸少妇AV导航网| 98色网| 丁香五月天堂| 欧美亚洲丝袜人妻制服中文99| 精品欧美日韩在线观看| 久久精品中文字幕女同| 国产不卡的视频| 国偷自 一区二区| 日本顶级天天操狠狠操夜夜操中文字幕| 日韩钢筋无码高清啾啾啾| 东京太热久久久| 久久五月份| 97人人草| 欧美一级三级| 性站 | 婷婷五月丁香五月| 韩国三级一线观看久| 日韩在线国产字幕| 欧美Ⅴ性爱| 干我久操| 免费一级a毛片久久久久久鸭绿欲| 中文字幕乱在线伦视频中文字幕乱码在线 | 女人久久久| 亚洲一级黄色毛片| 国产日韩区| 风流老熟女一区二区三区l| 黄网色一区二区三区四区精品| 国产成人+综合亚洲+天堂| 狠狠综合网| 国产欧美一区二区| 97久久久精品| 欧美性第1页| 国产一区二区在线播放| www.久久制服糖| 国产午夜激片Av毛片不卡| 亚洲av无码成人精品国产| 婷婷六月天| 精品人妻夜夜草| 永久免费发布性爱网| 国产亚洲国产超碰| 精品久久99| 亚洲熟女乱综合一区二区三区 | 清清一区二区三区四区不卡视频| 蜜臀久久99精品| 自拍第一页| 欧美资源| 99性爱在线观看| 色色婷婷五月| 伊人久久大香线综合无码| 男人的天堂日韩| 精品亚洲天堂| 日韩色欲久久一二三四区| 丁香九月激情啪| 九九热九九热| 国产精品一区二区后入| 亚欧成人一级片在线播放| 日韩福利综合一区| 91chinese在线| 91精品人妻一区二区三区蜜桃臀| 久久精品99| 综合夜夜| 日韩午夜精品一区二区三区电影| 91在线欧色| 龙兴卡官方查询| 91bbb| 亚洲av影音先锋| 国产后入精品| 青青青草伊人精品| 2018天天日天天日| 国产免费一区二区在线A片视频| 亚洲 欧美 另类 综合 偷拍| 国产国产亚洲一二三久久| 无码人妻一区二区三区色欲aⅴ| 亚洲第一成人影院色播| 青青草黑寡妇男人天堂| 日韩无码第3页| 操逼片国产| 久久久久精| 任你爽视频| 色九九九九| 综合久久2017| 极品美女福利在线观看| 天天综合影院91| 99热这里都是精品| 国产黄色 A 片免费看| 四虎影视在线| 蜜臀Av一区二区三区| 香蕉热人人精品| 天天流夜夜操| 激情文学亚洲| 日韩 欧美 视频 在线 一区| 91色图片| 男人的天堂2019| 日韩黄色成人性爱| 一区二区三区成人| 日韩无码视频黄色| 欧美性猛交美女自慰91| 久九九九九九九九热| 不卡一区二区日本视频| 91红杏| 干少妇视频| 欧洲熟妇xxXx欧美老妇裸体| 欧美综合网1| 亚洲欧洲av影音| 吻戏激情性巴克| 国产精品白丝AV| 精品国产人成在线| 91久久堂| 久久国产熟女影院| a男人的天堂| 丰满人妻一区二区三区| 五月天激情四射| 免费国产| 亚洲综合中文字幕有码| 九九九九九九九九九九九九九九九女| 久久精品人人做人人看| xxx亚洲午夜天堂| 欧美亚洲小说| 精品女人999| 亚洲视频精选| 盗摄 精品 另类 一区| 男女啊啊啊啊啊| 久操热线| 中文字幕激情小说| 激情综合婷婷| 18+91网站| 人成午夜免费大片| 性高潮久久久| 91精品久久综合熟女| 91网站18+| 综合少妇网| 日韩另类| 青草地一本线一区二区三区| 五月丁香啪啪啪| 南澳成人一级片在线播放| 青青草天天亲夜夜操网| 日本免费二区三区| 婷婷丁香熟妇综合网| 国产自偷| 狠狠操狠狠插| 人妻欧美| 国产av高清版| 激情黄色片在线观看| 天天天肏屄欧美| 免费观看网黄| 国产精品在线网站| 亚洲欧洲精品视频发布| 日韩av电影网站| 天天天天天天天天天天干美女 | 欧美伊人久久综合网| 97香蕉人人乳| 欧美日韩亚洲一区二区在线观看| av 模特一区了| 国产九九九九九九九九| 亚洲中文字幕av | 亚洲人成网www| 亚洲另类天堂| 亚洲综合113页| 91看黄片| 亚洲男人的天堂网| 欧美日韩岛国大片在线观看| 99999国产| 电影69乱码96| 日本一区视频在线观看| 国产精品午夜福利视频| 毛片电影一区二区三区| 亚欧成人一级片在线播放| 精彩视频日韩| 精品久久久久av影院| 日韩欧美中文字亚洲慕| 女同在线视频一区| 91久久免费视频互動交流| 欧美久久人妻少妇一区二区| 自拍偷拍2025在线观看| 中文字幕三四五区| 99热在线不卡| 69精品久久久久中文字幕| 亚洲高清91| 夜夜操夜夜爽夜夜高潮| 中文字幕精品日韩中文字幕| 强乱老妇中文字幕| 啊啊啊啊啊操我视频| 亚洲第一精品在线视频 | 97久久精品不卡| 久久精彩免费视频| 中字幕人妻一区二区三区| 色偷偷男人的天堂麻豆| 五月丁香久久| 亚洲无码超碰免费| 亚洲人精品久久久| 91亚洲不卡一区| 国产欧美成人第一页在线观看| 国产久9| 亚洲精品91| 日语五十路和六十路亚洲国产精品| 丰满的三级少妇欧美久久久| 好色综合| 天天操天天日青青草超碰av| 熟妇熟女视频一区二区三区| 超碰国产精品久| 中文字幕1区2区| 抽查国产福利主播| 日本肉体xxxx裸交| 超碰日韩人妻| 亚洲丝袜二区在线| 欧美爆操91| 久久草在线综合视频| 男女性无套 免费九一| 香蕉色网| 夜夜狼人妻| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 妇女视频网站| www.色五月| 欧美激情另类一区二区| 色噜噜狠狠色综无码久久合欧美| 综合九九| 色91综合网| 97人人射| 亚欧日韩成人| 欧美性爽xyxOOOO| 天天综合欧美黑人| 日日夜夜噜| 日韩免费人妻色情网站| 91操人| 日韩av性爱在线播放| 18精品一二区| 亚洲欧美日韩电影网站一区 | 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 人妻啊啊人妻啊| 天美传媒AV国产在线| 91免费看一区二区三区| 国内97干免费看| 小草精彩毛片| 你懂的在线观看区国产| 超碰在线免费一区二区三区| 人妻内射一区二区在线视频| 操死我干死我| 日韩人妻资源在线看| 强奸乱伦日韩AV| 亚洲精品一区二区精品| 女色综合| 在线天堂资源亚洲| 福利五区| 五月婷婷丁香六月| 91亚洲网| 免费啪啪啪网站18岁| 另类图片五月天| 国产免费一区在线观看| av毛片aaaaa免费看| 天天躁日日躁狠狠躁| 久久中文字幕女同性恋一区| 试看福利| 久久久av爱| 青青爽| 婷婷在线视频| 99综合视频| 亚洲精品乱码久久久久久蜜桃麻豆| 91深夜夜| 国产成人精品必看| a片 xxxx受爽视频| 欧美日韩传媒| 人人操人人肉久久精品| 精品国产乱码久久久久久久| 亚洲影视第一页| 日日噜噜夜夜久久亚洲一区二区| 神马久久久久久久久久| 色天使大香蕉| 中文字幕加勒比海高清无码免费视频| 国产av高清版| 校园春色制服丝袜中文字亚洲| 日日夜夜狠狠| 91久久久久久| 开心婷婷五月| 95人妻爽爽人人做人人澡 | 97超碰色五月| 一区二区偷拍拍视频| 玖玖在线视频| 久久精彩视频| 一区二区你上我| 日本在线一二 | 青青草原人妻| 丰满人妻一区二区三区在线| 偷拍欧美激情| 人妻偷拍一区二区三区| 日韩福利综合一区| 一个人免费视频观看在线WWW| 69久久| 日韩精品第3页| 97视频在| a片亚洲一本通视频| 91精品又粗又猛又爽| 午夜AV污污污| 福利天天都操| julia国产在线| 亚洲女人91| 五月天亚洲色图| 国产精品不卡高清在线观看| 伊人网免费视频| 亚洲成人性爱网站在线播放| 国产人妖视频一区在线观看| 激情啪啪拍91| 95人妻爽爽人人做人人澡 | 亚洲综合色在线| 性欧美| 九九草| а√天堂资源官网在线资源| 久久久久人妻二区精品叶可怜| 色噜噜精品一区二区三| 久久这里只精品99re66图| 色色色网站| 精品一区96| 欧美夜色| 亚洲日韩资源| 婷婷综合伊人一区| 超碰色男人操熟女| 久草福利在线资源站| 色婷婷影院| 97天堂| 玖玖爱伊人玖玖爱| 五月天婷婷社区| 毛片久久| AV不卡在线| 色婷婷99| 欧亚第一综合网| 国产欧美日产一区二区三区 - 国产欧美日 | 国内一级精品| 亚洲一区二区三区在线激情| 国产欧美精选自拍一区| 国产精品亚洲免费| 日本不卡卡一区| 久久99草| 香蕉精品二区二区| 蜜乳中文字幕a在线| 日本高清_区二区三区| 九九久久精品| 99re8超碰| 超碰在线综合97| 日本一级真人黄色性爱视频| 国产AV精久久| 大香樵伊人网| 国产精品天干天干综合网麻豆| 青青草原香蕉日本Ap| 9色国产精品一区粉嫩 | 久久综合久色欧美综合狠狠| 欧美色性情| 久久综合国产精品国产| 精品久久人妻成人网| 怡红院怡春院| 91亚洲丝袜熟女| 超碰97人妻免费在线| 在线观看日韩av不卡| 国产精品久久发布| 97欧美色| 久久性生大片免费观看性| 人妻在线视频| 色婷婷综合久久中文字幕雪峰| 日本 情色 1区2区3区| 国产美女在线精品免费看| 国产精点久久久成人| 96精品久久久久中文字幕| 福利天天都操| 国产乱色国产精品免费视| 五月天开心网| 在线亚洲丝袜视频网站| 国产精品九九九| 亚洲中文一区二区三区视频| 99re9这里只有精品| 青草精品视频一日本久久久久网站| 久久久久亚洲三级电影| 裸体美女免费看网站青草| 亚州欧美总和| 日本性爱视频一级| 色婷婷影院| 囯产精品强| 强被迫伦姧在线观看无码网站| 婷婷91| 国内97干免费看| 国产真实子伦对白| 久草五月| 亚洲清纯唯美| 亚洲成人性爱网站在线播放| 97超碰jingpin| 欧美成人贴图| 欧美顶级黄色大片免费| 超碰97色色| 欧美性第一页| 国产黄片在线免费观看| 91黑丝在线播放| 男人的天堂2019| 欧美 亚洲精品首页| 一区二区三| 激情专区综合| 99色热| 国产久久男人天堂| Av手机版天堂网| 亚卅熟女乱色| 天天综合网国产| 人妻第一页| 极品白嫩美女白浆成人福利在线看| 日本精品性生活久久久| 视频国产成人精品日本亚洲18| 天天爽天天爽| 97在线免费公开视频| 久久久国产亚洲精品系列| 久久有碼| 免费视频在线一区二区不卡| 精精夜夜| 97超碰欧美中文字幕| 久久久久久久久久8888| 狠狠操狠狠燥| 成人乱码一区二区三少妇| 国产人妻一区二区三区欧美毛片| 国产午夜福利专区综合| 国产无遮挡| a级免费在线观看| 欧美日韩夜夜| 激情小说亚洲| 国产蜜臀精品一区免费尤物| 97超碰日韩| 91oumei| 日韩熟女精一区二区三区不卡| 日本高清久久| 99操逼| 婷婷五月天基地| 天天干夜夜鈤| 99在线免费视频| 96麻豆精品一区二区三区| 99爱精品| 97精品网| 亚州成人A√| 100啪啪视频大全| 久久久久久久78| 国产隔壁老王影院在线| 日本一天色道久久久精品视频| 免费久久一级毛片大黄| 伊人玖玖网| 中文字幕日韩人妻视频一区二区三区 | 中韩中文字幕在线观看| 九月色婷婷| 97爱亚洲| AV一二区| 日日日日做夜夜夜夜无码| 亚洲熟久久| 一二视频神马久久传媒| 中文字幕成人理论在线| 人妻少妇精品无码专区二区密桃| 日本人妻A片成人免费看片| 台湾佬大香蕉| 中文字幕二区日韩天堂| 国产1024在线播放| 激情终合网| 久久av成人无码免费| 人妻喷水| 嗯啊不要在线观看嗯啊| 日本孕妇一区二区视频操逼免费看| 亚洲色图a| 天天做日日做| 色九九九九九九| 天天弄天天操| 日韩精品资源专区二区| 99久在线精品99re8a| 亚洲 暴爽 AV人人爽日日碰| 欧美刺激色黄片免费看| 91丨九色丨国产丨人妻在线| 人人操人人摸超碰| 亚洲亚洲亚洲天堂天堂| 国产成人天堂| 色婷婷综合久久久久中文一区二区| 亚洲日韩XXX| 少妇滛荡视频| 97在线看| 中文字幕在线免费观看2| 欧美色综合网| 无码 黑人一区二区三区| 久久宗合亚洲| 狠狠色综合网| 香蕉国产精品麻豆亚洲欧美日韩| 亚洲熟久久| 99热啪啪| 午夜a成v人电影| 果冻传媒A片一二三区| 一区二区偷拍拍视频| 情趣丝袜无码操逼视频| 久久中久文96| 欧美老熟另类| 国产高清成人mv在线观看| 久久香蕉国产线看观看亚洲女人 | 偷拍亚洲熟女视频播放| 99九九精品| 精品国模无码| 无码九九九九| 久久免费中文字幕在线观看| 国产高清免费不卡av| 成人一二三区| 日韩精品99久久久久久中文字幕 | 青青草色插素人| 欧美在线视频99| 免费一级性爱久久| 人人操人人操人妻人| 美女的肌被草喷水视频| 久久男女激情视频网站| 国产又粗又大硬免费色网视频| 国产热av| 男人天堂站| 欧美顶级黄片AAAAA在线免费看| 国产精品精品系列在线观看| 丰满欧美放荡少妇在线| 美女高潮视频91| 中字乱伦AV| 国产综合在线视频网站| 亚洲丝袜在线观看| 久久久久78| 91亚洲黑人| 日本操BAV| 日韩精品中文字幕人妻| 久久精品操| 啊啊啊不要好爽日韩无码一区| 淫妻综合网| 亚洲二区精品在线观看 | 亚洲福利影院一区久久| 激情久久日韩精品中文字幕麻豆| 天堂资源欧美| 99精品在线| 久久社区一区二区三区| 大学生美女口爆| 一二三四区电影| 伦在线97| 久久25| 99热啪啪| 色色色天美视频| 蜜乳AV免费观看| 国产熟女无套内射| 亚洲自拍青操视频| 久久久久ab| 台湾佬激情综合| 综合久| 伊人网综合在线视频| 国产主播福利| 国产精品操| 四虎影视国产精品| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 亚洲永久永久永久永久一级一级一级精品 | 亚洲图片偷拍视频区| 欧美性爱第一区| 日本东京热久久久电影| 亚洲一区二区AV| 欧美狠狠狠| 日韩二区三四区五区六区在线看| 韩国女主播青草在线| 青青青操| 国产av尤物| 天天插天天操| 欧日a| 国产高清在线观看欧美| heyZO天然素人无码AⅤ专区| 午夜精品久久久| 欧美高清色| 久久粉色| 78m啪啪啪| 久久久涩| 性生活性生大爱77AV国产| 久久超碰av在线| 爱爱久久| 天美传媒在线一区| 99re8免费高清在线| 青青草原综合久久大伊人精品| 99热综合在线| 少妇无码太爽| 青娱乐亚洲热| 乱日视频| 亚州操操穴网| 五月天黄色av| 天天干天天日天天射黄色| 人人乐大香蕉| 国产美女在线精品免费看| 欧美亚洲综合高清在线| 亚洲有码视频二区| 丰满人妻-区二区三区| 欧色网址| 91爱啪| 亚洲色图欧美| 黄骗免费网站| 2021国产成人精品久久| 男女无套 免费网站| 一级性爱网| yiqicaoav| 国产一级舔足在线观看| 男女啪啪网站免费视频| 午夜男女爽爽大片免费观看| 26uuu成人影片| 日本操逼视频不卡直接放| 亚洲密乳AV| 成人麻豆av电影网站| 国产精品麻豆视频网站| 午夜爽爽爽在线观看永久入口姬片| 日本高清_区二区三区| 乱伦3P视频| 操美女高潮抽搐白浆| 91碰碰| 校园春色之综合网| 欧美少妇一区二区三区| 97 超碰 人人做 人人爱| 97免费免费视频网| 亚洲资源网| 安微少妇操BBB| 精品久久97观看在线视频| 人人妻人人爱人人玩| 欧差乱伦二三| 久久久久久久久久久免费精品| 亚洲第一精品在线视频| 日韩性爱再线视频| 色狠狠综合| 久久亚洲影院一区二区| 天天综合网91入口| 欧日韩在线观看| 亚洲极品| 狼人狠干| AV乱伦专区| 成人三一级一片aaa| 爱做久久久久久| 狠狠 91| 大奶尤物鲍汁淫荡欧美视频粉嫩夜夜骚| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 91草草草| 丝袜视频网国产90| 97免费在线观看| 国产色综合亚洲色综合吹潮| 亚洲日韩美女中文字幕乱| 91精品久久久久久77777| 97久久久久久久精| 久操在97| 啊啊啊啊嗯嗯在线久久久| 一区二区三区国产在线播放| 欧美性爱免费短视频| 久久久久久AⅤ无码免费肉站| 国产玖玖| 日韩久久艹| 国产一区二区在线看| 亚洲福利影院一区久久| 免费看国产曰批40分钟怎么下载| 五月丁香婷婷综合网| 免費人妻夜夜爽天天爽爽一区| 亚洲日韩XXX| 日韩啪啪视频| 色在线亚洲视频www| 久9热| 69精品人人人人| 亚洲交换| 国产一区二区三区高清视频| 久久久久九九九| 欧美日韩国产中文超碰| 天天超级碰碰碰| 火箭成精品视频884必出精品| 免费一级黄色录像影片| 婷婷六月色| 欧美猛交黑寡妇中文字幕| 南澳成人一级片在线播放| 51国产午夜精品视频| 男人的天堂一区三区| 亚洲日本男人天堂网| 怡红院亚洲怡春院av| 亚洲av性爱电影| 欧美成人黄网色网站| 嗯嗯啊啊操死我| 噜噜瑟| 91丨九色丨国产丨人妻在线| 久操婷婷| 日韩精品9区| 九九热九九| 国产强奸超碰AV| 欧美黑人与女人91~| 欧美97av| 国产大陆天天艹| 亚洲熟妇极品| 超碰视97中文| 亚洲人妻中文在线视频| 丁香五月性| 很很很很操| 插入逼91| 开心五月激情网| 中文字幕文字幕无码一区二区三区电影99 | 99热这里都是精品| 激情网色| 极品粉嫩一区二区| 精品国产乱码久久久| 精品一区二区成人| 高树玛利亚无码流出| www.91视频网| 极品美女福利在线观看| 性生活久久久久久久久久| 激情一区二区| 2020国产精品| 偷拍综合亚洲| 青娱乐老司机视频| 色蜜AV| 色九九久九九| 无码精品一区二区三区潘金莲| 日韩天堂av电影在线观看| 日日不卡av| 国产呦精品一区二区三区下载 | 中文字幕黄片在线| 亚洲日本成人动漫| 一二三四区操操Av| 国产AV精久久| 久草资源在线视频官方总站日韩丝袜美腿 | 国产人伦精品一区二区三区| 丰满人妻-区二区三区免费看| 最新中文字幕在线亚洲| 日韩钢筋无码高清啾啾啾| 九九九久久久| 日韩欧美视频青青| a啊啊啊啊啊啊啊啊一区二区| 多乙久久久久久| 九九国产热| 国产乱伦性爱区| 欧洲中文字幕| 老女人综合网| 美女刺激久久国产欧美| 揉揉揉夜夜| WWW黄片COM| 玖玖爱伊人玖玖爱| av日韩国产一区二区| 夜夜嗷嗷一区二区| A级片日韩欧美国产欧美视频精选观看| 国产精品交换一区二区| 日韩久射综合| 婷婷导航| 久久日韩肥臀| 大香蕉久| 国产尤物在线三区| 日本网色| 亚洲人精品久久久| 亚洲精品精品一区二区| 骚逼自拍99| 久久国内| 男人天堂网手机版婷婷| 九色在线熟女国产黑人| 亚洲自拍欧美色综合| 日韩亚洲中文字幕在线| 夜夜 中文视频rt| 99精品欧美一区二区三区桃色| 国产乱码精品久久久久久| 五十路六十路素人熟女| 91夜夜蜜桃臀1区2区3区| 精品无码一区二区三区| av情色影音| 国产亚洲日韩欧| 久草毛片电影怡| 亚洲成人性| 91高潮喷水美女| 亚洲九月丁香| 欧美色图自拍| 99自拍视频在线| 色欲久久99国产精品久久久久久| 日本欧美成人片AAAA| 亚洲在饯| 青娱乐 成人娱乐在线| 插入逼91| 97自拍一区| 久久综合亚洲色1080p| 超碰久久精品| 国产亚洲精品第一最新| 97色操| 蜜臀av在线播放一区二区三区| 白丝一区| 国产偷仑| 日本三级网页| 亚洲色图8| 久久久人妻| 欧美精品三区| 青青草精品| 久久直播国产| 欧美最婬乱婬爆婬牲视频| 99热在线播放| 中文字幕蜜乳av| 啊啊啊好舒服好爽啊啊啊视频| 人妻中文字幕精品无码| 欧美青青草视频| 国产亚洲99久久精品| 精品久| 青青草视频导航官网| 中文字幕123| 噜噜噜噜久久久精品免费| 91久久久久久久久久久| 久久久精品电影| 91 国产丝袜在线播放-百度| 97香蕉碰碰人妻国产欧美| 一起草在线视频| 伊人网在线观看| 户外裸露刺激视频第一区| 男人的天堂久久| 99啪啪视频| 青娱乐国产盛宴视频| 亚洲色婷婷综合久久久久中文| 高清不卡国产| 国产人伦a片信息免费片| 美女91网| 亚洲美欧999| 亚洲砖码砖专无区2023| 四虎精品一区二区| 97 视频在线| 亚洲AV无码国产成人| 狠狠91| 久久骚| 亚 欧 美 综合| 91人妻精华帖| 欧美亚洲系列| 久久超碰97中文字幕| 日韩精品在线观看网站| 欧美亚洲综合高清在线| 和协影院中文字幕三区| 91操人视频| 东京热视频网| 2020天天色综合| 夜夜操91744565| 久久久免费一级黄片| 神马久久久久久久| 欧洲精品区| 亚洲人精品久久久喷水| 亚洲国产成人精品无码专区| 国产精品久久久| 九热超碰|