国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐

madExcept 5 FS:First Chance異常捕獲與崩潰報(bào)告實(shí)踐 簡介madExcept 5 FS 是一套專為 Delphi 開發(fā)者設(shè)計(jì)的異常處理組件源碼版用于捕獲程序運(yùn)行中的各類異常、生成堆棧跟蹤信息并提供錯(cuò)誤報(bào)告能夠與 Delphi IDE 無縫集成適合需要快速定位 Bug、提升軟件穩(wěn)定性的中高級(jí)開發(fā)場(chǎng)景。壓縮包共 77.07MB包含 3509 個(gè)文件其中有 pas 源碼、dfm 窗體、dpk/dproj 工程文件等可供直接閱讀修改的開發(fā)素材也有 dcu 編譯單元、bpl 運(yùn)行包、lib 靜態(tài)庫以及大量 h/hpp 頭文件等編譯產(chǎn)物兼顧源碼學(xué)習(xí)與實(shí)際使用并附有安裝與測(cè)試方法說明文檔。目前已有 424 人學(xué)習(xí)下載。借助 FullSource 特性使用者能深入剖析異常捕獲、堆棧解析與錯(cuò)誤報(bào)告生成等內(nèi)部實(shí)現(xiàn)也可根據(jù)項(xiàng)目需求自定義組件行為豐富的平臺(tái)支持文件有助于適配不同 Delphi 版本對(duì)想研究異常處理機(jī)制或擴(kuò)展組件功能的開發(fā)者是一部實(shí)用的參考。1. madExcept 5 FS先于崩潰發(fā)生的那一次攔截這幾年在群里幫人看閃退報(bào)告見得最多的不是“彈了錯(cuò)誤框”而是“程序無聲無息就沒了”。日志停在最后一條業(yè)務(wù)操作Windows 事件查看器里只有一句 Access violation地址是0x0041AB2連哪個(gè)函數(shù)都沒寫。madExcept 5 FS 就是沖這個(gè)痛點(diǎn)去的。FS 在 madExcept 體系里指 First Chance 異常處理不等程序走到未處理異常、被系統(tǒng)強(qiáng)制終止的 Second Chance 階段而是在異常對(duì)象剛拋出的那一刻先攔一道把調(diào)用棧、寄存器、線程現(xiàn)場(chǎng)全部拍下來再根據(jù)你的策略決定是吞掉、記錄還是放行。適合那些線上閃退不可復(fù)現(xiàn)、客戶端反復(fù)被卸載、DLL 邊界出問題又背黑鍋的 Delphi/CBuilder 項(xiàng)目。這一篇直接講怎么把它接進(jìn)工程、怎么把報(bào)告變成能定位問題的證據(jù)鏈。2. 為什么 FS 意味著“第一機(jī)會(huì)”異常處理鏈路與選型2.1 First Chance 與 Second Chance同一場(chǎng)事故的兩個(gè)時(shí)間點(diǎn)Windows 的異常分發(fā)機(jī)制分兩輪。第一輪叫 First Chance異常拋出后系統(tǒng)先讓進(jìn)程內(nèi)的頂層異常處理器Top-Level Exception Handler過目這時(shí)候調(diào)用棧還是完整的、局部變量還沒被清理、異常源地還沒被棧展開破壞是拿現(xiàn)場(chǎng)證據(jù)的黃金窗口。如果沒有任何處理器決定攔截系統(tǒng)進(jìn)入第二輪 Second Chance按默認(rèn)規(guī)則終止進(jìn)程這時(shí)再掛接的捕獲邏輯拿到的棧已經(jīng)部分失效甚至只剩一個(gè)地址。madExcept 5 FS 做的事就是在第一輪里插入自己的處理器。它先把異常鏈上的上下文全部記錄成結(jié)構(gòu)化報(bào)告然后問你要不要把這個(gè)異常“消化”掉。這個(gè)機(jī)制的價(jià)值在于傳統(tǒng) try-except 只能抓到當(dāng)前線程當(dāng)前代碼塊里的異常一旦異??邕^模塊邊界、被某個(gè)框架層吞了或者發(fā)生在后臺(tái)線程業(yè)務(wù)層根本感知不到FS 模式是從異常發(fā)生的源頭直接接住不依賴你在每一處業(yè)務(wù)代碼里手動(dòng)包保護(hù)層。FS這個(gè)后綴對(duì)應(yīng)的就是這一整套 First Chance 采集與分發(fā)能力而不是某個(gè)獨(dú)立 IDE 插件。理解這一點(diǎn)很關(guān)鍵你裝進(jìn)工程的是一個(gè)異常采集框架配置的靈活性核心在回調(diào)函數(shù)的請(qǐng)求與放行邏輯上。2.2 什么項(xiàng)目值得上 madExcept 5 FS三條選型判據(jù)不是所有項(xiàng)目都需要把崩潰報(bào)告做成產(chǎn)品級(jí)基礎(chǔ)設(shè)施。團(tuán)隊(duì)小、發(fā)布頻率低、用戶量小到崩潰日志可以靠用戶口述的項(xiàng)目直接套個(gè) showmessage 也能撐。如果你正在做以下三類項(xiàng)目之一madExcept 5 FS 就值得投進(jìn)去第一類是面向大量終端用戶的工具軟件或業(yè)務(wù)客戶端用戶環(huán)境五花八門缺 DLL、顯卡驅(qū)動(dòng)沖突、輸入法注入都可能觸發(fā)崩潰復(fù)現(xiàn)只能靠現(xiàn)場(chǎng)報(bào)告。第二類是含多線程、插件化或依賴第三方 DLL 的系統(tǒng)崩潰線程棧必須追溯到模塊邊界。第三類是對(duì)質(zhì)量和響應(yīng)速度有要求的項(xiàng)目領(lǐng)導(dǎo)要的是“這周修復(fù)率提升了多少”而不是“我們還在找復(fù)現(xiàn)步驟”。從我接觸的項(xiàng)目看還有一個(gè)隱性的判斷條件項(xiàng)目是否有持續(xù)集成環(huán)境。madExcept 5 FS 給出的報(bào)告質(zhì)量取決于符號(hào)文件與構(gòu)建產(chǎn)物的對(duì)應(yīng)關(guān)系臨時(shí)編譯一次就想靠它定位效果會(huì)打五折這點(diǎn)后面第 4 章會(huì)展開。2.3 把 madExcept 5 掛進(jìn)工程的最小路徑常見做法是通過 IDE 的組件安裝機(jī)制把 madExcept 編譯進(jìn)設(shè)計(jì)環(huán)境里然后在工程文件中手動(dòng)引入兩個(gè)運(yùn)行時(shí)單元。最小改動(dòng)量下你的工程文件末尾會(huì)變成這個(gè)樣子program KClient; uses Vcl.Forms, madExcept in ..\madExcept\madExcept.pas, madExceptHook in ..\madExcept\madExceptHook.pas, KMainForm in KMainForm.pas {MainForm}; {$R *.res} begin Application.Initialize; Application.CreateForm(TKMainForm, MainForm); Application.Run; end.madExcept單元提供異常報(bào)告生成與接口定義madExceptHook負(fù)責(zé)在初始化階段把 FS 處理器注冊(cè)進(jìn)系統(tǒng)異常分發(fā)鏈。把這兩個(gè)單元放在 uses 列表靠前的位置是為了保證它們的初始化代碼先于你的業(yè)務(wù)單元執(zhí)行否則在異常處理器注冊(cè)完成之前發(fā)生的崩潰依然會(huì)漏網(wǎng)。工程文件改完后重新編譯并運(yùn)行一次主動(dòng)制造一個(gè)除零異常試試。默認(rèn)配置下madExcept 5 會(huì)彈出它自帶的崩潰報(bào)告對(duì)話框里面有完整的調(diào)用棧和異常類型。若彈不出來先確認(rèn)這兩個(gè)單元確實(shí)被編進(jìn)dcu輸出目錄再確認(rèn) IDE 里沒啟用“忽略特定異常類型”的過濾設(shè)置。這一步跑通之后我們?cè)僬?FS 模式的自定義回調(diào)。3. 配置 FS 模式從默認(rèn)彈窗到自定義處理回調(diào)3.1 用全局 Hook 接管 First Chance 異常madExcept 5 默認(rèn)行為是攔截未處理異常并顯示報(bào)告對(duì)話框但這不適合所有場(chǎng)景發(fā)布版客戶端不該把技術(shù)報(bào)告直接懟在用戶臉上而且有些異常是“可控但需要被記錄”的比如文件被占用、網(wǎng)絡(luò)瞬斷、配置項(xiàng)格式錯(cuò)誤。FS 模式給了你一個(gè)注冊(cè)全局回調(diào)的入口讓每個(gè)異常在第一時(shí)間先經(jīng)過你的代碼。常見做法是調(diào)用RegisterExceptionHandler它的聲明如下function RegisterExceptionHandler( Handler: TExceptionHandler; ThreadMode: TThreadMode; Event: TExceptionEvent): Integer;回調(diào)函數(shù)的實(shí)現(xiàn)聽起來抽象落地下來一般長這個(gè)樣子function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var report: TStringList; begin // First Chance 階段handled 輸出參數(shù)決定異常是否被吞掉 if exceptIntf.ExceptionClass EInOutError then handled : True // 文件寫入類異常記錄但不崩 else handled : False; // 其他異常照常拋出進(jìn)入 Second Chance report : TStringList.Create; try report.Text : exceptIntf.BugReport; report.SaveToFile(D:\logs\crash_ FormatDateTime(yyyymmdd_hhnnss, Now) .txt); finally report.Free; end; Result : True; end;代碼里的handled是最容易理解錯(cuò)的參數(shù)。設(shè)為True表示這個(gè)異常已經(jīng)被你處理了系統(tǒng)不會(huì)再向上拋程序繼續(xù)往下跑設(shè)為False表示你只是“看了一眼”并記錄了現(xiàn)場(chǎng)異常繼續(xù)正常傳播流程。Result表示是否接管默認(rèn)的 madExcept 報(bào)告界面——返回True時(shí)你自己寫了文件就要關(guān)掉它的默認(rèn)彈窗否則用戶會(huì)看到兩層輸出。注冊(cè)這回調(diào)的最佳位置是工程文件begin塊的最前面或者主窗體OnCreate里只注冊(cè)一次initialization RegisterExceptionHandler(MyFSHandler, stDontSync, epMainThread); end.stDontSync表示回調(diào)不主動(dòng)做線程同步適合只做內(nèi)存操作和文件寫入的輕量邏輯若你在回調(diào)里要訪問 VCL 控件或調(diào)用需要消息循環(huán)的代碼改成stSync會(huì)更穩(wěn)代價(jià)是可能阻塞當(dāng)前線程一小段時(shí)間。epMainThread限定只在主線程上觸發(fā)回調(diào)后臺(tái)線程崩潰則會(huì)進(jìn)入默認(rèn)流程對(duì)全局記錄需求更強(qiáng)的項(xiàng)目我一般會(huì)注冊(cè)兩個(gè)回調(diào)主線程一個(gè)工作線程一個(gè)分別處理。3.2 上下文信息讓崩潰報(bào)告自帶現(xiàn)場(chǎng)崩潰報(bào)告如果只有調(diào)用棧你只能知道“在哪個(gè)函數(shù)崩了”不知道“用戶當(dāng)時(shí)在做什么”。madExcept 的接口里暴露了一些上下文屬性但更可靠的業(yè)務(wù)上下文還得靠自己在回調(diào)里補(bǔ)充。我一般會(huì)在回調(diào)里讀取一個(gè)全局對(duì)象的狀態(tài)把它拼進(jìn)報(bào)告文件function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; var lines: TStringList; ctx: TKContextInfo; begin ctx : TKContextInfo.GetInstance; lines : TStringList.Create; try lines.Add(UserID ctx.UserID); lines.Add(CurrentForm ctx.CurrentFormName); lines.Add(NetworkState ctx.NetworkState); lines.Add(LastAction ctx.LastActionLog); lines.Add(--- bug report start ---); lines.Add(exceptIntf.BugReport); lines.SaveToFile(ctx.LogDir fs_ FormatDateTime(yyyymmdd_hhnnss, Now) .log); finally lines.Free; end; handled : False; // 只記錄不吞異常 Result : True; end;把業(yè)務(wù)上下文放在LastActionLog里是個(gè)好習(xí)慣。很多閃退是特定操作序列觸發(fā)的比如“上傳圖片后立即切換賬套”如果你有操作埋點(diǎn)報(bào)告里就能直接看到最后一步動(dòng)作。這個(gè)變量每執(zhí)行一個(gè)關(guān)鍵操作就覆蓋寫入一次不用記全量日志避免文件體積失控。3.3 報(bào)告內(nèi)容與文件落盤的參數(shù)取舍FS 回調(diào)里最忌諱的事情是“什么都往報(bào)告里塞”。調(diào)用棧、線程列表、模塊列表、CPU 寄存器、系統(tǒng)信息全部打進(jìn)去一份報(bào)告能到幾百 KB高頻崩潰時(shí)磁盤和網(wǎng)絡(luò)都會(huì)被拖死。我的經(jīng)驗(yàn)是分兩個(gè)級(jí)別一種是把BugReport完整落盤保留所有細(xì)節(jié)僅限開發(fā)版或內(nèi)測(cè)版開啟另一種是發(fā)布版只記錄異常類型、異常地址、模塊名、調(diào)用棧前十幀和業(yè)務(wù)上下文。后者的信息量足夠定位 80% 的崩潰文件體積控制在 10 KB 以內(nèi)上傳快、干擾少。落盤目錄要選用戶有寫權(quán)限的路徑不要硬編碼D:\logs否則用戶以普通權(quán)限運(yùn)行時(shí)報(bào)告根本寫不進(jìn)去。用GetEnvironmentVariable(LOCALAPPDATA)拼一個(gè)KClient\CrashReports目錄是可移植且安全的選擇。目錄不存在就創(chuàng)建創(chuàng)建失敗則退回到臨時(shí)目錄這層容錯(cuò)必須做因?yàn)楫惓;卣{(diào)本身就是程序處于不穩(wěn)定狀態(tài)不要再讓文件系統(tǒng)問題掩蓋真正要排查的事故。4. 根據(jù)崩潰報(bào)告定位問題?;厮荨⒕€程現(xiàn)場(chǎng)與符號(hào)文件4.1 讀懂 BugReport 的關(guān)鍵字段madExcept 5 生成的報(bào)告結(jié)構(gòu)大致固定我一般在排障時(shí)只盯著幾個(gè)欄位看表格字段含義定位價(jià)值Exception Class異常類型如 EAccessViolation判斷是邏輯問題還是系統(tǒng)級(jí)內(nèi)存問題Exception Message異常附帶信息經(jīng)常直接寫著越界下標(biāo)或文件名Exception Address崩潰指令所在的模塊偏移結(jié)合符號(hào)表換算成函數(shù)名Call Stack從崩潰點(diǎn)向外的調(diào)用鏈解決“哪條路徑調(diào)到這里”的問題Threads所有線程的??煺张挪槎嗑€程協(xié)作導(dǎo)致的崩潰Modules加載的模塊列表及版本排查 DLL 沖突、補(bǔ)丁不一致報(bào)告里最騙人的是Exception Message為空的 Access Violation。地址直接指向某個(gè)系統(tǒng) DLL 內(nèi)部看起來像第三方庫的鍋但順著Call Stack看前兩條棧幀往往會(huì)回到你自己的消息處理函數(shù)。?;厮菔抢斫獗罎⒙窂降闹骶€索而不是只看落點(diǎn)地址。4.2 符號(hào)表與版本映射讓地址變函數(shù)名崩潰日志里如果只有00401234這種裸地址對(duì)現(xiàn)代項(xiàng)目來說基本等于廢紙。madExcept 要把地址解析成函數(shù)名依賴編譯時(shí)生成的調(diào)試符號(hào)。Delphi/CBuilder 的鏈接器選項(xiàng)里一般提供 map 文件的開關(guān)把詳細(xì)模式打開后編譯器會(huì)輸出完整的映射關(guān)系表madExcept 在崩潰時(shí)查找該表即可還原函數(shù)名。工程交付時(shí)記得把每次構(gòu)建的 map 文件或調(diào)試符號(hào)與 exe 一并歸檔。這里的規(guī)矩是報(bào)告里的模塊版本號(hào)和構(gòu)建號(hào)必須能對(duì)應(yīng)到唯一一份符號(hào)文件。我習(xí)慣在工程里加一個(gè)構(gòu)建版本常量并定義到資源或全局變量里const BUILD_ID 20250607_1300_trunk_4a3f2c;回調(diào)里把這個(gè)BUILD_ID寫進(jìn)報(bào)告頭部歸檔符號(hào)文件時(shí)文件名也帶同一個(gè)BUILD_ID。線上反饋回來看報(bào)告里的構(gòu)建號(hào)找符號(hào)文件幾秒鐘就能對(duì)上。4.3 一個(gè)真實(shí)定位流程的三步走第一步先把報(bào)告里的Exception Address和Call Stack前三條記錄抄出來。第二步用報(bào)告里的BUILD_ID找到對(duì)應(yīng)的 map 文件把裸地址換算成函數(shù)名這一步 madExcept 報(bào)告里通常已經(jīng)替你做了——前提是發(fā)布構(gòu)建時(shí) map 文件沒有被剝離。第三步打開源碼定位到那個(gè)函數(shù)重點(diǎn)看這幾點(diǎn)是否有對(duì)空對(duì)象解引用、是否有無符號(hào)整數(shù)比較、是否有回調(diào)函數(shù)在跨模塊傳遞時(shí)被錯(cuò)誤約定調(diào)用。碰到Call Stack本身就殘廢的報(bào)告比如只在崩潰點(diǎn)有一條記錄后面全是Unknown大概率是優(yōu)化編譯把棧幀給省略了或者你的 hook 觸發(fā)在異常鏈已經(jīng)展開之后。這時(shí)候不要硬解地址轉(zhuǎn)而看Modules欄位確認(rèn)崩潰模塊是否帶調(diào)試版本號(hào)再檢查編譯器優(yōu)化選項(xiàng)。報(bào)告里那份Threads列表也別忽略。很多“偶爾崩一次”的現(xiàn)場(chǎng)主線程棧是正常的反而是某個(gè)工作線程停在了釋放對(duì)象的代碼上。如果團(tuán)隊(duì)里多線程代碼量大且頻繁 new/free 對(duì)象FS 報(bào)告里帶出線程棧會(huì)省掉你掛調(diào)試器復(fù)現(xiàn)一下午的時(shí)間。5. 避坑madExcept 5 FS 集成中常見的五個(gè)翻車現(xiàn)場(chǎng)5.1 現(xiàn)象一DLL 崩潰只出現(xiàn)“外部地址”現(xiàn)象主程序用 madExcept加載的一個(gè)業(yè)務(wù) DLL 里崩了報(bào)告里只顯示Unknown module和一個(gè)裸地址無法換算函數(shù)名。原因DLL 工程沒有編譯 madExcept 相關(guān)單元主程序拿不到 DLL 的符號(hào)表另外系統(tǒng)異常分發(fā)經(jīng)過模塊邊界時(shí)DLL 里的棧幀格式不會(huì)被主程序的 hook 完整解析。解決給 DLL 工程也加上 madExcept 相關(guān)單元并開啟同樣的符號(hào)輸出配置。發(fā)布時(shí)確認(rèn) DLL 的 map 文件與 DLL 本體同版本歸檔。若 DLL 是第三方且無符號(hào)文件則在報(bào)告里至少記錄模塊名與版本號(hào)反向聯(lián)系廠商時(shí)也算有據(jù)可查。5.2 現(xiàn)象二FS 回調(diào)里寫文件導(dǎo)致遞歸崩潰現(xiàn)象異常發(fā)生后回調(diào)函數(shù)里寫日志日志文件被占用或無權(quán)限寫文件操作又拋出異常madExcept 再次進(jìn)回調(diào)進(jìn)入無限遞歸程序徹底卡死。原因回調(diào)函數(shù)本身沒有做異常隔離。FS 回調(diào)運(yùn)行在系統(tǒng)的異常分發(fā)鏈上任何一環(huán)再拋異常都會(huì)重新進(jìn)入分發(fā)入口。解決回調(diào)函數(shù)整體包一層裸 try-except任何異常都吞掉確?;卣{(diào)自己永遠(yuǎn)不拋文件寫入前先判斷目錄可寫寫不進(jìn)去就放棄絕不讓日志行為本身變成新的事故源頭function MyFSHandler(const exceptIntf: IMEException; out handled: Boolean): Boolean; begin try // 原有邏輯 except // 記錄回調(diào)失敗次數(shù)不再做任何操作 end; handled : False; Result : True; end;5.3 現(xiàn)象三優(yōu)化編譯后?;厮輰?duì)不上行號(hào)現(xiàn)象用戶現(xiàn)場(chǎng)報(bào)告的調(diào)用棧能列出函數(shù)名但點(diǎn)開源碼行號(hào)指向的位置和實(shí)際崩潰邏輯明顯不對(duì)。原因編譯器開了內(nèi)聯(lián)和幀指針省略優(yōu)化某些棧幀被優(yōu)化合并madExcept 依據(jù)靜態(tài)符號(hào)表換算出的行號(hào)是近似值不是精確落點(diǎn)。解決定位問題時(shí)把函數(shù)名當(dāng)作線索而非最終答案重點(diǎn)看崩潰點(diǎn)所在函數(shù)整體邏輯。對(duì)懷疑有問題的單元單獨(dú)關(guān)閉優(yōu)化重新編譯做一次定向?qū)Ρ?。這不是 madExcept 的 bug是符號(hào)還原的固有精度問題理解為它給的是“案發(fā)附近區(qū)域”而不是“精確坐標(biāo)”就能少走彎路。5.4 現(xiàn)象四報(bào)告發(fā)送阻塞主線程二次鎖死現(xiàn)象加了 FS 回調(diào)后崩潰現(xiàn)場(chǎng)偶爾變成“卡死不動(dòng)”任務(wù)管理器顯示進(jìn)程無響應(yīng)。原因回調(diào)里直接發(fā)了 HTTP 請(qǐng)求把崩潰報(bào)告?zhèn)鹘o服務(wù)端。崩潰發(fā)生時(shí)主線程狀態(tài)本身不穩(wěn)定同步網(wǎng)絡(luò)請(qǐng)求一直等超時(shí)界面消息循環(huán)被阻塞用戶感知為假死。解決回調(diào)內(nèi)不要做任何網(wǎng)絡(luò)操作只負(fù)責(zé)落盤。程序下次正常啟動(dòng)時(shí)掃描崩潰報(bào)告目錄用后臺(tái)線程統(tǒng)一上傳上傳成功再刪文件。這個(gè)模式也叫本地落地加延遲上報(bào)是客戶端崩潰采集的常見做法。5.5 現(xiàn)象五打包時(shí)機(jī)不對(duì)報(bào)告里全是“Unknown”現(xiàn)象測(cè)試機(jī)上報(bào)的報(bào)告完全正常發(fā)布給用戶后全變成Unknown function和裸地址。原因發(fā)布包使用 Release 配置編譯且關(guān)閉了 map 文件輸出madExcept 運(yùn)行時(shí)沒有任何符號(hào)可查。解決發(fā)布配置里也保留 Detailed map 文件生成只是不給最終用戶分發(fā)而已——直接把 map 文件歸檔到構(gòu)建服務(wù)器內(nèi)部存儲(chǔ)。同時(shí)確認(rèn)構(gòu)建機(jī)上沒有開啟“生成輕量調(diào)試信息”之類的減配選項(xiàng)。這個(gè)問題在快速迭代的小團(tuán)隊(duì)里幾乎每個(gè)月都能踩到一次屬于典型的因?yàn)椤鞍l(fā)布要精簡”而誤刪關(guān)鍵排障數(shù)據(jù)。6. 進(jìn)階把崩潰報(bào)告變成持續(xù)可用的工程質(zhì)量數(shù)據(jù)6.1 用版本號(hào)與構(gòu)建 Mark 給報(bào)告打標(biāo)早期接入 madExcept 時(shí)我見過一個(gè)項(xiàng)目報(bào)告文件存了幾千個(gè)命名全是crash_20250501_230011.log解析時(shí)根本分不清版本。后來我們做了一件事把構(gòu)建號(hào)、分支名、編譯時(shí)間全部塞進(jìn)報(bào)告文件名和文件頭排序和歸因一下就清楚了。function BuildReportFileName: string; var tag: string; begin tag : Format(%s_%s_%s, [BUILD_ID, APP_VERSION, COMPILE_TIME]); Result : GetEnvironmentVariable(LOCALAPPDATA) \KClient\CrashReports\ tag _ FormatDateTime(yyyymmdd_hhnnss, Now) .txt; end;發(fā)布后每天掃一次報(bào)告目錄按BUILD_ID分組統(tǒng)計(jì)崩潰次數(shù)哪一次構(gòu)建增量引入的崩潰增量立刻顯現(xiàn)。別小看這步它把“收到一份崩潰日志”變成“一周崩了 47 次其中 39 次在新版本”的決策信息。6.2 本地落盤加延遲上傳的可靠發(fā)送模式報(bào)告最終是要匯總到服務(wù)端的。常見做法是寫一個(gè)后臺(tái)線程每次啟動(dòng)時(shí)遍歷崩潰報(bào)告目錄文件逐條上傳成功后移動(dòng)到 backup 目錄或直接刪除。上傳接口要冪等同一條報(bào)告重復(fù)提交時(shí)服務(wù)端按報(bào)告唯一 ID 去重。我在最近一個(gè)模擬項(xiàng)目X里給上傳線程加了一個(gè)簡單限制單次最多處理 20 份報(bào)告處理完退出線程避免程序啟動(dòng)瞬間被大量歷史報(bào)告占滿網(wǎng)絡(luò)。崩潰報(bào)告是有時(shí)效性的優(yōu)先傳當(dāng)天的歷史存量排后。線程里每傳完一條就Sleep(300)給主線程留資源這在低配用戶機(jī)上尤其重要。還有一個(gè)習(xí)慣值得分享每季度把報(bào)告里的Exception Class做一次分布統(tǒng)計(jì)。曾經(jīng)有個(gè)客戶端項(xiàng)目翻來覆去都是同一個(gè)數(shù)組越界問題開發(fā)組修了一版上線后統(tǒng)計(jì)看該類異常環(huán)比降了 90%那個(gè)數(shù)據(jù)比任何測(cè)試報(bào)告都有說服力。崩潰報(bào)告系統(tǒng)不是修一次就完事的它的價(jià)值隨時(shí)間線性累積前提是你把構(gòu)建號(hào)、符號(hào)文件、報(bào)告歸檔這套動(dòng)作養(yǎng)成肌肉記憶。這條路我走下來最大的教訓(xùn)只有一個(gè)——hook 要接得早符號(hào)要存得住報(bào)告不要當(dāng)場(chǎng)發(fā)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
美女久久久久久久| 久久超碰av在线| 综合性视频99| 久久无码一区二区二三区性色| 欧美,日韩综合久久| 色老汉色| CCYY草草影院地址入口| 国产极品999| 欧美高清色| 狠狠色综合网| 这里都是精品| 操人无码| 性91| 五月天婷婷色| 欧美日韩在线小说| 久久深夜无码| 国产福利小视频高清在线观看| 亚洲宗合电影| 第四色奇米影视777| 自拍丝袜美腿人妻| 亚洲精品尤物yw在线影院| 日韩情色AV| 思思热免费在线视频| 性色高清在线| 久久九九视频九九视频| 漂亮人妻被强中文字幕hd| 久久久久国产无av| 人妻丝袜美腿中文字幕| 久久理论字幕视频| heyZO天然素人无码AⅤ专区| 美女91色黄18| 99综合视频一体| 9丨久久九九九| 懂色综合久久久| 国产91福利小视频在线观看| 久久久中文版| 久久艹逼视频| 2024黄色视频| a片亚洲一本通视频| 在线欧美69V免费观看视频| 久污| 爱干爱射网啊啊啊| 围产精品一区二区三区视频播放| 玖玖爱视频网站| 日本一区三级韩国| 国产真实野战在线视频| 在线毛片片免费观看| 国产白领连续中出在线播放| 中文字幕日本久久| 国产真乱mangent| 99热日| 曰韩av中文字幕专区| 1240青青草一区二区三区视频天爱| 色噜噜国产在线| 92午夜免费福利视频| 久久久无码精品人妻二区| 久久人妻丝袜一区二区三| 日韩免费av片高清无码| 欧洲人妻视频| 九九九九九精品十六| 香蕉婷婷| 大香蕉免费乱伦视频| 亚洲天堂资源网| 青青草视频久久久久| 5月婷婷6月六月丁香| 蜜臀在线视频| av橘色网站| 国产精品久久久蜜臀| 久操热线| 青娱乐国产盛宴视频| 免费在线视频97| 欧美日韩婷婷中文| 欧美日韩人人早| 色欲久久综合| 欧美久久伊人| 黄片直播三级黄片两女一男| 国产亚洲性生活视频播放| 久久久91| 青青草原成人| 99热日| 久久精品视频28| 91 刺激在线| 青椒国产97在线熟女| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 四虎永久在线精品免费网址 | 欧美日韩另类在线播放| 国产一区二区成人av在线播放| 老鸭窝在线视频播放| 精品小视频在线| 狠狠 91| 女同性恋久久| 天天做日日做天天欢。| 26uuu国产亚洲综合| 狠狠爱夜夜| AV久日| 91 综合 色| 亚洲少妇激情视频| 台湾大香蕉99热| 99热精品青草在线 | 色香色欲天天综合网天天来吧| 亚洲国产成人精品女人久久久| 亚洲天天精品| 99色在线| 男人天堂资源| 91亚洲色图| 亚洲Av诱惑| 色狠狠一区二区三区香蕉| 麻豆区久久久久亚| q2午夜理论片夜色av| 亚洲性综合| 伊人991| 青青草色插素人| 青青草伊人久久| 中文字幕55555| 九九热精品在线| 激激五月| JULIA人妻风俗店中出电影| 久久久人体| 理论久久婷婷网 8| 大香蕉 222| 中文字幕版| 91爰爱欧美| 老女人碰碰在线碰碰视频| 香蕉久久精品| 999久久芭蕾| 东京太热男人的天堂久久久| 久久狠狠色噜噜狠狠狠狠97| 天天激情综合站| 少妇一区二区三区高速| 人妻在线视频| 超碰 97国产熟女| xxx亚洲午夜天堂| 搞中出视频在线观看| 欧美色色人| 91狠狠狠| av网站免费看| 成人aⅴ一区二区三区| 日本五十路熟女一区二区| 在线观看黄色电话| 人人天天欧洲| 亚洲 欧美 另类 日韩 人妻一区| 国产三级中文字幕粉嫩| 国产一级特黄大片处女| 激情久久久| 99热这里都是精品| 男生女生啊啊啊啊| 啊啊啊轻点在线观看| 成人小电影网站tex| 国产乱伦性爱区| 免费强奸av| 麻豆天美电影一区二区| 人妻丝袜肏逼| 亚洲色图欧美色图另类图片| 日本精品无码三级网站| A V少妇特黄三级| 欧美伦乱爱| 天天色综合影视网| 免费一级a毛片久久久久久鸭绿欲| 欧美性爱中文字幕无线码| 99热91| 九九九九九九成人| 五十路三区在线| 亚洲天堂7777| 人人污日韩一区二区| 夜夜嗨一区二区三区三州加勒比| 亚洲精品一区二区精品| 激情六月天| 夜夜综合| 一起草三级AV电影在线观看| 青青草天天亲夜夜操网| 熟女熟妇一区二区三区视频| 超碰无码加勒比| 看日韩美女二区三区免费操逼视频| 午夜天堂精品久久| 中文字幕丰满子伦无码专区在线视频最新 | 无码男人天堂| 免费1级a做爰片观看| 91视频国品一二三区| 97欧美久久久久久久| 岛国1区2区3区在线观看| 伊人婷婷五月天| 老女人老91妇女老热女| 家庭乱伦国产| 国产青一二三| 亚洲精品国语在线播放| 青青爽| 欧美日韩在线小说 | 婷婷激情五月天小说网| 精品久久久久黄少妇| 亚洲97在线| 综合色久| 免费国产视频| 亚洲少妇喷视频看| 超碰欧美97| 亚洲欧美日韩综合在线尤物| 超碰午夜| 丁香五月综合| 久久宗合97| 国产超碰人人爽人人做| 亚洲综合校园春色| 日本欧美亚洲高清在线看| 精品久久久不卡一区二区| 五月丁香黄色网| 少妇69中文| 黄色片A级一区二区三区| 骚货| 三级精品三级在线观看| 久久香蕉超碰97国产精品| 亚洲高清无毛一区二区| 97热视频在线观看| 午夜免费视频1000| 东北女人无套内谢视频| 亚洲国产剧情少妇激情| 亚洲欧美色图小说| 九九热午夜欧亚国产视频| 亚洲暴力强奸AV| 午夜无码熟妇丰满人妻| 99久久久无码国产精品性男| 欧美成人贴图| 少妇高潮99p| 欧美高清无码免费视频高清版| 91爱综合| 嫩呦国产一区二区三区AV| 日本一区99| 日韩性爱毛片操骚逼| 东北女人操比视频| 人人操人人大香蕉| 欧美性性性| 色婷婷aV一区二区三区麻豆综合| 日韩乱中文| 老鸭窝成人免费毛片视频| 爱爱动态120秒| 亚川综合视频| 国产激情在线| 久久久久久久久久久久黄色| 色婷网| 久久久久久精| 97在线资源| 激情五月天综合网| 亚洲好看强奸乱伦| 亚洲综合色图欧美| 黄日韩| 污啪啪啪视频| 人妻 丝袜美腿 中文字幕| 97中文字幕一区| 炮色五月| 久久怡红院| 精品无码一区二区三区| 久久9久久| 激情露脸爱| 欧美日韩性爱无码| 污色区网站| 亚欧美综合网。| 欧美操逼一二三区| 无码精品蜜桃一区二区三区ww| AV中文字幕三四五| 香蕉久久精品| 亚洲欧美一区二区三区在钱蜜桃| 久久av一级av少妇av高潮| 久久精品国产亚洲粉嫩| 99re这里| 亚洲国产综合久久久性感熟妇| 国模艳艳啪啪一区| 婷婷伊人五月| 中文字幕黄色一起草| 亚洲限制级| 九九内射在线| 少妇滛荡视频| 日韩性爱网址| 色狠狠 - 百度| 亚洲欧美综合| 97超碰欧美精品| 婷婷久草| 在线电影亚洲色图| 人妻熟女一区二区| 天天流夜夜操| 精品日韩中文在线| 神马久久久久| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 欧美九9 9 9| 日本激情免费大片| 草莓精品视频| h无码动漫在线观看| 在线视频 亚洲精品| 97欧美色| 人人操超碰在线| 久久久久久久久久久久欧美日| 蜜桃视频一区二区三区在线观看| 欧美日韩资源在线| 日日干日日操五月天伦理视频| 天天日天天操心| 色综合尤物| 黄色一级视| 蜜乳AV一区二区三区四| 熟女六十路| 最新国产精品久久精品| 亚洲黑丝在线| 97午夜剧场日韩| 久热超碰| 青青国产精品在线| 精品久久久中文字幕不| 色九九九综合| 日本亚欧爱爱| 国产丝袜啪啪| 国产强奸AV在线| 一级AV性爱| 精品久久久久久AV无码| 黄色AAAAA欧美| 成人午夜小视频手机在线看| 防屏蔽在线视频| 久都青青视频| 青青草色插素人| 淫穴高潮色图| 96精品久久| 人妻色偷色噜| 久久精品色欧美aⅴ一区二区| 在线国产一区二区av| 宗合情欲网| 精品亚洲国产成人精品| av在线免费一区二区| 国产中出内射一区二区| 亚洲āv网址在线观看| 亚洲精品自拍| 亚洲精品男人的天堂| 色色色综合网| 超碰天天久久79| 久久精品夜色国产亚洲AV| 丝袜亚洲91| 国产精品一区二区麻豆| 青青草中文字幕| 国产在线视频二区| 久久久夜夜嗨免费视频| 按摩中文字幕| 999久久久久久久久| 另类图片综合| 偷窥自拍A片| 久久综合18p| 久久超碰av在线| 美女91网| 久久性爱精品一区| 久热9| 日韩免费人妻色情网站| 日本999精品| 欧美天天干| 操逼天美3区| 丁香五月色| 亚洲AV无码久久精品蜜桃小说| 日本五区不卡| 久久国产乱子伦精品免费女人| 亚洲1区| 精品无码一二三四区| 欧美色交| 操逼片中文| 超碰97爽| 亚州性色| 动漫爆乳3D奶水一区在线观看| 亚欧中文字幕在线视频| 天天干人人乐| 秋霞欧美性爰视频| 手机久操欧美综合色码| 91av熟女人妻| 97WW精品| 超碰久超碰久| 探花激情视频| AV99热18这里只有精品| 国产精品视屏| 亚洲国产激情国产av| 亚洲区限制级| heyZO天然素人无码AⅤ专区| 欧美一级三级| 91国产丝袜白虎| 亚洲图片欧洲图片aⅴ| 91麻豆天美传媒HD| 欧美97| 久久久无码国精品无码三区三区| 九热超碰| 午夜电影在线观看无码专区| 青青伊人加勒比海| 亚瑟国产精品久久无码| 91色图片| 一级性爱视频免费在线| 啊啊啊好湿国产一二| 天天干18禁| www…国产操逼| 久久久久久裸体| 国产欧美一级在线观看| 在线观看 99热| 国产精品毛片?v一区二区三区| 厕所偷拍在线| 无码操逼视频一下| 欧美老妇综合网| www熟女乱伦com| 一二三啪啪专区| 国产精品视频内谢女人| 18一区二区三区| www.av家庭乱伦| 九九九午夜| 17c嫩草51久久91嫩草| 精品人人| 九九精品99| 97精品国产手机| 奇米狠999| 日本免费一区二区不卡 | 无码少妇精品一区二区60岁老人| 久热这里| 熟妇在线视频一区二区| 亚洲精品久久久久毛片A片拉屎| 蜜臀av一区二区三区免费观看| 欧美美女视频| 精品久久久中文字幕不| 亚洲成人性爱网站在线播放| 东方亚洲在线操逼天堂| 色九区| 亚洲久久久久| 国产中文福利| 在线观看精品国产免费| 亚洲天堂男人天堂网| 69AV女优男人的天堂| 欧美日韩另类在线播放| 人人澡人人澡人人| 99精品丰满人妻无| 3d成人精品一区二区| 四虎免费在线播放| 精品久久久九九九孕妇| 又粗又长又爽在线观看| 97神马久久| 99re3这里只有精品| 久久久亚洲高清不打码| 中文字幕人妻丝袜乱一区三区| 久久侵犯人妻爽爽爽| 国产操伦| 婷婷午夜清品久久久久久久性色视频观| 亚洲天堂色图| 久久高清欧美国产| 国产91福利小视频在线观看| 搡老女人老91妇女熟女| 欧美大香蕉在线观看| 精品人体无圣光凹凸| 人妻精品一区二区| 熟女91网| 欧美大香蕉97| 高潮内射在线| 色色五月婷婷| 国产Aα| 久久的免费性爱视频| 国产人妻精品一区二区三区秋霞 | 久操视频资源站公开| 精品人妻一区二区免费蜜桃视频| 欧美一区二区三区黄色影视| 欧美男女午夜啪啪| 长长久久免费视频| 伊人黄色视频免费观看| 黑人精品XXX一区一二区| 午夜亚洲| 国产精品乱码久久久久久久| 欧美精品 - 91爱爱| 婷婷99| 免费观看的黄色的网站| 亚洲天堂在线怕怕视频| 一区二区三区视频| 1024精品在线| 91天堂丝袜美腿| 亚洲性图91| 日少妇亚洲版| 久超碰在| 国产91美女高潮| 欧美成人性爱视频大全| 天天天天天天天天天天干美女| 日韩免费中文字幕视频| 久久专区| 欧美色999| 精品亚洲天堂| 玖玖久久久| 美女t无毒不卡不卡| 大香蕉92| 丝袜狠狠草尤物 91| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 97欧美色| 久久9999 | 免费成人在线熟妇网| 亚洲免费日韩在线一区二区| 中文字幕精品人妻丝袜| 伊人成人情色综合| 精品网站9999| 青青草国产亚洲精品久久 | 特级丰满少妇一级AAAA爱毛片| 中文色综合| 九九精品无码专区免费| 激情抓乳插进去啪啪啪日韩 | 国产精品人人爽人人做可爱福利| 欧美的性爱网站免费| 欧美日韩啪啪电影| 岛国在线免费视频| 日韩欧美aⅴ综合网站发布| 先锋激情∨在线视频播放| 一个国产在线综合网站| 性在久久久久久| 黄色电影观看久久9| 国内毛片婷婷六月色| 中国女人内射6XXXXX| 国产黄色 A 片免费看| 日韩av在线免费网站| 在线观看黄色电话| 色色婷婷五月| 超碰97资源大奶| 日韩99神马视频播放| 成人一区二区三区四区| 久久久性少妇| 久久97| 亚洲好看强奸乱伦| 国产一区二区三区精品观看啪| 九九aV| 亚洲欧洲偷拍一区| 青青草日本中文字幕| 免费亚洲国产精品久久一区| 久久东京热成人| 99久久无码| 色黄色美女大长腿午夜视频| 国产99 中文字幕日韩小视频| 色色色色色色色色色色色色色色综合| 国产嫩草精品A88AV在线| 玖玖草久草99蜜月一区二区三区| 97精品全部| 国产精品视频内谢女人| 一区二区三区四区免费视频| 大香樵伊人网| 欧美视频激情久久久久久| 久久禁| 久久精品人妻一区| 日操粉逼逼| 中文字幕人妻丝袜| 激情文学 亚洲图片| 女优大全 - 91n| 又大又长又粗又爽又黄| 九九热在线视频| 丁香婷婷激情五月天无毒不卡| 97资源站久久| 亚洲欧洲自拍图片专区满春格| 无码免费精品高清| 日少妇亚洲版| 亚洲成人ab| 操逼操逼视频操逼| 亚洲官网在线| 躁躁躁日日躁2020| 香蕉人人操tv| 伊人aaa| 久久久96| 五月婷婷性爱| 日日干夜夜骑| 青娱乐欧美激情一区二区| 六九九九| 日韩天天综合| 欧美日韩国产色图在线| 97色色,97综合| 欧美综合天天| 人妻熟女字幕一区二区| 2020中文字幕在线| 极品尤物女神在线观看| 91美女在线视频| 91狠狠| 五月综合色| 大香交| av在线免费一区二区| 极品内射| 久久免费99精品久久久久久| 久久久精品日本一道| 蜜臀99久久国产| av资源在线播放天堂| 亚洲男人综合网| 国产亚洲精品美女久久久| 日本一区二区三区精品| 国产内射爽爽大片| 欧美大香蕉在线观看| 99无码| av优播| 97国产人人| 狠狠中文字幕| 人人么人人操| 日本天堂网| 欧美v日韩v亚洲v最新在线| 国产欧美伊人| 九九热AV| 91+欧美| 性爱网站一区二区| 国产熟妇一区二区| 无码丰满熟妇一区二区浪潮AV| 亚洲免费97免费| 少妇啪啪自拍| 久久久内射良家| 婷婷视频在线免费观看| 玖色av| 大香蕉婷婷| 东京热毛片177b2viP| 青青国产精品在线| 成人26uuu| www.男人天堂| 国产成人精品日本亚洲语言| 免费男人的天堂| www.狠狠| 乱伦日本中文自拍| 亚洲污污网站| 伊人久久大香大香线蕉中文| 日韩精品一二三| 婷婷尹人大香蕉免费| 欧美综合天天| 超碰久久草| 强奸a片网| 麻豆成人影音在线| 久久夜嗨| 亚洲少妇综合在线播放| 91热热色| 久久的网站啊啊啊啊啊| 日韩精品碰碰| 97Ai亚洲| 亚洲第一二区另类图| 99久久久久久久久| 韩国三级色呦呦| 日韩78m视频| 日本欧美国内在线| 午夜国产综合视频在线观看| 国产人妻精品一区二区三区秋霞| 婷婷色综合| 亚洲视频1区| 91白虎| 亚洲大色堂| 日本韩欧美在线播放a| 国产精品99999| 日本免费一区二区不卡 | 天天色播亚洲综合网站| 午夜精品久久一区二区| 久欲AV| 色噜噜国产在线| 久久精品国产亚洲AV无码电影| 午夜精品久久久久久久久久久久久| 99久久综合| 激情小说五月天| 啪啪啪东京| 一区二区三区四区理论片| 福利天堂| 婷婷三区| 91久操| 乱伦av麻豆| 天堂v无码免费视频| 熟女熟妇伦久久影院毛片一区二区 | 富女玩鸭子一级毛片| 96精品久久久| 欧美一级专区免费大片 | 麻豆国产96在线| 亚洲精品乱码线路中文字幕| 男女国产精品| 91成人亚洲色图| 日韩欧美偷拍美女视频| 熟妇人妻一区二区| 丝袜 亚洲 偷拍| 伦理片秋霞免费影院| 久久亚洲欧美中文字幕国语| 亚洲爽图| 人人妻人人澡人人爽久久av| 日日嗷| daxiangjiao你懂的| 诱惑人妻欧美一区在线播放| 国产精品青青草| 狠狠穞A片一區二區三區| 国产熟女乱论| 操逼操逼视频操逼| 亚洲国产av中文字幕久久| 久久精品国产精品一区 | 大香蕉青青9| 超碰地址97| 97免费视频网| 日韩av色图综合| 黄色二级片网站| 国产黄a三级三级三级av在线看 | 精品黑人一区二区| 久久久免费的精品| 成人5码视频| 国产精品极品美女视频| 免费观看国产不卡av| 国产精品久久久久久久久久梁医生| 爱爱动态60秒| 日本成a人v网站在线观看| 中文乱码字幕观看| 日韩欧美日韩| 白丝被操91| 国内精品a| 一起草欧美| 日本天天操| 一级久久性爱视频| 四虎影院成年人片| 开心激情婷婷| 国产精品一区二区在钱播放| 亚洲国产一区二区三区在线| 亚洲美女30b| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 欧美一级美片在线观看免费| 免费福利视频中文字幕| 啪啪资源网| 免费综合亚洲中文| 三级三级三级日本99| 99热超碰| 天天综合网1| 国产AV线| 色妇综合网| 操逼无码操逼| 亚洲成人久久一区二区| 99碰碰| 九九玖玖精品| 很很很很操| 98超碰欧美| 人人搞人人插人人操| www.久久制服糖| 新婚人妻扶着粗大强行坐下| 人人摸人人干| 青久操| 成人草草视频| 欧美成人一级麻豆| 视频国产精品未满十八禁止在线观看| 国产精品久久久三级无码| 超碰79人人乐| 强奸熟女一区二区三区| 久久久久99精品成人片蜜臀| 国产精品久久久久久久无码AV| 国产亚洲精品美女久久久久久2021| 欧美十八禁在线看| 性色高清在线| 91久久久久| 国产成人亚洲精品无码最新在线| 国产无码一二三区| 亚洲熟妇丝袜在线观看| 少妇激情AV| 精品国产一区探花在线观看| 美国一区二区免费视频| 色婷婷aV一区二区三区麻豆综合| 超碰日韩美妻| 91亚洲综合| 日本三级R| 久久超碰免费的| 亚洲天堂资源在线| 国产一区二区精品久久99| 日本一本一区二区三区四区五区欧美日韩中文字幕 | 熟女乱伦二区| 久久亚码| 26uuu最新| 日本久久精品| 五月天亚洲网| 久久久亚洲Av| 狠狠躁AV| 大香蕉伊人75| 日本在线播放不卡一区| 夜夜久久| 久久97| 日本高清久久| 日韩高清一二三| 国内偷自视频区视频综合| 婷婷久草一区二区三区| 久久久久久久久久久精| 狠狠操夜夜| 亚洲一二三四区机械| 99re久久| 五月综合久久| 超碰4A| 911粉嫩人妻| 97在线资源| 国产女人和拘做爰视频 | 又大又白奶子| 性欧美999| 日人妻视频91| 色www精品视频在线观看| 人人看黄色视频| 蜜臀av一区二区三区免费观看| 超碰偷拍| 久久亚洲精品成人av| 久久婷婷亚洲欧| 欧美一区二区一级岛国大片| 午夜久久一区二区无码中出| 97超碰香蕉| 夜夜操二区| 密臀视频三区免费网站| 九九综合| 日骚逼视频| 亚州伊人色综台| 国内伊人久久久久久网站视频| 久热伊人| 中文字幕在线免费观看 | 乱伦熟女区| 男人天堂网手机版婷婷| 日韩国产成人自拍视频| 国产AB视频| 久久精品国产亚洲AV成人直播| 天欧美在线| 日本熟妇人妻中出视频| 99热国产| 99无码视频| 男同专区一区二区三区在线| 五月丁香激情综合网| 亚洲成人ab| 91久久国产综合久久| 亚洲色欧美| 综合激情97 | 超碰97护士| 久久色激情一区二区三区| 无码一区免费在线不卡| 诱惑人妻欧美一区在线播放| 乱伦av国产| 自拍第一页| 加勒比大香蕉视频在线| 久久精品人妻一区| 蜜臀久久99精品| 嫩草影院性色| 91色夜| 青青草吊丝| 久操凹凸视频| 中文字幕乱妇免费视频| 熟妇最新先锋一二三区| 成年人三级黄色片视频| www.成人无码| 欧美超碰9798| 国产女人和拘做爰视频| 欧美图片校园春色| 丰满翘臀美女影院视频| 天天操夜夜操狠很操| 天天操熟妇| 欧美熟爽综合| 约操熟妇| 97爱爱爱| 男人的天堂日本东京热| 亚洲成人免费电影| AV乱伦专区| 国产精品粉嫩福利在线| 920日本午夜免费| 在线无码视频| 男人天堂资源| 欧美色涩| 久久天天躁日日躁狠狠躁 | 国产精品一区人妻精品阁在线| 国产精品久久aV| 精品美女人人干| 男人的天堂2018东京热啪啪啪| 日本欧美韩国国产在线| 欧美性爱一区二区三区| 一区二区三区蜜桃成人撸久久东京热| 青青操轻轻| 蜜乳成人AV| 日韩无码第3页| 白 大 人妻 区 在线| 另类天堂| 国产精品嫩草影院免费| 蜜桃av色偷偷av老熟女| 91热色| 国产夫妻一区二区| 曰韩无码777| 8x福利精品第一福利视频导航| 亚洲成人ab| 91高潮喷水美女| 亚洲最大的黄色电影网站。| 欧美一区二区亚洲天堂| 亚洲熟女性高潮久久久| 蜜臀中文字幕| 超碰97.com| 高清肉丝中文无码| 欧洲Au麻豆| 色婷婷影院| 久久无码电影| 国产强奸91| 大香蕉伊人网| 精品国产乱码久久久久久蜜臀| 国产精品国产| 麻豆 亚洲 97| 色诱avtt| 国产高清1234区| www99热| 日本网色| 国产超碰| 久久鲁干| 亚洲免费成人精品电影| 亚洲精品国产无码高清| 国产主播福利| 84YTCOM性无码| 婷婷激情四射| 日韩一级二级三级| 久操免费视频| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 日韩欧美午夜一区二区| 亚洲国产丝袜熟女av| 久热热| 国产一区二区精品久久久不卡蜜臀| 视频不卡中文字幕| 日本不卡一区二区三区| 亚洲中文字幕av| 成人国产视频在线观看| 亚洲爱爱视频一区二区| 性爱av在线免费观看| 欧美在线91| 中文字幕视频免费| 最新av在线| 18禁在线视频| 超碰在线欧美性爱激情| 国产农村妇女精品| 91欧美在线| 91中出| 黑人娇小av在线播放 | 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 中出20p| 色97欧美| 97亚洲精品超碰| 91在线欧美| 麻豆国产精品午夜视频| 国产探花日韩援交| 17c在线成人免费A片观看| 黄色激情电影在线观看| 久久激情亚洲精品无码?V| 91在线精品| 99热自拍| 天天综合AV| 熟女欧美日韩综合婷婷| 后入式在线免费观看60秒| 超碰97在线中文| 91麻豆天美国产欧美高潮| 亚洲欧洲日韩中文字幕一区| 91人妻少妇| 国产精品成人久久一区二区三区| 97人人操人人摸| 日韩操人| 日本裸体久久色噜噜| 1204金沙人妻懂旧版免费| 国产97综合| 2017大香蕉| 嫩呦国产一区二区三区AV| 日本高清一区二区在线| 婷色五月天| 久久只有精品一区二区三区| 精国久久一区二区三区98| 久久亚洲日韩熟女精品| 久操电影| 一本一道vs波多野结衣| 综合色图区| 欧美猛交黑寡妇中文字幕| 后入精品| 天堂69亚洲精品中文字| 亚洲砖码砖专无区2023| oumeisetu综合| 久草精品一区 | 熟女少妇一区二区三区| 大二网站亚洲| 国产精选三级在线观看| 日韩美女久久一区二区三区| 日韩综合97P| 欧美亚洲天堂| 久久婷婷综合国际产色怕| 97在线国产精品| 大屁股国产在线视频| 亚洲91网| av天堂手机版追回| 亚洲码和欧洲精品激情系列| 好湿好紧视频| 1级黄色夫妻对换性交免费看| 日韩人妻无码专区| 黄色十八禁网站| 欧美亚洲今日在线| 亚洲第一狼人丝袜美女另类| 亚洲18禁| 午夜美女诱惑电源网| 久久青青草原免费视频| 天堂蜜桃无码视频一区二区| 国产自产22区| 国产一区二区三区免费视频在性观看 | 七月婷婷综合| 中日高清无码操逼视频| 91天天爱| 亚洲一级黄色毛片| 在线只有精品| 长久操视频| 国产精品久久久久久高清无码免费看| 五月天婷婷久久| 射丝袜大香蕉| 麻豆视频国产一区二区| 婷婷久久综合| 午夜福利合集| 国产尤物AV尤物在线观看不卡| 欧美日韩理论一区| 夜夜欢天天干| 精品国产肉丝袜在线拍国语| 情色五月天网| 蜜乳AV免费观看| 久久国色天香香蕉| 国产久久久久久| 亚洲AV免费在线| 亚洲精品97p| 伊人五月天激情| 色综合超碰超| 日va操| 老女人老91妇女老热女| 99久久久无码精品国产人| 日韩三级网址| 欧差乱伦二三| 日韩欧美成人大香蕉| 91亚洲高清| 天天操女人| 国产精品午夜AV完会免费 | 欧美黄色大香蕉一区二区| 丰满丝袜少妇AV| 黄在线| 青青草久久| 國產尤物AV尤物在線觀看| 国产视频大全| 亚洲第一黄色av网站| 乱久久久| 91天堂色男人的天堂| 日本天天干天天日一区| 睡产熟女乱伦| 亚洲丝袜二区在线| 色五月综合| 天美传媒AV在线播放| 久久国产精品91| 国产激情视频一区区三区| 69AV女优男人的天堂| 男女啪啪网站免费视频| 亚洲人妻熟妇三十三区| 伊人久久在线视频观看| 欧美色图91p| 中文自拍欧美影视| 精品久久久久综合无码| 亚洲最大黄网| 激情五月天插| 综合97久久| 免费观看啪视频| 日韩人妻丝袜中文字幕| 蜜伊人色综合97| 91社操逼| 日比av无码| 青青草自拍视频在线播放| 国内精品久久人妻性色av| 男人的天堂在线| 成人午夜无码视频| 久操精品| 欧美91网站| 九九色热| 日韩免费中文字幕视频| 91色伦综合| 婷婷五月天成人| 久久精品一区二区一8| 国产av热热色| 99久re热视频精品98| 偷拍 欧美 日韩| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 天天弄欧美| 欧洲一级性爱视频在线观看| 无套后入双马尾| 磁力99AV| 日韩免费性爱视频在线观看| 色图综合网| 粉嫩av一区二区三区四季| 久久xx| 日韩欧美成人综合在线| 日本 情色 1区| 老熟女熟妇| 五月天久久久| 国产日韩精品无码去免费专区国产| 后入式999| 96AV久久久| 91干熟女| 中文字幕精品一区欧美| 天天综合网在线91| 狠狠夜色午夜久久综合在线| av资源在线播放天堂| 91人精品妻入口| 后入综合久久| 精品无码一二三四区| 五月婷在线| 看一级特黄a大一片| 神马久久久久久久| 九九九只有精品| 鸥美插入视频| 视频二区美腿丝袜制服人妻欧美 | 啊啊啊爽爽| 91日日夜夜| 天天碰操中国年青熟妇| 婷婷五月天福利| 青草青草久热| 亚洲欧洲日本精品中文a∨| 九九九九九九九九九国产精品 | 99久久com免费视频′| 熟妇操花| 久久美女国产| 亚洲欧洲日本精品中文a∨| 欧美亚洲系列| 91久久精品美女高潮喷水| www.AV有限公司一区| 色性荡荡荡荡视频| 五月天激情网站| 亚卅熟女乱色| 国产www色在线观看| 国产男女边吃边摸视频网站| 亚州综合色| henhen91| 色网亚洲人| 美国三级日本三级久久99| 嗯嗯,好大,好爽,好骚| 亚洲最大黄网| 67914亚洲精品| 99re视频在线观看这里只有精品| 亚洲码专区| 欧美日韩香蕉| 十八禁成人网站在线观看| 亚洲制服aⅴ中文字幕| 最新国内自拍av免费| 操b在线观看| 亚洲欧美国产va在线播放频| av中亚| 中文字幕熟女人妻丝袜| 亚洲日韩美女丝袜美腿人妻视频| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 婷婷丁香激情| 国产熟女精品一区二区| 日日超碰亚洲| 人人操人人摸人人骑| 极品另类| 国产精品女aA片爽爽视频| 黄色无码高清黄色无码网站| 亚洲综合第一页| 国产精品999aaa| av一区二区三区不卡| a片久久久久久久久久久久| 国产无码三级视频在线观看| 午夜男女爽爽大片免费观看| 欧美精品成人一区二区在线观看| 日本孕妇一区二区视频操逼免费看 | 9久精品视频在线观看| 九九国产| rivers-china.com| 亚洲天天天| 蜜臀久久99精品久久久久久婷婷 | 夜夜操夜夜高潮夜夜爽国产精品区| 久艹99| 高颜值美女口爆高潮浪叫| 超碰色老头| 一级婬片120分钟试看| 日韩三A大片在线观看| 色婷婷激一区二区三区| 少妇滛荡视频| 成人欧美一区二区三区黑人一| 午夜精品一区二区三区三上悠亚| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 国产精品黄色三级av| 国产97视频免费观看| 国产亚洲99久久精品| 午夜呻吟欧美| 精品少妇人妻| 久九九九九九九九热| 伊人影院日本| 377p欧洲日本亚洲大胆| 欧美 亚洲 偷拍自拍| 欧美Ⅴ性爱| 国产精品网站免费| AV色五月天| 高清孕妇孕交 交| 国产91亚洲精品一区二区三区| 人人操人人操人人操人人操人人操人人人11.CM | 亚洲伊人久久精品影院| 欧美三级偷拍|