国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Caveman調(diào)試法:一行print解決線上疑難問題的基礎(chǔ)功底

Caveman調(diào)試法:一行print解決線上疑難問題的基礎(chǔ)功底 1. Caveman調(diào)試到底在說什么被低估了三十年的基本功1.1 從一次線上事故說起上個月我們有個服務(wù)線上偶發(fā)卡頓P99延遲每隔半小時就飆一下持續(xù)時間不長也就兩三秒但下游投訴不斷。我們一群人圍著監(jiān)控面板看了兩個小時懷疑了GC、懷疑了連接池、懷疑了網(wǎng)絡(luò)抖動甚至準(zhǔn)備讓運維重啟節(jié)點。最后是我一個同事擠過來說了句讓一讓在那個方法里加了三條print重新部署了一臺測試機壓了二十分鐘問題直接定位到了——一個被吞掉的異常引發(fā)了一連串重試堆積。那一刻我突然意識到一件事不管我們平時用多少高級工具遇到真正難搞的問題時最原始、最笨的辦法往往是最后那個管用的。這個最笨的辦法在程序員圈子里有個很直白的名字——caveman debugging原始人調(diào)試法。所謂caveman字面意思就是穴居人你可以理解成一個什么都不講究、拿最基礎(chǔ)的家伙事兒解決問題的原始人。在編程領(lǐng)域它特指那種最樸素的排查手段往代碼里加print、echo、console.log把關(guān)鍵狀態(tài)打到標(biāo)準(zhǔn)輸出或者文件里然后靠肉眼觀察行為、推斷原因。聽起來特別沒技術(shù)含量對吧但相信我這個沒技術(shù)含量的東西是每個工程師都該重新?lián)炱饋淼幕竟Α_@篇文章我想認(rèn)真聊聊caveman調(diào)試法。它到底是什么、為什么在2020年代依然好用、以及怎么用它同時避免踩坑。文章里會有一次真實的排查復(fù)盤、一套我用了很多年的輸出方法論以及一張什么時候該當(dāng)原始人、什么時候該上現(xiàn)代工具的決策清單。不管你是剛?cè)腴T的新人還是被各種可觀測性平臺繞暈的老兵應(yīng)該都能在里面找到點用得上的東西。1.2 caveman調(diào)試法的本質(zhì)是最小可觀測閉環(huán)很多年輕同事一聽到用print調(diào)試就皺眉覺得這是沒有IDE、沒有調(diào)試器時代的老古董做法。但我得說他們誤解了caveman的本質(zhì)。caveman調(diào)試的核心不叫打印信息而叫親手制造一個觀測點。普通的工作方式是這樣的代碼跑出問題你在腦海里推演一遍覺得可能某個環(huán)節(jié)出了岔子于是去看那個環(huán)節(jié)的代碼用邏輯去證明它沒壞。這種模式靠的是靜態(tài)推理推理鏈條一旦長了就容易斷在某個假設(shè)上。caveman的方式完全反過來代碼跑到某個位置時我親手塞進去一個觀測點讓它把當(dāng)時的真實狀態(tài)吐出來。這個觀測點不是別人幫我埋的也不是框架自動生成的而是我此刻根據(jù)當(dāng)前懷疑點現(xiàn)做的。它只回答一個問題在當(dāng)前這個時間點、這條路徑上程序到底經(jīng)歷了什么。有輸出說明這個分支確實執(zhí)行了沒有輸出說明執(zhí)行路徑和你想的根本不一樣——不管結(jié)果是哪一種你都拿到了一份新的證據(jù)。這就是為什么它可靠。它依賴的東西少得可憐只需要一個能從代碼里輸出文字的機制。在Python里是print在Go里是fmt.Println在JavaScript里是console.log在C里是printf。這些函數(shù)幾乎是語言誕生第一天就在的東西不會因為版本升級而改變不會因為某個SDK出bug而失效。你寫下的每個探針都直接連接著當(dāng)前進程最真實的狀態(tài)。1.3 它和寫日志完全是兩碼事這里必須澄清一個容易混淆的地方caveman調(diào)試不等于寫日志。很多人說我系統(tǒng)里日志打得挺全的為什么還要用print——好問題。日志是面向長期運行的它需要分級、需要結(jié)構(gòu)化、需要考慮性能開銷、需要設(shè)計字段結(jié)果往往是把大量信息扔進一個中心化平臺里等出問題時再去搜。但caveman調(diào)試是面向當(dāng)下戰(zhàn)斗的它只做三件事臨時加、快速看、完事刪。日志是廣譜的、被動記錄的像是給整個系統(tǒng)裝了一圈監(jiān)控攝像頭caveman是焦點式的、主動刺探的像是你蹲在某個關(guān)鍵路口專門等那個嫌疑對象經(jīng)過。你排查問題時系統(tǒng)里現(xiàn)有的日志往往不能回答你最想知道的那個問題——這個函數(shù)執(zhí)行到這行之前那個變量到底變成了什么——因為沒人知道你會關(guān)心這個變量。而一條臨時加的輸出恰好就能回答它。明白了這個前提之后我想接著聊聊為什么很多時候高級工具反而不如這原始一招。這不是情懷而是工程上的現(xiàn)實。2. 為什么調(diào)試器和日志框架有時真的不如一行print2.1 斷點調(diào)試的失效場景說實話我平時用得最多的還是調(diào)試器。單步、斷點、watch表達式這些在寫單元測試、追本地邏輯問題時效率很高。但一旦問題跑到特定的環(huán)境里調(diào)試器會成建制成地失效。第一類是多線程和并發(fā)問題。你在一處斷點停下來你看到的是這個線程此刻的局部狀態(tài)但問題往往出在另一個線程的時序上。你一停在斷點上整個程序的執(zhí)行節(jié)奏就被改變了本來能復(fù)現(xiàn)的競態(tài)條件可能就此消失了。這跟海森堡測不準(zhǔn)原理有點像——觀測動作本身干擾了被觀測對象。第二類是分布式環(huán)境。服務(wù)有幾十個實例負(fù)載均衡隨機轉(zhuǎn)發(fā)你用調(diào)試器attach到其中一個實例可下一次請求可能根本不經(jīng)過它。你得在多臺機器上反復(fù)跳出跳入效率低到讓人想砸鍵盤。第三類是偶現(xiàn)問題。問題跑幾個小時才出現(xiàn)一次你總不能盯著調(diào)試器等它跳斷點而且斷點一命中程序就暫停了后續(xù)的時間窗口早過去了。在這些場景里print式的觀測反而有它獨特的價值它不影響執(zhí)行節(jié)奏不需要交互式環(huán)境只要代碼跑到那里輸出就自然產(chǎn)生。你可以讓它在全量實例上跑跑幾個小時最后把日志拉回來對比——這是調(diào)試器做不到的。2.2 日志框架的過度設(shè)計帶來的坑再來說說日志框架。現(xiàn)代的日志框架確實強大異步寫入、級別過濾、鏈路追蹤、自動采集。但強大是有代價的代價就是你能看到的永遠只是框架愿意讓你看到的那部分。我印象很深的一次有個服務(wù)用了一個挺流行的日志庫開了異步刷盤平時日志秒出但壓測時發(fā)現(xiàn)最新的一條日志丟了。原因是異步緩沖區(qū)滿了舊的日志沒來得及落盤新的日志直接被丟棄。我當(dāng)時追了很久最后發(fā)現(xiàn)那一行關(guān)鍵的錯誤信息恰恰就是被丟的那條。如果當(dāng)時用的是print直接同步寫到文件或者終端絕不至于這樣。還有日志級別的問題。線上環(huán)境為了控制磁盤占用info級別的日志通常是關(guān)掉的。但你排查問題時真正需要的就是那幾條info——它們記錄了關(guān)鍵節(jié)點的進去和出來。你急著想看卻發(fā)現(xiàn)日志級別配置在環(huán)境變量里、在配置中心里、在一層層封裝后面改起來還要走變更流程。caveman式的輸出呢它不跟你講級別不跟你講異步不跟你講采樣率。它就是一個同步寫入你寫了就有沒寫就是沒有。有時候這種直白粗暴反而是最大的優(yōu)點。2.3 讀代碼和看行為之間的鴻溝還有一個深層原因解釋了為什么這原始的一招一直有效靜態(tài)讀代碼和動態(tài)看行為之間永遠存在一條認(rèn)知鴻溝。一個系統(tǒng)跑起來之后真正執(zhí)行的路徑、時序、數(shù)據(jù)分布可能和你在代碼里腦補出來的完全不同。你以為某個分支永遠不會進但實際生產(chǎn)數(shù)據(jù)里它就是會進你以為兩個操作是原子的但實際上線程調(diào)度把它們打得七零八落你以為一個第三方庫會拋異常但它好像在某些情況下會靜默吞掉。代碼是靜態(tài)的行為是動態(tài)的兩者之間的鴻溝靠讀代碼填不平只能靠觀測填。caveman調(diào)試法就是最直接、最符合直覺的觀測方式。它不依賴你對框架的理解不依賴你對工具的熟練度只依賴一行輸出和你的眼睛。這個門檻低到幾乎每個人都會用但也正因為太低反而被很多人忽略。3. 一次真實事件復(fù)盤三行輸出定位線上周期性卡頓3.1 問題表現(xiàn)與最初的手忙腳亂回到開頭那個線上事故。我們平臺有個任務(wù)調(diào)度服務(wù)用的技術(shù)棧是Python gunicorn 多線程下游依賴MySQL和Redis。現(xiàn)象很規(guī)律每隔大概30分鐘P99延遲從平時的80ms飆到3秒持續(xù)兩三秒后恢復(fù)。業(yè)務(wù)方天天來催說任務(wù)堆積下游超時。剛開始我們的排查思路完全是散彈槍式的。第一輪懷疑是GC停頓把gc日志拉出來看了看并沒有明顯的長停頓第二輪懷疑是Redis連接池耗盡慢查詢指標(biāo)翻了一圈也沒有異常第三輪懷疑是網(wǎng)絡(luò)抖動翻了一大圈基礎(chǔ)設(shè)施監(jiān)控還是沒找到證據(jù)。那是一段特別磨人的時間——指標(biāo)都是正常的但服務(wù)就是卡。你也遇到過這種情況吧所有常規(guī)指標(biāo)都正常但用戶感知就是很差。這種時候常規(guī)手段已經(jīng)不夠用了必須把觀測粒度從系統(tǒng)級下沉到代碼級。3.2 決定做減法只留最小化輸出探針當(dāng)時是我那個同事拉住了準(zhǔn)備重啟節(jié)點的我們。他說了句讓我一直記到現(xiàn)在的話我們還沒證明哪段代碼慢為什么要重啟然后他打開代碼那個請求處理入口長這樣先取任務(wù)再調(diào)下游最后寫結(jié)果。他直接在三個步驟前后加了三行輸出import time def process_task(task_id): t0 time.time() print(f[TRACE-A] task{task_id} start at {t0}, flushTrue) task get_task(task_id) # 第一步從DB拉任務(wù)數(shù)據(jù) print(f[TRACE-B] got task, spent {time.time() - t0:.3f}s, flushTrue) result call_downstream(task) # 第二步調(diào)用下游接口 print(f[TRACE-C] downstream done, spent {time.time() - t0:.3f}s, flushTrue) save_result(task_id, result) # 第三步寫結(jié)果 print(f[TRACE-D] saved, total {time.time() - t0:.3f}s, flushTrue)注意他走了兩個關(guān)鍵的細節(jié)。第一個是flushTrue保證print不是只往緩沖區(qū)里一放而是立刻刷到日志文件否則突然崩潰時最后幾行就丟了。第二個是給每行輸出加了一個固定前綴TRACE-A、TRACE-B這樣的標(biāo)識方便后面用grep一把過濾出來。這三行輸出不需要改動任何業(yè)務(wù)邏輯也幾乎沒有性能開銷。我們把改了代碼的版本發(fā)到那臺有問題的實例上——注意只發(fā)一臺不全部發(fā)——然后等著那個30分鐘的周期出現(xiàn)。3.3 關(guān)鍵發(fā)現(xiàn)與根因一場被吞掉的異常等了一個周期日志出來了。我們拉了那段時間的三行輸出結(jié)果很有意思[TRACE-A] task10221 start at 14:30:01.201 [TRACE-B] got task, spent 0.012s [TRACE-C] downstream done, spent 0.013s [TRACE-D] saved, total 0.021s一切正??偣膊?1毫秒。那卡頓到底在哪我們又把日志多拉了一段仔細看了下時間線突然發(fā)現(xiàn)了一個被忽略的細節(jié)那三秒的空白不在任何TRACE標(biāo)記之間而是在整個請求入口的最前面。也就是說進程從收到任務(wù)到執(zhí)行process_task的第一行print中間隔了整整2.7秒。順著這個線索往前查問題很快水落石出。gunicorn在接受連接之后、調(diào)用worker處理之前有一段任務(wù)是優(yōu)先處理積壓的重試任務(wù)而那個重試邏輯有一個異常處理塊用了一個特別寬泛的except Exception把錯誤全吞了。某些定時任務(wù)失敗后會自動進入重試隊列重試又失敗又被塞回隊列形成惡性循環(huán)。每隔30分鐘重試隊列里剛好堆積了一批任務(wù)這個循環(huán)要一次性把它們處理完于是那幾秒的停頓就出現(xiàn)了。而因為它把異常吞了常規(guī)的錯誤日志里什么都看不到。如果沒有那三行print我們恐怕還在盯著GC和Redis猜來猜去。排查鏈路從系統(tǒng)指標(biāo)一路收窄到入口之前的某段代碼靠的正是最小化的、帶明確標(biāo)記的輸出探針。3.4 修復(fù)與驗證確認(rèn)病灶之后才能下刀根因明確了修復(fù)反而簡單把那個寬泛的except Exception改成精確捕獲具體的異常類型并給重試邏輯加上最大重試次數(shù)和退避時間杜絕無限循環(huán)堆積。改完之后我們把三行TRACE輸出保留在那一臺上跑了兩小時周期性的卡頓消失了區(qū)間拉長再也沒有出現(xiàn)那個2.7秒的空白。這個項目給我留下的收獲比一次故障本身大得多。我后來把這次排查的套路拆成了可重復(fù)使用的方法論下面具體說。4. 讓原始輸出變得好用我的printf排查方法論4.1 一切從給輸出編號開始如果你去網(wǎng)上搜到處都會有人教育你不要亂加print。但我要說的是另一面亂加print確實沒價值但有方法地加print是效率極高的排查手段。問題的關(guān)鍵不在要不要用print而在怎么用print。我的第一條經(jīng)驗是每個探針都要有唯一標(biāo)識。在多人協(xié)作的代碼庫里大家的輸出很可能混在一起你打了一百行print結(jié)果別人的排查和業(yè)務(wù)日志也混在里面根本沒法看。所以我習(xí)慣用一個統(tǒng)一的前綴比如TRACE-A、TRACE-B或者帶上當(dāng)前所在函數(shù)的名稱比如[process_task]。這樣做有兩個好處一是用grep一搜就能把所有探針輸出拉出來二是輸出順序本身就是執(zhí)行路徑的一種可視化。一個典型的標(biāo)記格式長這樣# 推薦格式[模塊/函數(shù)名] [步驟標(biāo)識] 關(guān)鍵變量內(nèi)容 print(f[worker.process_task][A] task{task_id} received, flushTrue)有了統(tǒng)一前綴刪除探針這件事也變得安全可控。排查結(jié)束后搜一下TRACE或者你的前綴所有該刪的地方一目了然不用擔(dān)心漏掉哪個。4.2 帶上不可變上下文別怕信息冗余第二條經(jīng)驗輸出里一定要帶上定位上下文最好包括時間戳和請求ID。很多人只打印一個start或者end然后看著輸出發(fā)呆——這行日志到底是誰打的是哪個請求觸發(fā)的發(fā)生在什么時候全都對不上號。時間戳的精度也有講究。排查性能問題時毫秒級都嫌粗糙我習(xí)慣用到微秒特別是在Python里import time print(f[process_task][A] task{task_id} ts{time.time():.6f}, flushTrue)(time.time())返回的是帶小數(shù)部分的秒.6f就是微秒級精度。在對比兩個探針之間的耗時差時這個精度能讓你看到毫秒以下的波動把那些十幾毫秒的小延遲也找出來。請求ID就更好用了。在Web服務(wù)里入口處通常能拿到一個trace_id或者request_id把它放進每一行輸出里你就能精確地把某個請求的完整路徑從一堆并發(fā)日志中切出來。哪怕沒有框架幫你傳遞trace_id你也可以在函數(shù)入?yún)⑸舷曼c功夫手動把它傳進去——這在本地排查時成本很低但帶來的信息增量極高。4.3 條件輸出只在狀態(tài)變化時說話第三個原則是控制噪音。如果一段代碼會被調(diào)用十萬次你在里面無腦加print輸出文件瞬間就被打爆了你要找的線索也會淹沒在無數(shù)相同的行里。我的做法是加條件。只有滿足特定條件時才打輸出比如if task.priority high or elapsed_ms 500: print(f[scheduler][skip] task{task.id} waited{elapsed_ms}ms, flushTrue)這樣不光是邏輯分支被覆蓋到性能異常路徑也被覆蓋到了。排查偶發(fā)卡頓時這種只在超預(yù)期情況下才說話的探針效果比每行都打強得多——它把注意力直接拉到了異常點上。還有一種很實用的形式是計數(shù)器配合循環(huán)。在循環(huán)里加一個累加變量每1000次才打一行既能看到進度又不會刷屏for i, item in enumerate(item_list): process(item) if i % 1000 0: print(f[batch_worker] progress{i}/{len(item_list)} last_batch_cost{time.time() - batch_start:.3f}s, flushTrue) batch_start time.time()4.4 一套現(xiàn)成的排查手段清單把上面的經(jīng)驗整理成一張表你在實戰(zhàn)中可以直接照著用場景探針寫法要點關(guān)注什么確認(rèn)某段代碼是否執(zhí)行打印唯一標(biāo)記 關(guān)鍵參數(shù)值有沒有這行輸出定位性能瓶頸在每相鄰步驟間打時間戳精確到微秒相鄰時間差哪段最大捕捉偶發(fā)異常在異常except塊里打印完整堆棧異常被吞后仍有記錄判斷分支走向在每個if分支末尾打標(biāo)記走了哪條分支排查并發(fā)超時輸出請求ID 時間戳多線程各打各的同一請求ID各階段時間線反向確認(rèn)循環(huán)是否卡住每N輪打一次進度循環(huán)是否在推進這個清單是我自己在重溯、排障時會對照著選型的。選對了探針形態(tài)一次排查很可能就能少掉一半彎路。不過caveman調(diào)試法也不是萬能的。長期用過之后我慢慢摸清了它的邊界——什么時候上它什么時候應(yīng)該果斷換工具。5. 什么時候該當(dāng)原始人什么時候該上現(xiàn)代工具5.1 caveman調(diào)試適合的五個場景根據(jù)我的實際經(jīng)驗下面這幾類場景里caveman式的輸出探針幾乎是最優(yōu)解。第一種是低概率復(fù)現(xiàn)的bug。問題跑幾小時才出現(xiàn)一次你不能開著調(diào)試器干等但你可以加好探針讓它運行著等它自然撞上。這像是布了個捕獸夾而不是派人站崗。第二種是多線程/異步亂序問題。時序錯了、某個共享狀態(tài)被改亂了套你很難用斷點抓住那個作案的瞬間。但你就需要裸的fmt.Println把每個線程進入退出關(guān)鍵區(qū)的時間打出來人眼一看亂序就出來了。第三種是沒有日志也沒有監(jiān)控的老系統(tǒng)。這種系統(tǒng)你不可能要求它接上APM但加幾行輸出還是可以做到的——不過在線上老系統(tǒng)加輸出前要先確認(rèn)改動是納秒級開銷而且能隨時刪。第四種是分布式環(huán)境初篩。整個請求鏈路跨了好幾個服務(wù)問題到底出在哪個環(huán)節(jié)都不知道。與其先鋪一堆全鏈路追蹤不如在懷疑的幾個邊界點各打一行輸出先把范圍縮小到一個服務(wù)再用專業(yè)工具深入。這種方式成本最低見效最快。第五種是你完全陌生的代碼庫。接手一個項目不知道該從哪看起加一行print確認(rèn)程序走到了哪一步比在那兒瞎猜這個入口到底通不通要靠譜得多。這也算是我這些年快速上手新項目的一個心法。5.2 不該用caveman的三個場景反過來也有幾個場景是我明確不建議用原始辦法硬扛的。第一是內(nèi)存泄漏的定位。泄漏往往發(fā)生在你沒在關(guān)注的角落你需要的是用profiler對堆快照做對比分清哪些對象在持續(xù)增長。print加在這類場景里只能在宏觀上告訴你內(nèi)存漲了但漲的那些對象是誰、從哪里來探針根本無從得知。第二是復(fù)雜的調(diào)用鏈追蹤??绶?wù)、跨消息隊列、跨定時任務(wù)的調(diào)用鏈靠文本輸出是拼不出來的這時候該用帶traceId的鏈路追蹤系統(tǒng)讓系統(tǒng)自動把各環(huán)節(jié)串起來。第三是生產(chǎn)環(huán)境的長期可觀測性建設(shè)。caveman是臨時工不是正式員工。生產(chǎn)上要建的是結(jié)構(gòu)化日志、聚合告警、監(jiān)控大盤。拿print當(dāng)長期日志寫的話過兩周你就得面對一堆沒人看得懂的臨時輸出。團隊協(xié)作時尤其忌諱這個——你加的臨時輸出過了三個月別人還在看到會怎么想這個邊界在實戰(zhàn)中是動態(tài)的。我的習(xí)慣是懷疑不明確、范圍未收窄時先用caveman快速放探針一旦鎖定方向再切換到對應(yīng)的專業(yè)工具做深入分析。兩種手段不是對立關(guān)系而是接力關(guān)系。6. 除了排查問題caveman精神還能在哪些地方發(fā)力6.1 極簡腳本勝過重型框架Caveman精神其實不只在調(diào)試時好用。它背后那種用最原始、最可控的手段解決眼前的問題的思路在很多地方都能遷移。我自己感觸最深的是寫自動化腳本。很多人一上來就搭框架、引依賴、設(shè)計抽象層一套小工具的代碼量比真正的業(yè)務(wù)邏輯還多。但很多時候一個需求只是每周把某個目錄下的臨時文件清一下或者從接口拉個數(shù)據(jù)存下來。這種場景我用純Python標(biāo)準(zhǔn)庫或者一組shell命令就能寫完不加任何額外依賴。減少依賴就是減少未來的坑。腳本這樣寫之后維護它的人也會感謝你——所有邏輯都明明白白地攤在那里沒有藏在框架層后面。6.2 shell命令組合拳比想象中的更強大這里的caveman式自動化我指的是多用系統(tǒng)的原生命令做組合和管道。就拿排查問題時的常用操作來說吧# 看最近一分鐘內(nèi)進程的CPU情況 top -b -n 1 | head -n 20 # 從一堆日志里按關(guān)鍵字找出帶有時間戳的行并排序 grep ERROR app.log | sed s/^\[\(.*\)\].*/\1 / | sort | head -n 30 # 統(tǒng)計某個狀態(tài)碼在五分鐘內(nèi)的分布并實時刷新 tail -F access.log | awk {print $9} | sort | uniq -c這些命令看起來原始但組合起來之后的表達能力遠超想象。我有的同事傾向于引入一堆專門的日志分析工具但在排查初期一個grep加一個awk往往就能把問題范圍縮小到一行代碼里。這不叫退步這叫掌握了事物底層之后的自如選擇。6.3 簡單直接的方式做監(jiān)控預(yù)警還有一個讓我特別受益的用法是最原始的監(jiān)控模板。有些指標(biāo)我不想為了它去搭一套完整的監(jiān)控系統(tǒng)這時候幾行shell加一個系統(tǒng)內(nèi)置定時任務(wù)就夠了# 每5分鐘檢查一次服務(wù)健康狀態(tài)異常時記錄時間戳 */5 * * * * curl -sf http://localhost:8080/health /tmp/health_ok.txt || date /tmp/health_fail_times.txt甚至你可以在關(guān)鍵腳本里加一個請求耗時超限的判斷超了就寫一行到某個文件配合定時查看。這種監(jiān)控強度當(dāng)然比不了專業(yè)系統(tǒng)但勝在零成本、零依賴、可移植。你放在任何一臺機器上它都能馬上開始干活。如果這種caveman式的基礎(chǔ)監(jiān)控已經(jīng)能覆蓋絕大多數(shù)場景你就可以把更重的工具留給那些真正需要它們的少數(shù)問題。說到底這些做法的共同點是當(dāng)情況足夠明確時不要被工具本身絆住手腳。工具是拿來幫你解決問題的不是拿來證明你用得多高級的。最后再分享一個小技巧吧。我每次加臨時探針時都會在輸出前后加一條特別顯眼的分隔線比如連續(xù)打十幾個號。這樣做有兩個好處一是排查時一眼就能從海量日志里把探針段落框出來二是收尾時搜索分隔線就能把所有探針一網(wǎng)打盡不會留坑在代碼里。別小看這個習(xí)慣——我見過太多人因為沒加標(biāo)記最后臨時輸出混入正式版本被運維追著問這是什么鬼日志。原始人debugging這件事說到底不是讓你放棄現(xiàn)代工具而是讓你始終保有那個最簡單的抓手。手里拿著錘子看什么都是釘子固然不好但只認(rèn)工具箱里那套高級裝備、把最趁手的基本功丟了那才真的是撿了芝麻丟了西瓜。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲中字慕不卡| 日韩有码一区三区| 加勒比日本在线| 亚洲性高潮| 亚洲少妇综合在线播放| 大香蕉一人| 超碰成人国产| 香蕉免费一区二区三区不读| 国产精品成人无码a v毛片| 欧美一区91大爱| 日日玩天天干| 欧美性生活综合| 亚洲综合色在线| 久久精品欧美一区二区三区不卡| 人人妻人人操人人乐| 精品人妻一区二区三区四区| 色色激情五月天| 欧美热图99| 9999免费精彩视频| 人妻天堂网| 五月丁香色婷婷| 亚洲另类色综合网站| 可以在线观看AV的网站| 东京男人天堂| 刺激性视频黄页| 亚洲国产精品成人久久蜜臀| 人人手机欧洲亚洲国产人妻| 中国AAAAAA黄色片| 嫩草伊人久久精品| 高清成年美女黄网站免费大全| 天天综合影院91| 乱伦色图网址是多少| 西西美女视频网| 国产精品爽爽v| 九九九精品一区二区无码| 最新国内自拍av免费| 亚爽爽爽爽爽爽爽爽| 亚洲av综合色区无码一| 96精品久久久| 一二三四日本视频高清| ,成人免费啪啪视频| 91欧美偷拍| 人人操人人插人人摸人人干| 超碰久在线天天做| 亚洲五月婷婷| 另类图片天天影视| 四虎国产成人精品免费一女五男| 国产亚洲国产超碰| 国产毛片久久久久久久| 91青青| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 乱操9999| 99色骚| 日韩中文字幕视频在线观看| 日韩在线欧美精品一区二区| 欧美精品亚洲精品日韩传电影| 五月丁香狠狠爱| 在线观看不卡一区二区三区| 精品对白久久不卡| 中出人妻中文字幕91在线| 亚洲av夫妻操穴网| 尤物黄色在线观看网站| 色综合91好| 青青国产在线拍揄自揄拍| 亚洲国产午夜真人一级片中文字幕精品黄网站| 大香蕉一级黄色片久久| 热热色国产一二区AV| 95人妻爽爽人人做人人澡| 1人人看人人摸人人操| 美欧色综合| 亚洲中文字幕一区| 刺激精品视频| 另类小说五月天| 综合久久久久久久综合网| 超碰九区| 91精品操美女| 999综合色| 九九热九九热| 小草精彩毛片| 综合影院亚洲| 99久在线精品99re8| 性爱视频免费网址| 99999re| 97免费视频在线观看视频| 激情文学网伊人| 亚洲成熟国产精品美女| 91色人妻| 日韩成年人性爱视频| 999色欧美中文字幕| 青娱乐蜜桃臀AV色婷| 五月花婷婷| 色综合色欲色综合色综合色综合| 强奸乱伦av电影| se吧提供91精品国产91久久久久久| 噜噜瑟| 成熟熟女国产精品一区二区| 嗯嗯啊啊视频一区二区三区| 中文字幕av久久爽Av| 后入 亚洲 美女 射| 色999人与兽| 久热9| 日韩av影片在线观看| 不卡av在线中文字幕| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 男生女生啊啊啊啊| 亚洲综合骚逼| 久久久久921| 精品一二三区四视频| 欧美色图偷拍另类| 农村妇女精品一区二区| 91熟女.com| 婷婷久草| 91 亚欧| 尤物视频网 刘玥| 一摸二插三插| 久久综合97| 香蕉99秘 一区精品蜜桃臀| 欧美综合1性辶| 青青草女人天天干| 九九九九9999| 国产性爱乱伦AV| 国产一级αv免费看片| 极品极品色影院| 9999免费精彩视频| 中文字幕大片三级狠狠干| 午夜精品一区二区三区三上悠亚| 国产日本熟女顶级一区二区三区视频| 人人妻人人操人人乐| 亚洲人在线成线成人| 很黄很污的免费网站| 亚洲精品一区二区三区新线路| 少妇诱惑视频| 黄站在线免费观看| 亚洲欧美色图片| 精品人妻中文字幕4399| 人人看人人摸人人色| 五月婷婷综合网| 口爆综合网| 美女高潮视频91| 国产亚卅97| 久久国语| 97亚洲欧美| 少妇人妻好深太紧了vr91| 久久日韩精品一区二区| 久久久久国产一区二| 国产精品99久久久www| 大香交伊人网| 97频视在线| 老熟乱一区二区三区四区| 欧洲精品一级二级精品综合视频综合| 男人的天堂午夜av| 女优视频第10页| 国产欧美美女免费观看视频| 鸥美极品| 九九亚洲| 国产一区二区三区影片| 91蜜臀熟女| 日韩国产十八禁| 亚洲 无码 有码 中文字幕| 草草草视频| 亚洲精品乱码线路中文字幕| 丁香五月成人| 国产自啪精品视频网站黑丝| 嗯嗯啊啊好爽| 99久久e免费热视| 男人的天堂啪啪啪啪啪蜜桃不卡| 亚洲精品欧洲精品| AV中文字幕三四五| 国产操操日韩三级黄| 国产一区二区免费福利片| 人人扣人人操| 后入福利| 变态乱伦伪娘灌肠一区二区| 爆乳免费黄网站| 少妇精品久久久| 成人国产二区三区在线,男女精品。| 精品国产三级av韩国在线| 激情熟女12P| 日韩久久三区| 国产精品对白自产拍| 日韩黄片影院| 97内射偷拍| 欧美日韩精品久久久久东北老熟妇| 青青草国产欧美非洲黑人| 亚洲精品无码久久AV| 中文字幕在线24| 一本一道久久综合久久| 成年人性爱日韩| 久操免费观看| 5278欧美一区二区三区| 久久爱超碰网| 欧美一级AAAAAAA| 亚洲欧洲小说图片视频 | 精品 码产区一区二-1080P高清在线www-B029AV| 亚洲自拍一区夜夜操| 国产精品乱码久久久久| 99在线免费视频| a片亚洲一本通视频| 天美91| 婷婷色导航| 91男人天堂网| 岛国片在线观看视频亚洲| 很狠操| ..日韩av毛片精品久久久| 超碰国产情侣自拍网| 极品少妇久久久| 性爱乱伦一区| 中文字幕三四五区| 欧美亚涩| 17c嫩草51久久91嫩草| 亚洲情色91| 清纯唯美第一页| 亚洲AV无码国产成人| 91久久堂| 操屄不卡视频| 91少妇人妻| 天天综合精品| 欧美性爱一区二区三区| 久久五月婷| 欧美淫乱视频| 东北女人av| av三级电影在线播放| 国产按摩一区二区三区| 久久亚洲日韩国产欧| 人妻AV在线| 美女高潮国产高清| 亚洲色图 欧美热图 清纯唯美 另类自拍| 999久久久九九九九| 欧美综合骚| 免费岛国一级片| 一区黄二区黄| 国产狂喷潮在线精品| 美女91在线观看| 国产一级内射高清视频| 91美女視頻| 最新日产中文在线麻豆| 91情色在线| h在线看免费版在线看| 亚洲不雅视频1区二区| 女人的久久久| 久久久 国产精品| 五月丁香激情四射| 亚洲天堂久| 91日韩在线| 97免费视频在线| 麻豆国产av网| 亚乱色| 日本道人妻久久久在线不卡色视频| 国产精品白虎| 欧亚乱色熟女一区二区| 超碰九7免费| 91撸色网 玖玖网 欧美| 黄片不用下载在线观看| 久9爱精品| 99亚洲人人| 亚洲国产高清福利视频| 婷婷伊人五月| 超碰偷拍| www被窝色com| 亚洲美欧999| 日本一区二区不卡精品| 久久精品国产亚洲AV清纯| 色悠久久久av| 老汉网| 天天日天天干天天摸天天操| av强奸乱轮| 亚洲伊人久久精品影院| 熟女人妻一区二区三区| 五月婷婷丁香| 97超碰人人模人人拍人人| 天天拍天| 超碰天天久久79| 四色永久成人网站| 超碰人人草| 你想操日本小逼吗| 伊人操你| 精品国产乱码| 国产一区在线观看无码AV| 中文字幕人妻丝袜乱一区三区| 中文字幕二区日韩天堂| 国产精选三级在线观看| wwwxxx日本爽| 成人免费性爱视视| 97免费视频在线| 亚洲欧洲无码一区夜| 性爱动态120秒| 国产熟女乱论| 成人性爱美曰韩| 欧美性生活免费网| 伊人网免费视频| 99热在线播放| 国产综合久| 精品九九九九九九| 久久爽爽精品| 狠狠做深爱婷婷久久二区| 四虎av在线| 欧美成人AⅤ大片在线观看| 国产激情在线| 中文字幕日韩精品久久| 久久东京热久久| 在线洲亚线| juliaann丝袜大战黑鬼| 1769一区| 91亚洲在线| 国产精品操| 综合网少妇| 久久久性少妇| 91美女视频电影| 中文字幕无码不卡啪啪| 人妻 欧美亚洲| 自拍第一页| 97爱啪| 无卡一区=区| 粉嫩小泬久久久一区二区| Aa东京男人的天堂| 国产精品九九| 600国产精品视频| 女优大全 - 91n| 无码人妻1727| 精品蜜乳AV免费观看| 香港澳门日本三级网站| 亚洲性爱成人| 色爱三区| 4399成人黄A片| 亚洲91极品| 97人肏| 女同性恋一区二区三区精品视频| 精彩国产视频播放1区2区| 亚洲涩涩| 午夜操一视频一区| 国产9 9在线 | 亚洲| 欧美一级美片在线观看免费| 精品人妻美妇91job| 婷婷激情五月| 亚洲国产一级中文综合久久天堂在线免费观看 | 欧美色女人| 中文字幕三四区| 一起草三级AV电影在线观看| 人妻中文字幕精品无码| 人人操人人大香蕉| 一区二区三区四区五区高清无码永久视频| 日韩天天本| 3P丝袜熟女 色综合| 亚洲丝袜诱惑| 思思热免费视频观看| 涩涩五月天| 中文字幕97色| 国产免费小视频| heyZO天然素人无码AⅤ专区| 无套内射性感少妇视频| 狠狠夜色午夜久久综合在线| 国产人妻久久精品一区二区三区| 欧美日韩午夜精品一区二区三区| 激情专区综合| 人妻一区久久二区三区色播| 92久久| 日本成人A片免费看| 欧美综合自拍成人自拍第二十页| 日本不卡二三区| 天天综合官网| 神马久久久久久伦理片| 95精品在线| 99re在线精品78| 色爱亚洲| 日本123区操B视频| 亚洲天堂第一页| 九九九九精品九九九九| 国产AV高清AV无码| 9999九九九久久久| 中国操逼无码| wwe 天天干.com| 国产日韩美女小穴视频网站不卡| 亚洲高清无码在线桃色| 熟妇女人妻呻吟久久AV| 99re视频这里只有精品| 欧美视频在线视频免费va| 99www.bibizy香蕉资源国产一区二区三区高清 | 夜夜操老骚逼视频网站| 91高清日| 26uuu国产免费观看| 91亚州日韩高清| 天美久久久久| 久久久久亚洲?V片无码V| 亚洲s在线观看| 亚洲人妻爽爽爽| 自拍偷拍 日韩无码| 欧洲乱码视频| 88xx成人精品视频| 91伊人大香蕉| 久久久久久久免费A片国产成a人亚洲精∨品无码| 人妻精品视频一区二区| 日韩人人精品| 国产又大又硬又长又粗| 人人操人人射人人干| 欧美 亚洲精品首页| 人人透人人操| 天美传媒麻豆一区二区三区国产精| 欧美久久毛片基地| 成人毛片免费| 婷婷综合| 96精品久久久久久久久| 啊啊啊com| 操人人| 中文字幕片| 26uuu成人影片| 夜夜操av亚洲一区二区| 天天干天天舔| 亚洲色丰满少妇高潮| 精品人妻中文字幕4399| 福利天堂| 国产女人91精品嗷嗷嗷嗷| 日韩欧美天堂| 欧美后进式| 久久久久97| 伊人久久大香蕉线AV五月天| 久久亚洲欧美中文字幕国语| 欧美亚洲高清晰 | 人妻第一页| 成年女人一区| 黄色视频60分钟| 天天影视网色欲色香| 户外裸露刺激视频第一区| 99re99在线视频| 欧美黄页在线| 亚洲第一精品在线视频| 欧洲一区二区三区四区在线观看| 色色亚洲| 人人看人人插| 97在线观看免费| 熟女日韩| 久久av一级av少妇av高潮| 久久精品操| 欧美综合站| 波多野结衣被操50分钟免费视频 | 污啪啪啪视频| ..日韩av毛片精品久久久| 亚洲系列欧美| 人人色人人射人人妻| 久久天天艹| 东北女人性交| 中文字日本乱码| 日本日皮视频逼| 男人天堂久久精品不卡| 精品综合久久久久久97| 天天淫人人妻日日色| 69超碰综合| 日本三级中国三级99人妇网站| 欧美综合在线91| 试看福利| 亚洲无套久久嗯嗯| 欧美 日韩 亚洲 春色| 日本幼女18+| ss久久| 蜜臀AV网站| 欧美日韩1234| 青青久久久| 午夜成人福利影视| 自拍偷拍国产欧美日韩韩| 玖玖草久草99蜜月一区二区三区| 国产乱码久久| 黑人精品成人一区二区三区| 国产精品点击进入在线影院高清| 情色五月天就去干| 情色五月天网| 区一在线观看| 国产欧美伊人| 丁香婷婷大香蕉| 日韩卡一卡二卡三在线| 午夜性生活av免费在线看| 综合亚州欧美| 九九综合网| 五月婷婷hd| 嗯啊不要在线| 青青草天天亲夜夜操网| 亚洲精品天堂久久A∨51成人漫| 青娱乐91| 97干在线视频| 大香蕉狠狠爱| 日本精品一区二区不卡| 91激情国产| 97精品久久久久中文字幕| 欧美v日韩欧亚洲电影天堂色诱,国产传媒 | 欧美在线观看综合国产| 午夜福利激情在线视频| 手机午夜电影神马久久| 在线视频97| 资源新线在线天堂| 欧美第五页| 桑老女人九区| 国产精品69久久久久孕妇欧美| 亚洲限制级| 操我啊啊啊啊啊| 欧美成人精品欧美一级乱黄一区二…| 中文字幕成人乱码熟女精品国50| 伊人欧美大香蕉视频| 日韩BBN| 老鸭窝日丰县女人| 日本一卡二区在线| 青青草大香蕉视频| 男人的天堂一区| 色综合天天爱去电影网| 日本一区二区不卡| 2020天天色综合| 国产精品夜夜夜| 精品9999| 蜜桃臀久久| 91美女国产在线| 亚洲中文字幕一区| 色亚洲欧美| 漂亮人妻被强中文字幕hd| 美女啊啊啊啊啊啊| 欧美视频一| www.色操逼| 成人在线视频网| 欧美不卡在线美女| 久久一二三四不卡| 9997se| 91亚洲欧美激情| 搡老女人老91二区| 九九精品99| 天天操天天射天天日| 天天色播亚洲综合网站| 日日干日日| 日产国产精品中文久久婷婷| 亚洲天堂日本| 97精品全部| 国产强奸乱伦欧美| JIZZJIZZ国产精品喷水| 女人爽到高潮久久久| 草蕉影视亚洲无码| 97超碰影音| 秋霞怕怕片| 91人妻最真实刺激绿帽| www.国产高潮精品| 九九毛片这里只有精品| 金典av| 欧美日韩狠狠爱| av亚欧| 久久久久久AⅤ无码免费肉站| 91在线|亚| 久久爱超碰网| 97免费在线视频| 搡老女人老妇女AAA一VU麻豆| 人人操av| 久久久久久久久久久久久久久久9| 清纯唯美激情| 高清成年美女黄网站免费大全 | 国产一国产一级毛片古装| 黄色AAAAA欧美| 午夜精品久久久久久久男人的天堂| 97 国产一区| 久久精品操| 日本成人A片网站| 激情五月天综合网| 97久久国产亚洲精品超碰热| 大香蕉一级黄色片久久| 可以免费观看的日韩av毛片| 日本美女性生活久久久久久久| 黑人精品久久97| 亚洲另类春色| www.99视频| 精品美女久久一二三| 九九九色| 91九色精品熟女内射| AV色图| 欧美传媒| 毛片17S| 久久久久久九九九| 婷婷丁香五月激情啪啪| 日韩人妻精品| 久久性爱精品一区| 亚洲永久AV无码精品秋霞| 亚洲有薄码区久久在线一区| 欧美黄色片在线播放| 亚洲 中文 女同| 国产午夜精品一区二区三区牛牛| 天天操天天舔| 91精品少妇搡搡搡| 囯产操逼片| 久久九操在线观看| AV天堂男人的天堂| 免费在线看黄片av| 99精品无码| 日本媚薬中文字幕在线| 激情深爱五月天| 老司机香蕉| 蜜乳AV.COM| 久久综合女优| 欧美黑人精品在线播放| 青女在线| 亚洲中文日韩欧美大香蕉视频| 日韩钢筋无码高清啾啾啾| 69av一区二区三区| 成人色女网| 51久久夜色精品国产麻豆| 日han少妇无码| 天天射天天操天天干天天吃2018 | 熟妇视频一区二区三区在线| 国产农村妇女一区二区| 综合夜夜| 精品无人区麻豆乱码久久久| 国产又猛又粗又爽又黄| 六月婷婷一区二区三区| 国产a级午夜毛片| 色噜噜狠狠色综无码久久| 综合激情五月丁香| 青青草久草| 97激情97激情| 久久精品中文字幕无码l| 校园春色综合香蕉| 午夜丁香婷婷| 久久久久久久人妻丝袜| 99热思思| 大香蕉日韩| 骚货人妻偷情自拍在线视频| 中国一级αV| 中出789在线视频| 国模不卡| 日韩精品午夜操呦呦不卡影院| 天天日B狠狠操| 乱性AV| 玖玖爱伊人玖玖爱| 插入综合网| 欧美呦呦性爱| 91丝袜人妻| 老女人日韩美91| 3P乱轮视频| 精品国产乱码久久久久久网站入口| 中文字幕丝袜美腿| 在线性黄高清免费视频| 97视频在线免费观看| 亚洲欧洲第二视频在线观看色图| 91站街按摩店老熟女熟女| 极品另类| 亚洲国产精品久久久久婷婷老年| 丁香五月社区| 欧美日韩不卡a片| 后入式免费视频| 欲射影视| 炮色五月| 黄片直播三级黄片两女一男| 99婷婷一区二区| 亚洲天堂少妇| 欧色综合| 欧美熟女操屄| 韩国一级做a久久久久| 伊人伊人LD| 先锋精品av色鲁| 国产精品一区二区久久精品| 久久国产999| 刺激性视频黄页| 激情五月天色色| 岛国在线免费视频| 无码人妻一区二区三区免费九色| 欧美日韩人妻少妇 一区二区三区| 大香蕉操久久| 日本九九九九| 国产精品欧美日韩久久| 人妻二区| 成年无码动漫av片无尽在线 | 中文一区二区婷婷视频| 亚洲激情在线一区二区| 久久这里精品国产99丫e6| 日韩午夜啪啪视频| 3d成人精品一区二区| 日本伦乱九九九综合| 欧美日韩中文字幕不卡| 欧美中字不卡| 后入 亚洲 美女 射| 免费毛片在线播放| 能直接看AV的网站| 人人艹亚洲| 宅男影院久久久,99| 亚洲图片91| 精品熟妇视频一区二区| 久久久少妇诱惑精品视频| 麻豆精品A片免费观看| 国产欧美一区二区| 97综合在线观看| 久久99热这里只频精品6学生| 99热最新| 国模精品娜娜一二三区| 在线观看日韩av不卡| 婷婷影院入口| 亚洲无码久久久久久久| 亞洲久久直播| 91久久九九精品国产综合| 偷拍 欧美 日韩| 在线日韩日本亚洲国产| 东京热毛片177b2viP| 欧美色涩| 日本久久女同性恋视频| 九九九久久久| 看日韩黄片| 色香综合| 搡老女人911熟妇老熟女| 香伊人在线| 人妻一区二区三区视频| 在线看的av| 51一区二区三区| 影音先锋乱| 久久激情视频| 日本天天吊| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 一二三区在线| 一牛影视久久久一区二区三区| 性色avv| 日韩国产十八禁| 亚洲国产中文字幕| 舔人妻中文免费视频| 欧美劲爆第一页| 91男同| 揉揉日日日日| 色在线综合| 日韩 欧美 视频 在线 一区| www超碰| 亚洲综合码| 天天天天做夜夜夜夜做| 欧美图片校园春色| 中文字幕一区二区视频在线观看| 亚洲欧美一区二区网址| 欧美强奸乱| 开心五月激情网| 91在线免费观看处女| 神马久久69| 一本久久久精品| 日韩免费簧片| 日韩中文字幕在线视频观看| 久久久久人妻| 亚洲美女 晚间男人天堂| 91色s| 精品视频一区二区| 国产欧美亚洲精品a第2页| 亚洲色鬼| 少好三P| 精品无码久久久久久久久果冻糖心| 五月丁香六月综合缴清无码| 女人高潮大叫一级毛片| 婷婷五月天激情网| 爱爱动态试试看6 0秒| 美女黄色91| www.色吧5.com| 99在线精品观看99| 青青草乱入乱欲视频在线观看| 亚洲精品国产熟女久久久| 中文字幕国产在线天堂| 精品亚洲国产成人AV制服丝袜| 性感女人网页在线观看视频| 97超碰影音| 亚洲精品成人动漫在线| 夜夜爽77777| 欧美女同在线| 欧美性爱第一页久久| 色综合色综合网| 熟女高潮合集-永久久久-成人AV | 97综合久第一页| 91被操| 五月丁香六月激情| 曰本精品久久久| 欧美劲爆第一页| 亚洲色图殴美色图激情乱伦| 97激情97激情| 久 久无码人妻AV| 日本 欧美 国产一区| 日韩精品操少妇| 国产馆| 久久久久亚洲Aⅴ无码| 国产大片精久久久久久| 亚洲综合影院| 啊啊啊水好多| 国产一级内射无挡观看| 97激情97激情| 香港澳门日本三级网站| 精品国产一区二区三区av在线资源| 啊啊啊啊好疼视频| 精品国产91av一区二区三区| 国产性刺激| aa片毛片| 久久9亚洲| 久久久精品九| 日韩av一级黄片| av 模特一区了| 狠狠中文字幕| 98福利在线视频| 无码操逼网| 亚洲AV免费在线| 国产精品香蕉| 久草看看看| 中文字幕五月婷婷免费| 在线女人91| 日韩九九九| 久99热| 亚洲91综合| 97亚洲精品| 男人的天堂在线有码| 日韩久射综合| 97九色人妻| 东京热男人天堂| 黄色性爱网网| 久热这里| av国产无码| 亚洲区 欧美区| 亚洲综合婷婷| 日本加勒比无码专区一二三| 麻豆啪啪啪视频| 9997se| 在线播放中文字幕| 97超视频在线观看| 新婚人妻扶着粗大强行坐下| www久久精品| 婷婷五月天成人网| 欧美日韩亚洲天堂| 欧美日韩资源在线| wwwxxx日本爽| 欧美亚洲综合999| 国产精品老师| 狠狠爱大香蕉| 国产美女口爆吞精| A 天堂在线观看视频| 久久精品99久久久久久| 天天天天天干夜夜夜夜夜操| 亚洲综合伊人无码久久| 久久9亚洲| 一本久道在线综合视频| 97中文字幕一区| 久久精品小视频| 91肉丝| 激情综合av| 国产免费永久精品无码| 国产精品久久| 亚洲18禁| 在线观看黄色电话| 欧美偷拍| 午夜欧美J进J出白浆流出久久久| 色色色天美视频| 99re6国产精品99re| 色999;丁香五月| 高清无码久操视频| 青青草女人天天干| http://qxhbdz.com| 色黄污美女啪啪啪免费网站| 国产又粗又长又大的视频| 东北黄色电影| 國產尤物AV尤物在線觀看| 精品午夜福利导航| 91国内外在线| 欧美有码亚洲中文字幕一区二区三区四区| 激情五月天插| 激情小说亚洲色图| 亚洲的天堂网| 天美av在线观看| 日韩,欧美,中文在线| 国产日韩久久| 9997se| 日韩在线AB| 中日高清无码操逼视频| 影音先锋日本一区二区| 中精品一区二区三区| 91电影色诱| 91碰碰碰| 日韩中文字幕在线视频观看| 性无码专区2020| 性欧美999| 亚洲综合校园春色| 日日夜夜国产综合| 婷婷五月天激情网| 国产亚州精品美女久久久免费| 日韩三级在线观看网站| 亚洲第一页色网| 区一二区日韩亚洲乱码av电影| 男人的天堂 在线一区| 裸体1区| 97超级久久强资源| 亚洲福利中文字幕在线| 午夜福利精品| 国产精品久久久吖| 欧美色综合| 久久日韩肥臀| 0755午夜福利视频| 国产丝袜高跟美女av免费观看| 97日视频| 高清不卡一二三区视频......| 一牛影视成人片免费| 91看黄片| 91情色| 国产9区| 日本大香蕉综合网红本杳社区| chaopen97久久| 91网站视频在线观看| 好看的91视频| caopeng97| 色月天AV导航| 色呦呦、国产精品| 色婷婷电影网| 又黄又爽在线观看视频| 综合色色网| 亚洲激情AV| 99碰碰| 丁香六月激情综合| 十八禁啪啦拍视频无遮挡| 国产成人精品日本视频| 午夜福利免费精品视频| 无码视频黄色网战| ?亚洲伊人伊成久久人综合网| 国产视频不卡在线观看| 亚洲天堂精品日韩电影| 亚欧美色图| 色女综合| 精品性爱一区二区| AV一起草在线| 99热色精品| 国产成人精品一区| 一本色道久久综合狠狠操| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 99性爱在线观看| 超碰97资源网亚洲| 性色国产东北露脸精品视频| 婷婷色五月激情| 午夜免费视频1000| 丁香五月天社区| 国产99 中文字幕日韩小视频| 精品人妻av在线播放| 亚洲 欧美日韩 另类| 人妻精品视频一区二区| jk白丝没脱就开始啪啪| 图片区小说区| 五月婷婷综合激情| 116美女午夜| 草伊人高潮喷水超碰| 欧美日韩天堂| 精品无码一区二区三区| 日韩啪啪视频| 国产v片在线免费观看| 一线黄色免费性爱片| 日韩,欧美,中文在线| 婷婷色一区| 在线 亚洲 网爆 自拍| 大香蕉伊然在亚洲91| 一二三区视频在线观看| 中文字幕一区二区三区50路| 国产免费操逼| 激情五月天色色| 久久亚洲天天做| 中文字幕在线2| 大香蕉综合网| 无码国产Av| 曰韩精品九九无码| surenchaopeng| 怡红院成人视频| 亚洲āv网址在线观看| 青娱乐久久艹| 日韩一级成人毛片免费观看 | 男女性扦B| 先锋女优在线观看视频| 操逼日批| 日韩精品一区二区三区色欲 | 亚洲人码13| 激情综合网激情综合| 中文字幕 国产 精品| 伊人色综合超碰| 亚洲人妻爽爽爽| av毛片aaaaa免费看| 神马九九| 思思热久久成人| 亚洲av夫妻操穴网| 91欧美性| 无码直播久久久| 天天综合精品| 天天干1区2区在线| 五月丁香六月综合缴清无码| 大香蕉啪啪啪| 亚洲欧洲无码一区夜| 国产亚洲99久久精品熟| 色综合色综合网| 九九九九九九视频| 免费a v| 久草五月| 欧美激色| 亚洲 自拍偷拍 欧美| 丰满人妻一区二区三区免费,| 成人情色综合网| 一级特黄aaa大片在线观看成人一级片在线观看 | 97久久久久久久久久| 伊人久久大香线蕉无码| 日本不卡卡一区| 久久视频,这里只有精品| 亚洲AV成人精品网站在AV| 婷婷综合激情| 91爱看| 欧美精品成人一区二区在线观看| 激情开心五月天| 久久伊人东京热| 97色伦97色伦国产欧美| 1024久久高清视频| 综合色一区三区二区| 日本123区操B视频| 五月天亚洲网| 国语精品内射在线观看| 欧美日韩另类字幕中文| 超碰在线欧美性爱激情| 成人老鸭窝人人在线视频| 精品日韩| 熟女日韩| 97超碰9| 嗯嗯嗯好爽| 欧美天天性| 国产一区二区三区中文字幕| 亚洲性网| www老逼91| 婷婷干黄色| 99九九久久| 亚洲综合另类小说色区亚洲成av人片在www| 久久9精品视频| 极品销魂美女一区二区| 精品免费1| 久久天天艹| 久久久久ab| 国产女人操逼视频| 97视频620| 三级网色| 97超碰欧美手机在线| 操屄不卡视频| 亚洲日韩美女丝袜美腿人妻视频| 久久99操天天日| 国产精品爆乳懂色蜜乳| 抽查国产福利主播| 26uuu性| 人妻素股| 久久国产三区| 亚洲性爱电影| 亚洲欧美在线综合| 黄网在线播放| 亚洲婷婷综合网| 五月天春色激情网| 天天做天天爱| 色天使大香蕉| 另类小色呦| 97国产|免费| 97国伦国色| 亚洲无码一二三区| 国产日韩怡红院| 午夜精品99久久久久传媒| 国产乱伦亚洲| 香蕉精品二区二区| 色一射色一射| 亚洲日韩美女中文字幕乱| 91n处女在线观看| 色综合加勒比四四季| 日韩亚洲中文有码视频| 熟女熟妇一区二区三四区| 久久久久性熟视频| 久久亚洲AV成人精品无码| 97在线免费视频观看| 女同性恋一区二区三区精品视频| 亚洲天堂7777| 国产色产精品在线观看| 色踪合AV| 77777亚洲蜜臀精品久久综合蜜臀| 日韩国产欧美伦理在线| 黄页网站成人免费| 久久人妻办公室视频| 色欲三区| 欧美狠狠狠| 搞中出视频在线观看| 97干在线视频| 麻花豆传媒剧国产MV出差| 玖草在线视频| 97热视频在线观看| 欧美内射少妇| 色牛牛AV| 一类无码操逼视频| 人妻一区二区三区熟女| 久久久久久久久国产| 青春草A| 婷婷激情啪啪| 国产美女高潮叫床视频| 精品视频久久| 天天操人人操骚逼网站| 91精品国产综合久久久蜜臀| 欧美成人黄网色网站| 我要去看2个日本美女.com曹逼| 大色网久久| 大香蕉啪啪啪啪在线| 色综合中文字幕不卡| 欧美日韩成人在线| 欧美色视频在线| 免费人成毛片乱码| 色综九九九一区| 91丝袜在线视频| 婷婷丁香六月天| 国产一级做a爰大片免费久久| 国产精品露脸在线观看| 成人怡红院| 国产精品夜夜| 青青草原成人| 久久久精| 亚洲一区制服诱惑| 色999偷自拍拍| 刺激性视频黄页| 天天日天天舔| 婷婷丁香成人| 乱伦av麻豆| 91人妻精华帖| 小日子操bb在线看| 囯产精品久久久久久久久久梁医生 | 国产女人极品高潮毛片| 日本操逼视频不卡直接放| 免费A片三p视频| 少妇淫妇久久久久久久| 国产精品另类| 亚洲影视高清第一页| 国产人妻精品一区二区三区秋霞 | 97欧美综合网| 嗯~啊~轻一点 视频| 91亚.色| 91熟女少妇| 久久亚洲天堂| 精品综合久久久久久97| 超碰天天操| 亚洲污污网站| 伦在线97| 欧美日韩中国x| 激情四射婷婷六月天| 久九9精品| 久久中文字幕人妻熟av女蜜柚| 香蕉免费一区二区三区不读| 中文日韩欧美熟| 国产丁香精品露脸视频| 麻豆一区二区三区在线看| 久久二| 久久久一区二区三区麻豆| 91亚洲图片| 精品国产一区探花在线观看| 九七超碰| 伊人专区一区二区三区| 久久毛卡| 亚洲成人性爱在线观看| 日韩欧美午夜视频在线| 日韩一区二区三区四区五区| 99操碰| ,国产乱人伦精品一区二区三区| 91色艳| 黄呦呦在线| 9 9无尺码天堂网| 淫淫综合网| 100啪啪视频大全| 日韩精品在线视频在线观看| 日韩人妻 中文字幕| 97色婷婷| 亭亭丁香激情| 亚州色阁| 美女爽到高潮91| 91情色| 日韩A优精品在线观看| 国产又色又爽又舒服的三级视频| 日韩在线76| 330dv亚洲成年视频网| 午夜九九| 永久电影三级在线观看| 囯戸精品高潮呻吟旡码|