国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

eMMC BKOPS機(jī)制深度解析:從MMC協(xié)議到閃存后臺維護(hù)

eMMC BKOPS機(jī)制深度解析:從MMC協(xié)議到閃存后臺維護(hù) “MMC”這個詞我第一次認(rèn)真對待是在一次遠(yuǎn)程排查Android開發(fā)板卡頓的時候。設(shè)備連續(xù)寫了幾十GB日志界面開始間歇性掉幀dmesg里全是timeout重試SSH偏偏又能連上。同事丟過來一句“看看mmc bkops是不是在忙?!边@一句話把我從文件系統(tǒng)層直接按到了存儲芯片層。翻完eMMC 5.1規(guī)范才意識到這顆不起眼的黑色BGA芯片牽扯的是閃存介質(zhì)、控制器固件、內(nèi)核驅(qū)動三層協(xié)作的一整套邏輯。這也是為什么現(xiàn)在搜“MMC”相關(guān)熱詞幾乎都會帶著bkops一起出現(xiàn)——它就像eMMC的“加班時間表”平時看不見一出現(xiàn)就影響著設(shè)備性能。這篇就把這條線從頭捋一遍從MMC的起源講到eMMC內(nèi)部原理再拆開bkops這個關(guān)鍵詞最后落到工程實踐里的避坑經(jīng)驗。1. 三個字母MMC在不同圈子里各指什么1.1 先把最容易混淆的三樣?xùn)|西分清楚MMC這個縮寫在不同領(lǐng)域里各有歸宿。Windows運維那邊CLI里敲mmc打開的是微軟管理控制臺攝影圈老玩家口中的MMC是九十年代末的多媒體存儲卡而在嵌入式、手機(jī)、平板、工控設(shè)備領(lǐng)域我們說的MMC幾乎都指向eMMC——embedded MultiMediaCard嵌入式多媒體卡。如果你拆過一臺老安卓手機(jī)的主板會看到存儲部分是一顆焊死的黑色方形芯片絲印上可能有“eMMC”“Toshiba”“Samsung”之類的字樣它就是eMMC。這里有個容易混的點MMC插卡、SD卡、eMMC三者是“血緣關(guān)系”但不是同一物種。MMC卡MultiMediaCard1997年由SanDisk和西門子推出的可拆卸存儲卡外形比SD卡略厚今天的新設(shè)備基本見不到了。SD卡從MMC演進(jìn)而來兼容MMC協(xié)議但增加了安全認(rèn)證與版權(quán)保護(hù)機(jī)制外形更薄后來統(tǒng)治了相機(jī)和開發(fā)板市場。eMMC在MMC協(xié)議基礎(chǔ)上為嵌入式場景重度改造直接焊在板上不可拆卸內(nèi)部自帶控制器整個存儲系統(tǒng)被封裝成一顆標(biāo)準(zhǔn)芯片。這三者的關(guān)系可以這樣記eMMC是“焊死的SSD思維產(chǎn)物”SD卡是“能拔下來的MMC后代”。但它們在命令協(xié)議層面共享了大量設(shè)計基因。1.2 一條時間線從可拆卸卡到手機(jī)標(biāo)配MMC的歷史起點是1997年MMCAMultiMediaCard Association成立。之后MMC標(biāo)準(zhǔn)歷經(jīng)1.0、2.0、3.0幾個版本數(shù)據(jù)線從1位擴(kuò)展到8位速度從2.5MB/s爬升到幾十MB/s。1999年前后SD卡從MMC分支出去SD卡在消費市場上反超了MMC但MMC協(xié)議本身沒有死而是換了一條賽道活著。2004年前后MMCA并入JEDEC固態(tài)技術(shù)協(xié)會eMMC標(biāo)準(zhǔn)體系正式建立。此后JEDEC連續(xù)發(fā)布多個大版本eMMC 4.3引入Boot分區(qū)、RPMB重放保護(hù)內(nèi)存塊、可靠寫等能力這階段eMMC開始成為智能手機(jī)存儲標(biāo)配。eMMC 4.4 / 4.41完善系統(tǒng)喚醒、分區(qū)切換邏輯老設(shè)備上常見。eMMC 4.5加入緩存、Sanitize徹底擦除和本文重點的BKOPS機(jī)制。eMMC 5.0引入HS400模式理論帶寬達(dá)到400MB/s同時支持增強(qiáng)類可配置分區(qū)。eMMC 5.1修正了一批生產(chǎn)制造和可靠性細(xì)節(jié)是目前最后也是使用最廣的eMMC版本。后來UFSUniversal Flash Storage在中高端手機(jī)上逐步取代eMMC但eMMC沒有因此消失——它憑借低成本和成熟生態(tài)在平板、電視盒子、車載、工業(yè)設(shè)備、網(wǎng)絡(luò)設(shè)備里依然是海量存在?!皬S商還在大批量采購eMMC”這件事本身就說明這個標(biāo)準(zhǔn)依然有很強(qiáng)的工程價值。1.3 為什么廠商愿意為“標(biāo)準(zhǔn)化的閃存管理”買單早年用裸NAND做產(chǎn)品是件痛苦的事。三星、海力士、閃迪、東芝各家的顆粒接口不同、壞塊策略不同、ECC算法不同即使同一家廠商不同制程的顆粒行為也天差地別系統(tǒng)軟件得為每顆顆粒單獨適配開發(fā)周期和故障率都居高不下。eMMC的意義在于把NAND顆粒、控制器、FTL固件Firmware Translation Layer全部封裝進(jìn)一顆標(biāo)準(zhǔn)芯片對外暴露一套統(tǒng)一、穩(wěn)定的MMC命令接口。主控端不再需要關(guān)心底層顆粒是SLC、MLC還是TLC也不需要知道壞塊管理怎么實現(xiàn)更不用糾結(jié)磨損均衡算法是否有坑。系統(tǒng)只需要會發(fā)MMC命令、處理響應(yīng)就能穩(wěn)定使用任意供應(yīng)商的eMMC芯片。這種“標(biāo)準(zhǔn)化封裝”對產(chǎn)品研發(fā)來說省掉了大量底層適配工作對供應(yīng)鏈來說則意味著可以靈活切換多家顆粒供應(yīng)商而無需修改主板和驅(qū)動。用一句工程上的話總結(jié)eMMC把閃存管理的復(fù)雜度從系統(tǒng)軟件轉(zhuǎn)移到了芯片內(nèi)部代價是性能和靈活性稍打折扣但換來的是極大的通用性。2. 拆開一枚eMMC芯片BGA封裝里的三個角色2.1 引腳與物理接口CLK、CMD、DAT[7:0]和那些電源拿到一顆eMMC芯片最直觀的是它的BGA封裝常見球數(shù)在153、169、186等規(guī)格。引腳里最重要的幾組是CLK時鐘線主機(jī)提供決定傳輸速率。HS400模式下時鐘頻率可達(dá)200MHz。CMD雙向命令/響應(yīng)線主機(jī)發(fā)命令、設(shè)備回響應(yīng)都走這一條線。這里注意CMD線只有一根所以命令交互是半雙工的。DAT[7:0]8位雙向數(shù)據(jù)線實際支持1/4/8位三種總線寬度。位數(shù)越高一次吞吐越大。RST_n硬件復(fù)位低電平有效。這個引腳能讓eMMC在系統(tǒng)異常時快速回到初始狀態(tài)省掉軟件復(fù)位流程。VCC、VCCQ等電源引腳VCC供給主閃存核心VCCQ供給信號接口和控制器邏輯。不同速率模式對VCCQ的電壓要求也不同HS400通常要求1.8V。值得一提是eMMC的數(shù)據(jù)線是可配置的。系統(tǒng)上電后默認(rèn)工作在1位模式軟件讀取EXT_CSD了解設(shè)備能力后再通過SWITCH命令切換到4位或8位模式。如果驅(qū)動在初始化階段沒有正確配置總線寬度你會發(fā)現(xiàn)eMMC讀寫的吞吐低得可疑但并不會報錯——這就是那種“查了半天參數(shù)最后發(fā)現(xiàn)總線在8位模式下沒切過去”的問題。2.2 MMC協(xié)議的工作邏輯命令、響應(yīng)與塊傳輸MMC協(xié)議是典型的主從架構(gòu)。主機(jī)是唯一的發(fā)起方設(shè)備只能被動響應(yīng)。所有操作都由主機(jī)發(fā)送命令開始設(shè)備在完成命令后返回一個或多個響應(yīng)字。說人話就是主機(jī)問一句設(shè)備答一句全程不允許設(shè)備主動開口。初始化流程大概是這樣的CMD0GO_TO_IDLE把所有設(shè)備都拉到空閑態(tài)。CMD1SEND_OP_COND主機(jī)探測設(shè)備電壓范圍和工作條件直到設(shè)備返回“上電完成”。CMD2ALL_SEND_CID讓設(shè)備上報自己的身份信息CID包括廠商ID、產(chǎn)品名、序列號等信息。CMD3SET_RELATIVE_ADDR給設(shè)備分配一個短地址RCA之后的操作都用這個地址尋址。CMD9/CMD7等讀取CSD選定當(dāng)前操作的設(shè)備。CMD6SWITCH讀取或?qū)慐XT_CSD寄存器這是后續(xù)配置分區(qū)、總線寬度、DDR模式、bkops的關(guān)鍵命令。讀寫數(shù)據(jù)的流程則更直接主機(jī)發(fā)CMD17讀單塊或CMD18讀多塊再發(fā)CMD24寫單塊或CMD25寫多塊。多塊寫之前還可以用CMD23指定塊數(shù)避免由于邊界不確定導(dǎo)致跨塊寫被設(shè)備放大。這里要理解一個關(guān)鍵點MMC設(shè)備暴露給主機(jī)的地址空間是線性的、邏輯的。主機(jī)眼里這是一個又一個4KB的塊但設(shè)備內(nèi)部把這些邏輯塊映射到物理頁。這種“主機(jī)只管邏輯地址”的設(shè)計大大降低了上層軟件復(fù)雜度代價是每次寫放大、垃圾回收的實際情況主機(jī)并不能實時完全掌握。2.3 控制器和固件的三件大事映射、回收、磨損均衡eMMC內(nèi)部負(fù)責(zé)存儲管理的是一個微型“SSD主控”它內(nèi)置了FTL固件負(fù)責(zé)把上層邏輯地址翻譯成閃存物理地址。為什么要這套機(jī)制因為NAND閃存有兩條物理鐵律必須先擦除才能寫入而且擦的最小單位是塊Block一般大小為幾MB。寫的單位是頁Page一般4KB或8KB但寫入量小于一頁時也會占掉整頁多余空間稱為“寫放大”。因此如果主機(jī)要覆蓋寫某個邏輯頁里的幾個字節(jié)FTL不會真的去覆蓋那塊物理頁而是把新數(shù)據(jù)寫入一個空閑物理頁再把邏輯到物理的映射表更新過去。原來那個物理頁就變成了“無效頁”等這一塊里無效頁攢多了控制器會觸發(fā)垃圾回收把仍有效的頁搬家到別的空閑塊然后整塊擦除。磨損均衡也在這里做文章。垃圾回收會讓有些塊被反復(fù)擦寫有些塊卻幾乎沒動過。FTL要做的是讓所有物理塊的擦寫次數(shù)盡量接近否則個別塊提前到壽命上限整個設(shè)備的可用容量就會縮水。動態(tài)磨損均衡處理頻繁更新的熱數(shù)據(jù)塊靜態(tài)磨損均衡則會把長期不動的靜態(tài)數(shù)據(jù)搬去磨損較少的塊讓那些低頻塊也參與消耗。這三件事全部由控制器在芯片內(nèi)部悄悄完成不占用主機(jī)CPU。這也是為什么eMMC“只是個存儲芯片”但對系統(tǒng)體驗的影響卻可以很大——控制器內(nèi)部一旦忙碌外面的命令就會排隊等待表現(xiàn)在應(yīng)用層就是I/O延遲波動。3. bkops這條熱搜詞背后閃存為什么要“偷偷加班”3.1 閃存不自律數(shù)據(jù)保持、讀干擾和擦寫不對稱如果你只看FTL的日常似乎只要GC和磨損均衡做好就夠了。但閃存還有一些更陰間的物理特性需要在“沒事做”的時候定期維護(hù)這類維護(hù)操作就是Background Operations簡稱BKOPS。第一個問題叫數(shù)據(jù)保持。NAND閃存里的電荷會隨時間慢慢泄漏尤其是TLC和QLC顆粒電荷窗口小泄漏風(fēng)險高。一顆eMMC設(shè)備可能出廠后放在倉庫里半年再上電讀取時發(fā)現(xiàn)某頁的比特翻轉(zhuǎn)已經(jīng)超出ECC糾錯能力。設(shè)備內(nèi)部的讀刷新Read Refresh機(jī)制要把那些快要失效的物理頁讀出來重新編程一遍防止靜默數(shù)據(jù)損壞。第二個問題叫讀干擾。頻繁讀同一個塊會讓相鄰塊里的浮柵電荷受到影響久而久之也會出現(xiàn)位錯誤??刂破餍枰ㄆ趻呙枘切┳x密集的區(qū)域把內(nèi)容搬到新位置并擦掉被“讀亂”的原始塊。第三個問題是磨損均衡的滯后性。FTL的靜態(tài)磨損均衡不會每次寫入都立即執(zhí)行因為頻繁搬動靜態(tài)數(shù)據(jù)反而會造成額外寫放大??刂破鲿鹊较到y(tǒng)有一定空閑資源時分批次地調(diào)整那些磨損不均的塊。這些維護(hù)操作必須在設(shè)備上電后、主機(jī)發(fā)命令的間隙完成因為eMMC不知道下一秒會不會掉電。如果它永遠(yuǎn)等不到“空閑”就會在主機(jī)的下一次讀寫時強(qiáng)行插隊表現(xiàn)出來就是突發(fā)延遲。3.2 Manual BKOPS與Auto BKOPS兩種觸發(fā)方式的門道eMMC 4.5開始JEDEC正式把BKOPS機(jī)制寫進(jìn)規(guī)范。大體分為Manual BKOPS和Auto BKOPS兩種。Manual BKOPS手動后臺操作邏輯如下主機(jī)在合適的時候執(zhí)行SWITCH命令去讀EXT_CSD里的BKOPS_STATUS字段。該字段會給出一個狀態(tài)常見狀態(tài)包括無需操作No BKOPS、需要操作BKOPS Needed、緊急操作BKOPS Urgent。如果狀態(tài)顯示需要或緊急主機(jī)通過SWITCH寫入BKOPS_START告訴設(shè)備“你可以執(zhí)行后臺維護(hù)了”。設(shè)備開始內(nèi)部維護(hù)期間主機(jī)依然可以發(fā)其他命令但性能必然受影響。設(shè)備維護(hù)完成后再把BKOPS_STATUS清回No BKOPS狀態(tài)。Auto BKOPS則更進(jìn)一步。如果主機(jī)在EXT_CSD的BKOPS_EN字段里寫入使能值設(shè)備就可以在內(nèi)部自己判斷時機(jī)在命令間隙自動啟動后臺維護(hù)不必每次都等主機(jī)來“催”。問題恰恰出在這里Auto BKOPS會讓設(shè)備更積極地做維護(hù)但也更不可控。你沒法精確知道它什么時候在“偷偷加班”某次大數(shù)據(jù)量寫入撞上它內(nèi)部GCI/O延遲就可能突然抬升。Manual BKOPS雖然可預(yù)期卻要求驅(qū)動和系統(tǒng)設(shè)計者配合好在空閑窗口主動觸發(fā)如果一直不觸發(fā)設(shè)備只能被迫在工作時刻占用帶寬體驗更差。內(nèi)核里對這兩種模式的取舍標(biāo)準(zhǔn)概括起來就是Devices with poor random write performance often benefit from enabling BKOPS。這句話翻譯成人話就是顆粒越差越需要系統(tǒng)主動幫它安排“加班時間”。3.3 一個真實卡頓案例持續(xù)寫入后性能為什么會崩我在調(diào)試那臺開發(fā)板時復(fù)現(xiàn)性能問題的方式很簡單用dd做幾百兆的持續(xù)寫入同時監(jiān)控iostat。正常前幾秒寫吞吐能到幾十MB/s。持續(xù)寫入幾十秒后吞吐會掉到個位數(shù)并且伴隨明顯的RTO波動。iostat里w_await從十幾毫秒飆到幾百毫秒甚至上秒。這時候查dmesg能看到mmc0: Timeout waiting for hardware interrupt這就是典型的設(shè)備內(nèi)部正在做維護(hù)而主機(jī)等不到響應(yīng)。繼續(xù)用mmc-utils的extcsd讀取可以看到BKOPS_STATUS已經(jīng)處于非No BKOPS狀態(tài)說明設(shè)備覺得自己“有事要做”但主機(jī)沒有及時給它維護(hù)窗口。這個案例復(fù)盤時問題不是設(shè)備壞了而是系統(tǒng)里IO調(diào)度策略太激進(jìn)。我們把所有線程都壓著寫沒有給eMMC留下任何空閑間隙設(shè)備找不到機(jī)會執(zhí)行內(nèi)部GC只能在下一次命令時強(qiáng)行“插隊”把性能波動放大給了每一個上層應(yīng)用。3.4 實操觀測在Linux下查看bkops狀態(tài)與壽命信息想驗證eMMC有沒有在忙后臺操作Linux下最直接的路徑是sysfs和mmc-utils。查看設(shè)備基本信息和壽命估算cat /sys/block/mmcblk0/device/life_time cat /sys/block/mmcblk0/device/pre_eol_infolife_time文件的格式通常是兩個十六進(jìn)制數(shù)分別對應(yīng)類型A和類型B的壽命估算。值越小越好例如0x01通常表示壽命消耗在10%以內(nèi)。pre_eol_info正常值是0x1對應(yīng)“Normal”如果出現(xiàn)0x2Warning甚至0x3Urgent說明保留塊耗盡程度已經(jīng)到了警告線。用mmc-utils看EXT_CSDmmc extcsd read /dev/mmcblk0在輸出里重點找這些字段BKOPS_EN0x01表示Auto BKOPS已使能。BKOPS_STATUS0x00表示當(dāng)前無需后臺操作非0則表示有維護(hù)需求。PRE_EOL_INFO生命周期預(yù)警信息。DEVICE_LIFE_TIME_EST_TYP_A / TYPE_B類型A/B的壽命估算。生產(chǎn)環(huán)境下建議把這些信息接入告警平臺定期記錄壽命消耗曲線。如果一臺設(shè)備life_time在很短時間從0x01跳到0x06不要猶豫優(yōu)先查散熱、掉電次數(shù)和寫入壓力大概率是環(huán)境或配置出了問題。4. 從手機(jī)到工業(yè)設(shè)備eMMC的真實應(yīng)用圖景4.1 手機(jī)上的eMMC存量巨大、體驗寬窄不一手機(jī)是eMMC最經(jīng)典的戰(zhàn)場。安卓早期到中期的存儲幾乎全靠eMMC從eMMC 4.3到5.1每一代升級都在解決體驗問題。后來UFS憑借全雙工、命令隊列等特性把順序讀速度拉到了千兆級別成為旗艦機(jī)首選。但定位入門機(jī)和低端平板的設(shè)備到今天仍在大量使用eMMC。eMMC在手機(jī)里的運行方式簡單直觀Boot1分區(qū)存放引導(dǎo)加載器Boot2分區(qū)常用來放恢復(fù)系統(tǒng)RPMB分區(qū)存密鑰、防回滾計數(shù)器等安全數(shù)據(jù)用戶數(shù)據(jù)區(qū)則被分區(qū)成system、vendor、data等。啟動過程中ROM先讀Boot1拉起bootloaderbootloader再通過MMC命令讀取用戶分區(qū)的system鏡像逐步加載內(nèi)核和文件系統(tǒng)。由于eMMC內(nèi)部沒有命令隊列同一時刻只能有一個命令在跑所以多線程隨機(jī)讀寫很容易排隊。這就是為什么低端機(jī)玩一會兒微信就覺得卡——大量小文件隨機(jī)寫擠在一條命令隊列里吞吐自然上不去。UFS引入命令隊列后這個瓶頸被解除了但成本也上去了。4.2 工業(yè)與車載場景對壽命、溫度和確定性的苛刻要求消費級eMMC已經(jīng)很成熟但工業(yè)和車載場景對存儲的要求要嚴(yán)苛得多。溫度是第一個分水嶺。普通消費級eMMC工作溫度通常在-25°C到85°C工業(yè)級可以做到-40°C到85°C有些車規(guī)級產(chǎn)品甚至要求-40°C到105°C。溫度對NAND電荷保持的影響是指數(shù)級的高溫加速泄漏低溫又影響寫入穩(wěn)定。選型時一定要看顆粒供應(yīng)商明確標(biāo)注的溫度等級別拿消費級片子冒充工業(yè)級用。壽命是第二個問題。車載設(shè)備往往要服役7到10年行車記錄儀一類設(shè)備會持續(xù)寫入視頻流。選TLC還是MLC、留多少OPOver-Provisioning空間、控制器固件的磨損均衡策略是否激進(jìn)這些直接決定幾年后設(shè)備是否突然“變磚”。經(jīng)驗上長時間連續(xù)寫入的場景盡量選壽命余量更大的顆粒類型或更高等級eMMC并配合溫度管理措施散熱片不是可選項。RPMB在工業(yè)和車載里也扮演重要角色。安全啟動的密鑰、設(shè)備唯一ID、防止固件回滾的計數(shù)器都存放在RPMB里利用HMAC-SHA256做訪問認(rèn)證能有效防止冷數(shù)據(jù)被惡意重放。如果新板卡連RPMB的基礎(chǔ)讀寫都調(diào)不通基本是密鑰管理流程和驅(qū)動配合沒做好。4.3 選型決策eMMC、UFS、SD卡還是裸NAND選存儲方案不要只迷信參數(shù)表先看你的系統(tǒng)軟件棧、成本約束和生命周期再決定接口。維度eMMCUFSSD卡裸NAND接口8位并行半雙工M-PHY串行全雙工SD協(xié)議/SPI自定義最高理論速度400MB/sHS400830MB/s起幾十到200MB/s取決于主機(jī)實現(xiàn)命令隊列無有無無軟件復(fù)雜度低中低高壞塊/磨損管理芯片內(nèi)部處理芯片內(nèi)部處理設(shè)備端主機(jī)必須自己做使用場景手機(jī)/平板/工業(yè)/車載旗艦手機(jī)/筆記本/高性能嵌入式相機(jī)/樹莓派/消費電子定制SSD/極簡系統(tǒng)裸NAND看著便宜但把FTL、壞塊管理、ECC全交給主機(jī)端開發(fā)周期和風(fēng)險會顯著拉高不適合大多數(shù)產(chǎn)品團(tuán)隊。SD卡接口簡單但可靠性、溫度范圍和固定安裝方式都不如焊接式方案。UFS性能最好但成本高而且啟動流程、固件適配相對復(fù)雜。對絕大多數(shù)中低端嵌入式產(chǎn)品來說eMMC仍然是性價比和可靠性最平衡的選項。5. 工程落地避坑記錄對齊、掉電與壽命監(jiān)控5.1 分區(qū)對齊一個小設(shè)置影響整盤GC效率eMMC內(nèi)部光看邏輯塊地址好像很規(guī)律但物理頁、物理塊之間有固定對齊關(guān)系。如果系統(tǒng)給eMMC分區(qū)時起始扇區(qū)不是整數(shù)倍塊邊界對齊比如一個4KB塊被分成兩個分區(qū)跨邊界的寫入就會被FTL拆成多次內(nèi)部操作垃圾回收復(fù)雜度上升寫放大系數(shù)跟著惡化。排查方法很簡單parted /dev/mmcblk0 align-check optimal 1如果顯示不理想重新分區(qū)時讓起始扇區(qū)為8192的整數(shù)倍對應(yīng)4MB對齊這是一個兼顧性能和兼容性的常用做法。很多量產(chǎn)腳本里用fdisk時默認(rèn)起始扇區(qū)是2048在eMMC上雖然也能用但并不是所有顆粒的最優(yōu)選擇。別嫌這步麻煩分區(qū)對齊不對齊在長期運行后的壽命和性能差異是能測出來的。5.2 掉電保護(hù)別以為eMMC能扛住一切eMMC控制器有緩存和內(nèi)部映射表掉電瞬間正在寫入的數(shù)據(jù)不一定落盤。雖然大多數(shù)eMMC有掉電恢復(fù)機(jī)制能保證已經(jīng)返回“寫成功”的數(shù)據(jù)不丟但如果系統(tǒng)沒有正確使用刷新命令數(shù)據(jù)可靠性還是打折扣。Linux下常見的坑是文件系統(tǒng)雖然掛在ext4上但沒明確開啟barrier或者上層應(yīng)用不關(guān)心fsync。壓力測試時大文件寫入看著完成了實際上數(shù)據(jù)還躺在內(nèi)存頁緩存里一斷電就丟。更隱蔽的是控制器內(nèi)部的寫緩存需要發(fā)送FLUSH_CACHE命令才能真正落盤。做掉電測試時我的做法是準(zhǔn)備一套循環(huán)腳本交替寫入隨機(jī)數(shù)據(jù)和校驗數(shù)據(jù)。每次寫完固定大小數(shù)據(jù)后調(diào)用fsync并記錄數(shù)據(jù)位置。隨機(jī)時間點切斷電源。重新上電后掛載文件系統(tǒng)并校驗已記錄的數(shù)據(jù)內(nèi)容。反復(fù)跑幾十輪才能對板子的掉電可靠性有底。只做一次冷啟動驗證根本不叫測試。5.3 用sysfs和mmc-utils做壽命監(jiān)控eMMC的壽命不會突然歸零它有明確的“提前量”。定期讀取下面這些信息能幫你預(yù)判設(shè)備剩余壽命。mmc extcsd read /dev/mmcblk0 | grep -E PRE_EOL|LIFE_TIME|BKOPS把每次讀取的結(jié)果記錄下來配合時間戳形成趨勢圖。如果看到pre_eol_info從Normal變成Warning就要開始規(guī)劃設(shè)備輪換或減少寫入了。如果BKOPS_EN一直處于未使能狀態(tài)而設(shè)備又頻繁出現(xiàn)性能抖動可以嘗試在系統(tǒng)啟動早期啟用Auto BKOPS再觀察延遲曲線。有些設(shè)備的壽命信息只能在“可編程區(qū)域”里讀少量廠商還會故意隱藏部分字段。遇到這種情況先確認(rèn)你使用的mmc-utils版本和內(nèi)核版本是否較新再查廠商手冊是否有專有命令。5.4 三個真實踩坑記錄坑一某批次設(shè)備使用半年后壽命估算數(shù)據(jù)異常偏高。排查鏈路是先看dmesg有無異常ECC錯誤再看life_time并配合寫入量估算最后發(fā)現(xiàn)是量產(chǎn)階段的持續(xù)寫入壓力測試次數(shù)過多導(dǎo)致顆粒磨損集中。解決方法是調(diào)整產(chǎn)測流程將全盤寫測試從每臺多次改為抽檢并加軟件升級階段白名單避免每臺機(jī)器都重復(fù)整盤刷寫。坑二開發(fā)板在做持續(xù)數(shù)小時的日志寫入測試時出現(xiàn)周期性卡頓。我一度以為是文件系統(tǒng)問題后來抓取iostat發(fā)現(xiàn)w_await周期性飆升再讀BKOPS_STATUS確認(rèn)是有后臺操作發(fā)生。解決方式是調(diào)整測試腳本每寫一段數(shù)據(jù)后主動追加sleep間隙同時在內(nèi)核配置里打開Auto BKOPS讓設(shè)備提前利用這些間隙做維護(hù)卡頓現(xiàn)象明顯緩解??尤彻た卦O(shè)備在高溫老化工序后上報的啟動時間變長。排查發(fā)現(xiàn)是高溫箱內(nèi)溫度達(dá)到85°C以上NAND讀干擾和電荷泄漏加重FTL頻繁做讀刷新和重試。解決方案是把老化溫度上限調(diào)低到70°C并在老化后的開機(jī)流程里增加文件系統(tǒng)自檢同時加入溫度降額控制邏輯高溫環(huán)境下主動限制寫入頻率。這三個坑有一個共同點都不是eMMC芯片“壞了”而是系統(tǒng)沒有充分理解存儲介質(zhì)的工作方式。對齊、掉電、溫度、維護(hù)窗口這些詞看起來是參數(shù)手冊里的小字實際卻是決定產(chǎn)品長期可靠性的關(guān)鍵?;氐介_頭那個問題“mmc bkops”為什么會被反復(fù)搜索因為它代表了eMMC性能世界里最不可預(yù)測的那部分。對普通開發(fā)者來說建議不要只停留在“性能變差就換芯片”的層面先學(xué)會看BKOPS_STATUS、壽命字段和寫放大數(shù)據(jù)很多時候優(yōu)化一個后臺操作的窗口比整體更換存儲方案更有效。我現(xiàn)在做新板卡選型時都會把BKOPS機(jī)制是否可調(diào)、壽命監(jiān)控是否有標(biāo)準(zhǔn)接口放進(jìn)評估表。存儲這行沒有玄學(xué)所有看似突然的故障翻開手冊都能找到源頭。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产无马av| 精品久久久无码| 旡码电影特区| 草草草视频| 久操网线| 日韩精品作爱导航| 欧美性爱第一页久久| 亚洲人妻中文高清| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 欧美1区二区三区公司| 亚殴在线| 亚洲欧美999| 大香蕉520| 日日干夜夜欢| 久草免费福利在线播放| 日韩9999| 牛牛操视频逼| 久久久久13| 欧美日韩国产色五月综合在线| 97亚洲综合在线| 人妻人人做人人澡人人爽欧美一区| 亚洲精品欧洲精品| 国产辣妈在线视频福利| 97干在线看| 色97干| 国产精品三级视频网站| 婷婷久月| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 色情五月婷婷| 日韩BBN| 亚洲情色中文字幕一区| ai欧美亚洲小说| 亚洲在线网站| 国产AV天美| www色日本| 色五月AV在线| 超AV色女| 欧美精品日韩久久久九| 99久在线精品99re8热视频在线| 日韩免费中文字幕视频| 欧美成人综合| av网页一区二区三区| 九九亚洲精品| 亚洲无码一二三区| 97精品视频在线播放| 国产日韩区| 欧洲亚洲综合| 99在线精品视频| 97国产人人| 99综合自拍| 亚洲成人性| 欧美中字不卡| 黄片视频观看| 无码男人天堂| 五月婷婷色| 天天综合中文字幕 91| 精品人妻伦一二三区久久| 99热这里只有精品18| 五月天综合在线| 日韩亚洲欧美中文字幕| 又摸又舔在线观看网站| www.婷婷六月天| 欧美97色| 色哟哟精品1精品2| 青青草在线视频欧美| 久久性爱精品一区| 蜜臀久久久99久久久久| 欧美玖玖爱免费玖玖| 亚洲Av无码成人精品国产| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区 | 怡红院久久老司机| 欧美黑人猛交春色影视大全| 国产精品999aaa| 99精品久久久久久| 四虎AV在线观看| 一级做受视频免费是看美女| 久久女人| 天堂网 主播 亚洲| 夜夜爽爽爽| 日本操逼视频不卡直接放| 99只有精品| 久久九九综合| 国产高清自拍| 看看日B真人视频| 亚洲欧美天| 欧美综合加勒比在线| 国产一区二区啪啪视频| 亚洲无码超碰免费| 日本欧美不卡| 婷婷色香伊人| 亚洲狠狠入| 日韩人体偷拍| 五月天婷婷基地| 国产精品亚洲无码| 国产精品人妻无码久久久互動交流| 国产情色第一第二页在线观看| 亚洲 日韩 欧美 国产综合体| 亚洲精品一区二区精品| 清纯唯美亚洲综合| 亚洲区小说| 日欧毛片久久| 一区二区蜜臀| 精品久久在线区一区| 成人午夜视频免费播放| 91爆操视频| 97欧美久久久久久久| 区一在线观看| 夜夜操av亚洲一区二区| 欧美18禁91| 天天干天天插| 99免费在线视频| 国产区性爱在线视频秋霞豆| 8x福利精品第一福利视频导航| 91麻豆天美国产欧美高潮| 午夜精品久久久久久久99热影院| 东京热一区二区三区四区五区六区| 眼镜人妻101.com| 亚洲色图欧美一区二区不卡| 草草草视频在线免费看| 亚州综合| 日韩国产不卡在线视频| 日韩性爱1级片视频| 日本 情色 1区| 美女黄页网站| 亚洲欧美在线丝袜| 清纯唯美第一页| asc国产精品| 日韩人妻精品| 96久久久久久久| 啊啊啊好大好深| 97伊人超碰| 操一对老熟妇爽上天视频| 欧美久久人体| 亚洲男人天堂av| 97爱| 欧美日韩性爱操大逼| 91小视频| 亚洲色图 欧美热图 清纯唯美 另类自拍| 屌逼麻豆| 麻豆伊人网| 97超碰色中文字幕| 日韩免费一级性爱视频| 视频国产精品未满十八禁止在线观看| 免费在线黄片视频| 国产免费一区在线观看| aaa淫乱视频| 97国产精品久久久久| 国产熟码AV| 日本三级精品| 五月婷婷六月丁香网址| 国产成人久久久精品免费AV| 黄页18禁| 色婷婷一区二区三区久久午夜| 嗯嗯啊啊日韩精品| 超碰2017| 懂色AV蜜臀无码精品APP | 精品亚洲国产成人av网站| 亚洲国产精品成人无码久久久| 自慰白浆在线观看| 亚州操操穴网| 中国小夫妻勾搭露脸淫荡对白| 欧美超碰人妻97| 亚洲第一页色网| 蜜臀无码视频在线观看| 色婷婷狠狠| 97超碰美国| 99视频自拍| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 新亚洲无码| 欧美精品日韩久久久九| 免費人妻夜夜爽天天爽爽一区| 色综合超碰超| 97超碰人人模人人拍人人| 黄色免费一级在线毛片| 亚洲成人免费电影| 校园春色宗合网| 91宗合网| 青娱乐日韩无码| 亚洲综合有玛| 九九九免费视频| 一区操逼日比视频| 熟女欧美日韩综合婷婷| 天美精品原创av片国产| 国产精品色片一区二区| 嗯~啊~快点 死我视频| 九九久久国产精品怡红院| 夜夜黄| 精品久久久久久中文字幕三区| 中文字幕成人| 伊人久日| 福利视频一区二区微拍| 嗯嗯嗯啊啊啊操的我好爽| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 中文字幕 国产 精品| 伊人国产视频| 亚洲国产奇米影视久久| 97人妻碰碰中文无码久热丝袜| 狠狠中文字幕| 97超碰日韩| 色色五月丁香| 素人伊尹大香蕉免费下载视频| 国产精品美女久久久久AⅤ国产馆| 亚洲 中文 女同| 一区二区三区高清| 伊人五月天青青草婷婷| 亚洲精品尤物yw在线影院| 青青草日逼视频| 亚洲狠| 综合啪啪| 精品免费囯产一区二区三区| 思思在线免费视频| 亚洲男人的天堂AV| 亚洲欧洲日韩天堂av| 情色五月天久久久| 日本性爱欧美性爱| 自拍第一页| 99久久网站| 五月天九九日国产精品一区二区三区| 91超级碰碰碰| 色香天天| 夜夜爽33333| 国产路线专区| 欧美极品女人的天堂| 色图四区| 一区久久久二区| 欧美性爱18观看| 中文字幕十五区| 久久午夜伦| 亚洲成人日韩小说| 精品少妇一区二区三区在线视频| 天操天操夜操夜月操月年年操操| 操死我了啊啊啊| 在线αⅴ| 亚洲精品欧洲精品| 先锋色眉乱伦资源| 人乳av| 亚洲一区二区三区四区视频| 亚洲av夫妻操穴网| 立川理惠被中出无码| 九一亚洲国产免费| 操逼www.| 男人的天堂三级| 九九九九久久久| 亚洲精品九九九| 天天看人人操屄犊摸阴| 国产宅男宅女在线观看| 加勒比无码毛片| 欧美成人9797| 嗯啊抽插大香蕉网页| 亚洲 欧美 日韩另类 麻豆| 嗯啊不要啊在线 | 中文字幕成人理论在线| 五十路熟女人妻一区二区三区四区五| 九九九九九九九九九五码| 爆操无码| 超碰免费人妻人人| 女人天堂网| 99这里有精品| 国产综合在线视频网站| 国产97综合| 久久久久久夜夜夜夜夜| 丁香九月激情啪| 欧美第一页| 亚拍在线| 69综合网| 国产av波波国产精品| 亚洲影视第一页| 偷窥自拍亚洲色图| 欧美啪啪女女| 美国一区二区三区视频| 91精品国产91久久久久久久久久久久| 91女网站| 国产 日韩 欧美 人妻 熟女 中文| 人人操人人摸人人看人人插| 精品国产乱码久久久久久久| 欧美亚洲第1页| 婷婷久久大香蕉| 成人av福利在线观看| 97超碰人操| 91网站18在线观看| 伊人99热| 青娱乐福利99| 欧美成人一级麻豆| 欧美天天射| 国产中文字幕在线观看| 女同性恋中文字幕| 超碰这里有精品| 大香蕉男人的天堂| 99爱久久视频频| 狠狠干狠狠色| 嫖老熟女A片一二三区| 人人看黄色视频| 久热伊人| 99rre在线精品99re8| 国产日韩欧美| 男人的天堂2000| 熟女一区二区| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 97欧美色| 中文一区二区| 人妻五十路在线| 四虎884a| 午夜激情床戏激情| 亚洲色图在线视频| 青青操97| 嗯嗯嗯不要不要免费视频| 91狠| 女同在线视频一区| 69超碰综合| 毛片电影一区二区三区| 亚洲综合一区二区| 99∨VTV| 亚洲天堂 视频你懂的| 尤物一级在线免费观看| 五月色网| 日本特黄f c2| 一区久久久二区| 青娱乐亚洲热| 91天堂视频| 91麻豆天美传媒HD| 青青青草原| 欧美日韩亚洲少妇寂寞影院正在播放 | 日韩丝袜高跟制服在线观看| 夜夜高潮夜夜爽| 久久草在线综合视频| 91狼人| 亚洲天堂热| 水澄无码AV| 欧美少妇第一页| 亚洲婷婷五月天| 在线性黄高清免费视频| 久久精彩视频| 无色无码| 欧美美女自慰一区二区三区| 丝袜美腿校园春色| 日本精品加勒比海一区| 97av在线观看| 人人看欧美性爱| 久久婷婷综合国际产色怕| 五月天久久久| 97免费视频网| 亚洲蜜臀精品视频久久| 张柏芝国产一区在线观看| 欧美十八禁视频| 色区97| 日韩在线地址一| 午夜福利免费福利视频| 欧美男人一区| 国产中文福利| 欧美色网络| 国产精品人人爽人人做可爱福利| 日本福利二区视频| 操b网站亚洲无码| 插入粉嫩少妇视频| 亚洲天堂一区| 欧美一级黄片免费播放| 超碰97玖玖爱| 少妇久久久久久| AAAAAAAAA黄片| 91oumei| 亚洲国产综合久久久性感熟妇| av线电影| 麻豆天美传媒毛片| 久久久婷| 四虎在线免费视频| 欧洲站一级二级三级h| 超碰成人人人爽人人爽| 亚洲第一在线视频| 欧美A√综合网 | 五月婷婷丁香| 男人的天堂无码| 精品国产一区探花在线观看| 国产日比| 囯产精品强| 四虎国产精品永久在线囯在线| 夜夜天天噜狠狠爱2021| 夜夜嗨一区二区| 欧美亚洲宗合色性图| 亚洲激情片| 久久‘黄片视频| 美女露胸露尿口| 欧美91色| 性在久久久久久| 影音综合网| 天天天操天天天爱| 97天天摸天天碰| 日韩另类色图| 啊啊啊 在线观看| 欧美一区二区亚洲天堂| 天天操人人操骚逼网站| 精品久久久久久中文字幕三区| 99精品在线观看| 亚洲男人的天堂在线看| 亚洲精品乱码线路中文字幕| 国产情色第一第二页在线观看| 深喉吞精| 久9热| 91日日夜夜| 成人无码在线视频网站| 高潮嗯啊性感美女久久久| 日韩在线国产字幕| 精品超碰中文在线| 亚洲97在线观看| 色婷网| 一区| 国产精品激情久久久久久久| 精品一区二区三区四区外站| 日韩亚洲精品一区二区| 999九九精品| 高清国产成人无码| 亚熟hd视频在线| 人人玩人人添人人澡免费| yazhousetuoumei| 欧美组图日韩亚洲中文字幕| 牛牛久久国产精品视频一二三| 亚洲av国产av综合av卡| 另类视频在线| 搡老熟女老女人老熟妇免费视频| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 丝袜AV一区二区三区| 精品人妻av在线播放| 丁香六月婷婷| 日产操逼| 制服诱惑亚洲一区二区三区在线观看| 综合欧美日本三级| 丝袜足交视频| 天天日天天舔东京热| 岛国福利在线精品播放| 亚洲怡春院| 成人在线视频网| 91天美| 在线视频一区二区传媒| 极品尤物女神在线观看| 国产97av| 91色图片| 色婷婷网| 色综合V| 久久久久斤小| 九九色综合| 人人操 欧美| 色av中文字幕| 色婷婷影视| 26uuu久久| 鲁鲁色综合网| 国产理论视频在线播放| 日韩欧美传媒一区国产| 久干网| 五月天婷婷久久| 台湾一区国产高清在线| 欧美图片校园春色| 一区二区 电影 亚洲| 97久久超碰| 九九九九免费视频| 色五月亚洲| 中国zzijzzijzzwww精品| 久久99久久99精品天美传媒棢·纸:.| 日本久久久久久久久| 草草网站影院白丝内射| 欧亚三区动漫| 欧美色图 人妻| 91校园春色长篇| 亚州免费啪啪视频| 超碰在线日韩一区| 久热久| 久久大香蕉手机高清| 操高情无码| 国产精品分类在线观看| 97伊人| 少妇内射视频| av午夜玫瑰| 屌色在线97视频| 亚洲交换| 一区二区三区 丝袜高跟| 香蕉在线一区二区三区| 思思热免费视频观看| 亚洲国产另类在线中文| 鸥美中出| 久肏视频字幕| 91N综合网在线| 老师充足的奶水小说| 伊人AAA| 这里只有精品视频在线观看麻豆| 精品国产三级av韩国在线| 久久蜜桃一区二区| 欧亚日韩综合精品国产| 日本人妻天堂网站在线播放| 99爱久久视频频| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 亚洲清纯唯美| 日本黄页视频在线观看| 亚洲伊人久久精品影院| 久久神马影院| 伊人久久亚洲中文字幕不卡| 高潮嗯啊性感美女久久久| 96AV久久久| 91女网站| 成人精品视频一区二区| 蜜桃传媒一区二区亚洲| 亚洲吊色| 天天操女人| 女人的久久久| 精品无码一区二区| 丝袜制服字幕在线| 日韩欧美资源| 精品一国2| 蜜臀99久久精品| 中文字幕无码不卡啪啪| 狠久久| 97在线视频免费看| 亚洲风情在线观看| 日韩成年人性爱视频| 亚洲婷婷丁香在线| 精品国产乱码| 久久区| 91精品国产91久久福利| 日韩 国产 欧美自拍| 中国AV美女| 免费?级毛片无码?∨蜜芽试看| 美女操逼A A| 蜜桃中文字日产乱幕4区| 亚洲一区二区AV| 久久精品一区二区三区四区五区| 亚洲伊人成综合成人网| 久久久久免费看少妇A片特黄| 芊芊操逼视频无码| 色色婷婷五月天| 99re这里只有精品中心播放| 伊蕉97蜜桃97狠狠综合干| 东京热精品97综合网| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 高清视频一区| 日韩精品一区二区高清| 久草视频分类在线| 日韩九区| 九九九九日本| 九九九国产精品| 被男人吃奶很爽的毛片| 最新国产亚洲精品精品国产亚洲综合| 亚洲高潮少妇| 欧美一品道| 夜夜躁狠狠躁日日躁av| 亚洲五码一区二区三区| www.婷婷| 欧美极品色| 精品亚洲| 日日噜噜夜夜狠狠视频无| 欧美在线播放aaaa| 天天网综合| 翔田千里AⅤHD无码| www.99在线| 五月开心久久AV官网| 亚洲情色 欧美| 加勒比在线视频一区二区三区 | 思思热在线视频免费| 国产欧美日韩精品中文| 白丝少妇一区二区| 夜夜欢天天干| 亚洲成人综合在线| 在线情色电影 91大 | 91N综合在线| 国产成人在线观看网址| 免费综合亚洲中文| 神马影院午夜福利久久久| 精品对白久久不卡| 亚洲Av无码成人精品国产| 射欧美综合| 久草成人| 国产精品三级视频网站| 超碰在线综合97| 亚洲精品免费中文字幕| 伊人色综合超碰| 99在线精品观看视频中文| 一区二区三区四区免费视频| 男人的天堂.com| 久久精品日韩| 涩涩涩综合| 99999re| 丰满人妻一区二区三区| 麻豆这里只有精品| 精品69网| 国产精品免费美女视频| 涩涩这里只有精品视频| 欧洲乱码一区二区| 亚洲AV成人在线| 大乔未久88一区| 亚洲国产精品成人无码久久久| 人妻无码一区二区三区久久99| 97资源免费视频| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 久久久999国产| 99操99| 99爱爱| 天天插夜夜操| 欧美性巨大╳╳╳╳╳高跟鞋| 国产在线激情视频| 日本国产欧美一区三区二区| 国产一区二区精品久久99| 久久久新亚洲AV| 在线国产一区二区av| 国产欧美日韩臀| 男女啪啪啪18禁网站| 2011国产精品| 精品人妻中文字幕高清| 国产传媒日本欧美专区| 亚洲欧洲中文日韩女优乱码| 最新欧美色网| 中文字幕狠狠玩| 久久久成人精品| 操啊国产| 欧美伦乱爱| 91高清无码下载| 亚洲诱惑天堂 | 九九热精品| 日日躁夜夜躁狠狠躁超爽| 最新加勒比丝袜在线| 亚洲综合20p| 色九月综合| 日韩性爱毛片操骚逼| 午夜精品人妻二区三区| 在线观看国产黄色| 亚洲av资源| 高清不卡国产| 亚洲精品xxx| 亚洲色图 91| 亚洲AV永久无码一区仙野| 蜜臀久久久99久久久久| 亚洲色吧网| 伦激情人妻另类人妻| 日韩八十路老熟女| 免费视频无码| 黄人人操人人操| 色噜噜人妻av中文字幕| 黄色乱论网站| 免费啪啪啪网站18岁| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 久久九九一区二区三区成人| 日韩亚洲国产视频| 伦理第一页| 97色97好| 日本123区操B视频| 亚洲图片激情综合另类| 狠狠入| 10000部十八禁看电影| 乱伦日本色图AⅤ| 婷婷综合伊人一区| 亚洲综合69| 欧美中文字幕男人天堂久久精品 | 97久久免费| 激情五月综合网| 亚洲美女av无码| 久久久精品中文字幕麻豆| 欧美成人都市人妻| 欧美v亚洲v日韩v最新在线二区| 欧美色狠| 亚州,欧美在线| 亚洲区限制级| 少妇免费视频| 色5月婷婷| 日韩精品1区2区中文字幕| 中文乱码字幕观看视频| 久久久久久裸体 | 色噜噜人妻丝袜a∨先锋影 | 欧亚日韩三区| 久久久爆乳翘臀一线天伦理视频| 日韩免费簧片| 免费视频一二三区| 91熟女视频网| 91色女| 精品人妻1区| 国产免费小视频| 亚洲污一污二| 久久精品视频久久久| 国产精品免费视频人成| 隔壁邻居波多野结衣中文字幕| av线电影| 夜夜中出国产| 超碰99在线观看| 黄片www.| 久久啊啊| 欧美自拍偷拍免费观看| 99re这里只有精品2| 欧美 亚洲 偷拍自拍| 精人妻一区二区三区| 久久久久久夜夜夜夜夜| 亚洲日韩美国人妻| 丰满人妻-区二区三区| 91大学精品激情戏| 欧美 亚洲| 久久78| 操逼无码操逼| 色婷婷九月天天综合| 亚洲女毛多水多21P| 久久久久久久久久8888| 操碰91| 先锋精品av色鲁| 亚洲激情网一二三四区| 欧美日韩国产高清在线一二三区 | 嗯嗯啊啊视频一区二区三区| 国产69精品久久久久99尤物| 欧在线一二区| 久久久精品一区二区| 欧美熟女丝袜| 99精品在线| 白丝一区| www.yeyecao| 国产黄色av大片网站| www.狠狠| 欧美A√综合网 | 91在线无码精品秘 软件| 色综合色| 日本一片一区| 97人人夜| 俄罗斯一区二区视频在线观看 | 日韩欧美大力操| AV无码久久久精品| 无码99| 99re6国产精品99re| 九九九九亚洲| 偷拍偷窥与盗摄视频专区| 亚洲一区二区三区不卡国产欧美| 日本成人免费一区二区三区| 免费在线观看国内色片网站网址| 日本超碰在线国产一区| 97精品综合久久网| 日韩欧美日韩| 国产 码在线成人网站| 亚洲蜜臀懂色| 91这里只有精品| 国产av美女被艹的乱叫| 亚洲美女 晚间男人天堂 | 999国产精品999久久久久久| 人人看人人插| 嗯嗯嗯不要不要免费视频| 中文字幕第7页| 欧美一区二区一级岛国大片| 欧美一区二区观看在线| 日日干男人的天堂| 亚洲熟女诱惑| 日韩无码黄色片| 久久久久久久久久久97| 久久亚洲一区女同性恋中文字幕| 免费一级特黄特色大片在线观看看 | 91成人久久 | 人妻啊啊人妻啊啊| 亚洲丝袜少妇在线| 综合影院亚洲| 亚洲高潮少妇| 久久精品国产亚洲AV无码电影 | 欧美一区二区在线资源| 91社操逼| 东亚亚洲无码高清| 欧美日韩激情无码专区| 亚洲自拍天堂| 熟女少妇视频| 97精品97久久| ss久久| 久久亚洲AV无码专区首页| 国产情色在线| 女一区二区| 温婉少妇玩3p| 欧亚三区动漫| 91 丝袜在线| 亚洲欧美日韩偷拍色图| 人人透人人操| 精品一区二区成人| 韩国一级婬片A片AAAAA| 色婷婷五月综合激情中文字幕| 热的中文 热的有码 热的国产| 免费的很黄很污的全部视频| 97久操| 狼人综合婷婷激情四射 | 中文字幕久久精视频久久大全| 国产精品网站免费| 丁香五月天啪啪| 在线人成亚洲视频免费观看| 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 久久 精品| 狠狠躁天天躁日日躁| www.yw尤物| 中文字幕精品一区二区精| 久久精品无码专区| 欧美一级专区免费大片 | 亚洲九九爱| 高树玛利亚无码流出| 手机看片1024你懂的国产| 国产一区二区三区高清视频| 日本道人妻久久久在线不卡色视频| 中文字幕片| 久久黄黄| 婷婷在线视频| 香蕉久久AⅤ...| 秋霞Av理论一级在线| 麻豆尤物视频网| 欧美亚洲韩国视频十五区 | 手机在线人成免费视频| 白嫩白嫩的午夜九久久久久久久久久久久成人剧场 | 日本精品九九九| 蜜臀99999| 久久久111| 久久久久久久久久久999| 五月激情啪啪| 极品美女福利在线观看| 欧美综合娱乐久久| 3D污黄视频在线观看| 日韩在线性爱免费视频| 欧洲欧美视频一区二区| 日韩三级伊人| 午夜舔阴达高潮视频免费看| 国语精品av| 日本一二区不卡| 久久久久久九九九九| 欧美精品三级黄片| 天天操人人操狠狠插| 国产精品久久久久无码A√| 国产高清无码一区三区二区| 色老汉色| 情侣操 逼视频99| 欧美欧美啪啪视频| 夜夜操av亚洲一区二区| 清纯唯美第一页| 99色综合| 日本韩高清无砖码22o| 久久小视频| 欧美综合自拍亚洲综合图| 欧美爱爱97| 国产精品盗摄 偷窥盗摄| 狠狠操狠狠爱| 一级免费啪啪片| 亚洲妇色| 欧美大波激情xxxx| 91热爆在线| 嗯~啊~快点 死我视频| 97少妇人妻中文字幕久久| AV在线播放网址| 97在线看| 精品久久久久av影院| 亚洲自拍一区夜夜操| 夜夜高潮夜夜爽国产伦精品| 久久9精品网站| 熟妇视频一区二区三区在线观看| 国产又色又爽又舒服的三级视频| 五月婷在线| 一二三四视频在线社区中文字幕| 日韩欧美传媒一区国产| 91视频成人福利网站在线一区| 在线啊啊啊| 操逼啊啊啊91| 欧美狠狠鲁| 人人操,人人液| 欧美激情综合色综合啪啪五月| 精品一区二区三区四区外站| 国产一进一出视频网站| 亚洲色资源| 久艾草在线精品视频在线观看| 亚洲日韩av一区二区三区百合| 俞拍久久国应视频| 97人人草| 欧美91变态| 97超级久久强资源| 啊啊啊啊免费视频| 色99在线| 国产精品久久久久久久久久二区三区| 亚洲**2021在线观看| 亚洲AV无码天美传媒一区| 人妻精品一区一区三区蜜桃91| 欧美精品99久久久**| 18一区二区三区| 日本熟女不卡视频| 亚洲天堂女优在线| CCYY草草影院地址入口| 日韩精品99久久久久久中文字幕| 无码人妻精品一区二区三区99不卡| 久久九七| 懂色AV蜜臀无码精品APP| 欧美瑟综合| 强上我不卡卡| 狠狠色噜噜狠狠狠狠狠色综合久久| 久久精品男人的天堂| 天天色综亚洲91污| 超碰97欧美日韩| 色婷婷五月天| 青草草免费网站av| 亚洲风情综合网| 精品久久在线区一区| 色欲无码人妻日韩欧美精品| 久草电影网| 中文字幕97色| 26uuu国产| 中国大陆国产高清AⅤ毛片| 国产精品色| 三级片大波波| 中文字幕第95页| 亚洲天堂自拍| 在线 制服丝袜中出 人妻| 超碰地址久久| 91超碰丝袜制服| 最新欧美色网| 1769精品一区二区三区| 99视频这有这里有精品| 国产999精品久久久| 精品中文一区二区| 99色热| 国产自产一区视频在线| 98超碰欧美| 中文字幕av一区二区三区人妻少妇| 99在线精品观看99| 另类一区| 乱伦3P视频| jk白丝没脱就开始啪啪| 性色AV网站| 日本熟女不卡视频| 成人福利视频网| 男女激情黄色网址| 亚洲国产欧美日韩人妻日中文| www.男人天堂| 中文字幕乱亚洲美女精品一区| 性无码专区2020| 色噜噜人妻丝袜a∨先锋影 | 大香蕉中文在线| 中日992视频| 狠狠干妹子| 人妻熟女一区二区| 日韩电影免费网站麻豆视频| 天天舔天天日天天射| 欧美激情五月天| 五月婷婷六月色| 亚洲男人天堂2019| 内射中出日韩在线观看视频| 国产av高清版| AV高清一区| 婷婷三区| 久久一区无码| 国产自偷| 高清不卡视频| 7777奇米影视久久| 无码九九九九| 国产91精品久久久久久久网曝门| 操逼逼中文字幕| 欧美日韩小说| 日本精品一区二区三| 2001天天操| 天天碰操中国年青熟妇| 91女优在线观看| 九九碰九九爱97超| 在线免费观看日韩一区| 九九Av| 亚洲区限制级| 男同专区一区二区三区在线| 一区二区影视| 最新中文字幕精品在线| 超碰超碰95| 99在线观看无大码| 中国特猛少妇色xxx| AAAAAAAAA黄片| 久久综合精品一区二区三区| 午夜福利 成人 91| 91c色| 刺激精品视频| 麻豆国产97在线| 人人摸人人干| 欧美,日韩,中文,另类| 蜜乳中文字幕a在线| 99热超碰| 99热在线播放| 丁香六月激情| 凌辱美少妇久久aV| 操91| 亚洲图片欧美偷拍| 五月丁香六月婷| 偷拍导航视频网站| 黄片不用下载在线观看| 另类专区加勒比| 国人欧美精品一区二区| 亚洲青色欧美| 久草视频观看视频在线| 麻豆一区二区三区精品| 在线看的av| 加勒比久久av| 亚洲午夜av| 天堂男人网| 夜夜操二区| 无码不卡亚洲成?人片| 长长久久88视频| 九九九久久久| 97超久碰| 欧美麻豆成人同性GⅤ在线| 极品色电影院| 色99色| 亚洲av无码国产精品字幕| 大香蕉国产中文自拍| 亚洲无992tv| 天天躁狠狠躁av| 国产小u女在线观看| 天天噜| 亚洲人91| 婷婷亚洲综合| 国内偷自视频区视频综合| 国产免费一区| 亚洲黑丝在线| 亚洲熟伦熟妇AV无码春色| 69久久久久久久久久久久久| 成人三一级一片aaa| 97网色| 在线小说视频一区| yazhousetuoumei| 久久欲| 欧美97| 亚州 综合 色图| 天堂精品在线| 国产在线视视频有精品| 欧美黄色手机在线观看| 蜜桃传媒视频第一区入口在线看| 久久九九一区二区三区成人| 97精品综合久久| 草草影院最新网址| 日本乱人伦片中文三区| 欧美美女后入| 亚洲国产成人高清在线| 中国少妇XXXX做受| 婷婷色综合欧美日韩| 亚洲se91| 99re6在线视频播放免费精品| 国产日韩欧美| 国产精品久久久视频| 日本三级日本三级99| 国产精品免费视频人成| 97色视频在线| 成人黑料社久久| 日韩精品一区二区高清| 樱花蜜乳av| 亚洲操逼网| 伊人久久大香线综合无码| 综合激情一一91| 日韩成人高清一区二区| 啪啪啪东京| 精品区国产区一区二区三区| 香蕉精品二区二区| 亚洲天堂电影网99999| 欧美色另类| oumeizonghese,www| 国产日韩人人| 久湿久久| 人妻少妇久久| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 超硑97精品| 亚洲天堂区| 麻豆AV一区二区| 久插综合| 国产嫩草精品A88AV在线| 欧美同性恋 的搜索结果 - 91n| 日本精品999| 91欧美经典| 黄片免费日韩| 人人射人人操人人摸| 国产超碰国产97| 亚洲成成熟女人综合一区二区| 国产在线综合福利网站| 97在线观看| 97这里只有精品| 99久久精品无码一区二区毛片免费| 亚洲巨爆乳一区二区三区四季网| 日躁天天爽爽| 色网综合网| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 内射夫妻三片| 岛国大片在线观看网站入口| 99精品久久久久久久婷婷| www…国产操逼| 亚州欧美总和| 大学生美女口爆| 久久成人国产| 国产精品乱码久久久久久久久久久久| 九九毛片这里只有精品| 日韩精品9区| 美国精品国产精品| 五月天久久婷婷亚洲| 中文字幕黄色一起草| 啊视频在线| 尤物视频网 刘玥| 看免费一级在线播放毛片| 人妻久热在线| 综合夜夜| 欧洲色| 亚洲欲色| 色色五月婷婷| 噜噜瑟| 狠狠操狠狠插| 中文字幕乱妇免费视频| 日韩欧美综合激情| 国精综合一二三区影视| 欧美不卡在线一区二区| 97色爱| 亚洲伊人久久综合97| 97超碰热线| {男男暴菊gay无套网站| 盗摄 精品 另类 一区| 亚洲激情久久久伊人综合| 91呆哥人妻| 亚洲天天操| 国产suv精品一区二区四| 国产精品久久久久久久电影渣男| 日日干夜夜操视频h| 国产成年女人免费视频播放a| 久久综合女优| 亚洲精品精品一区二区| 新怡红院| 亚洲狼狼干综合1| 欧美大香蕉专区网| 一本色道久久综合熟妇| 亚洲精品乱码久久久久久蜜桃麻豆| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 激情六月天| 狠狠操,使劲操| 欧美精品三区| 一区二区三区在线资源| 秋霞操逼片| 九九热三级片| 精品国产99| 秋霞久久亚洲精品成人| 在线视频97| 男人的亚洲天堂| 久久,精品一二三| 久久黄色性爱视频| 屁股久久久久久久久久| 欧美在线55555| 97超碰69| 亚洲av国产av综合av卡| 国产超碰在线一区| 1000部熟女视频在线观看| 99re9这里只有精品| 精品九九国产无码| 无码视频一区二区| 久久久成人精品| 尤物网站91| 国产性感骚丝袜在线| 中国AAAAAA黄色片| 色综合久久夜色精品国产天堂| 亚洲好看强奸乱伦| 亚洲素人综合| 操少妇很爽av| 超碰色大香蕉| 亚洲永久AV无码精品秋霞| 久久性爱大全| 国产精品久久久久无码Av网曝门 | 日日摸日日弄日日拍| 制服乱伦| 亚洲性爱电影| 国产97av| 欲色啪| 开心婷婷五月| 91足交| 亚洲色欲天天天堂色欲网女| 骚货操死你| 99www.bibizy香蕉资源国产一区二区三区高清| 成人性爱全视频观看| 在线免费观看高清无码视频| 老女人老91妇女老热女| 精品99999久久久久久| 欧美成人午夜免费福利785| 国产福利一区二|