国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

RISC-V自定義擴(kuò)展工具鏈適配實(shí)戰(zhàn):從匯編器到模擬器全流程

RISC-V自定義擴(kuò)展工具鏈適配實(shí)戰(zhàn):從匯編器到模擬器全流程 做RISC-V自定義擴(kuò)展最難的不是寫那條指令的邏輯而是把工具鏈打通。我說的是這個(gè)場景你在FPGA上寫好了一個(gè)自定義加速指令邏輯仿真全都通過了結(jié)果回過來想在軟件側(cè)驗(yàn)證匯編器報(bào)不認(rèn)識、反匯編器顯示亂碼、GCC壓根不讓你從C代碼里調(diào)它。沒錯(cuò)新指令真正跑起來的完整流程RISC-V工具鏈適配是繞不過去的一關(guān)。這篇內(nèi)容就是我完整走通這條鏈路后的實(shí)戰(zhàn)記錄從指令編碼設(shè)計(jì)、binutils改造、GCC內(nèi)置函數(shù)接入到Spike和QEMU模擬器驗(yàn)證一條龍拆開講清楚附上可以直接復(fù)現(xiàn)的操作步驟適合正在搞RISC-V自定義擴(kuò)展但卡在工具鏈上的工程師也適合剛接觸RISC-V指令集、想搞懂工具鏈內(nèi)部是怎么工作的同學(xué)。1. 為什么要把一條新指令塞進(jìn)RISC-V工具鏈1.1 自定義指令到底能解決什么實(shí)際問題先別急著改代碼想清楚你要不要做這件事。RISC-V之所以在定制化場景里這么受歡迎就是因?yàn)樗o了你一個(gè)開口讓你能在指令集層面上為特定負(fù)載加速。最常見的幾個(gè)場景算法里的熱點(diǎn)計(jì)算比如矩陣乘加、卷積、FFT中的蝶形運(yùn)算用一條指令替代好幾條。AI推理中的量化運(yùn)算典型的如乘加飽和、移位取整組合硬件一條指令干完軟件少寫十幾條。加解密里的位變換操作比如國密算法中大量用到的循環(huán)移位、字節(jié)置換。網(wǎng)絡(luò)包處理里的位域提取、校驗(yàn)和計(jì)算。我這次拿來做例子的是一條自定義乘加指令運(yùn)算語義是rd rs1 * rs2 rd。選它是因?yàn)榻Y(jié)構(gòu)足夠簡單R型和乘加運(yùn)算大家都熟不至于把精力浪費(fèi)在理解算法上能集中精力看工具鏈適配本身。但這里有個(gè)必須提前說的判斷如果你的指令功能用兩三行普通指令就能表達(dá)或者編譯器優(yōu)化本身就能生成差不多的序列那自定義指令帶來的收益可能還不如它帶來的工程成本大。工具鏈適配、模擬器維護(hù)、軟件生態(tài)兼容這些事都是要還的。一般來說只有當(dāng)這個(gè)操作在一個(gè)算法里出現(xiàn)頻率極高、且普通指令序列加上數(shù)據(jù)搬移的開銷確實(shí)很大時(shí)自定義指令才劃算。1.2 先分清路線非標(biāo)準(zhǔn)擴(kuò)展與標(biāo)準(zhǔn)擴(kuò)展RISC-V的擴(kuò)展有兩條路。一條是走標(biāo)準(zhǔn)擴(kuò)展流程比如B擴(kuò)展位操作、P擴(kuò)展DSP你設(shè)計(jì)一套指令寫提案走社區(qū)評審進(jìn)規(guī)范和工具鏈這個(gè)過程以年為單位適合要大規(guī)模商用、要生態(tài)兼容的團(tuán)隊(duì)。另一條就是非標(biāo)準(zhǔn)擴(kuò)展也叫自定義擴(kuò)展直接使用指令集規(guī)范里預(yù)留的custom opcode空間自己定義編碼自己改工具鏈今天設(shè)計(jì)明天就能跑代價(jià)是代碼沒法直接跑到別的RISC-V核上除非對方也支持你這套擴(kuò)展。我走的是非標(biāo)準(zhǔn)擴(kuò)展這條路這也是絕大多數(shù)做定制芯片、加速器團(tuán)隊(duì)的實(shí)際選擇。RISC-V規(guī)范在opcode map里預(yù)留了四個(gè)custom空間對應(yīng)opcode字段的四個(gè)編碼值。這些編碼的標(biāo)準(zhǔn)指令集部分沒有分配任何官方指令就是專門留給用戶做擴(kuò)展的。我在例子里用的是CUSTOM-0這個(gè)空間opcode是7位二進(jìn)制0001011十六進(jìn)制0x0b。這個(gè)空間夠不夠用后面接著說。1.3 一條新指令跑起來要打通哪幾道關(guān)把這條路走通你會(huì)發(fā)現(xiàn)工具鏈不是一個(gè)軟件是一串環(huán)環(huán)相扣的組件。簡單列一下你寫的這條指令從匯編代碼到CPU執(zhí)行中間都要經(jīng)過誰binutils里的gas匯編器把cma這個(gè)助記符和寄存器操作數(shù)編碼成二進(jìn)制指令。binutils里的objdump反匯編器把二進(jìn)制指令反向翻譯回可讀的匯編文本沒有它你調(diào)試時(shí)會(huì)非常痛苦。GCC編譯器讓你能在C代碼層面直接寫__builtin_riscv_cma(...)生成這條指令或者起碼別在編譯到內(nèi)聯(lián)匯編時(shí)出岔子。鏈接器嚴(yán)格說鏈接器不太需要改但如果你要給新指令單獨(dú)安排一個(gè)擴(kuò)展名讓GCC識別鏈接時(shí)多多少少要確認(rèn)相關(guān)選項(xiàng)傳對了。模擬器Spike或QEMU。你要在指令集模擬器上執(zhí)行到這條指令的時(shí)候它得知道這條二進(jìn)制該干什么否則直接報(bào)非法指令。硬件或FPGA模擬器過了之后最后要落到RTL里去執(zhí)行這條指令。這里面每一環(huán)都有自己的一套登記機(jī)制。我的經(jīng)驗(yàn)是先在做任何修改之前把這條鏈路的順序理清楚因?yàn)楹笠画h(huán)節(jié)的報(bào)錯(cuò)原因經(jīng)常在前一環(huán)節(jié)改錯(cuò)地方是新手最容易踩的坑。2. 動(dòng)手前設(shè)計(jì)指令編碼與工具鏈環(huán)境準(zhǔn)備2.1 先設(shè)計(jì)指令編碼位域怎么分配工具鏈適配之前第一步一定是把指令編碼定死。編碼沒定后面所有地方的MATCH、MASK你都沒法填。RISC-V的R型指令格式固定是7位funct7、5位rs2、5位rs1、3位funct3、5位rd、7位opcode總共32位。我的自定義乘加指令cma rd, rs1, rs2用R型安排在CUSTOM-0空間里字段分配如下字段位數(shù)本例取值含義funct770000000功能碼高位rs25由匯編器填充源寄存器2rs15由匯編器填充源寄存器1funct33000功能碼低位rd5由匯編器填充目的寄存器同時(shí)也是累加器opcode70001011 (0x0b)CUSTOM-0在這個(gè)編碼里funct7和funct3都是0所以這條指令作為32位整數(shù)的匹配值MATCH_CMA就是0x0000000b。映射表里還有一個(gè)MASK_CMA表示哪些位是固定不變的。它的作用是一條32位指令跟MASK_CMA做按位與之后如果結(jié)果等于MATCH_CMA就說明這條指令屬于cma。rs1、rs2、rd是寄存器變量這些位要清零所以#define MATCH_CMA 0x0000000b #define MASK_CMA 0xfe00707fMASK怎么來的funct7這7位掩碼左移到25位是0xfe000000funct3這3位掩碼左移到12位是0x00007000opcode這7位掩碼是0x0000007f三者相或就是0xfe00707f。一個(gè)很容易忽略但特別重要的問題4個(gè)custom空間雖然大但你得規(guī)劃空間。CUSTOM-0這個(gè)opcode下面funct7有128種組合funct3有8種組合理論上還能塞進(jìn)去1024條R型指令。但實(shí)際使用時(shí)要記得給每條指令留出清晰的funct7/funct3分配表不然第幾十條擴(kuò)展指令往下加的時(shí)候編碼表會(huì)亂成一鍋粥。2.2 工具鏈組件與代碼倉庫選擇接下來說工具鏈。做RISC-V工具鏈適配主流有兩個(gè)起點(diǎn)一個(gè)是riscv-gnu-toolchain這個(gè)官方倉庫里面用子模塊方式把binutils、gcc、newlib和glibc組織在一起另一個(gè)是riscv-collab的riscv-binutils-gdb、riscv-gcc倉庫適合你只需要單獨(dú)改某一環(huán)的場景。我的建議是第一遍做適配用riscv-gnu-toolchain原因是它幫你把版本對齊了幾個(gè)子模塊的版本是互相測試過的不會(huì)出現(xiàn)你改了binutils但GCC版本不兼容這種問題。后面熟練了再拆開單獨(dú)維護(hù)。版本上的經(jīng)驗(yàn)binutils建議2.40以上GCC建議12以上。這兩個(gè)版本開始RISC-V后端對非標(biāo)準(zhǔn)擴(kuò)展的命名和子集管理機(jī)制相對穩(wěn)定網(wǎng)上能查到的資料也對得上。太老的版本riscv_multi_subset_supports這類接口的位置和實(shí)現(xiàn)都不一樣照著新代碼改到老版本上會(huì)踩坑。2.3 搭建編譯環(huán)境與最小驗(yàn)證工程環(huán)境上我最推薦的就是Linux x86_64機(jī)器裝好必要依賴后拉代碼編譯。編譯配置大概是這樣git clone --recursive https://github.com/riscv-collab/riscv-gnu-toolchain cd riscv-gnu-toolchain mkdir build cd build ../configure --prefix/opt/riscv --with-archrv64gc make -j$(nproc) linux這里--with-archrv64gc是默認(rèn)架構(gòu)參數(shù)我們用自己的擴(kuò)展名字之后GCC的-march參數(shù)可以覆蓋這個(gè)默認(rèn)值。同時(shí)我建議先建一個(gè)最小驗(yàn)證工程目錄里放一個(gè)測試匯編文件和一個(gè)Makefile。后面每改一個(gè)組件就跑一遍這個(gè)測試能第一時(shí)間定位問題在哪一環(huán)。我的測試文件和Makefile大概是這樣的# test.S .text .globl _start _start: li a0, 3 li a1, 4 li a2, 5 cma a0, a1, a2 # a0 3 4 * 5 23 li a7, 93 ecall # 退出Linux下CROSS ? riscv64-unknown-linux-gnu- all: test.bin test.o: test.S $(CROSS)gcc -c -o $ $ test.elf: test.o $(CROSS)gcc -static -o $ $ test.bin: test.elf $(CROSS)objcopy -O binary $ $ dump: test.elf $(CROSS)objdump -d $注意這一步先不要加cma因?yàn)榇藭r(shí)匯編器還不認(rèn)識它。編譯能過、objdump能出正常的反匯編說明環(huán)境本身沒問題接下來改工具鏈才有意義。3. binutils適配先讓匯編器和反匯編器認(rèn)指令3.1 指令表修改riscv-opc.h與riscv-opc.cbinutils對RISC-V指令的登記核心在兩個(gè)文件里。第一個(gè)是include/opcode/riscv-opc.h里面用DECLARE_INSN宏聲明指令第二個(gè)是opcodes/riscv-opc.c里面有一個(gè)riscv_opcodes[]數(shù)組數(shù)組里每一項(xiàng)描述一條指令的助記符、參數(shù)格式、匹配值、掩碼、所屬擴(kuò)展類別。我們先改riscv-opc.h在文件里加上一行聲明DECLARE_INSN(cma, MATCH_CMA, MASK_CMA)這行宏展開之后會(huì)聲明一個(gè)外部對象對應(yīng)這條指令的匹配信息。然后在riscv-opc.c的riscv_opcodes[]數(shù)組里加一條記錄。數(shù)組里每一條的字段結(jié)構(gòu)大致是助記符、所屬子集、操作數(shù)格式、match、mask、匹配函數(shù)、指令類別。加在我們的指令后面{cma, xcustom, d,s,t, MATCH_CMA, MASK_CMA, match_opcode, INSN_CLASS_XCUSTOM },這里重點(diǎn)解釋兩個(gè)東西。第一個(gè)是操作數(shù)格式d,s,t。在binutils的RISC-V后端里d表示rd目的寄存器s和t表示rs1、rs2源寄存器。助記符后面的字符串決定了匯編器怎么解析這條指令的操作數(shù)。有些指令是立即數(shù)操作數(shù)會(huì)用I表示12位立即數(shù)有些是u、j這種跳轉(zhuǎn)偏移。如果你自定義指令里有立即數(shù)要先搞清楚自己想用的格式有沒有現(xiàn)成的字母沒有的話還得在gas/config/tc-riscv.c里擴(kuò)展操作數(shù)解析邏輯。這一步很容易被低估實(shí)際改起來比R型指令麻煩得多。第二個(gè)是INSN_CLASS_XCUSTOM這個(gè)類別。binutils的RISC-V后端用riscv_insn_class枚舉來管理指令屬于哪一類I類、M類、A類這些都是預(yù)設(shè)的。xcustom這種非標(biāo)準(zhǔn)擴(kuò)展需要你在對應(yīng)的枚舉里自己加一個(gè)類別然后在gas的subset支持判斷里給它放行。3.2 匯編器gas側(cè)把新擴(kuò)展注冊進(jìn)子集在include/opcode/riscv.h里的riscv_insn_class枚舉中加上一個(gè)成員enum riscv_insn_class { INSN_CLASS_I, INSN_CLASS_M, INSN_CLASS_A, ... INSN_CLASS_XCUSTOM, ... };然后改gas/config/tc-riscv.c里的riscv_multi_subset_supports函數(shù)。這個(gè)函數(shù)的職責(zé)就是回答一個(gè)問題某條指令屬于某個(gè)指令類別當(dāng)前匯編時(shí)啟用的ISA擴(kuò)展是否包含該類別。不在這里放行匯編器看到cma會(huì)直接報(bào)錯(cuò)。switch (insn_class) { case INSN_CLASS_XCUSTOM: return riscv_subset_supports(xcustom); ... }還要在riscv_subset_supports相關(guān)的解析里讓xcustom這個(gè)字符串能被識別為合法擴(kuò)展名。RISC-V規(guī)范規(guī)定的擴(kuò)展名規(guī)則里以x開頭的是非標(biāo)準(zhǔn)擴(kuò)展binutils在這方面是支持解析的但不同版本對這個(gè)子集的字符串解析位置略有差異。新一點(diǎn)的版本還會(huì)檢查子集的依賴性有些后端會(huì)要求x擴(kuò)展必須掛在某個(gè)基礎(chǔ)ISA之上比如rv64gc_xcustom這種寫法。我建議在測試匯編文件里用-marchrv64gc_xcustom的方式來指定架構(gòu)。改了之后重編binutils再用交叉編譯工具試一下riscv64-unknown-linux-gnu-as -marchrv64gc_xcustom -o test.o test.S如果這條命令能過說明匯編器已經(jīng)認(rèn)了你的新指令。這一步走通了后面的東西就有了地基。3.3 反匯編器讓objdump看懂你的指令很多人在這一步會(huì)有個(gè)誤解以為反匯編器是另一套表。實(shí)際上binutils里反匯編和匯編用的是同一張riscv_opcodes[]表你給匯編器加的cma記錄objdump天然就能用了。它按match和mask去匹配指令的二進(jìn)制編碼匹配上之后把d,s,t格式翻譯回寄存器和助記符。所以這一步基本不用額外改代碼你要做的是編譯完整的binutils之后用objdump -d驗(yàn)證剛才編譯出來的目標(biāo)文件riscv64-unknown-linux-gnu-objdump -d test.o正常情況下應(yīng)該看到0000000000000000 _start: 0: 000b05b3 cma a0,a1,a2能看到cma a0,a1,a2這一行說明反匯編方向也通了。需要注意如果你看到的是.word 0x000b05b3而不是助記符先檢查MASK_CMA和MATCH_CMA這兩個(gè)宏對不對尤其是MASK。我見過有人把MASK當(dāng)成0xffffffff來寫這會(huì)導(dǎo)致rs1、rs2、rd字段也被當(dāng)作固定匹配位結(jié)果只有特定寄存器組合的指令才能被反匯編出來這是最常見的大坑。這個(gè)階段的經(jīng)驗(yàn)是匯編器和反匯編器是改起來最直觀的因?yàn)樗鼈冎恍枰次黄ヅ洳挥美斫庵噶畹恼Z義。你在這里花了工夫把表和掩碼搞對后面GCC接入時(shí)會(huì)輕松很多因?yàn)镚CC最終生成的匯編文本還是要經(jīng)過gas這一層。4. GCC適配讓C代碼能直接調(diào)新指令4.1 機(jī)器描述文件在riscv.md里描述指令語義匯編器能用只說明程序員可以在匯編層寫這條指令但對絕大多數(shù)使用者來說更希望直接在C代碼里調(diào)用。這時(shí)候就得改GCC RISC-V后端。GCC后端和binutils最大的區(qū)別是GCC要理解這條指令的語義才能參與優(yōu)化、寄存器分配、指令調(diào)度。你告訴它的方式就是機(jī)器描述文件gcc/config/riscv/riscv.md用RTL寄存器傳輸語言來描述指令做什么。我在這個(gè)文件里加的模式定義是這樣的用的是語義化描述乘法加加法而不是不可理解的unspec;; 自定義cma指令rd rs1 * rs2 rd (SI即32位) (define_insn cma_si3 [(set (match_operand:SI 0 register_operand r) (plus:SI (mult:SI (match_operand:SI 1 register_operand r) (match_operand:SI 2 register_operand r)) (match_operand:SI 3 register_operand 0)))] TARGET_XCUSTOM cma\t%0,%1,%2)這里有幾個(gè)點(diǎn)必須解釋。第一第3個(gè)操作數(shù)match_operand:SI 3對應(yīng)的約束是0意思是操作數(shù)0和操作數(shù)3必須分配到同一個(gè)寄存器這就是我們這條指令rd同時(shí)是累加器和目的寄存器的硬件約束。GCC在看到這個(gè)約束后會(huì)在寄存器分配時(shí)強(qiáng)制讓兩個(gè)操作數(shù)共用一個(gè)寄存器如果做不到它會(huì)自動(dòng)插入mov指令來滿足約束。第二我用了真正的語義mult plus而不是unspec。這兩條路各有取舍。用unspec對GCC來說是一條黑盒指令它不知道你在算什么不會(huì)瞎優(yōu)化但也沒法利用這條指令的代數(shù)性質(zhì)。用語義模式GCC就清楚這是乘加它可能會(huì)把別的乘加表達(dá)式也匹配到這個(gè)模式上優(yōu)化機(jī)會(huì)更多但風(fēng)險(xiǎn)是萬一你的硬件實(shí)現(xiàn)和標(biāo)準(zhǔn)乘法加法語義有細(xì)微差異比如溢出行為不同、飽和處理不同編譯器會(huì)認(rèn)為它和普通乘加等價(jià)從而在你不知情的地方做了不正確的變換。自定義指令如果語義和標(biāo)準(zhǔn)運(yùn)算不完全一致建議保守一點(diǎn)用unspec加UNSPEC常量如果語義就是標(biāo)準(zhǔn)乘加用語義模式更好。我這里的cma語義就是標(biāo)準(zhǔn)乘加所以用語義描述。第三TARGET_XCUSTOM是個(gè)宏在riscv.h里定義表示當(dāng)前編譯選項(xiàng)里啟用了xcustom擴(kuò)展。這塊要和下一條說GCC的-march解析掛上鉤。4.2 內(nèi)置函數(shù)從C代碼到新指令的橋梁機(jī)器描述文件定義了GCC內(nèi)部怎么看待這條指令但用戶沒法直接用。要提供C語言的可調(diào)用接口就得加內(nèi)置函數(shù)builtin function。GCC RISC-V后端的內(nèi)置函數(shù)注冊在gcc/config/riscv/riscv-builtins.cc里。新版本GCC定義內(nèi)置函數(shù)有兩種機(jī)制。一種是用__builtin_riscv_cma這種顯式內(nèi)置函數(shù)你在builtins文件里注冊函數(shù)原型和參數(shù)類型提供一個(gè)riscv_expand_builtin的擴(kuò)展邏輯讓它把函數(shù)調(diào)用展開成我們定義的cma_si3模式。簡化后的注冊邏輯大概是/* riscv-builtins.cc 中注冊cma內(nèi)置函數(shù) */ static void riscv_init_builtins_1 (void) { tree ftype build_function_type_list (void_type_node, intSI_type_node, intSI_type_node, intSI_type_node, NULL_TREE); add_builtin_function (__builtin_riscv_cma, ftype, RISCV_BUILTIN_CMA, BUILT_IN_MISC, NULL, NULL); }然后做函數(shù)展開把內(nèi)置函數(shù)的三個(gè)參數(shù)取出來轉(zhuǎn)成rtx再emit到cma_si3模式/* 展開邏輯 */ static rtx riscv_expand_cma_builtin (tree exp) { rtx dst gen_reg_rtx (SImode); rtx src1 expand_normal (CALL_EXPR_ARG (exp, 0)); rtx src2 expand_normal (CALL_EXPR_ARG (exp, 1)); rtx acc expand_normal (CALL_EXPR_ARG (exp, 2)); emit_insn (gen_cma_si3 (dst, src1, src2, acc)); return dst; }另一方面是直接讓GCC自動(dòng)猜算RISC-V后端在較新的版本里提供了一種叫自定義擴(kuò)展內(nèi)建函數(shù)的機(jī)制能根據(jù)一條匯編模板自動(dòng)生成對應(yīng)builtin。具體來說你不需要手寫展開邏輯只要在riscv-c.cc里把自定義指令的助記符聲明成可調(diào)用的內(nèi)建函數(shù)就行。但由于各個(gè)GCC版本的API差異比較大我這里不展開具體代碼更推薦的方式是先在匯編層把指令驗(yàn)證通過然后用內(nèi)聯(lián)匯編做C語言層封裝最后如果你確認(rèn)這條指令在項(xiàng)目里會(huì)被高頻使用再花時(shí)間去做正式的builtin接入。4.3 什么時(shí)候用內(nèi)聯(lián)匯編什么時(shí)候用內(nèi)置函數(shù)這一步的取舍是很多團(tuán)隊(duì)工具鏈適配早期特別糾結(jié)的問題。我直接說結(jié)論原型驗(yàn)證階段用內(nèi)聯(lián)匯編最劃算產(chǎn)品化階段內(nèi)置函數(shù)是正路。內(nèi)聯(lián)匯編的寫法非常簡單static inline int32_t cma_asm(int32_t a, int32_t b, int32_t acc) { asm volatile(cma %0, %1, %2 : r(acc) : r(a), r(b)); return acc; }你只要匯編器已經(jīng)支持這條指令這段代碼就能用。它的好處是零GCC后端改動(dòng)壞處是GCC把a(bǔ)sm volatile當(dāng)一堵墻它不知道你這段匯編做了乘加運(yùn)算沒法參與優(yōu)化而且不可避免會(huì)帶來寄存器壓力、指令調(diào)度變差這些損耗。內(nèi)置函數(shù)則讓編譯器完全理解語義可以進(jìn)行常量折疊、公共子表達(dá)式消除這些優(yōu)化。代價(jià)就是得維護(hù)GCC后端的修改后期還要跟隨GCC版本升級重新移植。對芯片公司來說這個(gè)是產(chǎn)品化的必經(jīng)之路但對一個(gè)剛開始研究RISC-V自定義擴(kuò)展的團(tuán)隊(duì)來說我建議分兩步走別一上來就啃GCC后端。另外提醒一個(gè)很多人不知道的點(diǎn)__builtin_riscv_*這類內(nèi)置函數(shù)是否能被識別還取決于GCC編譯時(shí)的-march參數(shù)。GCC里ISA開關(guān)的控制有兩層一層是riscv.opt里定義的各種-misa-spec、-march之類的選項(xiàng)解析另一層是riscv.cc里的riscv_parse_arch_string函數(shù)解析的擴(kuò)展名列表。如果你的xcustom擴(kuò)展沒有在這個(gè)解析列表里你傳-marchrv64gc_xcustom的時(shí)候GCC會(huì)直接報(bào)unknown extension。5. Spike與QEMU模擬器驗(yàn)證讓新指令真正跑起來5.1 Spike適配從編碼表到執(zhí)行函數(shù)軟件工具鏈這邊全部改完之后該跑真實(shí)執(zhí)行了。最合適的驗(yàn)證起點(diǎn)是Spike它是RISC-V官方的指令集模擬器結(jié)構(gòu)很簡單適合做ISA層面的驗(yàn)證。Spike適配需要改三個(gè)地方。第一步在riscv/encoding.h里加上指令的匹配宏和聲明#define MATCH_CMA 0x0b #define MASK_CMA 0xfe00707f DECLARE_INSN(cma, MATCH_CMA, MASK_CMA)第二步在riscv/insns/目錄下新建一個(gè)cma.h文件實(shí)現(xiàn)指令的具體模擬行為/* riscv/insns/cma.h */ { reg_t old_rd x(insn.rd()); WRITE_RD(RS1 * RS2 old_rd); }Spike的機(jī)制很直觀每個(gè)支持執(zhí)行的指令對應(yīng)一個(gè)insns/指令名.h文件文件里的代碼會(huì)被展開成一個(gè)接收當(dāng)前指令信息、讀寫寄存器堆的執(zhí)行函數(shù)。RS1、RS2分別代表rs1、rs2寄存器的當(dāng)前值WRITE_RD負(fù)責(zé)把結(jié)果寫回目標(biāo)寄存器。注意我們的指令rd既是源又是目的所以先x(insn.rd())把累加器的舊值讀出來再做乘加這個(gè)順序邏輯上要特別小心。如果你的自定義指令有訪存行為這一步還要考慮尾聲裝置tail處理不能只在寄存器里算完就完事。第三步在riscv/insn_list.h不同版本可能叫別的名字里聲明這條指令DECLARE_INSN(cma, MATCH_CMA, MASK_CMA)這個(gè)列表會(huì)被Spike的decode表生成邏輯掃一遍把每條指令的match/mask綁定到對應(yīng)的執(zhí)行函數(shù)上。改完重新編譯Spike用Spike跑我們之前的test.elfspike --isarv64gc_xcustom pk test.elf如果程序能正常跑完并退出碼正確那說明這一條指令從符號到執(zhí)行全部通了。在動(dòng)手之前可以用echo $?看看退出碼是不是和預(yù)期一致。5.2 QEMU適配decode文件與trans函數(shù)QEMU的RISC-V后端適配方式完全不同原因是它用TCG做動(dòng)態(tài)翻譯先把目標(biāo)指令翻譯成TCG中間指令再翻譯成宿主機(jī)代碼。QEMU的好處是性能比解釋型模擬器高很多跑完整軟件棧更現(xiàn)實(shí)。QEMU的RISC-V解碼機(jī)制在target/riscv/insn32.decode文件里。這是一個(gè)類Decodetree的格式描述文件我需要給cma指令加一行編碼模板# target/riscv/insn32.decode cma 0000000 ..... ..... 000 ..... 0001011 r這行格式的意思很直白前7位funct7固定0000000中間三個(gè)寄存器字段用.....表示任意5位funct3固定000最后一個(gè)7位opcode固定0001011整體是R型格式r。Decodetree生成工具會(huì)自動(dòng)生成這條指令的解碼函數(shù)把指令的rs1、rs2、rd字段提取出來放進(jìn)arg_cma結(jié)構(gòu)體里。然后實(shí)現(xiàn)翻譯函數(shù)。我新建了一個(gè)trans_cma函數(shù)放在target/riscv/insn_trans/trans_rvi.c.inc如果你有獨(dú)立的custom擴(kuò)展文件也可以單獨(dú)建一個(gè)inc文件static bool trans_cma(DisasContext *ctx, arg_cma *a) { TCGv t0 tcg_temp_new(); TCGv t1 tcg_temp_new(); tcg_gen_mul_tl(t0, cpu_gpr[a-rs1], cpu_gpr[a-rs2]); tcg_gen_add_tl(t1, cpu_gpr[a-rd], t0); tcg_gen_mov_tl(cpu_gpr[a-rd], t1); tcg_temp_free(t0); tcg_temp_free(t1); return true; }這段TCG代碼的邏輯就是t0 rs1 * rs2t1 rd t0再把結(jié)果寫回rd。TCG的臨時(shí)變量要記得釋放不然一個(gè)復(fù)雜的基本塊翻譯下來臨時(shí)變量會(huì)堆積。QEMU這邊比較容易踩坑的點(diǎn)是decodetree模板的位數(shù)和字段順序必須和編碼精確一致尤其是寄存器字段的下劃線數(shù)量。.....差一個(gè)點(diǎn)生成的解碼函數(shù)就完全不是你想要的樣子。另外QEMU對非標(biāo)準(zhǔn)擴(kuò)展的支持在不同版本里變動(dòng)很大新版QEMU8.0以上還引入了riscv,isa字符串解析、多擴(kuò)展配置這些機(jī)制如果你只在老的insn32.decode里加了一個(gè)模板有可能因?yàn)镮SA字符串里沒有激活這個(gè)擴(kuò)展而拒絕解碼。這塊要看你用的具體版本老版本直接加就行新版本需要同步在riscv_isa_ext相關(guān)的表里注冊擴(kuò)展。5.3 FPGA與真機(jī)驗(yàn)證簡述模擬器跑通之后最后一步是硬件驗(yàn)證。這部分工作量和RTL實(shí)現(xiàn)強(qiáng)相關(guān)我只從工具鏈配合角度說幾個(gè)要點(diǎn)。在FPGA上你的自定義指令一般以兩種方式存在一是直接改RTL的譯碼和執(zhí)行流水二是用一個(gè)協(xié)處理器接口掛接。無論是哪種驗(yàn)證時(shí)你都需要把軟件生成的二進(jìn)制喂給CPU核。這時(shí)候前面做的工具鏈工作就開始體現(xiàn)價(jià)值了你可以用GCC編出一段真實(shí)的業(yè)務(wù)代碼里面混著大量cma指令直接燒到FPGA上和模擬器的行為做對拍。硬件驗(yàn)證階段特別建議做一件事在RTL里加一個(gè)指令統(tǒng)計(jì)計(jì)數(shù)器對碰cma這條指令被執(zhí)行的次數(shù)和Spike或QEMU側(cè)用調(diào)試器或trace工具統(tǒng)計(jì)出來的執(zhí)行次數(shù)做比對。如果兩邊次數(shù)不一致說明有分支預(yù)測或者異常路徑上的指令執(zhí)行行為沒對齊這種問題在純軟件模擬階段根本發(fā)現(xiàn)不了。6. 常見問題與排錯(cuò)實(shí)錄6.1 匯編器報(bào)錯(cuò)unrecognized opcode這是最靠前的報(bào)錯(cuò)說明gas那條路還沒通。按順序排查第一riscv-opc.c里的數(shù)組記錄加了嗎格式對不對第二riscv-opc.h里的DECLARE_INSN有沒有第三匯編命令行里的-march有沒有帶上xcustom第四riscv_multi_subset_supports函數(shù)里有沒有對INSN_CLASS_XCUSTOM放行。我遇到過的真實(shí)情況是前三個(gè)都對但gas的ISA子集解析函數(shù)在解析xcustom時(shí)因?yàn)榇笮憜栴}沒匹配上導(dǎo)致放行失敗。RISC-V擴(kuò)展名規(guī)范里非標(biāo)準(zhǔn)擴(kuò)展必須小寫x開頭寫成XCUSTOM大概率會(huì)被拒。6.2 objdump反匯編顯示.word而不是助記符這個(gè)前面已經(jīng)提過優(yōu)先懷疑MASK寫得不對。把MASK_CMA誤設(shè)成0xffffffff是最經(jīng)典的問題這樣只有rs1、rs2、rd恰好全是0的指令才能匹配成功。你有幾條測試指令要么湊巧能反匯編出來要么就全部顯示成.word。另外注意objdump匹配指令的順序是按riscv_opcodes[]數(shù)組的先后來的數(shù)組里的記錄如果和已有的標(biāo)準(zhǔn)指令撞了match/mask標(biāo)準(zhǔn)指令會(huì)優(yōu)先匹配上。所以自定義指令的match一定要檢查是否和現(xiàn)有表重復(fù)尤其是你用funct7、funct3全0這種寬松編碼的時(shí)候。判斷依據(jù)很簡單match值相同且mask和已有指令有重疊就是沖突。6.3 GCC報(bào)unrecognizable insn這個(gè)報(bào)錯(cuò)發(fā)生在GCC后端意思是GCC生成了某個(gè)RTL模式但目標(biāo)機(jī)器描述文件里沒有能匹配的指令模板。多半是riscv.md里的模式約束寫錯(cuò)了。比如我在cma_si3模式里用了約束0讓第3個(gè)操作數(shù)和第0個(gè)操作數(shù)共用寄存器如果模式里的操作數(shù)下標(biāo)寫錯(cuò)GCC在寄存器分配階段生成不了合法的匯編就會(huì)在final階段報(bào)unrecognizable insn。排查方法是用-fdump-rtl-all把GCC的RTL中間結(jié)果打到文件里看最終那個(gè)無法識別的insn長什么樣再對照機(jī)器描述的模式和約束找差異。6.4 Spike報(bào)Illegal InstructionSpike在encoding.h和insn_list.h里都聲明了指令但運(yùn)行時(shí)報(bào)非法指令一般是decode表沒有生成。Spike的decode表在processor.cc的初始化流程里會(huì)根據(jù)insn_list構(gòu)建一個(gè)按match分組的跳轉(zhuǎn)表如果你的DECLARE_INSN宏位置不對或者指令的match值被別的指令的mask覆蓋就會(huì)匹配不到。有個(gè)快速驗(yàn)證辦法在Spike的decode函數(shù)里臨時(shí)打印當(dāng)前pc附近的原始指令編碼手動(dòng)跟MATCH_CMA比對排除編碼問題。6.5 問題排查速查表現(xiàn)象優(yōu)先排查常犯錯(cuò)誤gas報(bào)unrecognized opcodeopcode表、subset支持march忘記帶xcustom或大小寫錯(cuò)誤objdump顯示.wordMATCH/MASK宏MASK誤設(shè)為全1match與已有指令沖突GCC報(bào)unrecognizable insnriscv.md模式、約束操作數(shù)下標(biāo)寫錯(cuò)約束字符串不對Spike非法指令encoding.h、insn_listDECLARE_INSN位置不對match重復(fù)QEMU不能解碼insn32.decode模板點(diǎn)位數(shù)量不對ISA擴(kuò)展未注冊6.6 兩個(gè)值得提前做的防坑措施最后分享兩個(gè)我個(gè)人的習(xí)慣。一是每次改動(dòng)工具鏈某個(gè)組件后都用最小測試工程跑一遍匯編、反匯編、編譯、執(zhí)行四步四步全過再進(jìn)下一步。這樣做的好處是問題永遠(yuǎn)被限制在當(dāng)前改的組件里不至于改到后面還要回頭猜是哪一環(huán)壞了。二是給自己的每條自定義指令寫一張編碼定義表放在倉庫里和RTL代碼、工具鏈代碼一起追版本。包括指令助記符、功能語義、位域分配、MATCH/MASK、寄存器和立即數(shù)格式??雌饋碇皇且粡埍淼?dāng)年你加到第20條、第50條自定義指令的時(shí)候會(huì)發(fā)現(xiàn)這張表是救命稻草它能幫你防止編碼沖突、幫助新同事快速上手也能在工具鏈和RTL對不上時(shí)快速定位分歧。我個(gè)人跑完這趟流程最大的體會(huì)是RISC-V自定義擴(kuò)展的核心工作量其實(shí)不在RTL實(shí)現(xiàn)而在軟件工具鏈的方方面面。每條指令都要過匯編、反匯編、編譯、模擬器、硬件驗(yàn)證五關(guān)每一關(guān)的報(bào)錯(cuò)方式都不同排錯(cuò)思路也完全不同。但一旦你用上面的流程把第一個(gè)簡單指令跑通后面再加新指令就只是重復(fù)勞動(dòng)基本不會(huì)再卡殼了。如果你正準(zhǔn)備動(dòng)手我的建議是先挑一條最簡單的R型算術(shù)指令用今天這套流程完整走一遍模擬器和FPGA上都跑通再去做那些帶立即數(shù)、帶訪存、帶條件執(zhí)行的復(fù)雜指令會(huì)順暢得多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美91在线+|+欧美| 亚欧操逼片在线观看| 日本2020一区二区| 夜夜操91744565| 中文字幕日韩精品久久| 色小视频蜜乳| 人妻天堂网| 天天躁日日躁AAAXX| 日日黄色三级网站| 天天色,天天干,天天干| 999熟女精品| 国产AV无码AV| 大香蕉92| 色色五月天激情| 无码粉嫩白虎一线天b区| 亚洲制服欧美另类内射| 一区二区乱码福利| 亚洲精品一区二区免费在线观看| 国产精品久久久无码AV网站| 日韩内| 亚洲高清无码AAA久久久精品| 日本孕妇孕交| 日韩人妻中文视频| 久久激情视频| 久99久视频| 99re99在线视频| 吻戏激情性巴克| 日韩一卡二卡三卡| 天天综合~91入口| 综合久久2017| 午夜呻吟欧美| 精品午夜福利国产一区二区在线观看| 久久久精品中文字幕麻豆| 中文字幕亚洲永久精品| 韩国嫰模上门援交视频| 美女人妻色网站| 国产自产自拍| 精品熟女呻吟久久91| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 裸体1区| 岛园激情| 啊啊啊啊啊好多水| 欧美性爱网97| 五月婷在线| 69精品| 超碰综合色| 日本性爱少妇| 99999国产精品| 久久中日麻豆| 久久久不能久久久久| 日韩精品免费高清视频在线| 精品久久久久综合无码| 二级毛片| 中文字幕一区二区三区蜜臀| 亚洲欧美在线观看免费| 蜜臀Av一区二区三区| 人人手机欧洲亚洲国产人妻| 亚一综合久久久久久久久久| 91人妻人人澡人人爽人人精品| 美女诱惑在线一区| 艳尻美人妻| 黄aaaaaaaaaaaaaaaaaa色网站 | 99热97| 操逼操逼逼操操逼91| 亚洲色性| 亚洲风情在线观看| 少妇丝袜在线观看AV| 久7色| 日韩激情小说一区二区| 久久伊人最新网址视频| 91天美免费| 91中文精品日韩欧美在线| 色官网在线| 蜜乳AV免费观看| 欧美在线第五页| 久久综合18p| 日韩精品在线观看网站| 九月激情婷婷| 日本不卡一区二区| 欧美劲爆第一页| 亚洲性猛| 蜜臀99999| 婷婷五月天小说| 国产AV精久久| 乳欲人妻办公室奶水| 亚洲色婷婷久久91| 国产97免费视频| 国产精品美女久久久久AⅤ国产馆| 久久久久久少妇| 久久男人网| 一区黄二区黄| 97操97色| 九色 人妻 大香蕉| 99精品视频在线观看| 欧美操逼熟女| 久久久久国产精品片区无码直播| 免费公开人人操| 国产精品久久久久无码Av网曝门| 色网色网色网色网色网色| 天天干夜夜操一区二区| 亚洲玖玖爱| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 高颜值美女口爆高潮浪叫| 碰人碰碰人人开房人肉| 欧美丝袜美女电影一二三四区| 青青草视频久久久久| 日日狠狠久久偷偷色综合免费| 近亲乱伦一区二区| 欧美亚洲| 美女国产一区二区久久| 天天日天天干天天整| 国产亚洲欧美每日在线| 日本色色视频网站| 中文字幕一二区二三区人妻专区| 国产精品爽爽v| 五十路六十路素人熟女| 亚洲一曲日韩精品| 免费的黄片wwwwww| 日韩啪啪啪啪啪| 五月天啪啪| 大香蕉久久| 久久久久成人蜜桃精品| 九九热免费在线国产视频伊人五月| 殴美,日韩国产伦精品| 婷婷情色综合网| 嗯啊免费视频| 狠狠图片青青草| 大香蕉色欲AV| 免费观看日本操逼视频| 亚洲黄色视频在线观看视频| 激情干在线| 九九精品热| 久久色激情一区二区三区| 熟女中出视频| 一区二区亚州激情久婷婷欧美| 超碰97久| 日本操逼aaaaa| 国产毛片久久久久久久| 99re久久| 97超级欧美| 啊啊啊啊啊舒服| 少妇天堂| 免费啪啪av| 国产福利第一视频| 欧美九九99久久精品| 成人精品欧洲亚洲| 香蕉视频欧美一卡二卡| 大香网站| 久久久一级| 精品亚州18| 黄站在线免费观看| 国产偷拍网站| 337p大胆噜噜噜噜噜91Av| 欧美极品女人的天堂| 久久鲁夜| 日本不卡一区二区| 亚洲五月丁香花狠狠干一区二区三区 | 太久视频| 精品射1999| 亚州欧美综合| 国产美女口爆吞精视频| 理论久久婷婷网 8| 天天操福利视频综合网站| 少妇熟女1区2区3区| 91精品无码人妻系列| 一二三啪啪专区| 人乳av| 伊人热综合| 激情专区综合| SUV一区二区在线看| 久久春色| 色九九综合| 97在线观视频免费观看| 天天色图| 青青草原人妻| 黄色交缠性感爆操91国产精品免费一区二区三区 | 玖玖蜜臀资源网| 性感美女91影视| 郑州宾馆老熟女露脸啪啪| 91视频成人福利网站在线一区| 人妻丝袜二区| 任你草| 91天堂丝袜美腿| 影音先锋新男人| 亚洲国产第一页综合视频| 国产第二页| 中文字幕在线免费观看2| 99熟女| 国偷自 一区| 中文精品一区二去| 免费网站观看www在线观| 久久久久九九九| 婷婷久久综合久| 亚洲极品| 免费a在线播放v| 人妻少妇无码| 亚洲中文字幕三级在线| 天天综合91入口| 一级久久性爱视频| 色九久| 久色网| 91综合天天| 日本护士高潮| 色约约一区=区三区| 人人操人人狠狠操| 神马午夜久久| 亚洲综合有玛| 久综合国内精品自在自线| 99re只有精品| 少妇xx精品| 东方亚洲在线操逼天堂| 黄网色一区二区三区四区精品| 国偷自 一区| 天天看,天天做| 加勒比综合在线| 天天影视色香色欲| 在线免费观看高清无码视频| 目产99999久久999| 91色久| 九九九九精| 九九九久千久久激情蜜桃在线看 | 激情在线青青操| 偷窥自拍亚洲色图| 8x福利精品第一福利视频导航| 伊人久久亚洲中文字幕不卡| 玖玖爱免费观看视频| 夜夜嗨TV| 一级黄碟在线看| 国产三级多多影院2022国产AA一级毛片无码 | 亚洲日产专区| 日韩免费福利在线观看| 亚洲人综合| 亚洲五月丁香花狠狠干一区二区三区| 日韩三级在线观看网站| 天天性射网| 97干日韩| 国产偷拍自拍在线视频| 九久精品| 久久网亚洲| 国产久久一区二区午夜| www.久久最新地址| 美女久久久久久久久久久| 日日夜夜骚| 夜嗨影院| 欧洲黄色网| 国产少妇内射| 亚洲少妇诱惑| 欧美黑人性猛交91| 国产精品久久久久久片| 中文字幕一区二区视频在线观看 | 91婷婷伊人狠人| 成人免费看吃奶视频网站| 校园春色美腿丝袜| 免费久久9999| 色哟哟国产精品免费网址| 国产成人bd在线观看| 蜜臀久久99精品久久久| 啊啊啊水好多| 亚洲人久久久网| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 色天堂在线观看| ′ !γ}丶。。久久精品欧美一区二区三区 | 亚洲九九视频| 2019午夜福利视频| 日韩欧美成人大香蕉| 911粉嫩人妻| 亚洲av无码国产精品字幕| 中文字幕免费在线观看| 国产久久一区二区| 国产白嫩精品久久| 亚洲图片 91| 欧美日韩性爱操大逼| WWW操逼| 亚州性色| 国产精品日日摸天天碰| 九九九九九九免费视频| 香蕉免费一区二区三区不读| 无码视频一区二区| 九九九综合精品| 久久香蕉网| 口爆吞精在线观看| 国产91久久九九免费精品无码| 亚洲欧洲日本精品中文a∨| 91亚洲欧美激情| 成人AV在线网站| 婷婷精品国产欧美精品亚洲人人爽| 超碰99热中文字幕| 91撸色网 玖玖网 欧美| 一区二区三区国产精产| 夜夜操91744565| 久久综合18p| 天天干天天日天天射黄色| 天堂蜜桃无码视频一区二区| 69超碰综合| 欧美性爱五月天| 色小视频蜜乳| 强奸乱伦大香蕉| 欧美成人一级麻豆| A级毛片在线看免费| 亚洲春色欧美激情自拍| 日本一区视频在线观看| 亚洲图片偷拍视频区| 亚洲美女自拍偷拍视频| 欧美精品日韩一区二区| 亚洲第一页色| 91女神在线视频| 91人妻视频| 99热导航| 亚欧操逼片在线观看| av影院十区| 精品人妻久久久| 欧美激情内射| 激情 欧美 亚洲 小说| 日日夜夜草草草| 69综合网| 东京热大香焦| 啊啊啊水好多| 欧美夜夜草视频| 在线观看不卡一区二区三区| 成人无码影片视频在线| 色综合色综合网| 中日无幕一二三四区| 性色高清在线| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | renqi久久久久久久久久久久| 男人天堂一区二区| 免費人妻夜夜爽天天爽爽一区| 男生女生啊啊啊啊| 97在线观看免费| 日韩欧美加勒比| 色欲三区| 色五月首页| 亚洲五区熟女| 丝袜 中出 制服 人妻 美腿 中文字幕| 9118禁| A一区片| 亚洲偷拍自拍在线视频| 天天综合在线4| 激情视频一二三| 久热精品在线| 可以在线观看的黄色网址| 青娱乐日韩无码| 亚洲精品一二三四区| 人人爽人人精品乱人伦AV| 岛国片在线视频网站| 一区二区不卡免费| 免费视频在线一区二区不卡| 秋霞怕怕片| 综合久久久久久久综合网| KK色在线影院| 久久久久久亚洲精品中文字幕人妻| 国产亚洲日韩在线三区黑人| 亚洲乱妇p22| 天天日美女的B| 日韩有码一区三区| 丁香九月激情啪| 男人高清无码一区二区| 欧美一区二区男人天堂| 欧美午夜熟妇黑人精品91| 色五月天AV| 精品视频久久久久九九九九9999| 亚洲蜜桃V妇女| 免费少妇一区二区| 午夜福利国产欧美日韩夜夜| 大奶的诱惑| 久热这里| 97伊人超碰| 超碰98综合网| 久操视频在线观看| 97操B| 九九人妻| 伊人网一本| 91麻豆一二三区| 10000部十八禁看电影| 亚洲无套久久嗯嗯| 婷婷五月天成人网| 免费A V在线| 国产精品无码av在线 | 樱花蜜乳av| 高清国产无码av| 亚洲?V高清一区二区三区尤物| 干B网| 天操天操夜操夜月月年年操操| 亚洲有薄码区日本系列中文字幕| 色呦呦呦在线观看视频| 凹凸视频在线观看伊人| 国产AV高清AV无码| 久久黄黄| 青青草原综合久久大伊人精品| 久久久工口| 国产剧情一区在线观看| 一区中文字幕二区日韩| 青青草啪啪网| 久久骚| 嫩草 我啊~嗯~在线| 啊嗯好大视频在线观看| 欧美宗合网| 日本欧美成人片AAAA| 在线播放成人高清免费视频| 爱爱啊啊啊| 欧美性生活男人的天堂| 夜夜操青青草| 国产精品午夜高潮呻吟久久av| 成人短视频在线观看| 人妻久久久久久久久久久久久久久| 亚洲天堂男人在线| 另类 综合 日韩 欧美 亚洲| 久久精品综合| 女性91网站| 高清在线不卡一区二区 视频| 大黄片做爱的大的| 亚洲图片偷拍视频区| 大胆91| 免费网色网站| 麻豆av一区二区| 久久超碰网| 东京热视频网| 日本在线不卡一二区| 男人的天堂2019AV| 日日A∨| 精品国产乱码久久久| 人妻一区二区三区四区视频| 欧美在线观看综合国产| 欧美精品偷拍| 好色综合| 十八禁视频网站| 欧美三级不卡| 国内外毛片在线观看| 97免费视频在线观看| 日本操大逼| 久久久久13| 成人精品欧洲亚洲| 日韩激情无码影院| www.超碰| 91精品婷婷国产综合久久| 国产视频人人网| 久久久精品视频免费观看| 91蜜臀在线久久久久| 97国产精品久久久久| 欧美不卡五十路| 国产一区二区啪啪视频| 熟女欧美日韩综合婷婷| 成人性交免费视频| 色一色综合网| 精品人妻一区二区三区日产乱码| 中文字幕交换人妻| 欧美综合第一| 欧美性天天| 天天天天天干夜夜夜夜夜操| 韩国国产欧美情侣视频在线| 搡老熟女免费视频| 欧美精品另类人妖xxxx| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 中文字幕人妻色偷偷久久皮 | 久久极品一区二区| 国产精品白丝www| 国产精品呦一区二区三区| 性色高清在线| 色吧5亚洲| 淮穴色AV| 精品人妻一区二区三区四区不卡在| 99re国产中文字幕| 国产三级中文字幕粉嫩| 日本人人操人人操| 亚洲激情欧美色图 | 午夜后入| 手机在线视频国内精品| 亚洲淫色网中文| 午夜福利1区2区3区| 久久久久9久久久久| 超碰97中文| 国产av尤物| 欧美色97| 精品国产乱码久久久久久久久1 | 一块操欧美性爱| 亚洲色图第一页| 性爱精品一区| 尤物AV免费网站| 久久久免费一级黄片| 久久久久婷婷精品av电影| 三级三级三级a级全黄三| 道久久五香丁月婷婷激情综合| 性色生活片久久毛片婬片免费放女人一级毛片| 人妻社区男人天堂| 国产h片在线观看视频| 超碰午夜| 国产99热| 一级黄色性爱裸体视频| 人妻爽爽啪视频| 日本免费专区| 亚州欧美在线| 天操天操夜操夜月操月年年操| 免费A片三p视频| 日本超碰97日韩精品人妻| 欧美精品99久久久**| 国产又大又粗又长视频| 久久久久久亚洲精品不卡人乳 | 有码人妻系列| 在线一道啪| 大香交| 欧美另类色图片| 亚洲国产成人7777| 夫妻AV网站| 天美传媒一二三区永久网站| 精品国产91av一区二区三区| 最新AV在线| 91天天综合网,天天综合网| 久久久精品视频免费观看| 国产 v乱码一区二| 九九热三级片| 好屌色综合| 五月天综合在线| 最新av网站在线观看| 四虎884| 91偷拍欧美亚洲| 国产 丝袜 欧美中文 另类| 欧美一级久久久久久久大片动画| 无码操逼天堂| 伊人大香蕉在线| 国产强奸超碰AV| 天天操天天谢| 嫩草黄页| 婷婷色播婷婷| 精品在线蜜臀| 日本啊啊啊啊啊视频| 妺妺跟我一起洗澡没忍住| 伊人欧美大香蕉视频| 欧亚不卡| 欧亚乱色熟一区二区三四区| 97久久超碰| 强奸国产在线| 亚洲天堂在线怕怕视频| 91精品91久久久中77777| 亚州色阁| 久久久久久波多野吉衣高潮| 亚洲情色婷婷五月天| 欧美黄片视频在线观看免费| 色欲无码人妻日韩欧美精品| 欧亚无码视频| 五十路三区在线| 日本 情色 1区2区3区| 欧美情色贴图| 另类av天堂| 青青草视频爽一爽| 午夜精品99久久久久传媒| 欧美黄片视频在线观看免费| 人妻日日干| 日本免费人成视频播放120秒| 伊人天天久久动态图| 淫淫综合网| 婷婷8月天青娱乐| 在线 欧美 亚洲| 秋霞鲁丝午夜无码一区二区三| 久久AV无码1区2区3区| 无码人妻一区二区一牛影视| 一本一道人妻久久一区二区三区 | 精品人妻二区三区| 岛国小电影| 久久久久骚| 中文字幕国产精品1区| 丁香六月婷婷| 亚洲夜色在线| 亚洲熟妇丝袜在线观看| 亚洲国成人情色好看电影| 日本女厕偷拍| 激情综合av| 亚洲drav色图| 欧美天天影院| 免费视频一二三区| 亚洲av噜噜噜噜噜噜| 日本性感人妻91| 精品人妻1区| 3P乱轮视频| 欧美精品自慰系列寂寞少妇| 蜜臀国产AV中文字幕| 久久国产99精品72福利 | 久久成人国产精品| 久久亚洲AV无码专区国产精品 | 一区二区三区男人的天堂| 99999久久精| 懂色aV一区二区天美传媒| 成年人黄色视频免费| 视频在线观看免费一区二区三区| 亚欧高清v| 欧美性五月| 欧日韩一二三f区| 男人久久天堂| 日韩无码a片| 午夜免费福利视频一区| 精品夜夜澡人妻无码| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 五月天人妻综合| 色97干| 正在播放国产精品一区| 免费精品无码一级毛片牛牛影视| 337p大胆噜噜噜噜噜91Av| 四虎精品永久在线观看| 国产h小视频在线观看免费| 国产精品剧情| 综合操逼| 伊人97色天使| 夜夜嗨一区| av在线播放国产一区| 人人色人人操在线| 欧美色66| 天堂成人网| 无码丰满熟妇一区二区浪潮AV| 色区久久| 色综合20p| 亚洲久久久久| 亚洲四虎熟女精品| 一区二区不卡| 搡老女人老熟女91| 中日高清无码操逼视频| 亚州 综合 色图| 丝袜美腿av女优在线| 欧美视频一区二区在线| 青青草国产亚洲精品久久| 综合亚洲网| 伊人网综合在线视频| 中文字幕 一区二区 亚洲无码| 免费男人的天堂| 大香蕉视频一二三区| 翘臀vidoes| 97超碰伊人| 亚洲日韩美国人妻| 啊啊啊不要啊啊受不了了视频在线| 日骚逼视频| 国产一区二区三区精品观看啪| 色大师网站www永久网站视频| 少妇熟女一区二区三区| 粉嫩绯色AV一区二区在线| 国产日韩人人| 成人自拍三级在线观看| 肥臀熟女福利视频一区二区| 性一级黄色录像片网站导航| 色99视频| 欧美综合天堂| 久久综合九九| 99久久99九九99九九九| 99久久婷婷国产综合| 少好三P| 亚洲精品影视老司机| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 麻豆国产成人精品| www.久久制服糖| 中文字幕视频2区| 欧美v日韩v亚洲v最新在线| 懂色AV一区二区三区| 久 久无码人妻AV| av天堂影视中文在字幕在线中文| 亚洲毛片久久| 亚洲欧美一区二区三区在钱蜜桃 | 欧美爆操91| 欧美日韩国产一区二区小黄片大全| 亚洲射综合网| 精品高清一区二区三区三州| 秋霞福利网| 人人干人人操人人..com| 久久久性少妇| 一二三区在线| 日韩免费av片高清无码| 99国产精品久久久在线播放| 岛国黄| 久操视频在线| www.狠狠干.coom| 岛国黄片网站| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 91高清欧美| 91精品电影18| 综合国产影视三级| 中文字幕欧美日本乱码一线二线| 国产精品秘 福利姬在线观看| 国产一二三在线视频五十路| 99re3这里只有精品| 国产一进一出视频网站| 欧美色图99| 久热伊人99re| 芊芊操逼视频无码| 熟人人妻少妇精品久久| 成人无码专区精品视频| 日韩精品 视频一区二区| 加勒比无码毛片| 精品久久久九九九孕妇| 日韩欧美成人综合在线| 天天综合欧美黑人| www鬼畜国产男人的天堂| 三级色综合| 校园激情狠狠四射| 韩国女主播青草在线| 国产成人无码网站在线视频| 国产亚洲福利第一页丝袜| 囯产精品强| 久久精品人体| 最新中文字幕精品在线| 一级性爱网| 欧美,亚洲,日韩,v,天堂,手机在线观看| 91久久精品蜜臀| 在线a v| 中文一区二区三区影院| 国内一区二区三区| 久久熟妇五十路一区| 久久久久9| 国产一级137片内射麻豆| 亚洲激情在线| 国产和美国毛片| 日韩欧亚太美不卡| 亚洲激情AV| 91社区拍啪人妻| 91天天| 91操熟女视频| 日本黄色天堂| 欧美高潮在线| 丰满少妇人妻久久久久久| 亚洲aV性爱| 一级片在线观看高清无码| 啊啊啊啊啊在线| 婷婷人妻激情| 国产久9| 97频视在线| 超硑97精品| 91人人看| 亚洲影视综合网| 婷婷99狠狠| 色官网在线| 丝袜美腿制服人妻二区中文字幕 | 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 91丝袜美女| 人人天天欧洲| 激情第四色| 人妻中文在线| 婷婷五月成人| 91碰碰碰| 色五月婷婷五月天| 99只有精品| 丁香五月综合| 精品国产乱码久久久久久久久1| 婷婷五月天伊人| 99re在线观看| 91美女中出| 丰满人妻-区二区三区免费| 99爱视频| 久久午夜伦| 欧美天天拍| 日韩熟女精品无码专区一区二区| 青青草在线成人视频| 精品人人| 亚州色站 日韩电影| 91殴美大片| 91精品国久久久久久无码| 日韩欧美资源| 国产AV中文| 久久区| 欧美成人一级麻豆| 日韩黄片视频试看| 国产精品一区二区三区,亚洲综合 性开放中文AV高清无码免费看 | 人人操人人肉久久精品| 国产一级高清免费观看| 久久99干一本高清| av影片在线观看不卡| 婷色五月天| 久伊人网78| 综合欧美日本三级| 欧美综合 站| 福利操逼| 人妻少妇色综合| 超碰激情808| 91色碰| 天天日天天屌天天操| 中文字幕无码不卡啪啪| 久久免费少妇| 色在线亚洲视频www| 一级久久性爱视频| 九色97| 久久久国产精品人妻丝袜| 欧美 亚洲 91| 亚洲人妻色图| 国内亚洲高清无码| 91精品人妻电影| 综合色图区| 中 文字幕一区二区三四 五 区日 日 骚 | 亚欧操逼片在线观看| 中文久久久| 久久riav中文精品| 黑丝少妇| 精吧天堂| 亚洲性爱成人| 99久久婷婷| 操死我了嗯嗯嗯| 九久9精品| 欧美亚洲| 天天日日日射| 又黄又硬又粗又长国产视频| 午夜福利无毒不卡| 日韩另类色图| 亚洲第一男人天堂| 粉嫩av久久一区二区三区| A久久| 日韩淫色网| 亚洲97成人在线观看| 日本污ww视频网站| 高潮综合网| 欧美亚洲天堂| 五月天婷婷基地| 1024午夜激情男人的天堂| 日本一区二区亚洲综合| 99综合| 午夜无码熟妇丰满人妻| 在线观看亚洲成人精品| 精品妇女一区二区三区| 一二三区视频在线观看| www.大香| 日本东京热大香蕉a片| 91 欧美| 99热这里都是精品| 后入合集| 天天躁日日躁AAA片李宗瑞| 日日A∨| 欧美操人视频| 蜜色网色哟哟| 夜夜嗨视频| 污啪啪啪视频| 91亚洲图片| 爱我干综合| 亚洲怡春院| 欧美成人AⅤ大片在线观看| 樱花草社区www中国| 日韩激情电影中文字幕| 人妻天天爽夜夜爽爽| 97视频免费播放| 青草av在线| 丝袜加勒比| www.色婷婷色综合| 97综合久第一页| 人人操人人摸人 | 家庭乱伦性爱av| 亚洲欧美在线综合| AA特级绝黄| 人妻精品一区一区三区蜜桃91| 国产欧美日韩精品中文| 亚洲影视第一页| 精品一二三区久久AAA片| 亚洲系列欧美| 亚洲在饯| 黑丝日韩av丝袜av| 99国产人成精品| 亚洲另类色图片| 国产熟女无套内射| 性色一线| 久久精品人人做人人看| 欧美一区二区成人一卡| 亚洲国产麻豆一区二区三区| 日韩中文9| 国产精品一区二区黄片| 超碰在线91| 91蜜臀熟女| 特级特黄一级毛片免费| 岛国999| 日韩午夜啪啪视频| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 久草这里只有精品| 日欧亚洲二三区大片不卡| 无码久| 操逼网站视频漫画国产| 日日躁夜夜躁狠狠躁超爽| 久操99| 综合久久久久久久综合网| 婷婷五月天色网| 2010男人的天堂| 午夜啪| 中文字幕精品久久久久人妻红杏ⅰ| 色色色天美视频| 国产熟女一区二区| 亚洲不卡av在线| h无码动漫在线观看| 精品国产乱码久久久| 欧美色图片91| 激情啪啪拍91| 在线视频 亚洲精品| 男人天堂免费| 欧美另类色| 久久精品国产亚洲AV无码电影| 国产精品久久久久久久久久久久久久| 操香逼| 大香蕉乱伦视频网| 影音先锋每日最新资源在线观看| 日韩人人精品| 超碰国产情侣自拍网| 亚洲国产一级精品毛一级精品看免费视频 | 久久久久921| 亚洲一区二区三区久久 亚洲一区二区| 久久精品国产AV一区二区三区| 在线洲亚线| 人人澡人人弄| 久热色情精品| 亚洲欧美经典一区二区| av一区二区三区四区| 日韩有码专区| 欧美一品道| 中文97国产| 麻豆60秒| 国产精品久久久鸭无码的功能| www.亚洲黄色| 精品在线蜜臀| 亚洲日韩狠狠撸视频| 啊灬快c我灬啊灬用力灬啊灬-国产精品性做久久久久久-成人AV | 国精品一区二区三| 五月婷婷性爱| 亚洲av无线观看| 国产精品盗摄 偷窥盗摄| 少妇无码999| 91操熟妇| 玖玖爱伊人玖玖爱| 天天日天天屌天天操| 亚洲天堂另类小说男人| 国模一区二区三区| 国内三级自拍小视频在线观看 | www.高清无码诱惑一区.com | 午夜福利区| 亚洲精品丝袜| 淫淫总合网| 久久久一级| 色五月综合| 色五月综合| 干婷婷综合网| 91成人精品在线播放| 美国人人操人人操| 日本性爱欧美性爱| 国产福利电影| 亚洲A曰本VA欧美VA视频| 日韩一级欧美一级国产一级台湾 | 91爱网| 精品国产乱码久久久久久免费| 大香蕉92| 国产日韩中文字幕欧美| 人妻 欧美亚洲| 一区超碰一区| 欧美日韩精品久久久久东北老熟妇| 欧美高潮| 色97国产69香蕉| 青青草在线视频美女| 久草毛片| 丰满人妻-区二区三区免费看| 麻豆av一区二区| 美女91在线| 国产精品美女| 性色AV蜜色av色欲av| 女人与公拘交酡2020视频| 色呦呦国产精品免费看| 欧美区亚洲区偷拍区| 精品国产91av一区二区三区| 欧美少妇性爱网站| 欧美日韩国产色图在线| www.久久爱| 日本亚洲vr欧美不卡高清专区| 国产精品熟女AV中文字幕在线播放| 青青草视频久久久久| 97超碰在线资源网站| 日韩精彩视频| 久久人妻熟女一区二区| 男人天堂网站| 天天摸夜夜添无码小视频| 人妻日日干| 99热只有| 中文字幕片| 高清不卡 中文 人妻| 一区二区三区麻豆| 久久永久无码人妻视频| 丰满人妻一区二区三区四区| 强免费黄色网址| 中文高清一区二区的| 欧美78| 色路综合| 精品日韩人妻精品一二三区| 欧美性爱视频免费一区一A| 婷婷99| 日本丝袜美腿人妻九九| 亚欧美综合网。| 清纯唯美第一页| 国内毛片热久久思思热| 亚洲黄网在哪免费看| 91精品成人www| 天天日美女的B| 欧美黄业| 国产成人亚洲精品无码古代早漏男| 日韩乱插| 99re只有精品| a啊啊啊啊啊啊啊啊一区二区| 欧美福利视频啊啊啊啊| 无套内射性感少妇视频| 9超碰免费| 欧美九九九| 五十路六十路七十路熟婆| 99九九精品| 久久99草| 国产精品人妻无码久久久互動交流| 99久久e免费热视| av在线人气 | 99免费在线视频| 九九九九免费高| 欧美狠狠| 国产又爽又黄| 热久日综合| 97国产精品视频| 视频分类 国内精品| 欧美色图亚州激情| 亚洲 日本 不卡| 欧美日本一区二区a人| 伊人久久亚洲中文字幕| 91色欧美| 五月天玖玖资源站| 综合色拍| 亚洲中文字幕精品一区| 五月婷视频| 精品国产乱码久久久久久影片| 日韩综合97P| 97国伦国色| 制服诱惑亚洲一区二区三区在线观看| 天天综合网91| 操一区| 嫩草 我啊~嗯~在线| 性饥渴少妇av无码毛片| 老色69| 国产一二三在线视频五十路| 午夜欧美女人操逼| 老女人碰碰在线碰碰视频| 国产精品美女久久久久久网站| 青草视频在线看看看看看看看看看| 中文在线视频| 乳欲人妻办公室奶水| 美骚妇av高清在线| 欧美极品美女aaaaaa级黄片| 久久最新免费视频23| 蜜臀久久99精品久久久久久酒店| 久久精品国产72国产精品福利| 亚洲无限观看| 377p欧洲日本亚洲大胆| 91精品网站| 91人妻PORNY九色大屁股| 91精品在线播放| 去干网最新版| 天美传媒精品久久视频| 国产无码一二三区| 亚洲男人天堂视频| 老司机射| 青青草一区二区三区四| 国产精品成人蜜臀AV在线| 日本五区不卡| 五月色网| 国产熟女无套内射| 日本超碰在线国产一区| 中文字幕99999| 久久精品欧美一区蜜桃| AAAA级日本片免费视频| 日本日日色视频| 无码区蜜乳| 色偷综合| 99碰碰| 天天噜| 欧美 青青草| 18禁精品网站在线看| 人妻熟女一区二区| 六月婷婷综合| 久草免费在线视频| 成人AV素股で擦久久| 欧美性爱日韩高清| 精品人妻一区春色| 精品久久人妻成人网| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 欧美不卡五十路| 97视频免费在线观看| 久久久96| 日本三级一区二区 在线| 日韩乱伦影音先锋| 久久久久成人蜜桃精品| 亚洲天堂99| 精品国产www久久| 久久久国产精品人妻丝袜| 国产久久av| 熟妇人妻精品一区二区| 春色校园综合网| 久久精品国产亚洲AV高级北京| 精品天堂| 人妻少妇色综合| 91婷婷| 无码高清操逼网址| 激情文学亚洲| 欧中日成人免费影视| 女人被添高潮免费视频| 久久精品国产72国产精品福利| 欧美日韩国产电影| 成人AV素股で擦久久| 久热99999| yy少妇精品久久| 色色五月婷| 极品综合| 欧美丝袜中文字幕07在线| 大香蕉色网| 婷婷99| 日韩国产欧美伦理在线| 欧美资源| 国产av色网| 少妇500双飞99| 天天干天天拍| 思思热影视| 性无码专区2020| 欧美亚洲首页| 精品国产久久乱码| 91暧暧| 一区二区三区精品黑丝白丝酒店对鸡 | 操国产逼| 夜夜高潮夜夜爽夜夜爱爱一区| 99色日| 青苹果影院男人的天堂| 国内外色色色色色成人视频| 殴美在线AⅤ| 蜜乳AV免费观看| 亚洲图片欧美| 可乐操在线| 亚洲精品国产熟女久久久| 亚洲中文字幕日产无码久久| 俺去久久| 99视频只有精品| 激情五月天社区| 亚洲乱伦图片视频| 黄色片A级一区二区三区| 96精品久久久久久久久| 99999久久精| 蜜臀99久久精品久久久久久| 囯产精品强| 蜜臀久久久国产| 伊人网在线观看| 青青草吊丝| 国产性刺激| 嗯嗯啊啊操死我| 91人妻超碰| 厕所偷拍在线| 91美腿丝袜在线观看| 欧美中文字幕男人天堂久久精品 | 2003天天干夜夜操| www.男人天堂| 91精品免费| 久久视频少妇美女| 曰韩香蕉97| 97欧美色综合| 天天大干大香蕉| 天天综合网亚洲综合网| 国产久9| 久久三区四区| 久久伊人影院| 欧美色亚洲| 波多野结衣AV无码一区| 三级精品三级在线观看| 国产综合在线视频网站| 国产高清吃奶免费视频网站| 91亚洲色人| 国产区91柔拿会所技师| 国产懂色精品国产av| 任你草| 嗯嗯,啊啊,国产精品|