国产成人欧美一区二区三区vr_久久国产精品人人爽人人爽_国产精品永久免费播放_肉欲啪啪a∨无码精品一区二区_国产超短裙jk丝袜在线_亚洲AV片高清资源在线观看_国模无码一区二区三区久久_国产成年人未进视频_中文字幕无码精品夜_一区二区三区在线视频免费看_亚洲成AV人片在线观看网址_日本激情视频高清综合久久_亚洲午夜视频福利_国内大量揄拍人妻精品視_久久国产精品福利二区三区

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99无码视频| juliaann精品熟女一区| 97色欧洲| 精品无码一二三四区| 91成人久久| 青青草原香蕉日本Ap| 欧美美女视频| 欧美久久人体| 偷窥自拍亚洲天堂网爆| 亚洲日韩美女丝袜美腿人妻视频| 最新av在线| 欧美日韩性爱无码| 国产精品久久久久久无码红治院| 校园春色美腿丝袜 | 91c色| 久久蜜桃一区二区| 青青草男人天堂| 成人电影一区| 97摸视频| 欧美黄色片在线播放| www.狠狠干.coom | 亚洲精品白丝| 99综合自拍| 成人网址在线观看| 国产一区二区在线电影| 84YTCOM性无码| 男人的天堂日本东京热| 日本三级小说中文字幕| 开心五月婷婷激情| 色噜噜人妻丝袜a∨先锋影| 免费视频97| 精品女同一区| 性高潮久久久| 欧美 亚洲 在线| 蜜臀AV成人精品蜜臀AV久久| 精品视频久久久久九九九九9999| 日韩欧美字幕亚洲一区二区| 欧美极品性爱天天射| 日韩性爱小视频| 中文乱码字幕观看视频| 91天堂丝袜美腿| 欧美韩国你懂得在线| 人妻天天夜夜爽一区二区| 女人被添高潮免费视频| 精品国产少妇高潮视频| 国产女性无套 免费观看| 国产AAAAAABBBBB| 午夜性生活av免费在线看| 人人妻人人玩人人澡人人爽| 国产真乱mangent| 色欲久久久久综合网| 高清无码人妻久久久一区二区三区aⅴ| 福利一级版子| 大香蕉懂9| 精品免费囯产一区二区三区| 97超碰久久| 久久久人妻| 午夜九九| jazzjazz国产精品麻豆| 蜜臀久久99精品久久久电影| 国产精品白领在线观看| 男人高清无码一区二区| 2017人人操,人人摸| 国产高清视频无码在线| 黄色AAAAAAAAAAA大片| 日韩性爱1级片视频| 亚洲天堂男人网| 激情一区二区| 八戒午夜福利理论片| 亚州色综合| 秋霞怕怕片| 国产日韩精品suv| 97色操| 色图四区| 日本阿v天堂在线观看| 欧美色图99| 亚洲狠| www国产无码| 黄色视频60分钟| 亚洲少妇综合在线播放| 骚货| 999熟女精品| 中文字幕av片| 久久亚洲国产成人| 深夜激情无码| 免费网站观看www在线观| 啊啊啊啊啊啊啊网址在线观看| 99精品在线| 人人妻人人爽人人精品| а√天堂资源官网在线资源| 日韩成人大片一区二区| AV一二区| 精品无码久久| 奇米狠999| 岛国片在线观看视频亚洲| 搡老女人老妇女老妇老熟女怎么读| 91jk色拍| 熟女91网站| 18禁免费视频| 日本三级日本三级三级人妇四虎| 午夜AV污污污| 亚洲人妻在线一区| 丝袜综合色图| 亚洲av资源| 97超碰磁| 性色一线| 日韩内| 亚洲熟伦熟妇AV无码春色| 国产精品自在线发布| 伊人亚洲国产一成人久久精品,久久| 91在线免费观看处女| 中文日韩欧美熟| 亚洲欧洲无码bt精品合集| 老司机射| 婷婷国产精品九区| 78精品在线| 操逼天美3区| 国产免费一区二区三区最新不卡| 久操免费视频| 九九99久久| 中文字幕文字幕无码一区二区三区电影99 | 亚洲免费精品一区| 你懂的在线观看区国产| 日本欧美成人片AAAA| 91九久| 91人妻熟女| 欧美劲爆视频一区二区| 青青青草伊人精品| 青草草免费网站av| 屌妞视频久久久久久久| 国产亚洲色婷婷久久99精品91 - 百度| 视频分类 国内精品| 天天色怡春院| 国产操伦| 亚洲综合骚逼| 综合操逼| 热热色中文无码| 男女性扦B| 日韩极品无码B| 久久人人妻| 97se亚洲综合自| 色官网在线| 丝袜天堂网| 色香综合| 75大香蕉| 中文字幕在线观看永久| 欧美成人一区二区| 99久久久无码国产精品性男| 成人AV在线网站| 8050无码八戒| 久久111| 在线无码网站| 91日产桃蜜| 色色激情五月天| 中文字幕一区二区三区人妻不卡 | 射 色综合| 色九久| 色综合中文字幕不卡| 国产美女在线精品免费看| 黄色乱论网站| 亚洲成人久久一区二区| 欧美综合1性辶| 岛国小电影| 中文字幕在线免费观看2| 久久久久国产| 91久精品| 国产又爽又黄| 国产精品午夜福利亚洲综合网| 亚洲天堂另类小说男人| 另类 日韩 熟女| 玖玖无码超碰| 亚洲凸凹超碰成人| A片三级无码| 午夜小电影在线插入淫高潮| 天天日熟妇| 色婷婷视频| 97久久网| 韩日精品福利视频一区不卡在线免 | 国产偷拍自拍在线视频| 9Ⅰ超碰| 黄色AV影视| 日本人妻伦在线中文字幕| 中文字幕第23区| 桃色五月天| 日韩黄片影院| 亚州性色| 色偷综合| 久干网| 热久久这里只有精品| 特级毛片特黄久久免费看| 久久免费少妇| 欧洲站一级二级三级h| 久九干| 亚洲国产午夜真人一级片中文字幕精品黄网站| 色哟哟 日韩精品| 97超碰国产亚洲精品| 国产老熟女| 欧美顶级黄片AAAAA在线免费看 | 亚洲另类色图片| 在线观看国产黄色| www.丁香五月| 婷婷激情五月| 尹人大香蕉视频在线| 殴美在线AⅤ| 大香蕉乱级| 91国模| 中日韩久久久免费看| 性爱AV天堂| 99国内精品| 久久黄黄| 久久天天性久久伊人| 精品少妇一区二区三区在线视频| 日本三级R| 深夜国产一区二区三区在线看| 色青青久久影视| 岛国片国产成人亚洲播放| 国产高清吃奶免费视频网站| 中文字幕乱码人妻二区三区| 成人av在线播放| 亚洲性爱成人| 国产精品麻豆免费视频| 色九久| 999综合网| 亚洲丨在线| 精品999一区二区| 密臀在线视频| 蜜乳成人AV| 亚欧高清| 伊人网综合在线视频| 免费a级毛片av无码久久精品中文字幕| 丝袜美腿av女优在线| 国产精品伦理| 色哟哟 日韩精品| 伊人网高清| 91欧美大片| 欧美一区二区三区互相| 人人操人人搞人人草| 无码av永久免费专区网站| 午夜精品久久一区二区| 探花一区二区三| 欧美一区二区三区入口| 国产超碰| 超碰超碰95| 玖玖爱一区在线| 啊啊啊啊啊啊啊啊要喷了| 国产嫩草精品A88AV| 91网站18禁| 人人操人人插 - 百度 - 百度| 人人看人人爰人人操| 91高清无码下载| 99热这里只有精品99| caopeng97| 久久久久久久人妻| 久久久久久久久久久久黄色| 东京热,男人的天堂| 亚洲综合另类| 亚洲图片色图欧美另类| 激情婷婷五月天| 精品人妻1237| 九99久久| 国产日韩无码一区二区三区久久区| 污色区网站| 欧美日韩97在线| 91热色| 偷拍盗拍亚洲色图图片| 色综合天天| 性站 | 人人 操人人 操人人| 精品人人插人人操| 久久鲁夜| 国产精品国产精品国产| 91人妻Pr| 欧美国产操逼| 无遮挡又黄又刺激的视频| 中文字幕精品一区二区精| 91精品黄在线观看| 欧美亚洲国内自拍| 91综合网站| 激情无码日韩| 嫩草影院永久在线制服丝袜| 天天草天天日| 亚洲国产剧情少妇激情| 国产精品日日摸天天碰| 91丨九色丨43老版熟女| 26uuu性物| 久久久com| 九九热午夜欧亚国产视频| 久草这里只有精品 | 日韩午夜啪啪视频| 国内外激情在线| 国产51色综合久久免费| 一区中文字幕二区日韩| 97国产精品视频| 69精品久久久久中文字幕| av麻豆啪啪| 免费A片三p视频| 国产激情综合| 99精品无码| 国产精品探花在线| 97国产精品在线观看| 久久一区二区高清免费| 天天日熟妇| 久久综合资源一区二区| 老女人91| 爱射综合| 2024黄色视频| 丝袜综合| 男女啪啪网站免费视频| 性欧美天天| 中字幕人妻一区二区三区| 97操97色| 精品人体无圣光凹凸| 啊操爽品善一区二区三区| 色在线综合| 大香网伊人久久综合网eew| 天天看精品动漫视频一区| 内射日韩大臀美女| 亚洲蜜乳av| 60秒免费小视频| 国产欧美一级在线观看| 情色五月天就去干| 乱人伦 国语对白:视频直接看| 91亚洲综合在线| 大香蕉伊人网WWWn0n| 久久久久久久强迫| 91xingse| 久久久久久久国产a∨| 97在线欧| 91爱综合| 国产亚洲女v在线观看| 亚洲伊人青青草| 91超级碰| 日韩av不卡在线看| 国产一区二区在线看| 95人妻爽爽人人做人人澡| 另类欧美色| 久久久久久久78| 99国产精品视频尤物| 人妻少妇久久| 超碰97资源大奶| 波多野结衣先锋影音| 欧美亚洲韩国视频十五区 | 国精品一区二区三| 婷婷超| 亚洲精品欧洲精品| 婷婷月色| 天天摸夜夜添无码小视频| 天天操熟妇| 天天天天干| 亚洲av综合伊人久久| 亚洲一区制服诱惑| 91 国产丝袜在线放观看| 蜜乳av一区二区| 96国产精品| 久久九七| 91丝袜美女国产| 久久精品人妻一区| 色妇综合网| 嗯嗯啊好大| 亚洲 欧美 中文 日韩超碰 | 亚洲情色综合网| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 乱伦Av网| 熟妇一区二区三区| 色色色五月婷婷| 性爱综合一区二区| 超碰免费人妻在线| 国产精品一级二级在线| 亚州成人a∨| 另类小说五月天| 一级aaaaa欧美中文字幕录像片| 欧美中文综合| 激情婷婷黑人91| 人妻熟女一区二区三区在线| 青苹果影院男人的天堂| 91狠婷| 首页中文字幕中文字幕免费| 国产二区视频在线观看电影| 亚洲无码偷拍| 久久久96| 玖玖爱影院| 农村少妇久久久久久久| 十八禁电影伊人网| 日韩欧美中文字亚洲慕| 日韩视频小说在线观看| 这里是精品| 好淫网一二三视区| 116美女午夜| 少妇激情AV| 精品无码一二三四区| 成人线上超碰| 蜜桃精品视频一区| 琪琪精品免费一区二区三区 | 东京热亚洲一区二区| 美國A片| 韩日欧亚a级| 一区操逼日比视频| 日韩人妻丝袜中文字幕| 精品二区三四区五电影 | 亚州性色| AV色天香在线| 在线观看国产黄色| 夜间福利片1000无码| 超碰在线91| 天天激清| 国产免费一区二区在线A片视频| 无码78| 极品色| 日本 欧美 亚中文字幕| 91精品丝袜在线观看| 成人免费福利网站国产| 青青草吊丝| 国产树林里野战在线看| 人人操人人狠狠操| 国产成人网站在线观看| 精品一区二区人妖| 久久久久久久| 国产AV毛片| 日本丝袜人妻内射| 国产精品高潮呻吟av久久4虎| av天堂5| 国产51色综合久久免费| JIZZJIZZ国产精品喷水| 欧美韩日精品99综合| 欧美丰满少妇交换91欧美精品| 欧美日韩97在线| 日本三级人妻a人妻一在线| 天美一二三在线观看Av| 91 国产丝袜在线播放-百度| 久久婷色| 伊人网在线观看| 美熟女逼导航AV操逼| 男人天堂导航| 欧美18 在线观看| 天天躁日日躁成人字幕aⅴ| 久久夜黄色无码A级大片| 强奸乱亚洲| 97舔舔| 国产精品久久久九九九| 日韩大香蕉| 麻花传媒免费网站在线观看| 亚洲制服欧美另类内射| 久草精品热视| yazhououmeizongya| 国产精品不卡高清在线观看| 久久老子无码午夜伦不卡| 亚洲国产综合久久天堂| 午夜操操操| 国产精品白丝在线播放| 色99在线| 国产suv精品一区| 欧美18 在线观看| 婷婷五月天av| 亚洲天堂久| 中国操逼无码| 久久啊哟| 精品国产乱码久久久久久蜜臀| 欧亚性爱在线视频| 国产怡红院| 亚洲91射| 永久免费发布性爱网| 久久久久久久 九九九九九九九| 天天干1区2区在线| 麻豆国产视频精品观看| 中文激情网| 国产九九九九九九| 综合操逼| 亚洲电影91| 日本色色视频网站| 色香阁在线| 激情欧美97| 99视频在线| 茄子社区国产精品| 一区二区三区黄色片a| 精品久久在线区一区| 成人无码欧美一级A片狼牙直播| 日日操丁香五月天| 国产欧美成人精品| 91午夜无码| 天天夜夜久久| 亚洲精品一区二区精品| 人妻大相焦在线| 粉嫩av平台| 久久的网站啊啊啊啊啊| 欧美日韩在线视频网站| 久久偷拍人| 美女黄页网站| 色99在线| 蜜臀va69| 久久99操天天日| 清纯唯美亚洲综合| 九九99久久| 蜜臀99久| 99热免费| 精品人妻一区二区三区不卡断| 日韩一级片在线看| 亚洲第一男人天堂| 国产亚洲精品美女久久久m| 天堂资源站| 色久桃花影院在线观看| 日本天天干天天日一区| 天天插天天操| 亚洲国产精品成人久久蜜臀| 嗯嗯啊啊啊好舒服| 岛国色情视频在线观看| 久草综合网| 操人妻少妇中文| 日韩强奸av| 精品人妻一区二区三区-国产| 国产主播福利| 99re6国产精品99re| 综合网色| 日韩欧美大力操| 天天日骚逼熟女| 3571色综合一区二区二区| 亚洲另类天堂| 黑人精品久久97| 黑人精品成人一区二区三区 | 另类图片综合| 亚洲色资源| 中文字幕性感少妇av| 欧美中文字幕精品人妻| 婷婷五月天无码 | 碰人碰碰人人开房人肉| 日韩av女优在线免费一区| 国产兽交视频在线播放| 欧美精品不卡一二三四在线91| 99国内精品| 每日更新AV| 操国产高清| 91美女视频电影| 国产九九久久久精品| 日本熟女不卡视频| 嗯嗯啊啊啊啊轻点视频| 东京太热久久久| 中文字幕交换人妻| 欧亚无码视频| 97碰碰色| 后入式999| 中文字幕免费观看| 久久男人的天堂国产| 一级性爱视频免费观看| 亚洲 欧美 色图| 亚洲国产蜜臀系列在线观看| 蜜臀AV一区二区三区激情综合| 久久久精品视频免费观看| 91狠狠综| 99re视频这里只有精品| 大香蕉日韩欧美| 久热精品色情| 亚州精人品大香蕉| 亚洲一区二区三区播放在线| 午夜福利合集| 东北操逼| 欧美久久毛片基地| 骚货人妻偷情自拍在线视频| 91精品无码久久久久久久| chaopen97久久| 亚州熟妇精品| 久久久久密臀视频| 亚州色图狠狠干| 黄污污污污| 思思热在线视频精品| 国产懂色精品国产av| 91碰超| 亚洲免费在线探花| 久久久久久久九九九九九九| 青娱乐淫乱1314| 国产9区| 婷婷五月天激情四射| 91四海无码日韩欧美| 超碰9 7女人| 国产久9| 国产AV天美传媒一区二区三区| 欧美亚洲宗合色性图| 久久精品免费| 青青青青草av在线观看| 日本丝袜美腿人妻九九| 久久最新视频免费观看| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 国产精品69人妻无码久久久| 韩日性爱av| 亚乱色| 国产亚洲日本精品在线| WWW黄片COM| 波多野结衣被操50分钟免费视频| 看大黄色大片原件| 国产日韩色综合| 中文字幕亚洲永久精品| 青娱乐日韩无码| 婷婷五月综合在线| 欧美AB在线观看| 欧美日韩淫加| 啊啊啊啊啊,啊啊啊啊好舒服,操我舒服啊啊啊 | 97天天日| 国产主播福利| 国精精品无码一二三区水多多| 午夜高清成人在线视频| 国产玖玖| www.高清无码诱惑一区.com| 超碰 国产熟女精品一区| 五月天精品| 免费AV中文网在线观看| 国产熟女完整版中字| 亚洲偷拍自拍在线视频| 立川理惠无码一区二区| 999久久久九| 老司机久久| 日韩欧视频| 久操操AV电影| 久操婷婷| 大香蕉一人在线| 狠狠爱综合网| 色嘟嘟人妻天堂网| 999熟女精品| 久久色精品视频在线| 超碰无码加勒比| 精品成人av一区二区三区在线| 欧美性爱97超碰| 大香蕉伊然在亚洲91| 午夜男人的天堂| 巨爆乳一区二区爆乳区| 亚洲 欧美 天天| 91激情综合| 思思热一热婷婷热一热| 亚洲视频,小说| 天天夜夜久久| 亚洲久9| 超清福利精品视频在线| 屌逼传媒| 久久久96精品| 亚洲国产成人综合碰碰三级经典| 热99这里有精品综合久久 | 99热这里只有精品地址| 黄色高清久久无码依人| 日本 情色 1区| 丝袜剧情| 天天综合网1| 伊人网在线点播| 午夜精品久久一区二区| 久操婷婷| 精品妇女一区二区三区| 超碰4A| 超碰成人最新最好看| 国产白嫩精品久久| 啊啊啊好想要| 国产av尤物| 亚洲丨在线| 亚州AV无码国产精品| aaa淫乱视频| w w w.久久精品| 欧美日韩丝袜| 亚洲同性aV综合| 狠狠激情综合狠狠操中文字幕| 亚洲色图加勒比| 久久婷婷电影网| 亚洲色图大香| 午夜爽爽爽| 国产精品久久久久久久久AV大片| 综合视频91| 国产 日韩 欧美高清| 97色五月天完| 熟女熟妇一区二区三四区| 全球成人中文在线| 国产精品一二三| 大伊香蕉在线视频免费| 久草线上视频免费看| 日韩人妻中文视频| 欧亚韩国999| 熟女视频久久| 亚洲欧美伦综合| 大香蕉亚洲中文| 男人的天堂 在线一区| 成年女人一区| 久热精品在线国产| 色综和网| 亚洲最大的综合性av| 天天热精品| 日韩成人综合网| 韩国三级色呦呦| 97一区二区蜜臀| 中文字幕五月婷婷免费| 97久久精品国产| 91在线视频观看国产| 蜜臀久久精品久久久久视频| 曰韩精品视频一区二区| 国偷自 一区二区| 国产无套粉嫩白浆在| 屁股久久久久久久久| 亚洲天堂人妻熟妇视频| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 国产最新小视频在线播放下载| 天天操女人| 国产高清精品一区二区三区毛片 | 高清在线偷拍自拍视频| 国产97色在线| 香蕉一区二区三区在线视频| 91视频综合| 欧美伦乱爱| 久久ww| 亚洲国产成人7777| 熟女久久| 91夜夜蜜桃臀1区2区3区| 国产区性爱在线视频秋霞豆| 亚洲精品九九九| 久久精品99久久久久久| 精品国产乱码久久久久A| 人人摸.人人色| 欧美大的香蕉有线电视视频| 久9久9精品| 久久一二三四五六七八九区区区 | 欧美|91色综合| 国产不卡免费在线视频| 九月伊人中文字幕| 殴美牲| 久久夜黄色无码A级大片| 另类小说五月天| 中字幕人妻一区二区三区| 久艹视频在线| 国产少妇高潮| 激激五月| 精品超碰国产| 奇米四色影视777久久久| 亚洲麻豆18发?| 亚洲九区| 国语av最新自产拍在线观看| 亚洲无码偷拍| 9丨久久九九九| 亚洲精品国产熟女久久久| 久久免费看高潮毛片韩国| 伊人五月天激情| 操逼无码操逼| 亚洲精品九九九| 亚洲做性| 天天弄欧美| 亚洲日韩AV视色| 熟女乱伦二区| 国产精品久久久久久久电影渣男| 日日爱99| 91久久久久久久久18| 玖色av| 天美传媒精品一区二区三区| 9999九九九久久久| 欧洲精品在线播放| 一本正道久久熟女| 91爱综合| 91n美女视频| 国产精点久久久成人| 青娱乐亚洲自拍| 色老大| 淫穴高潮色图| 久9久9久9久9久9久9 | 国产精品久久久久亚洲av| 欧美性爱精品七区| 亚洲无码精品AV久久久| 91av熟女人妻| 91大神精品长腿在线观看网站| 97色亚洲| 精品无码一区二区三区色欲| 日韩97P| 日韩欧美~中文字| 久久华人网| 色香伊人| 激情综合av| 久久国语| 清纯唯美第一页| 久久久性爱| 欧美精品97| 亚洲精品久久久久毛片A片拉屎 | 黄色免费一级在线毛片| 亚洲情色 欧美| 无码人妻1727| 久久精品国产亚洲粉嫩| 在线不欧美| 99国内熟女露脸视频| 一区二区三区日韩欧美 | 日韩视频啪啪| 九热视频| 97精品国产97久久久久久户外免费| www老逼91| 日日夜夜草草草| 天天碰操中国年青熟妇| 热久久九九热| 少妇蹲下买菜露大唇0| 91n处女在线观看| 亚洲同性aV综合| 无码人妻精品酒店| www亚洲免费| 免费看A片毛毛片在线播| a网站免费观看| 成人熟女视频一区二区三区| 国产日韩精品一区二区三区| 18一区二区三区| 怡红院怡春院| 日韩青久久| 四虎在线观看视频| 精品国产人成在线| 9九九九九视频在线观看| 亚洲色图欧美色图制服丝袜| 综合97久久| 青青草AV色| 久久AV无码AV| 久久久久国产精品片区无码直播| 999久久久精品国产| 国模限制级电影| 亚洲精品天天影视综合网 | 翔田千里无码中出中文字幕| 人人天天干干| 综合网亚| 日韩综合97p| 女人天堂av在线播放| 日本色色色视频| 日韩紧密久久| 超碰 欧美| 少妇淫妇久久久久久久| 亚洲一曲日韩精品| 欧美制服另类丝袜| 99精品综合久久久久五月天| 久久9精品网站| 13小男生GAY自慰脱裤子| 美女被艹尤物视频| 国产亚洲在线观看| 亚洲,欧美,春色,另类| 日韩AV一区二区三区三州三州| 极品出轨视频网站| 丰满人妻一区二区三区性色| 久热69九色熟妇97| 国产一区二区在线看| 国产一区二区三区视频在线看| 一级黄色影片| 国产91丝袜在线播放蜜月| 98人妻精品一区二区色欲| 亚洲AV成人在线| 日韩淫色网| 国产品精品自在在线午夜免费 | 精品无码久久久久久久杏吧| 色网在线| 人妻喷水| 中文视频在线观看| 免费99精品国产自在在线| 欧美爆乳精品一区二区| 精品人人| 亚欧洲一区二区视频| 97国产精品在线观看| 嗯啊抽插大香蕉网页| 久久国语| 欧美精品一区二区少妇免费A片| 亚洲男人的天堂V| 性九九九九九九| 久久久亚洲高清不打码| 国产精品视频播放| 内射夫妻三片| 蜜乳av首页| 免费视频观看60秒| 激情小说五月天| 国产一二三在线视频五十路| 92福利社视频| 射综合网| 欧洲乱码一区二区| 蜜臀久久99精品久久久久电影| 毛片电影一区二区三区| 91精品导航| 91在线色综合| 97视频在线免费观看| 日本熟妇熟色97一本在线观看| 日韩97P| 色综合98| 蜜乳视频网站| 日本熟妇精品九九| 999精品国产高清一区二区| 五月丁香啪啪| 亚洲不卡三级手机播放| 亚洲中文字幕乱码无码一区二区| 四虎影视永久在线观看精品免费网站 | 97超碰免费人人性爱| 秋霞一级鲁丝片A片| 国产成人AV麻豆| 亚洲成人久久一区二区| 久久激情四射婷婷丁香五月天| 99在线精品观看99| 亚洲色图欧美色图另类图片| 神马久久久久眼| 色五月AV| 国产乱人妻精品入口| 日韩av不卡在线观看| 欧美操逼录像国产黄色国产| 精品久久久久9999| 无码天天操| 国产欧美后入| 天天爽天天操| 色黄污美女啪啪啪免费网站| 九七毛片九九毛片| 亚洲色图大香| 亚洲丝袜少妇在线| wwe 天天干.com| 一中国女人毛片水真多| 欧美亚综合色图| av强奸乱轮| 后入国产| 天堂射| 色妹子A V| 人人爱人人操人人性| 91bbb| 天美传媒av一区二区| 日本 成 人 小说 电影 一区二区| 中文字幕av亚洲精品| 91国产大片| 亚洲五月丁香花狠狠干一区二区三区| 欲香欲色综合天天伊人| 9久久美女首页| 日本羞羞的视频在线播放| 玖玖资源视频一区二区三区| 嗯嗯啊啊啊好舒服| 97福利视频| 91艹B视频| 国产精品久久久 | 久99久视频精选| 欧美日韩香蕉| 一本色道综合久久欧美| 亚洲黄色电影| 丰满人妻一区二区中文| 在线 亚洲 网爆 自拍| 激情综合亚洲| 欧美另类综合久久| 中文字幕精品免费一区二区| 婷婷8月天青娱乐| 久久夜色一区二区| 色欲久久综合| 黄在线| 国产一国产一级毛片古装| 国产97综合| 手机久操欧美综合色码| 99久久这里只有精品| 国产又色又爽又舒服的三级视频 | 97超碰欧美手机在线| 欧美狠狠操| 丁香五月天婷婷姐| 久久久久成人蜜桃精品| 日韩AV熟女乱伦| 性爱乱伦网址| 亚洲第一免费视频| 日韩视频精品在线观看| 免费草草草草草视频| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 成人av在线播放| TS人妖另类精品视频系列| 丰满人妻一区二区三区四区| 国产91美女视频| 91网站18+| 日韩专区久久久| 久热99999| 东北女人| 国内97干免费看| 中文字幕视频在线观看一区二区| 色一色综合网| 亚洲毛片一级带毛片基地| 熟女这里只有精品6| 一区操逼| 国产精品成久久久久午夜午夜| 欧美成人一级麻豆| 99在线观看视频在线高清| 亚洲综合99999| 久久九九国产精品| 性色av婷婷久久一区二区点复制| 久久精品国产亚洲AV无码电影| 欧美精品日韩久久久九| 老熟妇一区二区三区…| 日本免费专区| 免费中文在线| av绯色| 亚洲精品无码成人久久久99| 精品国产人成在线| 操屄不卡视频| 亚洲精品美女久久久久久久久| 啪啪一区| 韩日男人的天堂| 日本人妻天堂网站在线播放| 人妻天天爽| 亚洲高清色综合| 亚洲国产成人精品女人久久久| 黑人美精品 A片| 无码137片内射在线影院| 日本精品中文字幕视频| 尤物网址| 一区二区三区黄色片a| 中文字幕成人乱码熟女精品国50| 熟妇视频一区二区三区在线| 中文字幕国产在线天堂| 亚洲精品自拍| 一级久久性爱视频| 97资源超碰| 九一精品牛牛一区二区| 97精品国产精品免费观看| 嗯嗯啊啊啊好爽| 超清福利精品视频在线| 日韩性爱电影一区| 久久熟女人| 伊人久久大香线综合无码| 天天情欲宗合网| 久久只有精品| 97在线免费观看视频| 狠狠中文字幕| 天天看天天在线精品| 欧美人人AAA| 亚洲精品久久久久久久久豆丁网| 爱妻综合网| 91亚洲网站| 一区二区三区黄色片a| 操逼www.| WWW4虎| 噜噜噜噜天天狠狠| 日韩偷拍一区二区三区| 日本色婷婷| 97精品一二区| 疯操AV| 亚洲欧美日韩免费电影| 欧美色三级片91| 亚洲女人毛茸茸91| 少妇一级无码精品| 国产欧美日韩精品中文| 久99久视频精选| 蜜桃臀一区二区三区久久| 天操天操夜操夜月操月年年操操| 999熟女精品| 日本性爱欧美性爱| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 欧美.亚洲.另类.丝袜.制服.诱惑| 男人的天堂无码| 五十路六十路素人熟女| 精品性爱无码在线播放| 久久久com| 碰超人人在线一区二区三区| 婷婷色色五月天福利| 婷婷精品| 狠久久| www.人人cao| 亚洲大色鬼| 成人精品一区二区91毛片不卡| 欧美亚男人的天堂| 青青久草| 一区二区娱乐网站| 久久精品99久久久久久| 超碰夫妻97| 国产不良强奸视频免费看| 日韩伦理视频| 97视频网站| 久久最新免费视频23| 花花AV导航| 超碰在线99| 99热99re6国产在线播放| 丰满人妻无码一区二区三区| 九九九九九九成人| 国内精品嫩模A∨私拍小视频| 淫荡少妇免费| 亚洲无限观看| 中国大陆国产高清AⅤ毛片| 330dv亚洲成年视频网| 中文字幕制服诱惑| 少妇超碰在线| 九热中文字幕| 精品人人| 国产肏逼网站| 性色av一区二区| 乱伦a片视频| 久久99手机免费视频| 自怕偷自怕亚洲精品| 欧洲精品人妻| 女人午夜视频777| 五月天精品| 先锋精品av色鲁| 国产强奸乱伦第1页| 日韩美女久久一区二区三区| 蜜桃狠狠色伊人亚洲综合| 日韩无码精品综合久久| 亚洲色悠悠久久88| 亚洲国产97| 午夜性| 日语五十路和六十路亚洲国产精品| 真实高潮91| 国产成年精品高清在线观看91| 少妇专区一二三四五| 国产亚洲日本精品在线| 久久老熟女| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 超碰97最新人妻| 97超碰人人模人人拍人人| 亚洲熟女乱熟乱熟妇综合网二区| 国产传媒操逼视频| 国产夫妻性生活视频| 天天欧美色| 亚洲最大成人a毛毛片| 欧美96交| 亚洲欧洲小说图片视频| 夜夜精品视频一区二区| 激情五月天色色网| 国产1024在线播放| 天天日日日射| 亚洲熟女诱惑| 插入综合网| 欧美性爱精品七区| 久久久久久久久久久久黄色 | 高潮综合网| 久久婷综合| 久久神马| 高清肉丝中文无码| 五月婷婷色色| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 亚洲AV噜噜狠狠网址蜜桃动漫| 深夜激情| 亚洲永久AV无码精品秋霞| 性爱av在线免费观看| 日本操逼视频在线| 欧美极品色| 亚洲天堂,男人| WWW啪啪的com| 欧美色图亚洲激情| 亚洲青色欧美| 天天影视综合网欧美精品| 日本在线视频导航| 精品人妻一区二区三区四区不卡在| 亚州色图欧美| 欧美色图亚州激情| 秋霞无码av鲁丝片一区| 干超碰碰熟女| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 青青草日逼视频| 操逼日批| 夜夜爽夜夜爽| 久久精品女同亚洲女同13| 欧美久久婷婷| 亚洲色图在线视频| 国产强奸超碰AV| 眼镜人妻101.com| 懂色av中文字幕| 极品粉嫩一区二区| www.婷婷六月天| 婷婷色在线| 岛国色情视频在线观看| 色汉综合| 国产精品久久泡妞网站| 99re6国产精品99re| 超碰在线人妻不卡| 欧美色三级片91| 美女诱惑1区2区| 婷婷五月天影院| 日韩成人大片一区二区| 日韩精品黄片免费观看| 日韩影片中文字幕一区二区三区| 久久久久国产一区二| 免费啪啪啪网站18岁| 乱伦日本色图AⅤ| 97综合在线| 日韩电影在线观看网址| 蜜臀99久| 欧美亚洲情色| 午夜αv| 天天天肏屄肏屄肏屄欧美欧美| 欧美 日韩第一性色| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 超碰97导航|