日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日韩少妇无码| 欧亚免费视频| 青青草影视蜜久久| 亚洲A色| 99精品热| 国产成人无码网站在线视频| 大学生口爆吞精| 日本操逼无码| 亚洲色图第四色| 亚洲欧美色图小说| 国产又黄又粗又猛大片 | 97啪啪| 91精品免费| 夜夜操av亚洲一区二区| 九9热伊人| 欧美熟女丝袜| 欧美变态激情网| 国产女人9999| 国产无码一二三区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 日韩人妻精品久久久久| 久操免费电影| 九九精品美女高溯喷水| 精品无码久久久久久久久果冻糖心 | 久久久97| 中出20p| 午夜120视频在线观看| 久久久穴999| 欧美乱伦专区| 亚洲精品丝袜| 日本东京热久久久电影| 神马久久久久久久久久久久| 成人免费看吃奶视频网站| 91色综合激情| 久久xxxx| 狼人狠干| 久热婷婷| 精品无码一区二区三区色欲| 欧美亚洲影视| 久久久亚洲高清不打码| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 欧美日韩香蕉| 中文字幕av一区二区三区人妻少妇 | 天天干夜夜| 久久亚洲精品成人av| 午夜福利在线合集| 亚洲啪啪性视频| 九九热精品视频六| 97爱免费插| 国产高清成人免费视频| 欧美色997| 强奸国产在线| 99re免费| 97超碰亚洲| 色综合网1| 九九九九九九综合| 亚洲AV无码天美传媒一区| 亚洲天堂电影网99999| 黄色视频特级毛片| 久久久久熟女| 91真人天天在线| 自拍偷拍2025在线观看| 97久久久久| 日本一二区免费| 人妻一区二区三区四区视频| 久久精品99久久久久久| 婷婷色色网| 欧美Ⅴ性爱| 98超碰日本| 欧美99| 久久久久久亚洲Av无码| 97视频免费在线| 天天欧美色| 国产高清MV操逼视频| 97人人夜| 婷婷五月天无码| 久久精品三级影视| 婷婷伊人五月| 久久久精品,3| 国产精品网站www| 丁香婷婷久久 | 一区二区三区免费岛国片| 十八禁黄色| 色大师网站www永久网站视频| 久久国内| 日韩偷拍一区二区三区| 神马久久免费电影观看| 久久一二三四五六七八九区区| 99日韩| 国产肏逼网站| 东北女人高潮视频| 久久爱超碰网| 丁香婷婷激情五月天无毒不卡| 夜夜草网站| 日韩免费在线观看不卡| 青青草色AV| 欧美精品双插| 蜜臀少妇一区二区| 极品色www影院| 欧美日韩*字幕一区| 曰本道人妻久久久在线不卡色视频| 毛片视频白嫩| 婷婷综合激情| 亚洲另类小说卡通动漫| 四虎精品永久在线播放| 天堂性色| 伊人在线大香蕉视频久久| 少妇六月天| 五月天色图影视| 中国乱伦一区二区| 亚洲成人一区二区精品| 欧美性爱第一页久久| 人人妻人人爽人人精品| 欧美手机在线综合| 久久久专区| 天天天肏屄欧美| 色哟哟的毛片| 亚洲,欧美,春色,另类| 日本一本道A级黄色毛片试看60分钟| 性无码专区2020| 亚洲Av诱惑| 精品无人区麻豆乱码1区2区图片| 91少妇香蕉久久精品| 97人人中文网| 久久天天躁日日躁狠狠躁 | 亚洲色吧网| 国产91久久九九免费精品无码| 综合影院永久入口国产| 精品人妻一区二区三区四区不卡在| 夫妻AV网站| 色网1| 少妇丝袜在线观看AV| 国产天天看| 欧中日成人免费影视| 国产亚洲99久久精品| 性爱精品一区| 尤物一级在线免费观看| 91free福利| 国产综合永久精品日韩鬼片| 亚洲蜜乳av| 欧美日韩黄片精品在线| 久思思热视频在线观看| 国产乱伦性爱区| 青青操网| 免费无码国产精品v片在线观看| 无码人妻一区二区三区色欲aⅴ| 午夜操一操| 91五十路| 国产精品第一区第一页| 亚洲91射| 超碰 97国产熟女| 激情久久久| 中文字幕亚洲热播人妻| 看日韩操逼| 熟女精品va中文字幕| 免费αⅴ在线观看| 中文操嬖片。| 人妻-91porn| 99热综合| 熟妇一区二区三区| 久久精品日韩专区免费观看| 竹菊一区二区三区AV线| 亚洲情色综合| 91骚熟女| 亚洲精品三区在线观看| 国产毛片精品一区二区色欲黄A片| 精品少妇一区二区三区在线视频| 六月丁香啪啪啪| 99这里只有精品| 日韩中文字幕熟妇人妻 | 屌妞视频久久久久久久久久久久| 97国产精品久久久久| 久久久精品一区二区| 91老妇女| 亚洲黄片免费在线播放| 人人扣人人操| 中文字幕亚洲欧美在线不卡| 超碰在线1234区| 青草地一本线一区二区三区| 一级毛片电影免费看| 成人aⅴ一区二区三区| 人摸人人操人| 伊色综合天堂色97| 夜夜操一区二区| 熟妇人妻丰满久久久久久久无码| 亚洲欧美高清无码| www成人啪啪18秘 免费| 中文字幕人妻色偷偷久久皮| 99精品综合久久久久五月天| 欧美天天搞| 被男人吃奶很爽的毛片| 静品嫩模一区二区| 亚洲天堂另类小说男人| 尤物视频偷拍免费| 久久产精品一区二区三区电影| 激情抓乳插进去啪啪啪日韩 | 97超碰超碰| 人妻一区视频| 人妻日日夜夜精品| 5252色欧美在线男人的天堂| 亚洲第一免费视频| 蜜桃成人1区2区3区| 99久在线精品99re8a| 色路综合| 日本一级婬片试看三分钟| 婷婷久久综合| 蜜桃臀一区二区aV| 国产精品黑人一区二区三区| 97中文天堂| 国产精品久久久久久久免牛肉蒲团 | xxx亚洲午夜天堂| 国产成人啪一区二区| 青春草莓视频在线观看网址| 2024人人操人人摸| 91精品婷婷国产综合久久竹菊| 日夜精品| 黄色片大香蕉| 人妻熟妇久草在线| 精品人成视频在线观看| 小泽玛利亚一二三| 老鸭窝在线视频播放| 无码外流操逼视频| 九九九九88| 78精品| 国产 v乱码一区二| 久久久九九九九| 欧美呦呦性爱| 内射黑人| 欧美精品一区二区少妇免费A片 | 激情色播| 亚洲少妇自拍中文字幕懂色| 能在线播放的国产三级| 97人人爱人人做人人乐| 亚洲av青草久久一区二区| 婷婷久热| 久操视频在线| 五月天激情四射| 区自美91| 激情婷婷| 91观看 国产白丝| 欧美经典一区二区三区| 蜜桃一区二区三区| 97在线精品观看视频| 欧美超碰96| 欧美色亚洲| 久久精精区一区二区一蜜桃一区二区| 综合第一页| 五月丁香狠狠爱| 日韩人人精品| 日韩成人性爱AV| 精品网站99999| 18禁中文字幕| 精品美女人人干| 亚洲国产麻豆一区二区三区| 久湿久久| 中文字幕在线观看丝袜| 淫荡网址| 草b在线 | 97精品97久久| 国产中文字幕曰本毛片| 亚洲图片偷拍欧美| 亚洲五月婷婷| 人人妻人人爽一区二区三区| 大香蕉中文aV在线| 亚洲一区二区三区不卡国产欧美| 亚洲自拍一区夜夜操| 色官网色综合| 四虎av在线| 婷婷综合| 天天爽夜夜爽夜夜爽精| 亚洲天堂日本| 乱色视频中文字幕| 91 丝袜在线播放| 熟女一区二区| 97精品熟女少妇一区| 国产精品动态一区二区三区四四| 亚洲nv男人的天堂网| 欧美少妇色图| 日韩精品9999| 911粉嫩人妻| 人人妻人人爽人人精品| 国产偷仑| 国产大学生高潮在线播放| 欧美熟妇精品黑人巨大91| 国产馆极品诱惑| 性爱网站一区二区| 日本一级不卡一二区| 久操婷婷| 国产特级毛片AAAAAA高潮流水 | 欧洲黄色网| 98超碰日本| 婷婷久久五月| 精品久久久av无码免费| 尤物视频偷拍免费| 亚洲国产欧美日韩人妻日中文| 7777奇米影视久久| 日日爽熟女| 日韩三四五区| 亚洲第一黄色av网站 | 国产精品操| 东北女人| 色播五月婷婷| AV一区观看| 暴力av在线| 图色综合网| 国产尹人在线视频免费| 伊人热综合| 亚洲区小说| 性色高清在线| 天天干天天干天天干| 高潮毛片无遮挡高清免费| 偷拍导航视频网站| 97超碰资源网| 久久久久久久 九九九九九九九| 1769一区二区| 国产又黄又粗又猛大片| 日韩射精| 大香蕉中文201| 久久这里| 女人一区| 9/A片 | 欧美最大综合网| 人妻天天爽夜夜爽精品2| 自拍偷拍 高清无码| 蜜臀久久99精品久久久久久酒店| 久久久久久久久久久久欧美日| 日本久久久久久久久| 91成人精品在线播放| 你懂的在线观看区国产 | 狠狠入| 裸体美女久久久| 毛片视频白嫩| 久久久爆乳翘臀一线天伦理视频| 午夜精品久久久久久久99蜜桃一| 亚洲最大成人a毛毛片| 精品国模无码| 欧差乱伦二三| 国产精品久久aV| 久久春色| 啊啊啊免费视频| 自拍第一页| 98超碰日本| 97超碰逼| 97视频620| 99热超碰| 欧美色图私拍91| 久久精品亚洲婷婷| 亚洲另类色图片| 亚洲aw毛茸茸在线| 日本一区二区三区精品| 久久9精品视频| 久久久9视频| 69人妻精品一区二区绯色| 十八禁啪啦拍视频无遮挡| 日本一区二区做爱的视频| 欧美αv.com| 911av网站免费观看| 欧美人人曰人人操人人射射| 国模无码人体一区二区三| 人人妻人人爽一区二区三区| 99热精品在线观看| 黄页| 一级一性爱免费视频| 啪啪综合网| 久久一二三四| 乱伦熟妇一区二区| 懂色天天爱天天日天天射天天澡| 一牛影视成人片免费| 这里只有精品视频在线观看麻豆| 国产区性爱在线视频秋霞豆| 中文字幕av亚洲在线| 国产做?爰片久久毛片?片美国| 国产特级毛片AAAAAA高潮流水| 人妻偷拍一区二区三区| wwwxxx日本爽| 欧美人妻久久精品二区三区 | 亚洲91在线播放影院| 精品午夜福利国产一区二区在线观看 | 亚洲综合图色在线| 999九九精品| www.av不卡中文字幕| 一本大道久| 久久人妻熟女一区二区 | 亚洲中文sv| 日夜精品| 国产精品免费1区2区视频| 国产精品久久99日日| 免费av大片| 91日韩在线| 人人妻人人操人人乐| 九九热视频这里只有精品| SS久久| 嗯~啊~快点 死我视频免费看网站| 欧美,亚洲,日韩,v,天堂,手机在线观看 | 午夜精品人妻二区三区| 91中出在线| 操碰97| 国产一区二区精品久久99| 4399成人黄A片| 熟女丰满人妻一区| 中文字幕AV片| 色九久| 欧美午夜视频免费观看| 国语精品内射在线观看| 最新AVzaixian| 久久国99999| 极品出轨视频网站| 98人妻精品一区二区色欲 | 偷窥自拍亚洲天堂网爆| 美腿色图| yazhouzaixian| 激情婷婷综合久久| 手机看片1024你懂的国产| 性色一线| AV色五月| 久久国产免费激情视频| 久久小视频| 久偷拍| 久操免费电影| 日韩性爱毛片操骚逼| 91无码中出人妻视频| 亚洲色图国产另类| 99中文字幕| 欧美一级久久久久久久大片动画| 亚洲人妻一区二区三区| 欧亚揄拍偷拍精品视频 | 男人天堂.AB| 99色在线| 隔壁邻居波多野结衣中文字幕| 九九热视频在线观看| 日韩精品人妻中文字有码在线| 亚洲风情在线观看| 亚洲一区二区三区欧美日韩| 亚洲污一污二| 人人搞人人插人人操| 亚洲精品国产精品乱码不99| 日韩欧美水蜜桃人妻| 欧美色涩| 色情综合网| 性老妇一区二区三区| 亚洲成人贴图| 五月天社区| 欧美激情亚洲情色| 这里只有精品视频在线观看麻豆 | 欧洲精品一区二区三区| 国产精品久久久久久久久久久久| 强免费黄色网址| 色妇91| 国产成人无码a| 看看小穴| 大香蕉欧美| 天天日日夜夜| 91丰满| 亚洲欧美国产日本一区二区三区| 久久久免费懂色| 欧美一区二区福利在线| 肉丝网站91| 狠狠超| 人妻久久久久久久久久久久久久久| 国产91丝袜在线播放蜜月| 国产一区自拍欧美日韩| 美女91在线观看| 男人女人18禁片免费看网站| 国产视频一区二区在线| 97超碰欧美| 96AV精品| 欧美一区二区三区不卡高清视频| 欧美色图天堂在线| 加勒比中文av| 97精品国产97久久久久久| 欧美草草高清日韩视频| 大香蕉综合网| 大香蕉欧美| 欧美专区在线| 日韩三级在线观看网站| 2017大香蕉国产精品久久| 在线观看高清AV| 999综合色| 色欲蜜臀AV| 少妇特黄一区二区三区| 99精品在线| 操人妻视频| 天天看天天综合成人网| 中文一区二区三区影院| 91精品成人| 日韩Va亚洲va欧美Ⅴa久久| 嗯嗯啊啊日韩精品| 日韩九区| 国产呦精品系列在线观看| 超碰午夜在线| www.久久最新地址| 91欧美情色| 麻豆精品久久久久久久| 人妻少妇久久中文字幕一区二区 麻豆 | 黄色片,com| 啊啊啊啊好疼视频| 99亚洲天堂| 一区在线精品中文字幕| 日韩紧密久久| 国产精品一二三在线看| 丰满人妻一区二区三区免费 | 天天插夜夜爽| 欧美日韩999| 欧美91精品国产自产| 操逼精品视频| 99热最新| 极品综合| 99精品无码| 99青草| 操逼视频亚洲| 91色婷婷综合久久中文字幕二区| 日日夜夜国产综合| 天天躁日日躁AAAXX| 97在线看| 国产精品乱码久久久久久久| 大香蕉97久久| 欧美黄片免费在线观看视频| 日韩欧美女求操每天更新| 欧洲射精91| 人妻精品视频一区二区| 1000部熟女视频在线观看| 91人妻久久久久久久久久久久久| 97舔舔| 探花在线免费观看视频国产一区| 丰满人妻-区二区三区免费看| 校园春色综合色| 国产精品老师| 人人操人人摸人人看人人插| 国产白丝AV| 亚洲男人的天堂在线看| 欧美夜夜狠| 免费作爱一级视频| 一级性爱网| 热热色青青草| 亚洲男人的天堂网| 欧美78p| 亚洲精品美女久久久久久久久| 91视频精品| 亚洲精品 欧美97色色| 99www.bibizy香蕉资源国产一区二区三区高清 | 六月激情网| 国产亚洲精品av一区| 欧美亚洲天堂| 九九九999久久久网站| 综合视频91| 67914在线精品观看| 色五月丁香五月| 约操熟妇| AV在线性爱| 绯色一区二区三区不卡少妇| 少妇无码999| 女上位精品在线| 午夜激情床戏激情| 狠狠干,狠狠操| 黄色欧美性爱视频| 蜜乳Av成人片网站| 日婷婷| 中文字幕丰满人妻日本| 欧美97色| 激情小说激情视频| 蜜臀99久久精品| 大香蕉之青青草原| 少妇内射www在线观看视频| 99re不伦| 色哟哟-国产专区| 久久色激情一区二区三区| 国产小黄片在线免费观看| 中文字幕一区二区三区字幕| 欧美一二三级精品在线| 韩国免费播放一级毛片| 亚洲综合欧美| 国产精品免费久久久久久久久久| 亚洲另类春色| 麻豆久久精品亚洲精品88 | 97免费在线观看| 欧美欧美少妇| 欧美性夜| 欧美一区二区男人天堂| 色哟哟综合| 久久这里是精品| 乱伦AVxx| 91碰碰碰| 男人的天堂2018东京热啪啪啪| 国产999精品久久久久久| A V少妇特黄三级| 国产又粗又又黄又猛| 农村妇女一级二级三级视频| 97人肏| 亚洲色欲一区二区三区| 天色综合网| 久热精品色情| 激情四射五月天| 亚洲国产蜜臀系列在线观看| 人妻大香蕉| 综合欧美色图| 91痴汉| 欧美 亚洲| 爱逼综合| 国产传媒午夜理伦精品| 3028国产精品| 91日本在线观看| 夜夜爽77777| 欧美亚洲丝袜美女电影| 9 9无尺码天堂网| 久久9精品| 澳门黄片一香蕉视频| 狼狼色丁香久久婷婷综合五月 | 青娱乐亚洲热| 日本精品久久久久久久| www国产精品| 亚洲色系另类精品国产| 久久九九网| 亚洲射综合网| 亚州高清AV| 我要去看2个日本美女.com曹逼| 欧美极品性爱天天射| 涩五月婷婷| 大香蕉啪啪啪啪在线| 蜜臀久久99精品久久久久电影| 操碰97| a v网站在线播放| 情侣开房子拍 日韩无码 女的很漂亮| 久草草一二三四区久久| 免费视频97| 亚洲精品无码久久AV| 蜜臀少妇一区二区| 无毛精品| 成 人 A V免费视频在线观看| 伊人女女资源在线观看| 欧美日韩黄色片一区二区三区四区人与兽做爱| 97超碰国产亚洲精品| 五月天我淫我色av| 夜夜操狠狠操| 呻吟 欧美 日本 中出| 成人午夜高潮av猛片| 激情四射五月天| 99在线视频播放| 久久97超碰| 欧美成人黄网色网站| 丝袜天堂| 欧美人体性爱互联网第一页婷婷日本| 色官网在线| 无码久| A级国产欧美激情在线| 婷婷导航| 亚洲区小说| 日日摸夜夜夜夜爽| 蜜臀AV成人精品蜜臀AV久久| 天天综合网在线观看| 精品久久人妻成人网| 欧美乱妇狂野欧美在线视频| 国产精品人妻无码久久久老鸭窝| 99热超碰| 亚洲第二页| 思思热影视| 欧美中文狠| 亚洲性爱成人| 久久伊人在线五区| 亚洲日韩电影| 九九AV| 国产综合久| 中文字幕性感少妇av| 秋霞鲁丝午夜无码一区二区三| 性饥渴少妇av无码毛片| 欧亚乱色熟一区二区三四区| 天天做天天爱| 91 刺激在线| 粉嫩AV一区二区夜夜| 大香蕉五月天婷婷| 黄页网站成人免费| 无码自拍SM| 超碰在线在公开超碰在线在公开| 久久九九国产精品| 久久视频,这里只有精品 | 自拍大香蕉乱插| 午夜精品久久久99热蜜桃的功能特点| 欧美性爱www免费版| 素人美腿视频网站| 日韩电影在线观看网址| 亚洲熟妇丝袜在线观看| 国产精品一区二区a| 日韩99神马视频播放片在线播放| 久久久久久9| 日韩丝袜人妻AV| 精品无码一区二区三区色欲| 超碰97玖玖爱| 波多野42部无码喷潮在线观看 | 中文字幕日韩专区精品系列| 97 国产一区| 欧美丰满少妇xx高潮| 欧美国产有色电影| 被窝影院午夜看片无码| 99啪啪视频| 免费αV在线视频| 美女主播色欲91抠b在线播放| 亚洲熟女精品| 无毛精品| 丁香五月激情啪啪| 女性91网站| 懂色AV中文| 亚洲欧美中文一区二区三| 色色青青久久| 婷婷丁香六月| av网站国产主播在线| 农村妇女精品一区二区| 国产第25页在线观看| 欧美最婬乱婬爆婬牲视频| 一起草av| 青娱乐福利99| 99re在线视频国产| 日本狠狠干| 1000部熟女视频在线观看| 97精品视频网站| 欧美日韩中文亚洲v在线综合| 嗯嗯啊啊啊好爽| 91黑丝少妇| 韩国黄片aaaa| 97网色| 青青操在线亚洲视频观看欧美在线 | 99色骚| 激情av| 日韩免费av片高清无码| 精人妻无码一区二区三区伊人直播| 99色在线视频| se吧提供91精品国产91久久久久久| 久久国产999| 啊啊啊啊嗯嗯嗯用力好爽 | 91在线免费观看处女| 秋霞成人一级在线观看| 欧美在线大香999| 亚洲妇色| 色婷婷成人| 欧美精品日韩久久久九| 久久黄人人爽视频| 欧美亚洲国产日本在线,久久精品国产| 色吧五月| 国产女人和拘做爰视频 | 日韩精品中文字幕一| 舔足天天操天天射| 综合激情一一91| 好湿好紧好爽 视频| 天天日天天干天天整| 无遮挡男女激烈动态图| 91美女视频。| 亚洲激情色片| 天天摸天天插天天日| 91精品伊人久久久大香线蕉91| 国产一区二区三区高清视频| 正宗无毛一线天嫩逼| 伊人国产视频| 小草精彩毛片| 99视频在线| 97色97干| 久久熟女精品不卡一区| 天操老女人| 久久熟女人| 日韩啪啪网| 亚洲乱码国产乱码精网站| 97超碰人人模人人拍人人| 久久9久久| 大香蕉92| 国产精品第二页| 91狠狠综合久久久久久| 五月天久久久| 日韩AV一起草| 日本操大逼| 久久久一区二区三区三州| 天天肏天天干| 色图四区| 成人青青草原伊人| 欧美爱国产综合、| 日本超碰色精品| 欧亚第一综合网| 日韩中文字幕熟妇人妻| 99re视频在线观看这里只有精品| 特级丰满少妇一级AAAA爱毛片| 色翁荡息又大又硬又粗又爽| 久96热在线观看视频| 国产三级片在线观看| 欧美亚洲在线| 欧美图片色五月天| 欧美最大综合网| 亚洲涩涩| 欧美韩国你懂得在线 | 国产视频一区二区三区久久亚洲天堂 | 蜜桃臀久久| 日产123区精品免费观看| 91精品国久久久久久无码| 国产丰满熟夫69mpp| 久久超碰、| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 91P0RNY大屁股人妻| 乱欲视频| 国产精品成人AV片免费看网站| 啊啊啊免费| 九九久久久| 人妻91少妇| 91亚洲网站| 天天色综合影视网| 人妻少妇精品久久久久久| 欧美久久人体| 国产农村妇女毛片精品久久| 欧美在线亚洲| 少妇三p| 日本综合色图| 欧美色欧美| JIZZJIZZ亚洲女人被躁| 国产高清午夜成人在线观看| 国产无马在线| 国产精品日韩在线一区| 熟女五十路一区二区三| 日韩欧美国产一区二区三区四区| 成人性爱美曰韩| 夜夜影视四色| 97碰在线视频| 青青草原人妻| 日日干夜夜操视频h| 亚洲情色在线| 99精品人人爽| 大香蕉性欧美| 91亚洲人| 免费av高清无码| av在线播放国产一区| 在线A日本| 欧亚在线视频| 久久怡红院| 精品免费1| 又黄又粗又硬又长又大| 天天插天天操天天摸天天射天天看| 亚州欧美综合| 青青久久艹| 人人人摸人人| 操逼啊啊啊91| 婷婷六月天| 欧美性爱一内片一区二区三区| 骚熟女吞| 清纯唯美综合亚洲| 秋霞 色色| 亚洲好看强奸乱伦| www.色婷婷色综合| 日韩人妻操B| 九九九久久久久| 尤物视频新赏网鲜网色诱网| 天天干18禁| 日韩中文字幕国产| 天天操天天舔| 亚州操操穴网| 久久精品99久久久久久| 国产精品丝袜在线| 亚洲乱色熟女一区| 人看人人摸人人操| 嗯阿好爽好紧| 九九九九九九视频| 欧美乱欲| 老司机老司机午夜影院| 婷婷成人五月天| 麻豆精品天美| 亚洲中文字幕熟女少妇一区二区| 中文字幕一区二区三区字幕| 爱射综合| 色综和网| 精品人妻av区天天看片| 亚洲国产欧美一区二区潘金莲 | 精品美女久久一二三| 久久久久久久久一区二区三区| 中文字幕精品免费一区二区| 欧美性爱精品一区二区| 91殴美大片| 大鸡巴久久| 欧美日本中字另类在线| 五月丁香六月| 97国产综合欧美| 超碰在线欧美性爱激情| 97人人模人人爽人人| 97爱亚洲综合色| 欧美在线电影| 亚洲成人久久一区二区| 99热亚洲天堂| 亚洲一区二区中文字幕| 一区操逼日比视频| 78综合网| 中文字幕AV中出| 亚洲最大成人a毛毛片| 美日韩一卡二卡三卡免费人妻精品| 麻豆色99999| 久久久亚洲Av| 伊人成人情色综合| 色色九区| 91精品久久久久久77777| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 国产精选三级在线观看| 大香网伊人久久综合网eew| 久久色精品视频在线| 天天看,天天做| 亚洲欧美一区二区不卡视频播放| 国产乱伦视频污| 黄污污污污| 亚洲第一页综合在线| 成人性爱视频在线看| 嗯嗯啊啊操死我| 中文字幕一二三| 久久婷五月天| 欧洲一区二区三区四区在线观看| 99这里只有精品国产| 欧美老熟另类| 久久久96| 97人人射| 欧中美三级一区二区三区| 天天干天天操天天干天天操| 嗯嗯啊啊视频一区二区三区| 性饥渴少妇av无码毛片| 伊人97色天使| 国产精品扒开腿做爽爽爽视频| 激情开心五月天| 久久精品操| 九月婷婷久久| 欧美成人精品欧美一级乱黄一区二…| 亚洲精品美女久久久久久久久| 免看60秒涩涩视频| 久久久久久久国产视频| 97精品在线| 国产超碰人人爽人人做| 青青草久久| 五月综合婷婷久久网站| 亚洲 欧美 综合 91| 国产乱码精品一区二区三区四川| 丝袜色综合| 另类 日韩 熟女| 天天综合站| 手机看片1025| 国产精品夜夜| 蜜臀久久99精品久久久老,,| 天美传媒AV在线| 成人精品电影| 97久久超碰| 美腿色图| 欧美性爱第一区| 伦在线97| 欧美一级黄片免费播放| 欧美se综合| 亚洲精品 大香蕉| 亚洲无992tv| 色眯眯射| 操高情无码| 欧美日韩中文字幕不卡| 久久精彩视频| 乱伦一二三区| 99久久9| 探花激情视频| 日韩有码专区| 97亚洲一区| 久久性爱视频99| 啊啊啊不要啊啊受不了了视频在线| 成人性爱av.com| 午夜福利 成人 91| 久久麻豆一区二区| 美女久久久| 冬京热男人的天堂| 一区不卡在线观看av| 免费99精品国产自在在线| 国产激情综合| 国产精品久久久久久久无码AV| 婷婷15月天青娱乐| 青娱乐国产盛宴视频| 精品少妇一区二区| 2010男人的天堂| 69少妇一区二区| 天天综合91入口| 日韩国产品视频中文字| 强奸国产在线| 色臀AV| 97视频7| 亚洲精品三| 91春色| 后入式五六区| 91原创在线观看| 中文日本免费高清| 97Ai亚洲| 男人把坤坤插入女人的下体| 综合一区中亚洲国产成人综合精品| 97超碰碰| 97频视在线| 欧美色三级片91| 少妇干B| 蜜臀99久久| 久草线上视频免费看| 亚洲熟女国产综合另类| 波多野结衣先锋影音| 国产深夜福利| 97超碰色中文字幕| 强奸乱伦亚洲第一页| 少妇被c 黄 免费观看| 色女网日韩| 女人双腿搬开让男人桶| 91精品91久久久中77777| 97频视在线| 久久国产99精品72福利| 中国东北熟女老太婆内谢| J?P?NESEHD熟女熟妇伦| 亚洲天堂久久| 大香伊人在线一区| 又大又白奶子| 午夜福利视频在线一区| 成年人网站在线免费观看| 国产白丝网站| 日本不卡一区二区三区| 精品免费1| 五月天婷婷激情| 在线无码操| 欧美呦呦性爱| 一起草高清无码| 呻吟 欧美 日本 中出| 操B久久| 偷窥自拍亚洲色图| 色色色色电影网| jizzjizz欧美| 99这里只有精品国产| 亚洲高清综合网| 四虎免费在线播放| 91国精产品| 国产久久日韩网站导航| 另类图片五月| 狠狠操狠狠| 亚洲精品中文字幕一区在线视频 | 久久精品中文字幕观看| 久久色网| 欧美少妇人妻| 夜夜性| 深夜激情| 欧美亚洲在线| 国产自偷| 亚州九九九精品视频| 亚洲无限观看| 国产亚洲精品美女| 久久夜色一区二区| 熟妇人妻一区二区| 久久一二区四| 激激五月| 亚洲色堂免费视频| 殴美性色a级欧美| 五月婷婷综合网| 久久一二三四五六七八九区区区| 99热婷婷| 超碰99热| 五月婷婷色| 五月天婷婷影院| AAA久久| 婷婷五月天综合网| 99热精品在线观看| 色婷五月天| 国产精品色色| 蜜桃久久综合视频| 色精品极品| 美女黄页| 97精品视频免费| 天天天天天天天天综合| WWW.加勒比人妻一区不卡.com| 久久久18禁| 欧美 亚洲 另类 综合| 色天堂综合| 97超碰色中文字幕| 热热色青青草| 欧美精品系列| 熟妇视频一区二区三区在线| 97干97色| 亚洲欧美另类激情小说| 韩美日操逼| 无套内射人妻在线播放| 天天操夜夜操狠很操| 秋霞无码av鲁丝片一区| 欧美 亚洲 偷拍自拍| 久久午夜伦| 天天肏美女| 伊人操操| 怡红院网站在线视频| 狠狠色五月亚洲91| 特色a在线上| 另类亚洲一区二区三区| 99在线免费公开视频| 东亚亚洲无码高清| 色婷婷电影网| 欧美淫穴| 欧美亚洲美少妇一区二区| 伊人在线大香蕉视频久久| 97操b| 日本一道在线播放高清| 亚洲一区二区三区不卡国产欧美| 人人摸人人干人人拍97| 欧美做爰无码A片视频| 91久久精品国产| 好看的久久不射无码影视影院| 欧美日韩中国x| 久久久久久久9| 一级日本牲交大片好爽在线看| 岛国艾薇凹凸视频天堂| 成人AV在线电影| 日韩一级二级在线| 久久久一区二区| 欧美日韩久久精品爱爱| 亚洲激情在线观看一区| 日本理论在线| 五月黑AⅤ| 久久综合久色欧美综合狠狠 | 日韩亚洲中文字幕在线| 大奶啊啊好爽 | 操逼无码操逼| 果冻国产精品麻豆成人av| 欧美1727免费观看视频| 裸体美女久久久| 久久久久久久九九九九| 九月激情婷婷| 欧美成人都市人妻| 乱久久久| 色综合加勒比| 少妇高潮对白在线观看| 99re6国产精品99re在线| 精品欧美日韩在线观看| 少妇综合| 91站街按摩店老熟女熟女| 欧美曰韩国产精品| 日本欧美不卡| 精品午夜福利国产一区二区在线观看| 99热这里是精品| 欧美日韩另类字幕中文| 美女十八禁| 国产欧美精选自拍一区| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 日本三级中国三级99人妇网站| 欧美72网页| 9Ⅰ老熟女| 国产92麻豆天美精品色欲5| 久草资源在线视频官方总站日韩丝袜美腿| 青青久日| 91高清无码下载| 97中文超碰| 91美女精品| 把腿张开老子CAO烂你| 91超碰人人| 啊啊啊啊好疼| 亚洲黄网在哪免费看| 久日91在线| 久久精品| 色九九九九久| 97色欧洲| 日本高清有码网址视频| 天天亚洲综合| 一区二区三| 五月天婷婷综合网| 五月天AV资源| 亚洲一级性爱视频免费看| 日韩av熟女一区二区三区成人| 91日韩国产欧美亚洲另类精盘州至城都| 在线一道啪| 欧美伦乱爱| 国产在线视频二区| 台湾佬中文娱乐自偷自拍| 粉嫩AV一区二区夜夜| 亚洲精品日日夜夜52| 亚洲国产日韩精品久久久|