日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

cloudflare-os自建邊緣網(wǎng)關(guān):從CDN緩存到WAF安全防護(hù)的完整實踐

cloudflare-os自建邊緣網(wǎng)關(guān):從CDN緩存到WAF安全防護(hù)的完整實踐 cloudflare-os第一次看到這個名字的時候我也愣了一下——Cloudflare明明是一家SaaS云服務(wù)商什么時候出了一套操作系統(tǒng)后來想明白了這其實是社區(qū)里一類項目的統(tǒng)稱把一臺普通的Linux服務(wù)器按Cloudflare的核心技術(shù)棧邏輯重構(gòu)做成一套自用的邊緣網(wǎng)關(guān)系統(tǒng)。換句話說它不是Cloudflare官方發(fā)行的系統(tǒng)而是以Cloudflare的設(shè)計理念為藍(lán)本、自己動手打造的一站式邊緣接入方案。我自己做的這套cloudflare-os就是把CDN緩存、WAF防護(hù)、邊緣腳本、智能DNS這四件事整合進(jìn)一個可復(fù)用的鏡像里裝到任何一臺VPS或者物理機上就相當(dāng)于擁有一個具備Cloudflare核心能力的自建邊緣節(jié)點。它能解決的問題很直接源站IP暴露、靜態(tài)資源訪問慢、被掃描攻擊時沒有統(tǒng)一防線、想跑邊緣邏輯卻沒有運行時。適合三類人被動的運維開發(fā)、云成本敏感的個人站長、想系統(tǒng)學(xué)習(xí)Cloudflare技術(shù)棧的進(jìn)階玩家。1. 項目定位cloudflare-os到底要做什么1.1 從名字說起一套“OS”而非一個工具很多人在GitHub上看到cloudflare-os這種項目名第一反應(yīng)是又一個蹭熱度的發(fā)行版。但實際動手做過之后我認(rèn)為這里的OS不是操作系統(tǒng)的意思而是Operation System的另一種解讀——一套完整的解決方案。這就像一個裝修項目單買一個柜子叫家具采購但把玄關(guān)、廚房、臥室的收納統(tǒng)一規(guī)劃好才叫全屋定制。cloudflare-os的思路也是這樣單裝一個Nginx只能解決轉(zhuǎn)發(fā)單裝一個ModSecurity只能解決過濾但把它們按流量接入的順序組織起來統(tǒng)一配置、統(tǒng)一日志、統(tǒng)一更新才配叫一套系統(tǒng)。我理解的cloudflare-os至少要包含四個層次接入層作為所有外部請求的第一道入口負(fù)責(zé)TLS終止、HTTP協(xié)議解析、訪問日志記錄。緩存層對靜態(tài)資源做邊緣緩存減少回源請求。動態(tài)請求則直接轉(zhuǎn)發(fā)到源站。安全層WAF規(guī)則過濾、限流、惡意IP封禁、常見攻擊特征攔截。邊緣邏輯層在靠近用戶的地方跑一小段腳本比如改寫響應(yīng)頭、做A/B分流、灰度發(fā)布。這四個層次合在一起才構(gòu)成一個完整的邊緣網(wǎng)關(guān)節(jié)點。而把它們打包進(jìn)一個鏡像才是cloudflare-os這個項目真正的意義。1.2 它實際解決的四個痛點我在做這套方案之前手上的是一個典型的個人項目架構(gòu)一臺輕量服務(wù)器上面跑一個Web服務(wù)域名直接解析到這臺機器的IP。聽上去夠用了但問題一大堆。第一源站暴露。域名解析一查就知道服務(wù)器IP遇到大流量攻擊時流量直接打滿帶寬業(yè)務(wù)就掛了。Cloudflare這類CDN的核心價值之一就是隱藏源站cloudflare-os要復(fù)刻的正是這一點。第二緩存能力缺失。一個頁面上有大量JS、CSS、圖片每次用戶訪問都要從源站拉取。哪怕服務(wù)器帶寬不貴延遲也是實實在在的問題尤其是跨地域訪問時靜態(tài)資源的加載速度直接影響用戶體驗。第三安全策略碎片化。今天裝一個fail2ban明天加一個WAF模塊后天再手動改規(guī)則全是零散操作。出了問題排查起來非常痛苦因為沒有一個統(tǒng)一的入口管這些安全組件。第四邊緣邏輯無法落地。想根據(jù)User-Agent做不同響應(yīng)或者想對某個路徑的請求做灰度分流傳統(tǒng)的做法是改源站代碼。但有了邊緣腳本能力這些邏輯可以放在網(wǎng)關(guān)層統(tǒng)一處理源站只管業(yè)務(wù)。cloudflare-os正是沖著這四個痛點去的。1.3 適用邊界不是什么場景都能硬上把丑話說在前面并不是所有場景都適合自建這套系統(tǒng)。如果你的業(yè)務(wù)對可用性要求極高比如金融交易、大型電商那直接用Cloudflare官方服務(wù)企業(yè)級SLA才是正路。自建的邊緣節(jié)點無論怎么做冗余單節(jié)點的故障概率都擺在那里。另外如果業(yè)務(wù)有嚴(yán)格的數(shù)據(jù)合規(guī)要求數(shù)據(jù)不能經(jīng)過第三方節(jié)點那么cloudflare-os這種自建方案反而比公有云CDN更合適——因為所有流量都在自己控制的服務(wù)器上日志、緩存、請求內(nèi)容全程自主可控。這也是很多人選擇自建而不是直接買服務(wù)的原因。一句話cloudflare-os適合對成本敏感、希望自主可控、并且接受單節(jié)點運維責(zé)任自己扛的人。想清楚這一點再動手。2. 整體設(shè)計與技術(shù)選型2.1 流量路徑請求進(jìn)來之后發(fā)生了什么在設(shè)計cloudflare-os之前我先畫了一張邏輯流程圖把一次用戶請求的完整旅程理清楚。整個過程看起來很簡單但每個環(huán)節(jié)的選型和配置都會影響最終表現(xiàn)。第一步用戶發(fā)起HTTPS請求DNS解析指向cloudflare-os節(jié)點的IP。這一點很重要——我建議讓邊緣節(jié)點對外只暴露80和443端口其他端口一律不對外開放。第二步接入層接收請求終止TLS連接然后把HTTP請求頭解析出來記錄訪問日志。第三步進(jìn)入緩存判斷如果是靜態(tài)資源且緩存命中直接返回如果沒有命中繼續(xù)往下走。第四步經(jīng)過WAF檢測和限流策略確認(rèn)沒有攻擊特征才允許轉(zhuǎn)發(fā)到源站。第五步源站返回響應(yīng)后按照緩存策略決定是否寫入邊緣緩存。最后響應(yīng)原路返回給用戶。整個路徑中接入層是唯一直接面對用戶的組件所以它的穩(wěn)定性、性能和安全性決定了整個節(jié)點能扛多大的壓力。2.2 關(guān)鍵組件選型與理由技術(shù)選型這一步我前前后后折騰過好幾輪。最終確定的方案如下接入層OpenRestyNginx Lua。選它的原因很直接Nginx的穩(wěn)定性經(jīng)過大量生產(chǎn)環(huán)境驗證而Lua腳本提供邊緣邏輯能力可以在不開發(fā)和部署獨立服務(wù)的情況下靈活處理請求頭和響應(yīng)頭、做分流控制。相比之下Caddy雖然配置更簡潔、自動申請證書很方便但模塊生態(tài)和Lua支持遠(yuǎn)不如OpenResty成熟。緩存層Nginx proxy_cache模塊。它是Nginx內(nèi)置功能性能足夠好配置也不復(fù)雜。原本我還考慮過Varnish官方資料說緩存效率更高但多一個獨立進(jìn)程就多一份運維成本對個人項目來說沒有必要。安全層ModSecurity OWASP CRS規(guī)則集。ModSecurity是業(yè)界老牌的WAF引擎雖然學(xué)習(xí)曲線有點陡但規(guī)則生態(tài)極其豐富。搭配OWASP CRS這個開源規(guī)則集對常見Web攻擊的覆蓋率相當(dāng)高。限流則直接用OpenResty的resty.limit.req庫實現(xiàn)按IP維度做令牌桶限流。邊緣腳本層OpenResty的Lua接口配合定時任務(wù)做規(guī)則熱更新。這一層不追求大而全只做輕量級邏輯。證書管理ACME certbot定時續(xù)期。配合接入層的TLS配置實現(xiàn)全站HTTPS加密。選型的核心原則就一句話能用一個進(jìn)程解決的絕不用兩個進(jìn)程能用配置文件解決的絕不寫代碼。2.3 為什么沒有直接用Cloudflare官方服務(wù)既然項目的名字叫cloudflare-os那就繞不開這個問題何不直接買Cloudflare的CDN我的真實想法有三層。第一學(xué)習(xí)價值。Cloudflare官方服務(wù)是個黑盒你只知道開了某個開關(guān)但不知道內(nèi)部怎么運作。自建cloudflare-os等于把CDN、WAF、邊緣計算這些概念親手實現(xiàn)一遍對理解現(xiàn)代Web架構(gòu)有質(zhì)的幫助。第二成本控制。個人項目流量不大Cloudflare免費版確實夠用但只要部分高級功能就得上付費套餐。而云廠商的輕量服務(wù)器按年付費往往一杯咖啡的錢就能拿下長期看自建更劃算。第三定制能力。官方服務(wù)能調(diào)的參數(shù)就那么多而自建系統(tǒng)里每一個響應(yīng)頭、每一條緩存規(guī)則、每一個WAF動作都在自己手里自由度完全不同。當(dāng)然我也不會硬吹自建。如果你完全不想折騰也不關(guān)心原理那直接用官方服務(wù)是更好的選擇。cloudflare-os更適合我想知道它怎么工作的人。3. 鏡像構(gòu)建與部署實操3.1 基礎(chǔ)鏡像選擇Debian還是Alpine構(gòu)建cloudflare-os的第一步是選擇基礎(chǔ)系統(tǒng)。我在Debian和Alpine之間糾結(jié)了一段時間最后選的是Debian 12。選Debian的理由比較務(wù)實一是生態(tài)成熟ModSecurity、OpenResty這些組件在Debian下都有成熟安裝方式踩坑概率低二是glibc兼容性好很多預(yù)編譯二進(jìn)制包直接就能跑三是運維經(jīng)驗更通用遇到問題搜解決方案Debian系的資料最多。Alpine的優(yōu)勢是鏡像體積小標(biāo)準(zhǔn)部署能控制在100MB左右加上容器化推送更友好。但它用的是musl libc遇到需要預(yù)編譯模塊的場景——比如給OpenResty編譯第三方擴展——經(jīng)常要自己從頭編譯很耗時間。如果你打算整套系統(tǒng)容器化到K3s或Docker里長期跑那Alpine有一定優(yōu)勢如果想快速上手跑通Debian是省心的選擇。我當(dāng)時是直接在一臺2核2G的VPS上物理安裝Debian 12最小化系統(tǒng)整個部署過程記錄成了一個腳本后續(xù)通過Ansible做環(huán)境復(fù)現(xiàn)。3.2 構(gòu)建的完整步驟整個構(gòu)建過程我拆成了九個步驟。每個步驟都有一個明確的產(chǎn)出方便隨時檢查。第一步最小化安裝基礎(chǔ)系統(tǒng)只保留SSH服務(wù)和標(biāo)準(zhǔn)系統(tǒng)工具。磁盤分區(qū)時我特意把/var/cache/nginx單獨劃了一個分區(qū)大小是磁盤剩余空間的70%這是緩存目錄空間耗盡會直接影響緩存寫入所以提前隔離好。第二步配置系統(tǒng)基礎(chǔ)安全項SSH改用密鑰登錄禁用root直接登錄安裝并啟動fail2ban啟用系統(tǒng)自動安全更新。第三步安裝OpenResty。這里我不建議直接用系統(tǒng)的Nginx包因為自帶版本通常沒有Lua模塊。官方倉庫安裝方式很簡單裝完之后直接測試resty -v是否正常。第四步編譯安裝ModSecurity并啟用OWASP CRS規(guī)則集。這一步是最耗時間的因為要裝一堆依賴包括libmodsecurity3、libmaxminddb等。安裝路徑我統(tǒng)一放在/opt/modsecurity下方便后續(xù)配置文件引用。第五步編寫核心配置文件。這是整個cloudflare-os的靈魂包含三個主要文件nginx.conf全局配置定義進(jìn)程數(shù)、連接數(shù)、日志格式。edge.conf接入層配置定義監(jiān)聽端口、TLS證書、SSL協(xié)議版本。cache.conf緩存配置定義緩存路徑、緩存鍵、緩存有效期。第六步編寫Lua邊緣腳本。我先寫了一個最簡單的版本當(dāng)請求到達(dá)時給響應(yīng)頭加一個X-Edge-Node: cloudflare-os用來驗證邊緣層是否成功介入請求流程。第七步配置證書續(xù)期。用certbot申請證書時我選擇的是 webroot 模式驗證域名所有權(quán)也就是說證書續(xù)期時只在網(wǎng)站根目錄寫一個臨時文件來驗證不影響正常業(yè)務(wù)。配合cron定時任務(wù)每月自動檢測續(xù)期。第八步引入一套測試頁面。這個頁面里包含一個固定不變的大圖片、一個動態(tài)生成的JSON接口、一個帶參數(shù)的查詢接口用來分別驗證緩存命中、動態(tài)轉(zhuǎn)發(fā)和緩存鍵設(shè)計是否正確。第九步壓測驗證。我用ApacheBench和wrk分別做了簡單壓力測試確認(rèn)在開啟WAF和緩存的情況下QPS和響應(yīng)時間仍在可接受范圍。3.3 核心配置詳解與參數(shù)邏輯很多教程會給你一份配置但不說為什么這么配。這里我挑幾個關(guān)鍵參數(shù)仔細(xì)說一下背后的邏輯。緩存層配置參考如下proxy_cache_path /var/cache/nginx/static levels1:2 keys_zonestatic_cache:100m inactive7d max_size20g; server { location ~* \.(js|css|png|jpg|jpeg|gif|ico|svg|woff2?)$ { proxy_cache static_cache; proxy_cache_key $host$uri$is_args$args; proxy_cache_valid 200 7d; proxy_cache_valid 404 1m; proxy_pass http://origin_server; add_header X-Cache-Status $upstream_cache_status; } }這里有幾個值得注意的點。levels1:2表示緩存文件的目錄層級分兩級目錄存儲避免單個目錄下文件太多導(dǎo)致文件系統(tǒng)性能下降。keys_zonestatic_cache:100m這段是說緩存元數(shù)據(jù)區(qū)占100MB內(nèi)存用于管理緩存鍵的索引。100MB大約能管理幾十萬個緩存條目對個人項目綽綽有余。inactive7d是7天內(nèi)沒有被訪問過的緩存會被清理這叫惰性淘汰避免清理掉那些雖然不常訪問但仍有價值的文件。max_size20g是緩存目錄上限超過之后Nginx會按LRU策略清理最早的文件。這里我特意核過一個典型的個人站點靜態(tài)資源總量通常在3-5GB以內(nèi)20GB足夠覆蓋峰值而且我VPS的存儲空間有60GB給緩存留三分之一是合理的。緩存鍵的設(shè)計是個細(xì)節(jié)活。proxy_cache_key $host$uri$is_args$args的含義是緩存鍵由域名、路徑、查詢參數(shù)三部分構(gòu)成。這樣設(shè)計是為了區(qū)分同一路徑不同參數(shù)的請求。舉個典型例子/api?page1和/api?page2是兩碼事如果緩存鍵不帶參數(shù)所有分頁請求會命中同一份緩存返回的數(shù)據(jù)就錯了。但這里也引入了一個問題動態(tài)接口通常不應(yīng)該緩存否則用戶會拿到過期數(shù)據(jù)。所以我的做法是只對靜態(tài)文件后綴開緩存動態(tài)API路徑直接走到proxy_pass不進(jìn)入緩存層。配置上就是通過location的正則匹配來實現(xiàn)的。TLS配置也值得一提。最低TLS版本我設(shè)置的是TLSv1.2HTTP/2保持開啟。原因很簡單TLSv1.0和1.1在2019年之后就被各大瀏覽器和機構(gòu)明確標(biāo)記為不安全而TLSv1.2在性能和安全上取得了比較好的平衡。如果你面對的用戶全部是現(xiàn)代瀏覽器甚至可以只開TLSv1.2和TLSv1.3。3.4 打包成鏡像的兩種選擇部署腳本全部跑通之后我意識到這套系統(tǒng)如果只在單臺服務(wù)器上能用價值太有限了。最好把它做成一鍵可復(fù)用的鏡像。我當(dāng)時試了兩種打包方案。第一種是直接做系統(tǒng)級快照用dd或 VPS 廠商自帶的快照功能把整個磁盤狀態(tài)保存下來作為基礎(chǔ)模板。新服務(wù)器上線時直接基于模板創(chuàng)建相當(dāng)于出廠預(yù)裝。這種方式的好處是零改動但壞處是模板會包含一些機器相關(guān)的配置比如SSH密鑰、hostname需要額外處理不太干凈。第二種是容器鏡像方案把整套cloudflare-os裝進(jìn)Docker鏡像里以容器方式運行。這種方式干凈、可移植但需要額外配置數(shù)據(jù)卷否則重啟容器后緩存和日志全沒了。我的建議是如果面向VPS單機使用用系統(tǒng)快照如果考慮多節(jié)點集群或者K8s環(huán)境用容器鏡像。最后我兩套都做了單機場景用系統(tǒng)快照測試環(huán)境用Dockerfile構(gòu)建鏡像。部署新的邊緣節(jié)點時從快照創(chuàng)建虛擬機再執(zhí)行一個初始化腳本修改hostname和SSH密鑰5分鐘就能上線一個新節(jié)點。4. 安全策略與性能調(diào)優(yōu)4.1 安全默認(rèn)上線之前必須完成的五件事把cloudflare-os部署到生產(chǎn)環(huán)境前有五件事我強烈建議先完成。第一關(guān)閉不必要的端口。一個邊緣網(wǎng)關(guān)節(jié)點只需要開放80和443SSH端口要么改到一個高端口要么只對指定IP開放。操作上最簡單的做法是防火墻默認(rèn)拒絕一切入站流量然后逐條放行需要暴露的服務(wù)。第二SSH強制密鑰登錄。同時關(guān)閉/etc/ssh/sshd_config里的PasswordAuthentication yes。這一步能擋掉絕大多數(shù)密碼爆破。第三啟動fail2ban。SSH和Nginx日志是重點監(jiān)控對象。我記得第一次部署后不到48小時fail2ban就自動封禁了來自十幾個IP的SSH探測這些IP的來源分布很廣充分說明公網(wǎng)環(huán)境里的掃描有多頻繁。第四開啟ModSecurity的OWASP CRS規(guī)則集。這套規(guī)則量非常大新手建議先在檢測模式下運行幾天只記錄不攔截觀察誤傷情況。另外別忘了把網(wǎng)站自身常用的UA、合法爬蟲UA加入白名單。第五配置自動更新。Debian的unattended-upgrades這個包安裝后就能自動安裝系統(tǒng)安全補丁避免因忘記手動打補丁而被已知漏洞鉆空子。我配置了通知郵件每次自動更新后會收到一封摘要。這些事不復(fù)雜但每一條都是防御縱深里的一環(huán)。單獨看每條都很基礎(chǔ)組合起來才是一張相對完整的網(wǎng)。4.2 緩存命中率優(yōu)化把靜態(tài)和動態(tài)分開處理部署完cloudflare-os之后我跑了一周的日志分析發(fā)現(xiàn)緩存命中率只有60%出頭遠(yuǎn)沒有達(dá)到預(yù)期。后來排查發(fā)現(xiàn)問題出在所有請求都進(jìn)了同一套緩存配置上。靜態(tài)資源和動態(tài)接口的緩存策略應(yīng)該是完全不同的。靜態(tài)資源的特征是URL穩(wěn)定、內(nèi)容不變、訪問頻繁適合長時間緩存TTL甚至可以直接設(shè)到30天。動態(tài)接口的特征是內(nèi)容實時變化、帶個性化數(shù)據(jù)可能根本不適合緩存或者只適合極短時間緩存。我的優(yōu)化方案是把流量按特征拆成三類各自走不同的緩存策略第一類是純靜態(tài)文件也就是JS、CSS、圖片、字體這類帶文件后綴的請求。它們直接在緩存層返回TTL設(shè)到7天并且在響應(yīng)頭帶上Cache-Control: public, max-age604800讓瀏覽器也參與緩存減少重復(fù)請求。第二類是API接口它們的特征很明顯路徑包含/api/或者返回Content-Type是application/json。這類請求默認(rèn)不緩存除非個別接口在代碼層面顯式設(shè)了緩存標(biāo)記。這一塊的設(shè)計邏輯是寧可多回源不可錯緩存因為API數(shù)據(jù)的準(zhǔn)確性優(yōu)先級高于性能。第三類是頁面本身也就是HTML文檔。我把TTL設(shè)成非常短的1分鐘并且根據(jù)是否登錄設(shè)置不同策略——未登錄的匿名用戶看到的是通用頁面可以緩存登錄用戶的請求帶Cookie自動跳過緩存。調(diào)整完之后緩存命中率提升到了85%以上。靜態(tài)資源的請求量占整個站點請求量的70%左右而動態(tài)請求雖然只占30%卻承擔(dān)了幾乎所有的回源壓力。這個數(shù)據(jù)分布說明了一個基本規(guī)律絕大多數(shù)站點靜態(tài)資源才是性能大頭。另外響應(yīng)頭的排查小技巧要安利一下我在配置里加了一個X-Cache-Status響應(yīng)頭Nginx會直接在響應(yīng)頭里告訴你這個請求是HIT緩存命中還是MISS未命中用curl -I看一眼就能判斷當(dāng)前請求走了哪條路徑。這個頭在調(diào)試階段作用巨大。4.3 性能參數(shù)調(diào)優(yōu)從經(jīng)驗值到壓測驗證cloudflare-os的性能調(diào)優(yōu)不能靠拍腦袋要有數(shù)據(jù)支撐。我先給一組我壓測出來的數(shù)據(jù)再講講背后的調(diào)整思路。壓測工具是wrk壓測場景是啟用WAF和緩存之后、同時開啟100個并發(fā)連接、持續(xù)30秒目標(biāo)是一個200KB的靜態(tài)圖片資源。調(diào)優(yōu)之前的數(shù)據(jù)QPS約4200平均延遲約23msCPU峰值80%。調(diào)優(yōu)之后QPS約6800平均延遲約14msCPU峰值60%。主要做了三個調(diào)整。第一個調(diào)整是worker_processes。原來是默認(rèn)的1后來按CPU核心數(shù)改為auto讓Nginx自動根據(jù)CPU核數(shù)啟動worker進(jìn)程。2核VPS上就是2個worker進(jìn)程可以并行處理更多連接。第二個調(diào)整是keepalive。Nginx和源站之間的連接默認(rèn)是每次請求時重新建立的開銷很大。我在upstream里加了keepalive 32讓Nginx和源站維持最多32個長連接避免了頻繁的TCP三次握手和TLS握手。光是這一項回源請求的響應(yīng)時間就降了將近一半。第三個調(diào)整是open_file_cache。它讓Nginx可以緩存文件描述符和元數(shù)據(jù)信息減少重復(fù)的磁盤IO操作。配置如下open_file_cache max1000 inactive30s; open_file_cache_valid 60s; open_file_cache_min_uses 2; open_file_cache_errors on;這組參數(shù)的意思是最多緩存1000個文件的信息30秒內(nèi)沒有被訪問就從緩存中淘汰緩存信息60秒內(nèi)有效一個文件被訪問至少2次才進(jìn)入緩存。這些參數(shù)不是隨便填的是根據(jù)服務(wù)器實際處理量倒推出來的——個人站點活躍文件不超過幾百個1000個上限完全足夠。調(diào)優(yōu)過程中犯過一個低級錯誤一開始為了追求性能把日志等級調(diào)成了error結(jié)果排查問題的時候完全看不到訪問日志成了睜眼瞎。后來才明白日志等級不是越高越好生產(chǎn)環(huán)境可以保持notice級別同時開啟gzip壓縮日志既能長時間留存又不太占磁盤。5. 常見問題與排查實錄5.1 緩存配置了但命中率為什么上不去這是我踩的第一個大坑。配置里明明寫了proxy_cache_valid 200 7d也設(shè)了緩存路徑但壓測一看X-Cache-Status全是MISS。最終定位出來的原因很經(jīng)典location塊的路徑?jīng)]有匹配上。我當(dāng)時把緩存配置寫在了一個嵌套location里而實際請求的路徑規(guī)則在前面已經(jīng)被另一個location捕獲了根本沒機會走到緩存配置。排查手法其實很簡單在配置里臨時加一段測試代碼直接打印當(dāng)前命中的location名。這里強烈建議用OpenResty的Lua能力在日志里輸出變量值能非常直觀地看到請求走到了哪個分支。這類問題的教訓(xùn)在于Nginx配置是順序敏感的編寫規(guī)則時要把優(yōu)先級搞清楚。精確匹配優(yōu)先于^~前綴匹配^~優(yōu)先于正則匹配正則匹配優(yōu)先于普通前綴匹配。我后來在配置文件的每個location塊加上注釋標(biāo)明優(yōu)先級和用途再也沒犯過同類錯誤。5.2 WAF誤殺正常請求啟用OWASP CRS規(guī)則集后發(fā)現(xiàn)的第一個嚴(yán)重問題是誤殺——手機端正常訪問接口被WAF識別為SQL注入給攔了。排查之后發(fā)現(xiàn)問題出在參數(shù)里包含了特殊字符比如用戶的昵稱里帶了個單引號直接命中規(guī)則集里的SQL注入檢測規(guī)則。解決思路是精細(xì)化的白名單和規(guī)則分級。我做了三件事一是把網(wǎng)站自身的合法路徑加入白名單比如/api/user/update這類必帶特殊字符的接口直接跳過WAF檢測轉(zhuǎn)而在應(yīng)用層做參數(shù)校驗二是調(diào)整CRS的規(guī)則等級從默認(rèn)的攔截模式改為檢測特定規(guī)則攔截只有攻擊特征特別明顯的高危請求才直接攔截三是在誤殺出現(xiàn)時第一時間看WAF的審計日志里面會記錄命中的規(guī)則ID和請求詳情按最小權(quán)限原則把誤傷的規(guī)則排除掉。這個過程讓我明白一件事WAF規(guī)則不是越多越嚴(yán)就一定越好關(guān)鍵是要在檢測能力和用戶請求多樣性之間找平衡。一次誤殺帶來的用戶投訴電話比十次攻擊攔截都讓人頭疼。5.3 證書自動續(xù)期失敗了排查路徑是什么證書續(xù)期失敗是長期運行的Web服務(wù)里最常遇到的問題。我遇到的情況是certbot續(xù)期時導(dǎo)出的驗證請求在網(wǎng)關(guān)層被WAF攔了。原因是ACME驗證的請求路徑.well-known/acme-challenge/觸發(fā)了一條通用規(guī)則被當(dāng)作可疑掃描攔截。排查起來的路徑其實很固定。第一步看certbot的日志確認(rèn)失敗原因。第二步用curl手動訪問驗證路徑看返回碼是404、403還是200。403基本就是被WAF或限流攔了404可能是webroot路徑寫錯了200才是正常。第三步根據(jù)結(jié)果調(diào)整配置要么在WAF規(guī)則里放行這個路徑要么在Nginx里單獨給.well-known目錄開一個白名單location直接跳過安全檢測。順便提醒一句證書續(xù)期這件事別等到到期才想起。我后來設(shè)了一個定時任務(wù)每個月的一號檢查證書剩余有效期如果不足30天就觸發(fā)續(xù)期。提前量給足有時候就算續(xù)期失敗也有充裕時間去修。5.4 排查工具箱一個請求從頭查到尾在一個邊緣網(wǎng)關(guān)系統(tǒng)里想要定位一個請求到底在哪一環(huán)出了問題手腕上得有趁手的工具。我個人常用的組合是這樣的curl -I -s檢查響應(yīng)頭和狀態(tài)碼判斷緩存命中情況、TLS版本、服務(wù)器版本。curl -v看完整的HTTP握手過程排查TLS證書鏈或HTTP頭異常。tcpdump -i eth0 port 443抓包分析確認(rèn)請求是否到達(dá)服務(wù)器、回調(diào)是否異常。tail -f /var/log/nginx/access.log實時看訪問日志確認(rèn)請求命中了哪個location、狀態(tài)碼是什么。ngxtop在終端里直接看Nginx請求熱榜快速找到拖慢性能的重度請求路徑。tail -f /var/log/modsec_audit.log看WAF審計日志確認(rèn)請求是否被WAF攔截及命中的規(guī)則ID。這套組合拳打下來從DNS解析到響應(yīng)返回的每一個環(huán)節(jié)都能定位到。個人做運維不需要很復(fù)雜的天眼系統(tǒng)工具夠用、日志清晰、響應(yīng)迅速已經(jīng)能解決90%以上的問題。6. 實際使用中的一些體會與擴展方向這套cloudflare-os真正跑起來之后我又做了幾輪迭代有幾個感受特別深。首先是別貪多。最開始我想把所有想法都塞進(jìn)去什么邊緣計算、灰度發(fā)布、A/B測試、動態(tài)緩存全都要結(jié)果就是配置越來越復(fù)雜出問題的時候根本分不清是哪個環(huán)節(jié)導(dǎo)致的。后來我給自己立了一個規(guī)矩每次只加一個功能加完跑一周觀察日志穩(wěn)定了再動下一個。這個習(xí)慣幫我避開了很多改一處壞一片的坑。其次是日志就是最好的老師。所有疑難雜癥的排查最終都回到日志上。cloudflare-os的日志體系我打磨了很久現(xiàn)在Nginx訪問日志、ModSecurity審計日志、系統(tǒng)安全日志全部按天切割保留90天。排查問題時直接按時間段拉日志配合grep就能快速定位。沒有日志再好的架構(gòu)都是盲人摸象。最后提一個我認(rèn)為很值得擴展的方向把多個cloudflare-os節(jié)點組成一個小集群?,F(xiàn)在單節(jié)點已經(jīng)夠用但總有單點故障的擔(dān)憂。我已經(jīng)在測試KeepalivedLVS的方案讓兩個節(jié)點共享一個虛擬IP主節(jié)點掛了備節(jié)點自動接管。再往后還可以考慮引入K3s把邊緣腳本做成微服務(wù)但這套方案的復(fù)雜度會同步上升適合真正需要多節(jié)點容災(zāi)的場景再上。cloudflare-os這個項目最大的價值不在于它復(fù)刻了Cloudflare的多少功能而在于它逼著你去理解一個完整的邊緣網(wǎng)關(guān)系統(tǒng)需要哪些組件、每個組件為什么存在、它們?nèi)绾螀f(xié)作。這套理解比任何官方文檔都來得扎實。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
97综合| yy少妇精品久久| 欧美亚洲特P| 男人的天堂不卡一区二区| 爱丝福利| 婷婷另类小说| 激情五月天婷婷| 无码精品久久| 亚洲综合图片在线| 色噜噜人妻av 中文字幕| 亚洲精品久久久久久久蜜桃臀| 嗯嗯嗯啊啊啊在线免费观看| 黄片免费看的| 国产免费一区| 台湾佬中文娱乐自偷自拍| 再深点灬舒服灬太大了添视频| 日韩中文字幕宗合在线| 后入 亚洲 美女 射| 日本三级R| 精品传媒在线一区| 99热这里只有精品1| 精品妇女一区二区三区| 免费一级特黄特色大片在线观看看 | 四虎精品亚洲| 亚洲熟妇综合久久久久久| 久久大香蕉| 无码78| 亚洲国产丝袜在线观看| 麻豆国产尤物AV| 久久精品毛片免费不卡| 青娱乐91| 亚洲激情视频| 78精品| 色女免费在线观看视频网址| 亚州高清色综合| 偷拍 精品另类 凸凹了四区| 一级片在线观看高清无码| 啊啊啊操死我| 欧美性夜| 激情自拍 校园春色| 日本性爰一道本| 日本色日夜干| 人人操,人人液| 五月天人妻综合| 无码操逼天堂| 日本黄色裸日本黄色裸体 | 成人性爱全视频观看| 网站A V在线| a亚洲欧美色欲| 亚州一区二区| 亚洲性爱电影| 成人免费毛片| 欧美黄片欧美黄片xxx| 日韩欧美aⅴ综合网站发布| 玖玖爱综合| 九九九九九九九| 欧美性爱另类综合| 九九Av| 伊人久久艹| 国产成人精品亚洲日本| 国产免费一区二区在线A片视频| www成人啪啪18秘 免费| 丰满高潮18xxxx| 国产精品点击进入在线影院| 亚洲熟伦熟妇AV无码春色| www.91人妻.com| 亚洲色系另类精品国产| 日韩性爱播放| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 国产粉嫩蜜臀av一区二区三区| 噜噜噜噜久久久精品免费| 欧美日韩在线小说 | 视频在线97| 玖玖大干人妻| 人妻91少妇| 亚洲欧美黄| 国产精品乱码久久久久| 国产91精品福利在线| 91free福利| 中文字幕在线高清男人的天堂 | 影音先锋视频在线| 99色天堂| 精品一区二区三区四区外站| 久久人| 成人自拍三级在线观看| 激情五月婷婷综合| julia中文字幕在线观看| 日韩av情韩国爱禁区av一区二区| 果冻传媒A片麻豆熟妇人妻| 青青色在线观看| 一中国女人毛片水真多| 噜噜噜在线视频| 亚洲色诱惑| 9999伦理视频| 综合亚洲网| 国产 亚洲 一二三四| 欧美一区二区福利在线| 五月天婷婷成人网| 久久精品中文字幕女同| 国产亚洲日韩欧| 亚洲高清无码在线桃色| 亚洲国产精品久久久久久久久久| 18岁禁 茉莉成人久久| 男人的天堂99| 五月天激情国产综合婷婷婷| 性色国产东北露脸精品视频| 1000部熟女视频在线观看| 无码精品蜜桃一区二区三区ww| 婷婷五月天成人网| 伊人久久亚洲色欲综合网站 | 久久久国产护士丝袜美腿一| 日韩av在线精品观看| 思思99热| 国语精品av| 亚洲成人免费中文字幕| 欧美日韩亚洲高清不卡一区二区三区| 欧美后入式| 无码外流操逼视频| 日本不卡码黄色| 亚洲男人天堂手机版| 国产成人免费观看在线视频| 欧美在线第五页| 亚洲图片日本AⅤ欧美在线| 日日天天久久啊啊aaa| 鸥美中出| 家庭乱伦性爱av| 国产AV天美| 天天插夜夜操| 东京热熟女亚洲视频网站| 日本色日夜干| 99色悠悠| 中文字幕一区二区三区字幕| 亚洲亚洲亚洲天堂天堂| 操操啪| 国产夫妻性生活视频| 成人性爱av.com| 99RE在线视频精品,这里只有精品| 国产97在线视频| 91视频国品一二三区| 久久香蕉国产线看观看亚洲女人 | 每日更新AV| 91久久国外网| 亚洲无码色| av中亚| 九九AV| 青青操国产夫妻| 成年女人一区| 18禁中文字幕| 941超碰| 色综合色色| 日本久久超碰| 亚洲天堂 视频你懂的| 91无码人妻精品一区二区三区蜜桃| 黄色av片三级三级三级免费看| 亚洲色图欧美色图制服诱惑| 18禁免费视频| 亚洲一区二区av| 啊啊啊啊嗯嗯嗯用力好爽 | 台欧久久精品视频| 亚洲 自拍偷拍 欧美| 97在线资源| av天堂5| 婷婷爽人人婷婷爽视频| 新视频sss国产| 在线无码操| 丝袜 中出 制服 人妻 美腿 中文字幕| 久久精彩视频9| 亚洲图片婷婷五月天| 久久久免费视频18| 九九久久99| 美女写真| 精品久久无码午夜福利| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 久9re热视频这里只有精品| 久9久9精品| 亚洲av无码成人精品国产| 超碰色综合| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 就去色综合| 天天天肏屄欧美| 国产欧美日韩在线不卡第一页| 97视频在线免费观看| 青青青艹在线视频| 日日夜夜草草草| 九色婷婷| 2021国产成人精品久久| 天天看天天日| 蜜臀网址在线| 深爱伊人影院| 啊啊在线| 台湾佬中文娱乐网久久久久久久久久com| 六九九九| 天天射影院| 亚洲无码?第一页| 九九综合九九综合| 99热婷婷一区二区三| 亚洲激情欧美色图| 国产精品天干天干综合网麻豆| 五月色综合| av在线一区二区三区| 精品国产一区探花在线观看| 欧美综合综合| 91精品人妻一区二区三区蜜臀| 国产丰满少妇久久久精品影院| 成人性爱全视频观看| 国内偷自视频区视频综合| 69精品| 99999久久精| 超碰偷拍| 九九九九九精品| 熟妇女伦乱视频| 亚洲成人在线资源| 夜夜精品视频一区二区| 91热热色| 夫妻天天操岛国视频| 中文字幕在线免费观看 | 韩国女主播青草在线| 中文字暮97| 中文字幕123| 日韩不卡av一二三| 五月丁香综合激情| 男人的天堂2019AV| 肥臀熟女福利视频一区二区| 中文字幕一区 二 区 三 四 五 区日 日 骚| 91麻豆天美国产欧美| 国产这里只有精品| 成人欧美一区二区三区黑人一| 色久综合| 九月AV| 亚洲色图综合网| 男人的天堂久久狠| 9ⅰ久久久天天| 青青草这里只有精品| 好湿好紧视频| 日韩肏逼视频| 国产精品久久久久无码A√| 中国大陆国产高清AⅤ毛片| 亚洲精品毛片在线观看| 一区二区三区欧美激情| 青青草原综合久久大伊人精品| 色噜噜人妻av 中文字幕| 激情欧美日韩女同久久| 天天操熟妇| 亚洲欧美91| 一二三区操逼国产91| 色欲av一区二区三区蜜芽| 亚洲成a人片在线观看中文!!!| 国产麻豆一级精品视频| 人人天天欧洲| 综合性视频99| 人妻夜夜爽天天爽三区麻豆AV网站| 男人女人18禁片免费看网站| 国产视频一区二区免费| 中文字幕老熟妇黄色视频| 五月天激情小说| 美女的肌被草喷水视频| 日日干夜夜骑| 在线播放免费av福利片| 欧美99热| 无码视频一区二区| 亚州性色| 日韩亚洲国产视频| 800zy一区二区| 欧美日韩97在线| 91中文字幕| 久久性爱免费送| 一区二区三区 丝袜 高跟 美腿| 久插综合| 午夜毛片亚洲精品片国产久久久| 搞中出久久| 国产成人亚洲精品自产在线| 久久久噜噜噜久久人妻| 亚欧性爱无码| 少妇毛片久久| 精品999999| 视频一区二区三区精品| 操人无码| 亚洲伊人久久精品影院| 精品人妻视频入口| 97天天摸天天碰| 欧美成人国产精品| 岛国大片在线观看网站入口| 天天摸天天插天天日| 夜夜精品视频一区二区| 美中日韩无码| 国产第二页| 欧美激情另类一区二区| 精品国产精品一区二区| 日B操| 国产无码久久高清| 99re9在线| 欧美久久婷婷| 无码137片内射在线影院| 99ri视频| 欧美 亚洲精品首页| 91精品黄在线观看| 中国小夫妻勾搭露脸淫荡对白| 欧美久久伊人| 国产成年女人免费视频播放a| 老女人综合网| 91天天日| 亚欧美综合网| 五月天激情婷婷| 亚州欧美综合| 欧美做爰无码A片视频| 日韩欧美丝袜诱惑| 五月天婷婷在线看| 北京美女一区二区| 国产日逼视频| 日日干夜夜欢| 黄色欧美性爱视频| 国产精品干干干| 免费在线观看AV无码网站| 综合激情97 | 欧美性五月| 欧美性爱中文字幕无线码| 欧美成人精品一区二区三区| 国产福利一区二| 九九九久千久久激情蜜桃在线看 | 嫩草影院性色| 免费视频一二三区| 中文字幕国产精品1区| 国产精品夜夜夜| 色婷婷九月| 大香久久| 天堂精品小草| 亚洲最大的综合性av| 啊嗯嗯啊好大好爽| 六六久久日韩不卡| 8x福利精品第一福利视频导航| 日日黄色三级网站| 亚洲最大网站av| 日本熟妇自慰性高潮一区二区三区| 日韩乱插| 国产JDAV无码视频在线观看| 国产传媒日本欧美专区| 天天综合97| 天操天操夜操夜月操月年年操 | 亚洲乱色熟女一区| 中亚黄色三级大片| 超AV色女| 久色网| 成人怡红院| 干B| 精品国产一级久久| 97K超碰在线| 91网亚洲| 国产激情综合| 一二三四视频中文字幕在线看| 粉嫩小泬久久久一区二区| 久久久精品无码亚免费| 激情小说日韩无码| 国产一二三福利视频网| 亚洲欧美日韩国产丝袜自拍中文| 五月婷婷基地| 久久人人爽爽人人爽人人片αV| 麻豆亚洲AV成人无码久久精品| 欧美内射少妇| 韩国轻伦国内自拍一区| 日韩性爱播放| 欧美一级国产一级| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 操逼国产免费| 亚洲熟伦熟妇AV无码春色| 人妻天天爽夜夜爽2| 久久有码| 偷拍欧美综合| 狠狠狠狠狠干| 一块操欧美性爱| 国内精品嫩模A∨私拍小视频| 蜜桃久久一区| 欧美精品欧美精品系列| 欧美乱妇狂野欧美在线视频| 精品夜夜澡人妻无码| 国产 丝袜 欧美中文 另类| 精品亚洲一区在线观看| 婷婷超| 91色欧美| 亚洲精品久久久久久| 青青草无码视频| 黑人中出21连凳花野真衣| 萌白酱自拍视频| AⅤ片水多多| 婷婷激情四射| 国产99999| 国产2.3.4区| 日韩精品怡红院| 黑人与人妻| 99热色这里只有精品| 加勒比大香蕉视频在线| 丁香六月综合激情| 国产亚州日韩欧美看片| 国产一区二区在线电影| 久操网线| 精品女人999| 日本色色色| 色色五月婷| 最新欧美色网| 嗯~啊~快点 死我视频| 九九九久千久久激情蜜桃在线看 | 丁香婷婷九月| 欧美疯狂做爰xxxx| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 久久人妻视频网| 五月开心网| 久久婷婷视频| 天天干天天日天天射黄色大片| 花野真衣| 欧美专利1区2区3区4区5区免费| 91美女在线精品视频| 欧美日韩国产中文超碰| 中文97国产| 日韩少妇在线视频| 久9综合在线| 久久区| 我要色综合网| 91人妻素女| 丁香婷婷九月| 午夜精品久久久99热蜜桃的功能特点| 物业黑人 AV一区| 人妻少妇无码| 日韩免费在线观看不卡| 高清成年美女黄网站免费大全 | 欧美一区二区三区蜜桃| 女人被添高潮免费视频| 亚洲欲色9532548967一区| 三级片大波波| 国产日韩欧美| 无码人妻1727| 日日噜噜夜夜狠狠视频无| 懂色天天爱天天日天天射天天澡| 色狠狠一区二区三区香蕉| 另类av天堂| 久久九操在线观看| 九九色婷婷| 国产视频第2页| 91 欧美| 四虎影视精品| 国产精品毛片?v一区二区三区| 黄色电影观看久久9| 韩国一级做A片免费的| 伊人大香蕉在线| 日韩精品国模| 91狠狠| www色日本| 亚洲丝袜色图| 乱伦AVxx| 无码最新| 乱精品一区字幕二区| 午夜精品久久久99热蜜桃的功能特点| 亚洲欧美黄| 啊啊啊好想要| 开心五月婷婷激情| 97网址97| av在线观看不卡网站| 婷婷综合网| 不卡六六在线91| 日本一区二区三区免费观看| 日韩一级片| 日本一级不卡一二区| 色网色网色网色网色网色| 国产日本久久免费精品| 亚洲综合 欧美| 乱伦强奸区日韩| 五月综合色| 91久久久久| 在线观看国产黄色| 天天激色| 久久黄色视频一区二区三区| 好看的91视频| 夜夜草我| 亚洲色图加勒比| 97国产人人| 日本激情免费大片| 亚欧操逼片在线观看 | 欧美激情亚洲色图| 91麻豆天美传媒在线| 久操不卡视频| 亚洲图片视频小说| 国产成人网站在线观看| 九九九九九精品视频| 日本污ww视频网站| 四虎在线视频| 婷婷在线播放| 91亚洲色图| 色性荡荡荡荡视频| 九九视频黄色片| 诱惑人妻欧美一区在线播放| 国产最新小视频在线播放下载| 啊啊啊97视频| 久草网站免费在线观看| 啊啊啊不要嗯嗯在线观看| 国产精品自拍欧美在线| 国产天天噜一噜久久久| 久久久97| 色99999| av大香蕉网站| 一本久道在线综合视频| 国产精品3| 国产美女口爆吞精视频| 色婷婷一区二区三区久久午夜 | 一级黄碟在线看| 亚洲av综合色区图片亚洲| 亚洲加勒比色图| 久久99久久99精品免视看婷婷| 亚洲欧美999| 国产精品午夜成人福利| 淫荡熟女乱伦网| 中文字幕乱妇免费视频| 丝袜六区| hd成人一区二区在线| 九九九偷拍| 嗯嗯啊啊操死我| 嫩草一区二区在线观看| 熟女少妇一区二区三区| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 天天影视网综合少妇| 香蕉国产精品麻豆亚洲欧美日韩| 少妇色综合| 这里有精品| 亚洲av国产av综合av卡| 国产suv精品一区二区四区999| 国产操伦| 亚洲丝袜综合| 一二区在线观看视频| 91男女啊啊啊| 婷婷色影院| 人人操人人干xxx| 久久久久久中文| 婷婷五月天久久精品视频一区二区三区 | 懂色中文一区二区三区 | 国产中文大片资源中文字幕 | 九九干| 91中文字幕制服丝袜免费视频| 九九久久精品| 久久精品国产96精品亚洲拳交| 亚洲天堂男人的天堂| 大香蕉92| 99RE在线视频精品,这里只有精品| 大香蕉婷婷| 精品少妇人妻av久久免费| 欧美精品97| 美女91av| 今日头条成人一区二区三区四虎精品| 久久五月综合| 美國A片| 五十路六十路素人熟女| 探花精品 一区二区| 青娱乐黄色录像| 午夜综合在线| 国产情色在线| 国产第二页| 99精品久久| 热九九精品| 国内毛片婷婷六月色| 亚洲成人性爱网站在线播放| 国产品精品自在在线午夜免费| 18+91网站| 综合网亚洲1| 熟女在线视频| 日韩人妻少妇中文字幕| 天美传媒国产原创中文字幕亚洲欧美另类 | 国产欧美日产一区二区三区 - 国产欧美日| 九九热超碰97亚洲最新香蕉| 老鸭窝亚洲毛片| 欧美色棕合| 精品区9| 女人爽到高潮久久久| 婷婷九月色| 国模精品一区二区三区苹果色戒| 婷婷久久网| 丁香六月综合激情| 人人乐大香蕉| 人妻碰碰碰碰碰碰| 欧美亚州综合图片| 亚洲色图综合网| 啊啊啊啊啊在线观看网址| 久九干| 台欧久久精品视频| 一直超碰| 色欧美色交综合| 999热这里只有精品| 一区二区三区四区理论片| 日韩在线国产字幕| 伊人五月天婷婷| 人人 操人人 操人人| 亚洲暴力强奸AV| 人妻99p| 天天色粽合合合合合合合| 亚洲精品男人的天堂| 精品国产网站| 伊人国产视频| 97露脸精品丝袜| 99re6国产精品99re| 国产美女91| 精品一级毛片在线观看| 国产成人 综合亚洲 天堂| 26uuu国产成人综合| 午夜国产成人福利视频| 日韩伦理视频| 亚洲drav色图| 亚洲天天影视色综合| 国产精品丝袜在线| 久久久久久久久久va| 日本肏逼视频在线观看| 国产女上位好爽在线| 蘋果手機免費看成人Av| 亚洲一区二区中文字幕| 蜜臀AV秘一区翔田千里| 国产福利第一视频| 噜噜噜在线视频| 男人的天堂亚洲| 国产偷仑| 欧美日韩在线小说 | 一区不卡在线观看av| x97av| 久久久久久中文| 97色碰| 欧日a| 好看的久久不射无码影视影院| 超碰 av 女人天堂| 精品人妻丰满熟妇一区二区三| 精品国产乱码| 综合久草| 亚欧美无遮挡| 乱伦图av| 男人的天堂激情| 久久久青青草| 亚洲AV性爱电影| 狠狠热这里都是精品| 精品人妻一区二区三区不卡断 | 日本青青草在线| 91少妇通奸网站| 成人免费看吃奶视频网站| 激情色播| 97人人夜| www成人啪啪18秘 免费| 熟妇艹鸡八| 日韩啪啪视频| 九九99精品| 99蜜月精品久久| 亚洲熟女性高潮久久久| 青久操| 新亚洲无码| 久久久久人妻| 久久久一区二区三区麻豆| 精品区国产区一区二区三区| 亚洲 欧美 另类 日韩 人妻一区| www熟女乱伦com| 亚洲精品819| 中文区中文字幕免费看| www.99热| 啊啊啊啊无码| 99这里有精品视频| 粉嫩AV一区二区夜夜| 99精品网| 国产人妻久久精品一区二区三区| 成人午夜无码视频| 一区二区播放| 日韩不卡在线一区二区| 东京热av男人的天堂| 91P0RNY大屁股人妻| 成人熟女视频一区二区三区| 欧美国产精品久久九九| 蜜臀AV成人精品蜜臀AV久久| 超碰97人人cao| 99re8免费高清在线| 亚洲图片激情综合另类| 91综合国产精品| AV不卡在线| 97久久久久久久久久| 日本精品一区二区中文字幕| 日韩免费人妻色情网站| 五月天我淫我色av| 91久久堂| 国产吞精a级片激情电影| 久操电影网| 欧美午夜精品久久久久久3D| 少妇综合网| 极品内射| 欧美成人黄网色网站| 91在线观看,天天综合| 精品女人999| 久久国产逼| 大香蕉色欲AV| 久草网站免费在线观看| 亚洲成成熟女人综合一区二区| 夂久色| 91丨豆花丨熟女| 舔舔啊| 无码一区二区三区四区五区六区七区八区九区十区视频 | 最新AVzaixian| 性爱乱伦视频免费| 亚洲图片欧美另类综合免费视频大大香| 久久大线蕉一区| 久久久久亚洲?V片无码V| 国产二区三区免费视频| 丝袜AV一二三区| 欧美性生活男人的天堂| 午夜福利合集| 蜜臀人妻少妇久久在线观看| 久久久久亚洲Aⅴ无码| 亚洲美女精品九九视频| 日日黄色三级网站| 狠狠综合| 永久电影三级在线观看| 997色在线| 蜜桃视频成a人v在线| 超碰在线1234区| 夜夜操天| 91精品国产高清久久久久久,亚洲成人| 9丨久久九九九| 好爽免费视频,| 亚洲综合色男人网| 人人看人人爰人人操| 东京热天堂网| 啊啊啊啊在线播放| 操逼内射干逼白丝91| 欧美久热| 久久精品国产亚洲AV成人直播| 久久久9999| 国产精品久久久亚洲第一牛牛_在线观看 | 黑人在线91| 欧美色综合图片| 天天碰操中国年青熟妇| 蜜臀国产AV中文字幕| 99久久精品国产高潮| 亚洲无码太久| 亚洲第一男人天堂| 韩日巨乳美女免费视频在线观看| 综合影院亚洲| www.狠狠| 黄网在线播放| 久久精品国产免费观看99| 五码视频在线观看| 乱伦强奸区日韩| 91欧美网| 中文字幕一区二区无码成人| 97久久天天综合色天天综合色电影| 九九成人精品| 欧美人妻精品一区二区| 97网站在线观看| 97超碰国产精品| 亚欧无码在线| 骚日日av| 午夜久久一区二区无码中出| 26uuu国产亚洲综合| 欧美亚洲涩涩| 91狠狠色丁香婷婷综合久久精品| 这里都是精品| 91日日| 我爱大香蕉| 26uuu性| 国产欧美在线观看免费观看| 青青草五月份天| 情侣操 逼视频99| 啊啊啊好舒服好爽啊啊啊视频| 人人做人人妻人人夜视频| 91久久精品中文字幕| 8x福利精品第一福利视频导航| 后入福利| 国产精品久久久久999| 四虎AV影视国产精品亚洲精品| 亚洲丝袜色| 中文字幕精品资源在线| 操逼不卡中文字幕| 不卡一区二区日本视频| 午夜啪| 国产亚洲性生活视频播放| 亚洲国产精品无码AV久久久| 天天看天天在线精品| 思思热国产在线视频| 在线岛国新天堂8| 欧美成熟性爱精品| 久久久99免费| 99在线免费公开视频| 国产精品人妻熟女aⅴ| 不卡一区二区日本视频| 最新的亚洲无吗| 久久精品色欧美aⅴ一区二区| 欧美一区二区亚洲天堂| a网站免费观看| 九九九久千久久激情蜜桃在线看 | 偷拍综合网| 国产日韩在线播放av| 国模精品娜娜一二三区| 91大神电影天堂| 五月天加勒比啪| 一区二区播放| 嗯嗯啊啊好爽| 一区操逼日比视频| 亚欧高清v| 男人的天堂2010| 欧美操逼视频二区| 欧美色老汉| 日韩黄片视频试看| 蜜桃视频精品一区二区| 日韩av情韩国爱禁区av一区二区| 欧美日韩传媒| 男人的天堂一区三区| 粉嫩AV一区夜夜嗨| 国产精品熟女一区二区三区| 午夜丁香| 欧美精品,四区。五区| 欧美影院一区二区三区| 黄色av一区二区在线| 婷婷色网| 中文乱码字字幕在线第5页| 牛黄色久午久| 97就爱干| 思思热免费视频观看| 蜜桃狠狠色伊人亚洲综合 | 国产精品欧美在线观看 | 色男人色天堂东京热| 国产亚洲性生活视频播放| 91骚妇| 韩国一级做a久久久久| 日韩性爱视频免费在线| 欧亚不卡| 永久免费av无码网站国产app| 久操99| 91被操| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 自拍偷拍草一草| 久9久9精品| 色情乱伦AV| 在线 欧美 亚洲| 殴美大黄片| 国产精品一区在线播放| 午夜男女爽爽爽在线视频| 91美女高潮| 五月天激情婷婷| 一区二区高清视频| 天天色踪合| 久久久久人妻| 国产三级资源在线观看| 久久久久久无码人妻中文字幕| 婷婷中文字幕| www.av在线视频| 2003天天干夜夜操| 中亚av| 免费精品人妻一区二区三| 91路www| 色婷亚洲五月在线观看| 国内外内射高清视频| 精品然女一区二区| 巨爆乳肉感一区二区三区竹菊影视| 亚洲欧美综合| 狠狠色五月亚洲91| 久久日本熟女精品一区| 久久最新免费视频23| 毛片电影一区二区三区| 精品人妻1区| 婷婷伊人五月| 午夜精品久久一区二区| 无码二级三级| 超碰无码五月97| 91新在线欧美| 69人妻精品一区二区绯色| 久久东京伊人一本到鬼色| 日夜精品| 国产精品一二三| 国产精品高朝久久久久久久| 神马久久69| 美女毛片999| 97免费在线视频在线观看| 最新的亚洲无吗| 18禁在线视频| 乱操乱伦AV| 激情综合 婷婷五月 红杏| 久久华人网| 夜夜无码| 久9爱精品| 啊啊啊啊啊啊在线| 熟妇女伦乱视频| 亚洲色人阁| 天天爽天天操啊啊啊| 91精品无码久久久久久久| 免费观看网黄| 久久6热视频免费观看| 日本黄 R色 成 人网站| 久久精品视频久久久| 久久99深爱久久99精品| 亚洲色婷婷综合久久一区二区三区| 久久久天堂| 在线播放成人高清免费视频| 亚洲欧洲中文日韩女优乱码| 欧美激情性爱视频网站| 顶级丝袜熟女一区二区三区| 狠狠干,狠狠操| 国产欧美日韩臀| 国产夫妻性生活视频| 91久久久亚洲| 亚洲97久久精品亚洲| 亚洲天堂,男人| 精品一区99999| 91天天看| 婷婷色五月激情| 台湾佬中文娱乐自偷自拍| 久久久九精品| 成人精品久久久午夜福利| 激情五月天丁香| 日韩精品国模| 天堂69亚洲精品中文字| 操人91| 欧美肥臀在线| 欧美日韩性爱操大逼| 亚洲清纯唯美| 色噜噜精品一区二区三| 一区二区首页| 美女91网| 亚洲精品人妻吞精av| 免费看国产大AB| 一本大道不卡一二三区| 无码视频一区二区| 日逼逼免费看| 金典av| 日美免费黄片| 天天综合91入口| 爽 好舒服 无码刺激久久| 色阁阁AV综合网| 国产精品婬乱一级毛片彝族| 精品网站99999| aⅴ日韩成人电影av在线免费看av大全| 日日黄色三级网站| 国产精品一区二区 尿失禁| 五月天亚洲网| 亚洲精品男人的天堂| 欧美劲爆第一页| 天天爽夜夜操| 亚洲色天| 91欧美丝袜| 久久欧美按摩999| 日韩激情啪啪啪| 色婷婷A V一二三四区麻豆综合| 国产欧美亚洲精品a第2页| 嗯~啊~轻一点 视频| 久久五月婷| 久久老女人| 青青草国产盗摄一二三区| 精品偷拍13p欧美dodk视频| 麻豆一区二区三区在线看 | 2025亚洲男人天堂| 国模少妇一区二区三区| 国内精品嫩模A∨私拍小视频| 日本免费一区二区不卡| 欧美成人亚洲精品| 97WW精品| 婷婷久久大香蕉| 26uuu性物| 免费观看一区| 欧美青青草视频| 色天使大香蕉| 欧美另类色图片| 殴美大黄片| 久久美女国产| 日B操| 91丝袜在线观看| 99精品无码| 人人爽人人精品乱人伦AV| 天美av在线观看| 激情深爱五月天| 91色情黑丝搞鸡在线观看一区二区三区三州| 6080YYY午夜理论片在线观看| 免费看黄片现成| 中国AAAAAA黄色片| 国产偷人伦激情在线观看| 亚洲 欧美 第一页 | 国内一级精品| 99国产精品| 亚洲密乳AV| 日韩 欧美 视频 在线 一区| 国产第25页在线观看| 黑人操一区二区| 日韩欧美tv一区二区在线观看| 国产又猛又粗又爽又黄| 强被迫伦姧在线观看无码网站| 久久大黄片| 蜜乳av一区二区| 粉嫩在线一区二区懂色| 久久久一级| 欧美综合网1| 99热国产| 欧美日韩精品久久久久久久久东北老熟妇| 校园激情狠狠四射| 在线日韩日本亚洲国产| 欧美综合站| 91亚洲影院综合| 好湿好紧视频| 免费观看性欧美一级| 国产又粗又长又爽又色| 国产女人高潮视频| 色 亚洲 91| 东京热毛片调教| 自拍偷拍国产欧美日韩韩| 成人午夜无码视频| 久干网| 天天插夜夜操| 国产夜夜操| 性欧美999| 色黄色美女大长腿午夜视频| 99久久综合| 涩涩久久精品| 激情抓乳插进去啪啪啪日韩| 香一区二区三区| 大香蕉综合网| 色情五月婷婷| 综合网亚洲1| 17c在线成人免费A片观看| 香蕉在线一区二区三区| 99在线精品观看视频中文| 看一级特黄a大一片| 污污污8888| 一区二区三区探花在线观看| 啊啊啊用力在线观看| 人妻91少妇| 婷婷午夜| 青青久草| 欧州色图区| 精品国产乱码| 啊啊啊啊啊舒服| 色欲天天综合网| 亚洲图片视频小说| 亚洲无码99| 91操熟女| 超碰久在线天天做| 婷婷久久综合| 免费一级精品啪啪视频| 色色99| 亚洲精品人妻在线| 囯产精品强| 99视频只有精品| 国产粉嫩蜜臀av一区二区三区 | 久久日韩毛| 国产亚洲精品精AV.| 超碰到97情色| 五月丁香六月激情综合| 96精品久久久久久久久久| 内射黑丝袜| 久久人妻97久久久久久久| 欧美午夜一区二区三区| 人人妻人人澡人人爽人人精品浪潮| 人妻天天夜夜爽一区二区| 国产最新小视频在线播放下载| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 国产狂喷潮在线精品| 蜜臀久久99'精品久久久| 秋霞欧美性爰视频| 日本影视久久免费| 亚洲情色 自拍| 伊人少妇久久久| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 色香色欲天天综合网天天来吧| 亚洲男人天堂网| 超碰97人人乐| 成人精品欧洲亚洲| 欧美影音在线| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 天天热精品| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 欧美亚洲玖玖玖| 日韩AV熟女乱伦| 顶级丝袜熟女一区二区三区 | 91蜜桃婷婷狠狠久久综合9色| 大香蕉一区二区在线观看.| 毛片一区二区| 美女好片色日本| 亚洲天天自拍| 九九热只有精品| 亚洲色图A| 国产内射爽爽大片| 操www| 欧美在线观看综合国产| 亚洲精品无码少妇久久| 午夜男女爽爽爽在线视频| 午夜国产综合视频在线观看| 欧美性区| 亚洲色图美腿丝袜| 亚洲天堂电影网| 96国产精品| 日韩无码人妻| 国产精品免费美女视频| 久久婷五月| 欧美黄色图片| 夜夜做夜夜爽精品视频| 啊啊啊啊免费视频| 国产自制av蜜乳| 丝袜剧情| 97WW精品| 涩涩久久精品| 久久精品国产亚洲粉嫩| 97在线免费观看视频| 国产精品女aA片爽爽视频| 18禁免费视频| 丁香五月影院| 91麻豆天美传媒HD| 99精品无码| 2017人人操,人人摸| 啊a一区在线| v91av| 亚洲一区日韩| 色超碰综合| 日语五十路和六十路亚洲国产精品| 自拍偷拍 日韩无码| 99久久无色码| 大鸡巴久久| 97人妻免费中文字幕| 人人妻人人操人人乐| 草草草视频| 一区二区三区视频| 好一吊区二区| 玖玖资源综合在线视频| 污污污8888| 精品成人亚洲午夜电影| 久久综合乱子伦国产免费| 人妻熟妇一区二区三区| 久久亚洲av成人无码国产| 日韩精品电影| 亚洲第一精品在线视频| 色婷婷蜜臀av| 91精品国产91久久福利| 精品视频专区| 尤物网址| 精品一区二区三区四区外站| 日本黄色大片一级视频免费麻豆| 78久久久| 亚洲一卡2卡3卡4卡乱码网站| 久久中文字幕女同性恋一区| 国产三级资源在线观看| 啊啊啊不要啊啊受不了了视频在线| 天天综合网网欲色| 欧美制服网站美腿丝袜| 亚洲人妻久久| 色五月第四色| 日日碰狠狠添天天爽超| 美欧色综合| 中出789在线视频| 青青草天天亲夜夜操网| 国产一国产一级毛片古装| 中文熟女五十乱码在线| 亚洲精品99| a片 xxxx受爽视频| 亚洲美女色图| 91狠狠综合久久| 女性91网站| 裸体1区| 91男女啊啊啊| 精品性爱无码在线播放| 91亚洲欧洲| 香蕉国产97| 99亚洲人人| 无遮挡h肉动漫在线观看| 草草草视频在线免费看| 国产97综合| 啊操爽品善一区二区三区| 亚洲精品三| 午夜高清成人在线视频| 久久无码一区二区二三区性色| 99精品无码|