日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

手寫搶占式調(diào)度器:從TCB到上下文切換的嵌入式RTOS核心實(shí)踐

手寫搶占式調(diào)度器:從TCB到上下文切換的嵌入式RTOS核心實(shí)踐 1. 搶占式調(diào)度器到底在搶什么概念拆解與價(jià)值分析1.1 “搶占”的本質(zhì)CPU是唯一的公共資源很多初學(xué)者看到“搶占式調(diào)度器”這幾個(gè)字第一反應(yīng)是“操作系統(tǒng)里才有的東西”離自己很遠(yuǎn)。我當(dāng)年第一次動(dòng)手寫它的時(shí)候也是這個(gè)心理可真正讀懂之后才發(fā)現(xiàn)它就是一套“在多個(gè)任務(wù)之間分配CPU使用權(quán)”的規(guī)則。CPU是唯一的公共資源而“搶占”這兩個(gè)字說的就是這套規(guī)則最硬核的動(dòng)作當(dāng)一個(gè)正在運(yùn)行的任務(wù)還沒主動(dòng)讓出CPU時(shí)調(diào)度器直接把它暫停把處理器交給另一個(gè)任務(wù)。打個(gè)比方搶占式調(diào)度就像馬路上跑著普通車輛突然救護(hù)車?yán)懢瘓?bào)前面的車必須靠邊暫停。這里“靠邊暫?!辈皇乔败囁緳C(jī)想不想讓的問題而是被規(guī)則強(qiáng)制執(zhí)行的。放在系統(tǒng)里也一樣低優(yōu)先級(jí)任務(wù)正在執(zhí)行高優(yōu)先級(jí)任務(wù)一就緒調(diào)度器馬上保存低優(yōu)先級(jí)任務(wù)的執(zhí)行現(xiàn)場(chǎng)切換到高優(yōu)先級(jí)任務(wù)。這個(gè)動(dòng)作就叫“搶占”。所以搶占式調(diào)度器真正“搶”的是什么是CPU是處理器當(dāng)前這條指令執(zhí)行權(quán)。而要做到這一點(diǎn)系統(tǒng)必須能回答三個(gè)問題現(xiàn)在誰在用CPU誰更有資格用切換的時(shí)候怎么做到無縫交接這三個(gè)問題分別對(duì)應(yīng)任務(wù)狀態(tài)管理、調(diào)度策略、上下文切換也就是我這篇博客要講的三個(gè)核心設(shè)計(jì)。搞明白這三件事手寫一個(gè)最小可用的搶占式調(diào)度器就不難了。1.2 協(xié)作式調(diào)度 vs 搶占式調(diào)度一個(gè)對(duì)比實(shí)驗(yàn)在動(dòng)手寫代碼之前我強(qiáng)烈建議先搞清楚搶占式調(diào)度和傳統(tǒng)的協(xié)作式調(diào)度之間差的到底是“代碼量”還是“設(shè)計(jì)思路”。二者最大的區(qū)別只有一個(gè)切換的主動(dòng)權(quán)在誰手里。協(xié)作式調(diào)度的經(jīng)典形態(tài)是這樣的// 最樸素的超級(jí)循環(huán) while (1) { task1(); // task1運(yùn)行完自然回到循環(huán) task2(); // task2運(yùn)行完自然回到循環(huán) }這種寫法下task1如果不主動(dòng)返回task2永遠(yuǎn)沒機(jī)會(huì)跑。就算用yield()讓出CPU的協(xié)作式RTOS本質(zhì)上也是靠任務(wù)自覺。一旦某個(gè)任務(wù)里出現(xiàn)一段死循環(huán)整個(gè)系統(tǒng)直接卡死。搶占式調(diào)度則把主動(dòng)權(quán)收回到了內(nèi)核手里。系統(tǒng)利用一個(gè)周期性中斷比如1ms觸發(fā)一次的系統(tǒng)節(jié)拍作為“心跳”每次心跳都會(huì)檢查當(dāng)前任務(wù)是否還被允許繼續(xù)占用CPU。如果此時(shí)有更高優(yōu)先級(jí)任務(wù)就緒或者當(dāng)前任務(wù)的時(shí)間片已經(jīng)用完內(nèi)核立刻發(fā)起上下文切換強(qiáng)制換人。我用一個(gè)表格把兩者的差異列清楚方便你對(duì)照著選型對(duì)比維度超級(jí)循環(huán)協(xié)作式調(diào)度搶占式調(diào)度切換時(shí)機(jī)任務(wù)結(jié)束返回任務(wù)主動(dòng)讓出任意時(shí)刻可被內(nèi)核強(qiáng)制最大風(fēng)險(xiǎn)單任務(wù)卡死全系統(tǒng)任務(wù)不讓出也會(huì)卡死需要處理共享數(shù)據(jù)競(jìng)爭(zhēng)實(shí)時(shí)性無保證弱實(shí)時(shí)強(qiáng)實(shí)時(shí)可預(yù)測(cè)實(shí)現(xiàn)復(fù)雜度極低較低較高典型應(yīng)用極簡(jiǎn)控制/教學(xué)早期系統(tǒng)RTOS、嵌入式操作系統(tǒng)搶占式調(diào)度并不神秘它做的事就是在“協(xié)作式中斷”上疊加了一個(gè)“強(qiáng)制切換”能力。每一個(gè)搶占式調(diào)度器背后其實(shí)只有四個(gè)要素任務(wù)控制塊、就緒隊(duì)列、上下文切換、系統(tǒng)節(jié)拍。把這四件事想通之后下面的代碼寫起來就是水到渠成的事。2. 動(dòng)手前的核心設(shè)計(jì)TCB、就緒隊(duì)列與上下文切換2.1 TCB該存哪些信息調(diào)度的“戶口本”調(diào)度器要管理多個(gè)任務(wù)第一件事就是給每個(gè)任務(wù)建立一個(gè)“戶口本”系統(tǒng)里叫任務(wù)控制塊TCB。所有和任務(wù)相關(guān)的信息都記錄在這個(gè)結(jié)構(gòu)體里缺了哪項(xiàng)切換的時(shí)候都會(huì)出事。我寫的第一個(gè)最小版本TCB只保留了六個(gè)字段typedef struct tcb { uint32_t *sp; // 任務(wù)棧指針上下文切換時(shí)保存現(xiàn)場(chǎng) uint8_t priority; // 任務(wù)優(yōu)先級(jí)數(shù)值越小優(yōu)先級(jí)越高 uint8_t state; // 任務(wù)狀態(tài)就緒、運(yùn)行、阻塞 uint32_t slice; // 剩余時(shí)間片單位是系統(tǒng)節(jié)拍數(shù) void (*entry)(void *arg); // 任務(wù)入口函數(shù) struct tcb *next; // 用于串成鏈表指向下一個(gè)任務(wù) } tcb_t;這里最容易被忽略的是sp字段。每個(gè)任務(wù)都有自己獨(dú)立的棧運(yùn)行時(shí)棧指針指向哪完全靠這個(gè)字段記錄。搶占發(fā)生的那一刻調(diào)度器會(huì)把當(dāng)前任務(wù)的棧指針保存到TCB里下一次恢復(fù)該任務(wù)時(shí)再從這個(gè)字段讀出棧指針把寄存器現(xiàn)場(chǎng)彈回來。你可以把它理解成書簽每次被強(qiáng)制暫停CPU就把讀書進(jìn)度寫到這個(gè)書簽上下次接著讀。需要提醒的是不同任務(wù)之間哪怕入口函數(shù)一模一樣也必須有各自獨(dú)立的??臻g。很多初學(xué)者圖省事讓兩個(gè)任務(wù)共用一塊棧跑起來一開搶占就“炸”原因正是高優(yōu)先級(jí)任務(wù)的函數(shù)調(diào)用會(huì)覆蓋低優(yōu)先級(jí)任務(wù)還在使用的棧數(shù)據(jù)。2.2 就緒隊(duì)列如何設(shè)計(jì)從鏈表到位圖的一次實(shí)踐有了TCB下一步是回答“誰有資格被選中”。最常見的設(shè)計(jì)是維護(hù)一張就緒表凡是處于就緒狀態(tài)的任務(wù)都掛到這上面。調(diào)度時(shí)從就緒表里挑出一個(gè)最合適的任務(wù)。我在最初版本用的是普通單向鏈表簡(jiǎn)單是簡(jiǎn)單但有一個(gè)痛點(diǎn)是查找最高優(yōu)先級(jí)任務(wù)時(shí)要遍歷整個(gè)鏈表任務(wù)數(shù)量一多延遲就不穩(wěn)定。后來參考了一些實(shí)時(shí)內(nèi)核的做法改用就緒位圖bitmap一個(gè)32位無符號(hào)整數(shù)就能記錄32個(gè)優(yōu)先級(jí)上的就緒情況。某一位置1表示該優(yōu)先級(jí)上至少有一個(gè)任務(wù)就緒。// 假設(shè)優(yōu)先級(jí)0最高優(yōu)先級(jí)31最低 static uint32_t ready_bitmap; // 某位為1說明該優(yōu)先級(jí)有就緒任務(wù) // 優(yōu)先級(jí)p的任務(wù)就緒 void ready_set(uint8_t p) { ready_bitmap | (1u p); } // 優(yōu)先級(jí)p的任務(wù)離開就緒態(tài) void ready_clear(uint8_t p) { ready_bitmap ~(1u p); }在Cortex-M3及以上平臺(tái)獲取最高優(yōu)先級(jí)就緒任務(wù)可以用一條匯編指令CLZ計(jì)算前導(dǎo)零個(gè)數(shù)配合位圖就能在常數(shù)時(shí)間內(nèi)完成tcb_t *schedule(void) { int prio; if (ready_bitmap 0) { return NULL; // 沒有就緒任務(wù) } prio 31 - __CLZ(ready_bitmap); // 找到最高優(yōu)先級(jí)的序號(hào) return priority_task_list[prio]; // 取出該優(yōu)先級(jí)上的任務(wù) }位圖方案的優(yōu)點(diǎn)是查找時(shí)間確定、邏輯容易驗(yàn)證缺點(diǎn)是有多少個(gè)優(yōu)先級(jí)就要付出多少1bit的代價(jià)。好在32個(gè)優(yōu)先級(jí)對(duì)絕大多數(shù)實(shí)際系統(tǒng)已經(jīng)綽綽有余。這其實(shí)也引出了另一個(gè)關(guān)鍵問題調(diào)度策略真的只有“選最高優(yōu)先級(jí)”這一條嗎不是。更完整的策略還包含同優(yōu)先級(jí)任務(wù)之間的時(shí)間片輪轉(zhuǎn)以及“如果說最高優(yōu)先級(jí)也在運(yùn)行新就緒的任務(wù)比它還高那馬上搶占”的判斷。這些我放到第四章細(xì)講。2.3 上下文切換為什么必須在PendSV里干上下文切換是搶占式調(diào)度器里技術(shù)含量最高的部分。它要做的就是把當(dāng)前任務(wù)CPU寄存器里的現(xiàn)場(chǎng)完整保存然后把新任務(wù)之前保存的現(xiàn)場(chǎng)恢復(fù)出來。具體來說要存檔的東西包括R0-R12通用寄存器、棧指針SP、鏈接寄存器LR、程序計(jì)數(shù)器PC、程序狀態(tài)寄存器xPSR。這些現(xiàn)場(chǎng)一旦缺一個(gè)恢復(fù)后任務(wù)就會(huì)“失憶”輕則數(shù)據(jù)錯(cuò)亂重則直接跑飛。但有一個(gè)問題這些切換動(dòng)作到底在什么時(shí)機(jī)執(zhí)行答案是必須在一個(gè)中斷處理函數(shù)里完成而不是在普通的任務(wù)代碼里。任務(wù)代碼運(yùn)行時(shí)的上下文是它自己的“私人物品”調(diào)度器一旦在任務(wù)上下文里修改SP或者調(diào)用切換函數(shù)會(huì)把當(dāng)前的運(yùn)行棧搞亂。更穩(wěn)妥的做法是借助一個(gè)專門的中斷在中斷處理程序里借“中斷機(jī)制的東風(fēng)”來做切換。我用的平臺(tái)是Cortex-M系列它提供兩個(gè)給OS用得很順手的工具SysTick定時(shí)器和PendSV異常。SysTick按時(shí)產(chǎn)生系統(tǒng)節(jié)拍相當(dāng)于心跳PendSV則被設(shè)計(jì)成專門留給操作系統(tǒng)做上下文切換的異常它的優(yōu)先級(jí)可以設(shè)為最低并且有一個(gè)特點(diǎn)如果切換請(qǐng)求進(jìn)來時(shí)還有其他中斷在處理PendSV會(huì)被“押后”到所有中斷都處理完之后再執(zhí)行。這一設(shè)計(jì)剛好避免了一個(gè)大坑——假如上下文切換打斷了一個(gè)中斷服務(wù)程序OS很難判斷此刻該不該切換而PendSV的延遲特性讓切換時(shí)機(jī)變得干凈安全。上下文切換的完整路徑是SysTick中斷觸發(fā) → 發(fā)現(xiàn)該切換了 → 置位PendSV的掛起位 → SysTick退出 → PendSV進(jìn)入 → 保存當(dāng)前現(xiàn)場(chǎng) → 選新任務(wù) → 恢復(fù)新現(xiàn)場(chǎng) → 返回。流程圖式的理解不難真正難的是棧上數(shù)據(jù)的排列順序。這個(gè)我在第三章的代碼里展開講解。3. 從零手寫的最小實(shí)現(xiàn)步驟與代碼逐段解析3.1 平臺(tái)和工具鏈怎么選手寫搶占式調(diào)度器最理想的學(xué)習(xí)平臺(tái)是帶片內(nèi)SysTick的32位MCU。我建議用Cortex-M3/M4內(nèi)核的開發(fā)板因?yàn)樗谟布献詣?dòng)幫我們做了一部分現(xiàn)場(chǎng)保存一旦進(jìn)入中斷硬件會(huì)先把xPSR、PC、LR、R12、R0-R3這8個(gè)寄存器壓入當(dāng)前棧中斷返回時(shí)再自動(dòng)彈出。這極大降低了手寫調(diào)度器的難度。RISC-V平臺(tái)也能做但需要自己處理的東西更多不適合第一次練手。工具鏈方面我用的是開源GCC交叉編譯器加一個(gè)調(diào)試器。環(huán)境配置就是三件套交叉編譯器、一個(gè)能燒錄調(diào)試的工具、一塊開發(fā)板。如果你手頭甚至沒有板子也可以用一款開源虛擬機(jī)模擬器先把調(diào)度邏輯調(diào)通跑通了再燒到真機(jī)上。我個(gè)人強(qiáng)烈建議走“先在模擬器上驗(yàn)證、再上真機(jī)”這條路后面能替你省下大量排查硬件問題的時(shí)間。3.2 五步搭出最小搶占式調(diào)度器下面我按自己實(shí)際操作時(shí)的順序來講每一步都給了代碼片段。需要注意這里展示的是一個(gè)“最小可用原型”專職演示搶占式調(diào)度器的核心機(jī)制不追求功能齊全。第一步定義任務(wù)棧與TCB數(shù)組#define TASK_STACK_SIZE 512 #define MAX_TASKS 2 static uint32_t task_stack0[TASK_STACK_SIZE]; static uint32_t task_stack1[TASK_STACK_SIZE]; static tcb_t tcb0; static tcb_t tcb1;任務(wù)棧為什么用uint32_t數(shù)組而不用uint8_t因?yàn)镃ortex-M的棧操作是4字節(jié)對(duì)齊的直接聲明32位數(shù)組?;刂诽烊话?字節(jié)對(duì)齊省去一堆對(duì)齊處理的麻煩。第二步初始化任務(wù)棧偽造一個(gè)“剛被搶占”的現(xiàn)場(chǎng)這是整個(gè)實(shí)現(xiàn)里最微妙的一步。任務(wù)是第一次運(yùn)行并沒有真正的“現(xiàn)場(chǎng)”可保存所以我們要在棧上預(yù)先偽造一份“如果任務(wù)剛剛被打斷應(yīng)該長(zhǎng)什么樣”的寄存器布局。等第一次切換發(fā)生時(shí)恢復(fù)現(xiàn)場(chǎng)就跟往常一樣仿佛這個(gè)任務(wù)早就存在。void task_stack_init(tcb_t *tcb, void (*entry)(void *), uint32_t *stack_top) { uint32_t *s stack_top; // 模擬Cortex-M進(jìn)入中斷時(shí)硬件自動(dòng)壓棧的8個(gè)寄存器 *--s 0x01000000; // xPSRbit24必須置1表示Thumb模式 *--s (uint32_t)entry; // PC任務(wù)入口地址 *--s 0xFFFFFFFD; // LR任務(wù)一旦返回就進(jìn)異常 *--s 0x00000012; // R12 *--s 0x00000003; // R3 *--s 0x00000002; // R2 *--s 0x00000001; // R1 *--s 0x00000000; // R0 // 模擬PendSV處理程序中保存R4-R11這8個(gè)通用寄存器 for (int i 0; i 8; i) { *--s 0x00000000; } tcb-sp s; // 把偽造好的棧指針存進(jìn)TCB }初學(xué)時(shí)最容易在這里犯迷糊為什么壓棧順序是xPSR、PC、LR、R12、R3、R2、R1、R0然后再R4-R11答案很簡(jiǎn)單Cortex-M中斷機(jī)制約定中斷返回時(shí)硬件按固定順序從棧中彈出8個(gè)寄存器從上到下依次是R0、R1、R2、R3、R12、LR、PC、xPSR。由于棧是向下增長(zhǎng)的我們要預(yù)置這份布局就必須反向?qū)懭胍簿褪菑膞PSR開始寫最后寫R0。多出的R4-R11對(duì)應(yīng)PendSV處理程序里的“手動(dòng)保存區(qū)”。第三步實(shí)現(xiàn)SysTick心跳決定“要不要切”系統(tǒng)節(jié)拍是搶占式調(diào)度器的驅(qū)動(dòng)源。SysTick每1ms觸發(fā)一次中斷服務(wù)程序里把當(dāng)前任務(wù)的剩余時(shí)間片減一減到0就換任務(wù)void SysTick_Handler(void) { tcb_t *cur current_task; if (cur-slice 0) { cur-slice--; } if (cur-slice 0) { cur-slice DEFAULT_SLICE; // 重新填滿時(shí)間片 SCB-ICSR | (1UL 28); // 置位PendSV掛起位 } }這里只做了“觸發(fā)PendSV”的動(dòng)作真正的切換在PendSV里。為什么不在SysTick里直接切因?yàn)镾ysTick的中斷上下文可能嵌套在別的中斷中直接切換會(huì)讓調(diào)度器與正在處理的中斷糾纏不清。置位掛起位、等PendSV順便執(zhí)行才是干凈的做法。第四步實(shí)現(xiàn)PendSV上下文切換PendSV的處理函數(shù)是調(diào)度器的心臟我直接用匯編寫因?yàn)镃編譯器一旦介入寄存器保存的順序和時(shí)機(jī)就不再可控。下面是一個(gè)針對(duì)Cortex-M3/M4平臺(tái)的精簡(jiǎn)實(shí)現(xiàn)__asm void PendSV_Handler(void) { // 1. 保存當(dāng)前任務(wù)現(xiàn)場(chǎng) MRS R0, PSP ; 讀當(dāng)前進(jìn)程棧指針 STMDB R0!, {R4-R11} ; 把R4-R11壓入當(dāng)前任務(wù)棧 LDR R1, current_task ; R1指向current_task指針變量 LDR R2, [R1] ; R2 current_task STR R0, [R2] ; 將新的SP寫回當(dāng)前任務(wù)的TCB-sp // 2. 調(diào)用調(diào)度函數(shù)選出下一個(gè)要運(yùn)行的任務(wù) BL schedule // 3. 更新current_task為新任務(wù)讀取其SP LDR R1, current_task STR R0, [R1] ; current_task 新任務(wù) LDR R0, [R0] ; R0 新任務(wù)的TCB-sp // 4. 恢復(fù)新任務(wù)的現(xiàn)場(chǎng) LDMIA R0!, {R4-R11} ; 彈出R4-R11 MSR PSP, R0 ; 更新進(jìn)程棧指針 BX LR ; 返回時(shí)硬件自動(dòng)彈出R0-R3、R12、LR、PC、xPSR }這個(gè)函數(shù)每次執(zhí)行就是一個(gè)完整的“交接儀式”。有一點(diǎn)一定要記住PendSV執(zhí)行期間Cortex-M硬件已經(jīng)把調(diào)用者現(xiàn)場(chǎng)固定保存在MSP主棧指針里我們操作的是PSP進(jìn)程棧指針也就是任務(wù)自己的棧。保存時(shí)用STMDB是“先遞減再存儲(chǔ)”恢復(fù)時(shí)用LDMIA“先加載再遞增”一壓一彈正好和棧的生長(zhǎng)方向?qū)?yīng)。第五步創(chuàng)建任務(wù)并啟動(dòng)調(diào)度器任務(wù)棧初始化好了TCB也賦值了最后把系統(tǒng)跑起來void task_create(tcb_t *tcb, void (*entry)(void *), uint32_t priority, uint32_t slice, uint32_t *stack_top) { task_stack_init(tcb, entry, stack_top); tcb-priority priority; tcb-slice slice; tcb-state READY; ready_set(priority); } void scheduler_start(void) { // 關(guān)閉中斷選第一個(gè)任務(wù)打開中斷 __disable_irq(); current_task schedule(); current_task-state RUNNING; PSP current_task-sp; __enable_irq(); }scheduler_start的竅門是一開始沒有循環(huán)、沒有while(1)而是直接在特權(quán)模式下把第一個(gè)任務(wù)的棧指針寫入PSP然后開中斷。第一次SysTick到來時(shí)它會(huì)乖乖走上“保存→調(diào)度→恢復(fù)”的軌道。從此兩個(gè)任務(wù)在心跳的驅(qū)動(dòng)下交替運(yùn)行搶占式調(diào)度器就活起來了。3.3 三個(gè)關(guān)鍵參數(shù)怎么定節(jié)拍、棧大小、優(yōu)先級(jí)數(shù)量寫完原型之后接下來就是調(diào)參數(shù)。我最早踩的坑全在參數(shù)上所以單獨(dú)拿出來說說。系統(tǒng)節(jié)拍一般取1ms到10ms。太快比如0.1ms會(huì)讓調(diào)度器自身開銷占比過高系統(tǒng)大量時(shí)間花在切換上太慢比如100ms則實(shí)時(shí)性無法保證。我習(xí)慣先按應(yīng)用的需求定如果只是LED閃爍、按鍵掃描10ms足矣如果后面要跑通信協(xié)議棧、電機(jī)控制建議從1ms起步再測(cè)量CPU占用率。任務(wù)棧大小沒有一個(gè)公式能給出精確值最靠譜的是“估大不估小”。一般計(jì)算公式是最大函數(shù)調(diào)用深度 × 平均局部變量占用 最大中斷嵌套深度 × 中斷幀大小最后再加20%到30%的安全余量。Cortex-M中斷幀是8個(gè)寄存器約32字節(jié)如果考慮當(dāng)前正在處理的局部變量一次嵌套中斷通常需要100字節(jié)左右。512字節(jié)的棧只夠跑很淺的調(diào)用實(shí)際產(chǎn)品里任務(wù)棧經(jīng)常是1KB到4KB。優(yōu)先級(jí)數(shù)量位圖方案下8個(gè)或16個(gè)優(yōu)先級(jí)已經(jīng)能應(yīng)對(duì)大多數(shù)場(chǎng)景。優(yōu)先級(jí)越多調(diào)度邏輯越靈活但系統(tǒng)設(shè)計(jì)時(shí)也要面對(duì)更復(fù)雜的優(yōu)先級(jí)反轉(zhuǎn)問題。我的建議是開始只設(shè)兩個(gè)優(yōu)先級(jí)先把“搶占”的動(dòng)作驗(yàn)證明白再逐步擴(kuò)展。4. 容易翻車的幾個(gè)關(guān)鍵細(xì)節(jié)以及我的取舍4.1 臨界區(qū)保護(hù)搶占之前先看紅綠燈調(diào)度器能在“任意指令邊界”強(qiáng)制切換任務(wù)這帶來一個(gè)隱患如果任務(wù)A正在修改一個(gè)共享變量只寫了一半突然被打斷任務(wù)B也來讀寫這個(gè)變量數(shù)據(jù)就亂了。搶占式調(diào)度器對(duì)共享資源的保護(hù)方式和裸機(jī)程序完全不同。裸機(jī)程序只要關(guān)中斷就行但搶占式系統(tǒng)里還需要配合互斥鎖或者臨界區(qū)。第一種臨界區(qū)實(shí)現(xiàn)最簡(jiǎn)單全關(guān)中斷。uint32_t enter_critical(void) { uint32_t primask __get_PRIMASK(); __disable_irq(); // 關(guān)中斷 return primask; } void exit_critical(uint32_t primask) { __set_PRIMASK(primask); // 恢復(fù)之前的中斷狀態(tài) }這種做法的缺點(diǎn)是關(guān)中斷會(huì)讓所有中斷暫時(shí)失效如果臨界區(qū)代碼太長(zhǎng)系統(tǒng)實(shí)時(shí)性會(huì)明顯變差甚至丟中斷。我在最初版本里就這么干后來發(fā)現(xiàn)通信中斷被關(guān)久了會(huì)丟數(shù)據(jù)才意識(shí)到問題。第二種方案是Cortex-M3/M4提供的BASEPRI機(jī)制設(shè)置一個(gè)閾值只屏蔽優(yōu)先級(jí)低于某個(gè)值的中斷高優(yōu)先級(jí)中斷仍然可以響應(yīng)。這樣臨界區(qū)可以保護(hù)共享數(shù)據(jù)又不犧牲像通信這類高優(yōu)先級(jí)中斷的實(shí)時(shí)響應(yīng)。具體代碼就是往BASEPRI寄存器寫一個(gè)數(shù)字中斷保護(hù)結(jié)束后寫0。這個(gè)方案把“關(guān)中斷時(shí)間”縮短到很短代價(jià)是M0系列不支持代碼要做條件編譯。4.2 中斷嵌套、延遲搶占與PendSV的優(yōu)先級(jí)PendSV的優(yōu)先級(jí)是新手很容易忽略的大坑。我剛開始實(shí)現(xiàn)時(shí)把PendSV優(yōu)先級(jí)和其他中斷一樣設(shè)成0最高結(jié)果調(diào)試時(shí)頻繁出現(xiàn)奇怪的現(xiàn)象SysTick一觸發(fā)PendSV馬上跑把本應(yīng)在SysTick之后處理的某些中斷全部攪亂。正確做法是PendSV的優(yōu)先級(jí)必須設(shè)置為所有中斷里最低的那個(gè)。原因在于它的設(shè)計(jì)定位是“等一切安靜下來再做切換”。如果PendSV優(yōu)先級(jí)太高它可能在一個(gè)中斷服務(wù)程序還沒結(jié)束時(shí)就搶進(jìn)去那個(gè)中斷執(zhí)行到一半現(xiàn)場(chǎng)可能還沒保存或者棧指針異常強(qiáng)行切換后果不可預(yù)料。把PendSV設(shè)為最低它就會(huì)等所有更高中斷都處理完再執(zhí)行這就是“延遲搶占”的核心思想。這里還牽扯到中斷嵌套。Cortex-M中斷優(yōu)先級(jí)比正常任務(wù)高但中斷之間也能嵌套只要更高優(yōu)先級(jí)中斷來了同樣能打斷正在執(zhí)行的中斷服務(wù)程序。這對(duì)調(diào)度器意味著即使任務(wù)切換在PendSV里做中斷服務(wù)程序本身也得小心不要在嵌套過程中訪問調(diào)度器共享數(shù)據(jù)否則還是要加臨界區(qū)保護(hù)。4.3 時(shí)間片輪轉(zhuǎn)和優(yōu)先級(jí)如何優(yōu)雅地共存很多第一次手寫調(diào)度器的人會(huì)糾結(jié)一個(gè)問題既然高優(yōu)先級(jí)任務(wù)總是搶占那低優(yōu)先級(jí)任務(wù)是不是永遠(yuǎn)沒有機(jī)會(huì)跑答案是取決于高優(yōu)先級(jí)任務(wù)的運(yùn)行方式。如果高優(yōu)先級(jí)任務(wù)是一個(gè)帶阻塞操作的循環(huán)比如等待信號(hào)量、延時(shí)它會(huì)在阻塞時(shí)主動(dòng)讓出CPU把運(yùn)行機(jī)會(huì)還給低優(yōu)先級(jí)任務(wù)。這恰恰說明一個(gè)完整的搶占式調(diào)度器不能只有“搶占”這一個(gè)動(dòng)作還得有任務(wù)阻塞與喚醒機(jī)制。對(duì)于同優(yōu)先級(jí)的多個(gè)任務(wù)我采用時(shí)間片輪轉(zhuǎn)。每個(gè)任務(wù)分配一個(gè)時(shí)間片時(shí)間片用完系統(tǒng)強(qiáng)行把CPU交給下一個(gè)同優(yōu)先級(jí)任務(wù)。如果此時(shí)有更高優(yōu)先級(jí)任務(wù)就緒調(diào)度器優(yōu)先切到高優(yōu)先級(jí)任務(wù)高優(yōu)先級(jí)任務(wù)阻塞后再回到當(dāng)前優(yōu)先級(jí)隊(duì)列里繼續(xù)輪轉(zhuǎn)。實(shí)現(xiàn)上我維護(hù)了“每個(gè)優(yōu)先級(jí)下掛一串任務(wù)就緒列表”的數(shù)據(jù)結(jié)構(gòu)調(diào)度時(shí)先看位圖找最高優(yōu)先級(jí)到了優(yōu)先級(jí)內(nèi)部再按輪轉(zhuǎn)順序選任務(wù)。這樣的分層設(shè)計(jì)讓調(diào)度器的核心邏輯保持簡(jiǎn)單擴(kuò)展也方便。后面你想加信號(hào)量、郵箱只需要改變?nèi)蝿?wù)的狀態(tài)和就緒位圖調(diào)度器的核心不必大改。5. 實(shí)操中的坑問題現(xiàn)象、排查思路與修復(fù)記錄5.1 系統(tǒng)一跑就HardFault先查棧溢出和棧對(duì)齊我第一次在真機(jī)上跑這個(gè)調(diào)度器開局就是HardFault。那一刻的心情如果你也調(diào)過嵌入式代碼一定能懂。冷靜下來按三個(gè)層次排查才定位到問題。第一步確認(rèn)棧是否溢出。我預(yù)先把每個(gè)任務(wù)棧的起始區(qū)域填滿一個(gè)特定字節(jié)比如0xCC跑一段時(shí)間后查看棧高水位看這個(gè)填充字節(jié)有沒有被沖掉。結(jié)果發(fā)現(xiàn)低優(yōu)先級(jí)任務(wù)棧的0xCC全沒了說明棧確實(shí)不夠用。把512字節(jié)加大到1024字節(jié)系統(tǒng)穩(wěn)定了不少。第二步查棧對(duì)齊。Cortex-M要求進(jìn)行某些操作時(shí)16字節(jié)對(duì)齊才能保證硬件正常工作。我的任務(wù)棧聲明是uint32_t數(shù)組天然4字節(jié)對(duì)齊但在偽造初始現(xiàn)場(chǎng)時(shí)壓棧次數(shù)是奇數(shù)還是偶數(shù)的細(xì)節(jié)會(huì)影響棧的最終對(duì)齊需要在壓棧后檢查sp 0x0F的值。當(dāng)時(shí)我壓了16個(gè)寄存器恰好保持對(duì)齊這個(gè)坑沒有踩到。第三步查L(zhǎng)R和異常返回。任務(wù)入口函數(shù)一旦執(zhí)行到末尾LR里的0xFFFFFFFD會(huì)讓CPU進(jìn)入異常模式而異常模式里又沒有任何處理函數(shù)結(jié)果也是HardFault。這個(gè)在初始化時(shí)本來就要避免我建議任務(wù)入口函數(shù)永遠(yuǎn)是一個(gè)while(1)循環(huán)別讓自己“跑完”。5.2 高優(yōu)先級(jí)任務(wù)被卡死優(yōu)先級(jí)反轉(zhuǎn)的現(xiàn)場(chǎng)復(fù)現(xiàn)有一次調(diào)試我遇到一個(gè)比HardFault更難纏的現(xiàn)象高優(yōu)先級(jí)任務(wù)A明明就緒了卻始終得不到執(zhí)行反而是低優(yōu)先級(jí)任務(wù)C一直在跑。打印各處標(biāo)志位后我發(fā)現(xiàn)真正的原因是一個(gè)共享資源——互斥量——被中等優(yōu)先級(jí)任務(wù)B和低優(yōu)先級(jí)任務(wù)C之間的一串調(diào)用搞得“顛倒”了。場(chǎng)景是任務(wù)C先拿到了互斥量執(zhí)行到一半被任務(wù)A搶占任務(wù)A想申請(qǐng)同一個(gè)互斥量發(fā)現(xiàn)被C持有于是A只能等待可這時(shí)候任務(wù)B優(yōu)先級(jí)高于C、低于A一就緒立刻搶占C。C被B壓住根本沒機(jī)會(huì)釋放互斥量于是A被C間接“卡死”。這就是教科書上的優(yōu)先級(jí)反轉(zhuǎn)。按理論說A優(yōu)先級(jí)最高應(yīng)該最快完成但實(shí)際上它等著一個(gè)“未來才有機(jī)會(huì)跑的C”釋放資源。修復(fù)方案用的是優(yōu)先級(jí)繼承當(dāng)?shù)蛢?yōu)先級(jí)任務(wù)持有高優(yōu)先級(jí)任務(wù)所需的互斥量時(shí)把低優(yōu)先級(jí)任務(wù)的優(yōu)先級(jí)臨時(shí)提升到高優(yōu)先級(jí)任務(wù)的級(jí)別讓C先跑完、釋放資源、恢復(fù)原優(yōu)先級(jí)A再繼續(xù)執(zhí)行。代碼里就是在拿鎖/解鎖操作中動(dòng)態(tài)修改TCB的優(yōu)先級(jí)并重新調(diào)度。這個(gè)修復(fù)讓我對(duì)“調(diào)度器只是外殼資源管理才是靈魂”這句話有了深刻體會(huì)。5.3 上下文切換后數(shù)據(jù)錯(cuò)亂調(diào)試器怎么一步步定位還有一次兩個(gè)任務(wù)交替跑一陣后某個(gè)全局變量莫名其妙變成了垃圾值。我心想這多半是上下文切換時(shí)某個(gè)寄存器沒保存或沒恢復(fù)。打開調(diào)試器在PendSV入口和出口各下一個(gè)斷點(diǎn)觀察PSP寄存器和棧內(nèi)存區(qū)域發(fā)現(xiàn)了一個(gè)典型錯(cuò)誤我在“保存現(xiàn)場(chǎng)”時(shí)用了STMDB R0!, {R4-R11}更新了R0但后續(xù)“恢復(fù)現(xiàn)場(chǎng)”時(shí)又用同一個(gè)R0去找新任務(wù)的SP導(dǎo)致新任務(wù)的SP指針被舊任務(wù)的棧位置干擾。這種問題用眼睛盯代碼很難發(fā)現(xiàn)但調(diào)試器里逐指令單步執(zhí)行就一目了然。后來我養(yǎng)成了一個(gè)習(xí)慣每次寫完P(guān)endSV先用單個(gè)任務(wù)自啟動(dòng)確認(rèn)第一次切換正常再兩個(gè)任務(wù)對(duì)切重點(diǎn)觀察SP和棧數(shù)據(jù)最后才加第三個(gè)任務(wù)壓測(cè)。分階段驗(yàn)證能讓定位范圍縮小很多。5.4 避坑清單速查表我在實(shí)際調(diào)試中積累的這些經(jīng)驗(yàn)整理成一個(gè)速查表遇到問題可以照著查現(xiàn)象最可能原因處理辦法一啟動(dòng)就HardFault任務(wù)棧溢出 / 初始現(xiàn)場(chǎng)偽造錯(cuò)誤查棧水印核對(duì)壓棧順序每隔固定時(shí)間就進(jìn)異常SysTick頻率過高切換開銷過大調(diào)低節(jié)拍頻率優(yōu)化臨界區(qū)長(zhǎng)度低優(yōu)先級(jí)任務(wù)始終不執(zhí)行高優(yōu)先級(jí)任務(wù)從不阻塞給高優(yōu)先級(jí)任務(wù)加延時(shí)/等待邏輯全局變量值時(shí)好時(shí)壞中斷修改共享數(shù)據(jù)沒加臨界區(qū)用臨界區(qū)或互斥量保護(hù)切換后返回地址跑飛PendSV中SP恢復(fù)順序錯(cuò)誤單步跟蹤核對(duì)進(jìn)出棧SP值PendSV一直不執(zhí)行PendSV優(yōu)先級(jí)被設(shè)成和SysTick相同或更高將PendSV設(shè)為所有可屏蔽中斷最低級(jí)6. 最后聊幾句個(gè)人心得手寫一個(gè)搶占式調(diào)度器最大的收獲不是“我會(huì)寫切換”這件事而是真正理解了操作系統(tǒng)為什么把調(diào)度器和中斷系統(tǒng)設(shè)計(jì)得如此緊密。那些平時(shí)用RTOS時(shí)覺得理所當(dāng)然的API比如“延時(shí)”“信號(hào)量”底層全靠一套精確的上下文切換在做支撐。紙上談兵一百遍不如自己把TCB建出來、把SysTick和PendSV跑通一遍來得扎實(shí)。如果讓我給剛開始動(dòng)手的人一個(gè)建議那就是第一版千萬不要貪多先讓兩個(gè)任務(wù)在SysTick驅(qū)動(dòng)下“輪流亮相”哪怕它們只負(fù)責(zé)翻轉(zhuǎn)變量跑通就是勝利。之后再慢慢加入優(yōu)先級(jí)、阻塞喚醒、資源鎖。我就是這么一步步踩過來的期間犧牲過好幾塊開發(fā)板調(diào)Sch的“黑盒時(shí)間”但最終換來的是對(duì)調(diào)度機(jī)制真正的掌控感。這個(gè)原型后面還能繼續(xù)擴(kuò)展的方向很多加軟件定時(shí)器、郵箱、信號(hào)量甚至把任務(wù)棧從靜態(tài)數(shù)組改成動(dòng)態(tài)分配做成一個(gè)微型RTOS。但不管怎么加核心始終是那套“保存現(xiàn)場(chǎng)、選人、恢復(fù)現(xiàn)場(chǎng)”的鐵三角。把這套機(jī)制用自己的手寫透一次以后再看任何RTOS的源碼都會(huì)有一種“原來如此”的親切感。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
97天天做| 51国产午夜精品视频| 亚洲丝袜诱惑| 天久久久噜噜噜久久国产精品爽爽| 超碰97精品在线| 亚洲第一免费视频| 波多野结衣AV无码一区| 91白嫩| 色综合中文字幕不卡| 美国日韩黄片| 91欧美综合| 欧美在线大香蕉| 婷婷五月天久久久| 国产偷拍自拍在线视频| 国产免a费看黄片在线| 国产精品白丝AV| 中文字幕超碰CAO| 丁香婷婷啪啪| 天天干天天操天天干天天操| 懂色中文一区二区三区| 搡老女人老熟女91| 人妻色情天天操| av婷婷色网| 丁香五月偷拍| 五月婷丁香| 国产又操| 99无码视频| 丝袜熟女一区二区三区| 欧美日韩香蕉| 欧美系列在线一区二区| 色色婷婷五月| 青青草视频这里只有精品| 999亚洲国产视频| 亚洲欧美综合| 视频不卡中文字幕| 日本精品五区| 韩国三级一线观看久| 欧美性91| 我要色综合网| 欧美中文字幕精品人妻| 久久久久久久人妻丝袜| 亚洲巨爆乳一区二区三区四季网| 欧美精品三级黄片| 亚洲av噜噜噜噜噜噜| 国产一国产一级毛片古装| 欧洲色综合| 白嫩妹子国产骚| 人人操人人精品影片| 丝袜高跟澳门91视频| 久久久久久久精| 高清无码学生妹高潮| a啊啊啊啊啊啊啊啊一区二区| 老鸭窝成人| 美女黄色91| 综合色久欲| 久久精品日韩专区免费观看| 大色网久久| 在线97视频| 在线人成亚洲视频免费观看| 中国国国产一级特黄毛片| 中文字幕日韩人妻视频一区二区三区 | 无码国产精品午夜不卡(| www.91理论| 粉嫩绯色AV一区二区在线| av片在线观看免费播放| 97超级久久强资源| 天天综合网1| 福利五区| 国产黄色小视频网站| 黄色av网站在线播放| 在线视频日韩欧美国产| 一区二区三区 丝袜 高跟 美腿| 亚洲欧美天堂在线| 91色插| 国产丝袜美女在线一区| 熟女视频久久| 99国产天美| 嗯嗯,好大,好爽,好骚| 欧美色图片欧美色图| 亚91网| 69XX一中文字幕人妻91| 日本中文字幕在线视频| 久久视网78| 成人久久久精品| 九九九一二三| 可以在线观看AV的网站| 涩爱AV在线| 欧美综合色图片| 国产精品美女视频诱惑| 超碰久热| 欧美青青视频| 欧美操人视频| 亚洲 图片 综合91| 欧美亚洲91| 国产91精品福利在线| 久久久影院| 国产夫妻性生活视频| 精品人妻免费观看| 五月婷婷丁香| 97热视频在线观看| 少妇熟女1区2区3区| 丰满人妻av一区二区三区| 日本在线不卡123| 亚洲情色无码一区二区三区| 成人性爱美曰韩| 丝袜综合| 国产精品黑人一区二区三区| 久久人人妻| 亚洲一区二区av| 天天色综亚洲91污| 91视频综合| 日韩一级特黄av毛片| 伊人大香蕉在线| 亚洲欧美碰碰| 欧美精品999| 99re在线视频国产| 五月婷网站| 夜夜嗷嗷一区二区| 伊人精品久久网站| 亚州色站 日韩电影| 天天躁日日躁狠狠躁| AAA久久| 啊啊啊不要嗯嗯在线观看| 欧美成人免费在线观看| 青青草久久| 免费在线黄片视频| 蜜桃精品一区二区三区久在线| 亚洲图片激情综合另类| 后入福利视频| 日韩黄色一区二区三区| 欧美日韩一二三| renqi久久久久久久久久久久| 欧美色吧综合| 婷婷在线视频| 久久国产在线一区二区| 熟啊v色欧美热| 一级片在线观看高清无码| 啊啊啊快操我视频| 婷婷激情五月综合| 99无码狠狠久久| 大香蕉AV丝袜| 国产一进一出视频网站| 中文字幕一区二区三区蜜桃视频| 久热九九| 久草免费在线一区二区| 性videos欧美熟妇hdx| 99综合自拍| 美国一区二区三区视频| 日韩97在线| 亚洲免费97免费| 国产网红精品| 成人线上超碰| 日韩美女高潮喷水视频| 大香蕉伊人久久| 亚洲全色网| 亚洲丝袜色图| 国产热RE99久久6国产精品首| 嗯嗯啊啊啊好爽| 国产精品视频白浆免费| 色色青青久久| 久久久久久亚洲中文| 欧洲与亚洲欧美精品中文字幕| 国产乱伦性爱区| 久久激情视频| 性爱欧美五月| 一本一道人妻久久一区二区三区| 欧美伊人久久综合网| 日本超碰色精品| AV九九| 12一15性XXXX粉嫩国产| 夜夜国自区| 久久极品一区二区| 在线国产福利网址导航| 人妻一区二区三区视频| 九九九不卡| 一区二区三区日韩欧美 | 美女人妻色网站| 思思热久久成人| 丰满人妻被猛烈进入中| 婷婷人妻激情| jiujiujiujingpin| 亚洲欧美一区二区不卡视频播放| 亚洲精品久久久久久久久豆丁网| 一区二区三区 丝袜高跟| 伊人久久综合精品欧美| 男女一进一出视频久久| 久热精品在线| 日韩不卡网操逼中文字幕日韩| 婷婷爱五月| 久久一区二区三区入口| 温婉少妇玩3p| 欧日a| 国产精品亚洲高清在线| 88xx成人精品视频| 91色婷婷综合久久中文字幕二区| 夜夜无码| 亚洲自拍小说| 免费国产| 午夜精品久久久久久久| 午夜毛片高清免费不卡| 国产不卡中文字幕免费avi| 日本天天操| 精品久久人妻成人网| 性久久| 精品国产91内射久久| 蜜臀网 一区| 青青草无码视频| 一区二区三区日韩欧美| 精品久久久久瑟瑟| 国产精品视频电影| 91亚洲欧美色图| 国产精品老熟女一区二区| 亚洲国产日韩欧美熟妇在线| 黄色高清无码无码破解免费暗网| 欧亚在线视频| 亚洲情色电影网| 一区二区三区精品黑丝白丝酒店对鸡 | 狠狠91| 蜜屁av| 麻豆色约约| 白嫩白嫩的午夜九久久久久久久久久久久成人剧场 | 五月天综合| 日本中文字幕在线视频 | 97在线青| 久久偷偷色综合蜜桃| 日韩中文9| 超碰这里有精品| 国产精品一二三| 5252色欧美在线男人的天堂| 亚洲se91| 91性高朝久久久久久久久| 亚洲AV无码乱码| 亚洲最新Av| 99这里只有精品国产| 亚洲无码国产精品久久| 美女午夜福利免费视频| 国产亚洲国产超碰| 欧美最婬乱婬爆婬性视频| 国产老熟女| 老汉网| 欧美综合色综合| 国产成人五月天丁香花| 欧美999| 超碰精品日韩欧美国产| 久超碰在| 伊人久久亚洲中文字幕不卡| 97亚洲色图| 国产在线综合福利网站| 国产日韩欧美亚洲精品95| 激情四射五月天| 亚洲天堂色图| 日本 情色 1区2区3区| 日韩综合97p| 青娱乐淫乱1314| 欧美一级久久久久久久大片动画 | 97超碰中文| 神马麻豆福利院| 黑人精品一区二区在线播放| 久久免费精品视频免一| 亚洲情色图片区| 99超碰网| 1人人看人人摸人人操| 亚洲性爱无码乱伦av| 欧美精品人妻视频| 亚洲色交| 噜噜噜狠狠色综合| 夜色97| a片偷拍视频| 亚欧国产无码精品在线| 国产免费久久精品99re韩国| 亚洲色天| 日韩操人| 男人天堂导航| 日韩精品在线观看网站| 男插女青青影院| 熟妇色99| 992这里有精品| 国产1727欧美| 吖在线不卡一区二区国产剧情 | 人妻熟女一区二区三区视频| 青娱乐日韩无码| 97人人爱人人做人人乐| 91精品国产一区三一| 亚洲国产高清福利视频| 久久久成人免费av电影| 日日日日做夜夜夜夜无码| 91爱综合| 亚洲欧美日韩中文播放| 清柠毛片| 欧美亚洲| 欧美日韩淫加| 在线强奷到舒服的无码视频| 伊人网在线视频| 一区不卡在线观看av| 中文字幕加勒比海高清无码免费视频| 韩国三级色呦呦| 狠狠色丁香| 黑人精品欧美一区二区蜜桃| 色五月婷婷中文字幕| 内射黑丝袜| 日韩丰满熟妇| 亚洲AV色图一区| 男女激情黄色网址| 色偷偷男人的天堂麻豆| 亚洲日韩成人性爱视频| 伊香蕉综合久久久久久久噜噜噜| 精品国产精品一区二区| 亚洲天天在线| 夜夜嗷嗷一区二区| 中国探花熟女| 亚洲综合首页| 啊啊啊啊啊啊啊在线| 国产av强奸美女| 夜夜 中文视频rt| 黄色区免费观看中文字幕| 射丝袜大香蕉| 久久亚洲婷婷| 综合久久97| 人妻在线中出视频| aaaa黄片| 丝袜AV一区二区三区| 操人妻少妇中文| 午夜福利国产欧美日韩夜夜| 女人的天堂大香蕉网| 91小视频| 亚洲人成网站7777| 精品一国2| 性爱av在线免费观看| 国语精品av| 91蜜臀在线久久久久| 国产三级在线现体验区| 毛片麻豆91糖心精品毛情片| 久久草草欧美精品| 飘花国产午夜精品不卡| 密臀国产在线| 超碰激情808| 国产第25页在线观看| 97日亚洲欧美| 狠色婷婷久久一区二区三区_| 欧美日韩性爱视屏免费看了| 中文操逼字幕| 综合网天天| 亚洲天天综合| 热久日综合| 99啪啪视频| 人人做天天爱| 老熟妇91| 青草园大香蕉| 欧洲中文字幕| 玖玖色综合| 国产人妖的免费的视频| 亚洲资源站| 嫩草黄页| 亚洲淫乱骚妇AV| 成人网址在线观看| 久久一区二区高清免费| 中文字幕一区二区视频在线观看| 国产精品69久久久久久久| 日韩精彩免费| 骚逼高潮久久精品| 手机看片1024你懂的国产| 亚洲成人久久美女| 日韩人妻播放| 人人摸.人人色| 无码78| 另类老少妇| 东北女人的毛片| 亚洲有薄码区日本系列中文字幕| 嫖老熟女A片一二三区| 日韩极品无码B| 亚洲毛片久久| 青女偷拍网| 九九九九一级| 亚洲色资源| 操香逼| 猛交交| 日韩无码成人电影| 精品国产www久久| 插入综合网| 黄片在线免费在线观看| 亚洲强奸乱伦影视网| 国产高清26uuu| 三级日韩一区二区三区| 国产福利精品98视频| 天天干18禁| 久久久久久九九九九九 | 涩五月婷婷| 无码伊人久久大杳蕉中文无码| 亚洲系列第一页| 福利社区午夜一区二区| 操逼www.| 思思热影视| 国产成人亚洲精品无码古代早漏男| 被男人吃奶很爽的毛片| 香蕉国产精品麻豆亚洲欧美日韩 | 男生女生啊啊啊啊| 日韩欧美天天爽爽爽天天爽爽| av情色影音| 欧美亚综合色图| 刺激性视频黄页| 夜夜高潮夜夜爽高清视频一 | 中文字幕免费在线观看| 中文字幕在线观| 久久精品一区二区三区四区五区| 777琪琪午夜免费A片| 一级aaaaa欧美中文字幕录像片| 啪啪视频亚洲第一| 尤物国产一区在线观看| 超碰在线人妻| 人妻精品一区二区全免费| 久久神马影院| 五十路熟女在线不卡观看一区二区| 天美久久久久| 中国人高清www色视频免费| 欧美乱伦专区| 国产成人亚洲精品无码古代早漏男| 啪啪啪精品视频| 九九碰九九爱97超碰| 情色日播放AV| 精品九九淫乱男| 亚洲色性| 欧美激情性爱视频网站| 综合五月天| 中文字日本乱码| 亚洲偷91色| 国产精品久久久久久久久久久久久久吹 | 免费观看国产小粉嫩喷水精品午| 人人操人人摸人 | 亚洲欧美天堂| 欧美亚洲日本视频久久久| 99无码视频| 综合久欧洲| 色噜噜人妻av中文字幕| 一级岛国大片| 久久久久久国产精品| 最新精品久久蜜桃 | 色蜜AV| 国产白丝在线| 人人妻人人玩人人澡人人爽| 手机看av网站在线看| 精品久一区免费| 青青草国产一区二区三区| 国产午夜在线观看| 国产免费永久精品无码| 美性中文综合网| 九九热九九| 久久老子无码午夜伦不卡| 综合干干干av久久久综合网| 久久超碰com| 日韩AV熟女乱伦| 久久久久密臀一区二区| 校园春色亚洲| 99久热| julia ann久久| 91精品久久久| 97 国产一区| 韩国三级色呦呦| 99爱爱| 男人天堂免费| 亚洲欧美在线观看免费| 国产日韩人人| 91在线超高颜值国产| 色诱中文字幕| 日本国产亚洲一区在线观看| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 久视频在线观看| 亚洲小说视频| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 欧美精品 - 91爱爱| 试看60秒 爽| 天天插天天射| 欧美劲爆第一页| 五月婷婷影院| 中文字幕乱码在线| 日韩人妻资源网| 91精品国产高清久久久久久,亚洲成人| 抽查国产福利主播| 摸奶性爱视频网站在线免费播放| 人妻一区久久二区三区色播| 日韩成人精品| 日本中文字幕一区| 91久久久久久| 久久老女人| 日本美女性生活久久久久久久| 精品黄色电影| 99re3这里只有精品| 亚洲欧美天| 亚洲激情av| 亚洲精品电影| 欧美九九爱| 久久婷婷电影网| 中文字幕在线观看AV| av一区二区三区不卡| 色精品极品| 亚洲成人网站在线观看| 免看60秒涩涩视频| 麻豆60秒| 日产欧美电影一区二区三区| 午夜精品久久久久| 久久精品三级影视| 91精品导航| 在线观看亚洲专区| 9美女超碰在线免费观看| 日日狠狠久久偷偷色综合免费| 天天看片青娱乐| 91嫩草欧美| 黄色av片三级三级三级免费看| 超碰偷拍| 久热伊人| 无码天天操| 97 国产精品| 日本少妇va7777| ji熟女.com| 欧美综合色综合| 天天影视网综合少妇| 69XX一中文字幕人妻91| 婷婷久草| 五月天黄色av| 99性爱在线观看| 久久婷婷成人综合色怡春院| 韩国女主播青草在线| 久久久久国产精品喷潮免费观看臀| 深夜激情| 一区二区三区色综合| 99热啪啪| 丁香六月激情| 精品欧美乱码久| 亚洲在高跟鞋自慰久久在色线| 五月丁香综合激情| 老子午夜伦不卡影院| 婷婷五月天色网| 91中文精品日韩欧美在线| 丁香六月东京热| 2018天天日天天日| 日日夜夜骑| 性色av一区二区| 色蜜AV| 久精品无码av一区二免费国产在线观看| 97chaopengongkai| 操逼999| 日欧美色| 亚洲有薄码区日本系列中文字幕| 婷婷亚洲综合| 日本欧美一区二区三区免费| 国产精品懂色tv影视免费观看| 国语精品av| 久久久久9999精品九九九| 超碰97爽| 色综合中文字幕不卡| 亚洲色图亚洲无码强奸乱伦| 亚洲欧美日韩制服另类| 国产女大学生AV| BBBBB97COM| 亚洲色图片区| 午夜精品久久999热蜜桃介男人用| 久久超碰久| 狠狠中文字幕| 中文字幕 码 自拍 视频 区| 免费看日本操逼视频| 人人妻人人狠人人| 色黄色美女大长腿午夜视频| 欧美精品日韩久久久九| 夜夜草天天| 美女天天干| 翔田千里AV无码秘 三区| 精品人妻少妇| 国产又粗又长视频| 一区二区三区四区理论片| 欧美色吧综合| 夜夜高潮夜夜爽夜夜爱爱一区 | 丝袜足交视频| 啊啊啊久久| 超碰人妻天天干| 国产av青草| 色噜噜精品一区二区三| 欧美日韩妖精91com| 欧美淫乱视频| 蜜臀网址在线| 亚洲第一视频 欧美风情 日韩| 中文字幕av片| 欧美综合中文| 免费岛国一级片| 插入逼91| 久久首页| 高清在线偷拍自拍视频| 一级免费啪啪片| 五月综合激情| 日韩超碰精品综合| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 97超碰色情| 大色综合| 中文精品一区二去| 激情五月天视频| 天天日日夜夜| 国产久久日韩网站导航| 五月天亚洲网| 99热在线播放| 久久91视频| 国产CHASE男男GAYGA 毛多色婷婷| 伊人久久艹| 九九热超碰97亚洲最新香蕉 | 欧美人人曰人人操人人射射| 一级A片女人高潮叫床| 99热欧美| 精品无码人妻一区二区免费蜜桃| 亚州五月| 日韩性爱视频在线免费观看| 丁香五月天激情网站| 亚洲五月丁香花狠狠干一区二区三区| 黄网站黄视频网站进入口 | 久久爱97| 伦伦成年午夜免费视频| 啊啊啊好爽快点啊啊啊嗯嗯| 干B| 亚洲熟妇白浆无码AV| 97视频在线播放| JIZZJIZZ国产精品喷水| 区一在线观看| 99热销国产这里有精品| 免费的黄片有限公司| 99久久久久| 韩日巨乳美女免费视频在线观看| 人人妻人人爽一区二区三区| 久久国内| 欧美少妇第一页| 亚洲久久天堂| 国产男人又猛又粗又爽| 91亚洲精品青草| 蜜桃网熟妇| 韩三级a视频在线观看| 欧美精品自慰系列寂寞少妇 | 久久精品国产亚洲粉嫩| 天天操人人操狠狠插| 操91| 智利AV在线网| 国产隔壁老王影院在线| 一区二区久久天天干狠狠| 人人九九精| 日韩激情啪啪啪| 91精品成人www| 国产一区二区在线看| 韩国一级AAA| 人妻一区久久二区三区色播| 亚洲精品国产精品成人| 九九九久千久久激情蜜桃在线看 | 亚洲欧美九九九| 91热| 亚洲成av人片色午夜乱码| 91女优在线观看| 美国精品国产精品| 鸥美插入视频| 中国一级特黄大片护士| 九九夜精品九九在线| 亚洲 无码 偷拍| 久久久影院| 亚洲av性爱电影| 久操B网| 大肥女高潮bbwbbwhd视频| 人人操AV| 午夜毛片亚洲精品片国产久久久| 首页亚洲国产高跟丝袜诱惑视频| 久久大香蕉97| 亚洲熟妇自偷自拍另欧美| 亚洲欧美碰碰| 人妻加勒比东京热| 国产激情视频一区区三区| 亚洲日本成人动漫| 亚洲国产另类在线中文| 中文字幕视频2区| 看免费的黄片| 久久同城AV| 欧美,日韩,亚洲视频| 超碰人人干天天射| 亚洲欧洲偷拍一区| 天堂69亚洲精品中文字| 日夜干射色啊| 免费αⅴ在线观看| 亚洲有薄码区久久在线一区| a在线观看| 久久男人天堂| 国产精品欧美激在线| 日本Xx性爱| 蜜桃传媒视频第一区入口在线看| 亚洲人人操| 乱性AV| 91久久久老司机| 女人被添高潮免费视频| 免费观看一区| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 伊人五月天| 亚洲阿v天堂在线| 91网站视频在线观看| 凹凸久久人人| 男人的天堂va| 草伊人高潮喷水超碰| 91黑人无码激情在线| 97超碰欧美手机| 欧美中文狠| 超碰在线成人| 日韩欧美亚洲自拍偷拍| 亚洲熟久久| A久久| 欧美老妇曰批的视频| 欲综合网| 久草精品视频| 天天影视综合网欧美精品| 国产高清MV操逼视频| 欧美精品庄| 综合久久99亚洲人妻中文在线| 色噜噜狠狠色综无码久久合欧美| AV麻豆免费一区| 亚洲综合色图欧美| 大香蕉国产中文自拍| Julia在线播放亚洲久久| 日韩无码操逼片| 欧美性爱一区二区三区| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 欧美淫乱视频| 日韩钢筋无码高清啾啾啾| 丰满人妻一区二区三区免费,| 国产美女自拍AV| 久久精品一区一起草| 青女在线| 91暧暧| 婷婷丁香六月| 日本123区操B视频| 欧美日韩在线国产在线| 国产精品一区二区手机看片| 亚洲激情视频| 欧美色图99| 91高跟美女在线播放| 亚洲天堂,男人| 国产情侣自拍在线播放| 久久伊人亚洲AV无码网站| 日本二三四区| 久肏视频字幕| 日韩欧美蜜桃精品久久中文字幕久久 | 最新AVzaixian| 爱我干综合| 亚洲啪啪性视频| 操B在线观看| 欧美人妻久久精品二区三区| 摸奶性爱视频网站在线免费播放| 精品日韩| 韩国一级做a久久久久| 久久岛国| 99热在线观看| 超碰91在线| 久久产精品一区二区三区电影| 酒色综合网| 2019天天干| 97干97色| 日韩av免费一级电影| 97无码视频在线播放| 激情综合网亚洲| 欧美日韩国产成人高清| 一级一性爱免费视频| 草草电影院| 欧美性爱精品七区| 国产精品久久久久久久AV大片 | 超碰久久草| 欧美 亚洲 另类 综合| 亚洲天堂日本| 欧美亚州色的图| 91天射| 日日碰视频网| 九九久久国产精品怡红院| 午夜九九| 狠狠入| 91人妻少妇| 13小男生GAY自慰脱裤子| 亚洲熟伦熟妇AV无码春色| 精品成人亚洲午夜电影| 26uuu性| 国产精品视频白浆免费| 亚洲日本韩国在线| 在线观看一卡二卡| 天天干天天日天天射黄色| 自拍二页| 爱丝福利| 凹凸视频在线一区二区| 超碰人人操97碰| 偷窥自拍A片| 大香蕉碰碰| 夜草欧美| 亚洲午夜精品久久久中文影院| 日韩肏逼视频| 91快色色色色色| 水澄无码AV| 青青操少妇| 熟妇人妻一二三区免费| 韩国一级做a久久久久| 91足交| 91大学精品激情戏| 99精品伊人| 美女诱惑久久| 欧美日本中字另类在线| 激情文学网伊人| 欧美老妇女内射网址| 人妻爽爽啪视频| 91丝袜视频在线观看| 100啪啪视频大全| 色色福利| 一二三啪啪专区| 伊人在线大香蕉视频久久| 999久久久国产精品| 五月天久久综合网| 狠狠色丁香| 亚洲色图国产另类| 夜夜躁狠狠躁日日躁av| 99久久久无码国产精品性男| 婷婷三区| 精品久久久久综合无码| 国产成年免费大片黄在线观看| 婷婷五月天补不补| 免费看国产大AB| 日韩欧美性吧婷婷乱伦大香蕉 | 后入日本1234| 亚洲h片在线免费观看| 人妻啊啊人妻啊啊| 91色欧美| 人人爱人人操人人性| 熟女一区二区三区| 深夜福利黄片| 嗯嗯啊在线视频| 偷拍亚洲视频一区二区三区四区| 亚洲一区二区三区播放在线| 国产白领连续中出在线观看| 一区二区三区不卡视频| 久久性视频| 啊啊啊啊在线播放| 色婷婷狠狠| 国产免费一区| 亚洲国产91精品一区二区久久| 欧美日韩免费专区在线| 97亚洲在线| 情色AV电影| 欧美熟妇色| 99视频这有这里有精品| 我爱大香蕉| 狠久久| 97人人操人人干| 9久精品视频在线观看| 9久久久久| 五月综合色| 人人摸人人舔一区二区| 日韩免费大片一级播放| 国产精品久久久久久久久久久久久久久久| 蜜臀久久久99久久久久 | 中文字幕成人理论在线| 国产精品久久久久久久久久二区三区| www.91逼逼.com| 成人久久久精品| 国产精品久久久久中文字幕| 一区超碰一区| 欧美伦乱爱| 欧美日韩黄片精品在线| 免费啊啊啊| 日韩Va亚洲va欧美Ⅴa久久| 97精品在线| 国产亚州高清国产拍精| 亚洲中文sv| www.狠狠操| 蜜臀无码视频在线观看| 欧美成人亚洲精品| 神马久久久久久伦理片| 欧洲自拍色图gif在线| 尤物一级在线免费观看| 欧洲自拍第一页| 国产这里只有精品| 神马久久久久久久| wwe 天天干.com| 青娱乐欧美激情一区二区| 中文字幕乱偷人妻久久艾草网| 日本色色的视频| 精品69网| 啊啊啊啊啊在线视频| 欧美黑人精品一区二区| 啊啊在线| 中文字幕版| 中文字幕交换人妻| 亚州性色| 日日A∨| 久久婷婷精品| 性爱网站一区二区| 亚洲午夜蜜臀| 99999无码| 黄色在线网站| 91国模| 制服少妇欧美| 五月丁香影视| 岛国片在线播放| 大香蕉淫人| 午夜天堂精品久久| 久久久久婷婷| 欧美爆乳精品一区二区| 97色操| www.高清无码诱惑一区.com| 婷婷五月天成人网| 国产亚洲日韩在线三区黑人| 搡老女人老91二区| 97视频在线视频| 日本特黄f c2| 国产精品成人无码av| 欧美日韩国产一区二区小黄片大全| 中文熟女五十乱码在线| 久久这里都是精品| 欧美日韩第一页| 无码免费在线观看黄色片| 亚洲毛片久久| 国产精品色约约| 欧美成不卡网| 久久久久久午夜男人的天堂| 久久久亚洲高清不打码| 97免费视频在线观看| 天天天操天天天爱| 青青草啪啪网| 特污免视频| www.久久99| 日韩亚洲国产视频| 国产美女销魂在线观看不卡| 麻豆久久精品亚洲精品88| 超碰 欧美| 黄久在线| 国产久久一区二区| 屌妞视频久久久久久久久久久久| 欧洲色| 久久久com| 日本在线不卡v二区| 人妻 丝袜美腿 中文字幕| 偷拍伦理视频| 国产成人综合在线播放| 操婢日韩| 欧美日韩插逼视频| 精品蜜乳AV免费观看| 深夜国产福利| 91亚洲情色| 大香蕉线| 大香蕉78| 明星性猛交ⅹxxx乱大交| 亚洲天堂男人天堂网| 亚洲黄色| 91国产丝袜白虎| 男人的天堂视频精品乱在线| 欧美日日人人天天| 2020天天色综合| 久久久无码精品人妻二区| 智利AV在线网| 91操熟女视频| 精品少妇高潮久久| 青青草一区二区高清无码视频| 欧美韩日精品99综合| 欧美精品系列| AV女优男人的天堂| 日韩一级欧美一级国产一级台湾| 国产乱伦视频污| 欧美性爽xyxOOOO| 亚洲 欧美 日韩 国产一区二区| 狠狠操狠狠操操| 白丝被操91| 在线观看成人性爱免费小视频| 国产理论视频在线播放| 欧美日韩性爱视屏免费看了| 91精品丝袜在线观看| www.婷婷| 国产久久久9999| 大香蕉欧美| 久久后入制服| 特色a在线上| 色色色日本| 高清成年美女黄网站免费大全| 午夜精品久久久久久久99蜜桃一| 精品成人av一区二区三区在线| 3571色综合一区二区二区| AV高清一区| 97精品97久久| 夜夜爽夜夜操| 日本羞羞的视频在线播放| 伦伦成年午夜免费视频| 妺妺跟我一起洗澡没忍住| 天美国产精品| 日本三级韩国三级美三级91| 97ai亚洲| 人人贴人人摸| 牛黄色久午久| 久久伊人网视频一区二区三区| 亚洲91大片| 欲色综合| 日韩免费在线视频观看| 不卡啪啪视频| 天堂国产AV| 热久日综合| 天天综合中文字幕 91| 国产一区在线观看无码AV| 日韩不卡av一二三| 久久久久久久久九九久孕交| 伦理日韩国产久久| 91丨国产丨白浆秘 洗澡动漫| 91人妻素女| 久久本道| 精品国产a∨一区天美传媒| 精品蜜乳AV免费观看| 夜夜草网站| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 麻豆性爱视频在线播放| 后入式999| 摸奶性爱视频网站在线免费播放| 激情久久av一区av二区av| 10000部十八禁看电影| 久久久久国色αv免费观看| 日韩美女操b| 97内射偷拍| 日骚逼视频| 久操精品网| 女一区二区| 蜜臀久久99精品久久久| 日韩啪啪网| 青青欧美| 涩涩这里只有精品视频| 久久99视频| 91成人亚洲色图| 郑州宾馆老熟女露脸啪啪| 欧美日韩人人精品| 欧美色女人| 久久久久久午夜男人的天堂| 超碰久久草| 亚洲成人黄色在线观看| 国产欧美日韩女同性恋ww喷水精品 | 中文在线视频| 亚洲国产精品有声| 亚洲丝袜色图| 日本伦乱九九九综合| 极品极品色影院| 国产精品69久久久久孕妇欧美| 可能人人看人人摸| 91亚洲欧美色图| 极品欧美一区二区三区| 青青草视频爽一爽| 国产精品播放| 920日本午夜免费| 96超碰网| 乱人伦 国语对白:视频直接看| 麻豆av一区二区| 国产免费永久精品无码| 色路综合| 加勒比大香蕉视频在线| 18精品一二区| 亚洲精品男人的天堂| 精品免费囯产一区二区三区| 天天做天天爱天天爽| 三级色影综合网| 婷婷久久综合| 91色图| 久久久久成人蜜桃精品| 精品久久久久综合无码| 96AV精品| 视频一区二区免费在线| 91嫩草欧美| 欧美极品性爱天天射| 超碰久久网| 操一区| 日韩亚洲欧美中文字幕| 九九精品美女高溯喷水| 91人妻最真实刺激绿帽| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 日韩人妻资源网| 日本韩国国产精品一区| 国产在线精品电影观看| 大香网站| 四虎精品一区二区| 激情图片亚洲色图| 午夜啪啪片| 九九九国产| 色爱欲亚洲| 欧美视频一区二区在线| 亚洲男人在线观看天堂| 91 亚洲 欧洲| 国产成人午夜视频网址| 高颜值美女口爆高潮浪叫| 天天爽爽爽爽| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 9999九九九久久久| 99热在线播放| 久久久一区二区三区三州| 老司机午夜福利视频一区二区| 97人人射| 日本 色 导航| 黑人精品欧美一区二区蜜桃| 台湾佬中文娱乐自偷自拍| 亚洲情色中文字幕一区| 亚洲美女精品九九视频| 国产日韩人人| 人妻熟女av国产网站| 亚欧免费观看视频| 久久久九九| 无码99| 最新日韩黄片| 日韩偷拍一区二区三区| 久久精品综合| 神马午夜久久久| A久久| 噜噜噜在线视频| 激情色图| 91青青| 国产精品视频播放| 午夜精品一区二区三区三上悠亚| 超97在线精品视频| 久久中出| 一本色道久久综合精品婷婷| 色男人色天堂东京热| 亚州伊人色综台| 国产三级电影免费观看| 黄色激情电影在线观看| 97亚洲中文| 欧美综合网1| 大鸡吧尹人在线| 久久亚洲av成人无码国产| 午夜福利1区2区3区| 欧美色图综合网| 密臀成人视频久久久| 96国产污污污丝袜| 久久久久久大| 91色情黑丝搞鸡在线观看一区二区三区三州 | 日va操| 国产精品久久久久久久电影渣男| 97在线免费看视频| 四虎影视永久在线观看精品免费网站 | 天天操天天射青青草| 午夜免费视频1000| 欧美很很操视频| 久久久久久日韩| 精品久久久久久无码| 91视频精品| 97国产超碰| 丝袜AV一区二区三区| 1024精品在线| 熟妇女伦乱视频视频 | 99久久综合网| 93人人操人人| 亚洲一区二区三区中文字幕| 无码高清操逼网址| 色综合av综合久久| 操逼操网| 亚洲 欧美 色图| 欧美亚洲系列| 久久久999国产精品| 久久久精品久久| Julia Annxxxxx| 久久久一区二区| 强奸熟女一区二区三区| 中文字幕文字幕无码一区二区三区电影99| yiren97| 夜夜操天天肏| 日韩钢筋无码高清啾啾啾| 人人摸人人干| 丝袜AV一二三区| 丰满少妇一区二区三区四区观看| 久久久久久久久久久久久久9999| 黄色大片一区二区密桃丝袜| 日本天天吊|