《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 可編程邏輯 > 設(shè)計(jì)應(yīng)用 > 基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)設(shè)計(jì)方法
基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)設(shè)計(jì)方法
2019年電子技術(shù)應(yīng)用第7期
徐偉杰1,謝永樂2,彭禮彪2,沈北辰3
1.長(zhǎng)安大學(xué) 信息工程學(xué)院,陜西 西安710064; 2.電子科技大學(xué) 自動(dòng)化工程學(xué)院,四川 成都611731;3.四川大學(xué) 軟件學(xué)院,四川 成都610207
摘要: 為提高輻射環(huán)境中電子系統(tǒng)的可靠性,提出了一種基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)結(jié)構(gòu)和設(shè)計(jì)方法。該設(shè)計(jì)方法采用粗粒度三模冗余結(jié)構(gòu)和細(xì)粒度三模冗余結(jié)構(gòu)對(duì)系統(tǒng)功能模塊進(jìn)行容錯(cuò)設(shè)計(jì);將一種細(xì)粒度的故障檢測(cè)單元嵌入到各冗余模塊中對(duì)各冗余模塊進(jìn)行故障檢測(cè);結(jié)合動(dòng)態(tài)部分重構(gòu)技術(shù)可在不影響系統(tǒng)正常工作的前提下實(shí)現(xiàn)故障模塊的在線修復(fù)。該設(shè)計(jì)結(jié)構(gòu)于Xilinx Virtex-6 FPGA中進(jìn)行了設(shè)計(jì)實(shí)現(xiàn),實(shí)驗(yàn)結(jié)果表明系統(tǒng)故障修復(fù)時(shí)間和可靠性得到顯著提高。
中圖分類號(hào): TN710
文獻(xiàn)標(biāo)識(shí)碼: A
DOI:10.16157/j.issn.0258-7998.190480
中文引用格式: 徐偉杰,謝永樂,彭禮彪,等. 基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)設(shè)計(jì)方法[J].電子技術(shù)應(yīng)用,2019,45(7):50-55.
英文引用格式: Xu Weijie,Xie Yongle,Peng Libiao,et al. SRAM based FPGA system capable of runtime fault tolerance and recovery[J]. Application of Electronic Technique,2019,45(7):50-55.
SRAM based FPGA system capable of runtime fault tolerance and recovery
Xu Weijie1,Xie Yongle2,Peng Libiao2,Shen Beichen3
1.School of Information Engineering,Chang′an University,Xi′an 710064,China; 2.School of Automation Engineering,University of Electronic Science and Technology of China,Chengdu 611731,China; 3.College of Software Engineering,Sichuan University,Chengdu 610207,China
Abstract: In order to enhance the reliability of electronic system working in radiation environment, a reliability enhanced SRAM based FPGA system with runtime fault recovery is presented in this work. Coarse-grained TMR architecture and fine-grained TMR architecture are proposed to achieve the ability of fault tolerance. Fine-grained fault detection units are inserted in each redundancy module to mask the faulty module. The technique of partial dynamic reconfiguration is used to repair the faulty module without interrupting other parts of the system。The scheme is implemented in Xilinx Virtex-6 FPGA, and the results show that the improvements in recovery time and reliability are achieved by the proposed technique.
Key words : reliability;fault tolerance;fault recovery;TMR;dynamic reconfiguration

0 引言

    隨著航天技術(shù)的發(fā)展,空間任務(wù)日益復(fù)雜化、多樣化,未來航天系統(tǒng)對(duì)處理器的性能要求越來越高。在一些航天設(shè)備如星載ATP等系統(tǒng)的電子模塊設(shè)計(jì)中,基于SRAM的現(xiàn)場(chǎng)可編程門陣列(FPGA)得到了日益廣泛的應(yīng)用。空間環(huán)境中的電子系統(tǒng)設(shè)計(jì),不僅要滿足高性能,而且其數(shù)據(jù)處理、傳輸和控制的準(zhǔn)確性和可靠性也必須得到保證。對(duì)于機(jī)載、星載、空間武器和其他空間應(yīng)用電子系統(tǒng),往往暴露在形形色色的電磁輻射環(huán)境中,如α粒子、宇宙射線、外太空強(qiáng)輻射等等惡劣環(huán)境,加之一些電子系統(tǒng)工作在地面的高電磁輻射環(huán)境中,這些輻射環(huán)境中充滿了各種高能粒子,高能粒子撞擊工作中的電子器件會(huì)引發(fā)輻射效應(yīng),如單粒子翻轉(zhuǎn)(SEU)等,并導(dǎo)致器件發(fā)生故障,由輻射效應(yīng)引起的軟錯(cuò)誤是導(dǎo)致空間環(huán)境中電子系統(tǒng)失效的重要原因之一[1]

    在提高系統(tǒng)可靠性與安全性方面,避錯(cuò)與容錯(cuò)技術(shù)是常用的兩種關(guān)鍵技術(shù)。微電子抗輻射加固技術(shù)[2],通過對(duì)材料選取、工藝結(jié)構(gòu)設(shè)計(jì)等方面進(jìn)行加固設(shè)計(jì),在物理層消除導(dǎo)致?lián)p傷的各類寄生參數(shù), 能有效提高電子器件的抗輻射能力。但是僅在物理層上對(duì)系統(tǒng)進(jìn)行故障防護(hù)不能滿足惡劣環(huán)境中的系統(tǒng)可靠性要求,還需要從電路設(shè)計(jì)方面對(duì)系統(tǒng)功能進(jìn)行保護(hù)。運(yùn)用錯(cuò)誤校正碼(ECC)技術(shù)[3],在數(shù)據(jù)包的后端添加額外的校驗(yàn)數(shù)據(jù)位,來實(shí)現(xiàn)讀取/寫入數(shù)據(jù)的準(zhǔn)確性,能在一定程度上對(duì)存儲(chǔ)器進(jìn)行檢錯(cuò)和糾錯(cuò)。容錯(cuò)設(shè)計(jì)技術(shù),如采用冗余設(shè)計(jì)來“屏蔽”或“隔離”故障,如信息冗余[4]、硬件冗余[5]等,進(jìn)而在一定時(shí)期內(nèi)將故障的影響掩蓋起來,使發(fā)生故障的電子系統(tǒng)在一定時(shí)期內(nèi)仍能正常工作,但這種方式并未排除故障,隨著故障的累積和疊加,系統(tǒng)仍然可能失效,所以賦予系統(tǒng)故障自修復(fù)能力能有效減少故障累積,提高系統(tǒng)的可靠性。

    本文從故障容錯(cuò)和故障自修復(fù)角度對(duì)系統(tǒng)進(jìn)行芯片級(jí)的可靠性設(shè)計(jì),提出了一種基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)結(jié)構(gòu),并將該設(shè)計(jì)結(jié)構(gòu)在Xilinx Virtex-6 FPGA上進(jìn)行了設(shè)計(jì)驗(yàn)證。

1 基于動(dòng)態(tài)部分重構(gòu)的模塊修復(fù)

    FPGA的配置可分為靜態(tài)配置和動(dòng)態(tài)配置,靜態(tài)配置通常對(duì)整個(gè)FPGA模塊進(jìn)行重新配置,系統(tǒng)功能在配置過程時(shí)中斷,并在配置結(jié)束后改變系統(tǒng)功能。動(dòng)態(tài)配置,又稱為動(dòng)態(tài)部分重構(gòu),能夠在不干擾FPGA內(nèi)部其他模塊工作的同時(shí)動(dòng)態(tài)地對(duì)部分區(qū)域的邏輯功能進(jìn)行修改。其核心思想是將FPGA內(nèi)部的邏輯資源從物理布局上劃分為靜態(tài)區(qū)域和若干個(gè)動(dòng)態(tài)區(qū)域。每個(gè)動(dòng)態(tài)區(qū)域可以對(duì)應(yīng)有多個(gè)配置文件,以實(shí)現(xiàn)不同的功能,將這些配置文件事先存放在片外存儲(chǔ)器中。在系統(tǒng)運(yùn)行的不同時(shí)刻,根據(jù)系統(tǒng)的實(shí)際需求加載不同的配置文件到同一個(gè)動(dòng)態(tài)區(qū)域來實(shí)現(xiàn)相應(yīng)的邏輯功能。在某一動(dòng)態(tài)區(qū)域進(jìn)行功能切換時(shí),不影響靜態(tài)區(qū)域和其他動(dòng)態(tài)區(qū)域的邏輯功能,系統(tǒng)依然處于連續(xù)運(yùn)行狀態(tài)。

    動(dòng)態(tài)部分重構(gòu)技術(shù)能對(duì)FPGA的部分資源實(shí)現(xiàn)分時(shí)復(fù)用,使芯片能夠在不同時(shí)刻實(shí)現(xiàn)不同的功能,提高了芯片資源的利用率,已廣泛應(yīng)用于工業(yè)系統(tǒng)設(shè)計(jì)中,如文獻(xiàn)[6]中結(jié)合動(dòng)態(tài)部分重構(gòu)技術(shù)對(duì)工業(yè)傳感器數(shù)據(jù)采集系統(tǒng)進(jìn)行設(shè)計(jì),針對(duì)不同的傳感器切換不同的功能。該技術(shù)還可應(yīng)用于可重構(gòu)計(jì)算[7]、可進(jìn)化硬件[8-9]、容錯(cuò)設(shè)計(jì)[10-14]等方面。將動(dòng)態(tài)部分重構(gòu)技術(shù)和冗余技術(shù)結(jié)合,即將冗余設(shè)計(jì)中各冗余模塊分別置于一動(dòng)態(tài)區(qū)域中,在故障發(fā)生時(shí)通過動(dòng)態(tài)重構(gòu)對(duì)故障模塊進(jìn)行修復(fù),可以避免故障的累積和疊加,在容錯(cuò)的同時(shí)賦予系統(tǒng)故障自修復(fù)能力。

2 粗粒度和細(xì)粒度的三模冗余自修復(fù)結(jié)構(gòu)

2.1 粗粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)

    典型的模塊冗余技術(shù)——N模冗余設(shè)計(jì):將功能模塊復(fù)制為N份,N個(gè)模塊具有相同的輸入,N個(gè)模塊的輸出經(jīng)過多數(shù)表決器表決輸出。N模冗余系統(tǒng)在工作過程中能同時(shí)容忍不超過半數(shù)的冗余模塊發(fā)生故障而不影響最終的系統(tǒng)輸出。隨著冗余模塊的數(shù)量增加,系統(tǒng)的容錯(cuò)能力提高,但同時(shí)系統(tǒng)的硬件資源開銷和功耗增大,綜合考慮容錯(cuò)能力和資源開銷,三模冗余(TMR)技術(shù)具有最高的性能表現(xiàn)。

    FPGA的系統(tǒng)通常可以分為多個(gè)功能模塊,粗粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)以整個(gè)功能模塊為單位進(jìn)行冗余設(shè)計(jì),如圖1所示,即將整個(gè)功能模塊作為一個(gè)冗余單位,將整個(gè)功能模塊復(fù)制三份,將每個(gè)功能單元模塊FU1~FU3配置到單獨(dú)的部分重構(gòu)模塊(PRM)中,使得每個(gè)冗余模塊都可以獨(dú)立被修復(fù)。表決器選擇多數(shù)的輸入結(jié)果進(jìn)行輸出。在粗粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)中,只要兩個(gè)冗余模塊的輸出結(jié)果正確,就能保證整個(gè)模塊輸出正常,當(dāng)其中任意模塊發(fā)生故障時(shí),通過系統(tǒng)的故障檢測(cè)機(jī)制可進(jìn)行故障定位,隔離故障區(qū)域并進(jìn)行自修復(fù)操作。

wdz4-t1.gif

2.2 細(xì)粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)

    采用粗粒度設(shè)計(jì)結(jié)構(gòu)能有效提高系統(tǒng)的可靠度,但其仍然存在一些不足,一是當(dāng)多數(shù)表決器出現(xiàn)故障時(shí)整個(gè)自修復(fù)結(jié)構(gòu)本身不可靠;二是由于模塊粒度較大,一些不能導(dǎo)致模塊功能失效的隱性故障持續(xù)累積,容易導(dǎo)致多個(gè)模塊同時(shí)故障,使得防護(hù)結(jié)構(gòu)失效。本文中細(xì)粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)能有效減少故障累積,該設(shè)計(jì)結(jié)構(gòu)將一功能模塊拆分為若干個(gè)獨(dú)立的時(shí)序元件和組合邏輯部分,本文將該設(shè)計(jì)結(jié)構(gòu)利用圖形化表示來說明,將功能單元模塊中的組合邏輯表示為CG,時(shí)序元件表示為SE,則利用有向圖表示方法可以將圖2(a)電路表示為圖2(b)。

    細(xì)粒度的三模冗余容錯(cuò)自修復(fù)結(jié)構(gòu)建立在有向圖表示方法基礎(chǔ)之上,其核心思想是,將電路分割為邏輯電路和時(shí)序電路,在時(shí)序電路輸出插入多數(shù)表決器,然后再對(duì)原始電路進(jìn)行三模冗余設(shè)計(jì),使得此自修復(fù)結(jié)構(gòu)具有三個(gè)表決器,因此加強(qiáng)了此結(jié)構(gòu)的故障容錯(cuò)能力,同時(shí)減輕了時(shí)序電路引起的錯(cuò)誤累積,可以成功避免域交叉錯(cuò)誤的出現(xiàn)。圖2(a)表示的原始電路,利用有向圖表示方法將原始電路分割開來如圖2(b)所示,利用TMR三模冗余技術(shù)將其容錯(cuò)化如圖2(c)所示。MV表示多數(shù)表決器(Multiple Voter)在電路時(shí)序元件輸出之后插入,利用其三模冗余結(jié)構(gòu),增強(qiáng)了電路容錯(cuò)能力。當(dāng)D1模塊的組合、時(shí)序電路以及表決器出現(xiàn)故障時(shí),D2模塊和D3模塊通過多數(shù)表決器可以檢測(cè)到此類故障,并經(jīng)中斷喚醒處理器進(jìn)行部分動(dòng)態(tài)重構(gòu)處理,使得D1部分重構(gòu)區(qū)域得以自修復(fù)。

wdz4-t2.gif

    細(xì)粒度的三模冗余容錯(cuò)自修復(fù)結(jié)構(gòu)同時(shí)降低了時(shí)序電路引起的錯(cuò)誤累積的概率,可以成功避免域交叉錯(cuò)誤的產(chǎn)生。當(dāng)D1模塊的SE2電路和D3模塊的CG4電路同時(shí)出現(xiàn)故障的時(shí)候,由于在時(shí)序電路的輸出端用表決器成功地將SE2故障進(jìn)行檢測(cè)和隔離,不會(huì)傳遞積累影響下一級(jí)的CG4錯(cuò)誤,因此可以成功避免域交叉錯(cuò)誤的產(chǎn)生。

2.3 可靠度對(duì)比

    功能模塊在FPGA內(nèi)部的實(shí)現(xiàn)可以用邏輯資源來表示,如查找表(LUTs)、觸發(fā)器(Flip-Flops)、塊存儲(chǔ)器(BRAM)等。而各邏輯資源的連接和使用通過比特流文件配置來實(shí)現(xiàn)。比特流文件由若干個(gè)配置幀(frame)組成,配置幀又包含若干個(gè)表示配置信息的比特位。在輻射環(huán)境中,當(dāng)FPGA中的電路模塊發(fā)生單粒子翻轉(zhuǎn)效應(yīng)時(shí),并不是模塊任意比特位發(fā)生翻轉(zhuǎn)就會(huì)導(dǎo)致模塊功能失效,該模塊功能往往由一些關(guān)鍵比特位所決定。考慮該粗粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)的容錯(cuò)能力,討論馬爾科夫模型下的三模冗余結(jié)構(gòu)[15],假設(shè)功能模塊在時(shí)間t內(nèi)功能正常的可靠度隨著時(shí)間的推移呈指數(shù)遞減,其可靠度可以表示為:

    wdz4-gs1.gif

其中λm表示功能模塊m的故障率,其由比特位在單位時(shí)間內(nèi)的翻轉(zhuǎn)速率和模塊對(duì)應(yīng)的關(guān)鍵比特位數(shù)量所決定。對(duì)于一個(gè)三模冗余系統(tǒng)來說只有當(dāng)兩個(gè)或者兩個(gè)以上的模塊發(fā)生錯(cuò)誤時(shí)系統(tǒng)防護(hù)功能才會(huì)失效,假設(shè)三模冗余系統(tǒng)表決邏輯功能正常,那么對(duì)于該粗粒度的三模冗余設(shè)計(jì)結(jié)構(gòu)其可靠度可以表示為:

wdz4-gs2-3.gif

    將提出的細(xì)粒度的三模冗余結(jié)構(gòu)和粗粒度的三模冗余結(jié)構(gòu)的可靠度進(jìn)行比較,其可靠度示意圖如圖3所示。細(xì)粒度的三模冗余結(jié)構(gòu)容錯(cuò)可靠度相對(duì)于粗粒度的可靠度有顯著的提高,但同時(shí)細(xì)粒度的三模冗余結(jié)構(gòu)會(huì)引入額外表決器和故障檢測(cè)邏輯,導(dǎo)致額外資源開銷的增加。細(xì)粒度的三模冗余結(jié)構(gòu)更適用于對(duì)故障率高的電路模塊進(jìn)行防護(hù)。

wdz4-t3.gif

3 實(shí)時(shí)故障自修復(fù)系統(tǒng)設(shè)計(jì)

3.1 實(shí)時(shí)故障自修復(fù)系統(tǒng)整體設(shè)計(jì)結(jié)構(gòu)

    圖4給出了一種基于Xilinx FPGA實(shí)現(xiàn)的故障自修復(fù)系統(tǒng)整體結(jié)構(gòu)設(shè)計(jì)方案。整個(gè)系統(tǒng)實(shí)現(xiàn)基于MicroBlaze軟核的片上微處理器系統(tǒng),主要?jiǎng)澐譃閮蓚€(gè)部分:靜態(tài)區(qū)域和動(dòng)態(tài)部分重構(gòu)區(qū)域。靜態(tài)區(qū)域主要包括:軟核MicroBlaze、串口控制器、Flash控制器等,這部分區(qū)域包括了整個(gè)關(guān)鍵處理模塊不適于動(dòng)態(tài)重構(gòu)的模塊,主要負(fù)責(zé)運(yùn)行低優(yōu)先級(jí)程序和檢測(cè)動(dòng)態(tài)重構(gòu)區(qū)域的正常運(yùn)行。動(dòng)態(tài)部分重構(gòu)區(qū)域是整個(gè)電子系統(tǒng)自修復(fù)的基礎(chǔ),所有的自修復(fù)操作都在其他模塊監(jiān)測(cè)、控制下有序地進(jìn)行,保證整個(gè)電子系統(tǒng)不間斷正常的工作,其中各個(gè)冗余模塊的標(biāo)準(zhǔn)配置文件存放于片外Flash中。當(dāng)系統(tǒng)收到重構(gòu)請(qǐng)求時(shí),由Flash控制器讀取片外存儲(chǔ)器中對(duì)應(yīng)模塊的比特流文件并通過內(nèi)部配置訪問端口(ICAP)寫入重構(gòu)區(qū)域。動(dòng)態(tài)部分重構(gòu)區(qū)域結(jié)合上文提出的容錯(cuò)方案進(jìn)行容錯(cuò)設(shè)計(jì),同時(shí)MicroBlaze負(fù)責(zé)控制和監(jiān)測(cè)每個(gè)動(dòng)態(tài)重構(gòu)單元的工作情況:比如當(dāng)設(shè)計(jì)動(dòng)態(tài)重構(gòu)單元為三模冗余故障容錯(cuò)模塊時(shí),當(dāng)此模塊內(nèi)部故障檢測(cè)單元檢測(cè)到發(fā)生故障時(shí),通過中斷的形式將信息發(fā)送到MicroBlaze中,MicroBlaze讀取此模塊的狀態(tài)寄存器以判明故障類型和區(qū)域,根據(jù)應(yīng)用場(chǎng)合不同選擇不同的故障自修復(fù)策略將此模塊進(jìn)行有序的自重構(gòu),實(shí)現(xiàn)故障自修復(fù)的同時(shí)并不影響系統(tǒng)正常運(yùn)行。

wdz4-t4.gif

3.2 內(nèi)嵌式故障檢測(cè)結(jié)構(gòu)

    采用一內(nèi)嵌式故障檢測(cè)結(jié)構(gòu)對(duì)冗余模塊進(jìn)行故障檢測(cè),該方案將故障檢測(cè)單元嵌入到冗余模塊中。圖5(a)所示為三模冗余容錯(cuò)自修復(fù)結(jié)構(gòu)中以邏輯門描述的故障檢測(cè)單元示意圖,該故障檢測(cè)單元由多數(shù)表決器和異或非門構(gòu)成,將多數(shù)表決器的輸出和檢測(cè)的冗余模塊的輸出接到異或非門的輸入端,多數(shù)表決器的輸出作為錯(cuò)誤標(biāo)志信號(hào)FLAG。當(dāng)檢測(cè)的冗余模塊的輸出和表決器的輸出相同,則異或門輸出為邏輯1,表示該檢測(cè)的冗余模塊無故障發(fā)生,若異或門輸出邏輯為0,則表明檢測(cè)的冗余模塊發(fā)生故障或故障檢測(cè)單元自身發(fā)生故障。具有該故障檢測(cè)單元的三模冗余結(jié)構(gòu)如圖5(b)所示。

wdz4-t5.gif

    功能模塊在FPGA內(nèi)部的實(shí)現(xiàn)可以用邏輯資源來表示,如查找表(LUTs)、觸發(fā)器(Flip-Flops)、塊存儲(chǔ)器(BRAM)等。而各邏輯資源的連接和使用通過比特流文件(Bitstream)配置來實(shí)現(xiàn)。比特流文件由若干個(gè)配置幀(frame)組成,功能模塊大小也可通過配置幀的數(shù)量來表示。

    該檢測(cè)單元從細(xì)粒度的角度對(duì)電路輸出的每一位進(jìn)行比較,也就是說對(duì)于一個(gè)輸出信號(hào)為N位的功能模塊來說,采用該故障檢測(cè)單元會(huì)對(duì)每一個(gè)冗余模塊會(huì)產(chǎn)生N個(gè)故障標(biāo)志信號(hào)。然而對(duì)于一個(gè)冗余模塊來說只需要一個(gè)標(biāo)志信號(hào)來表明該模塊是否發(fā)生故障。對(duì)此提出了一種將標(biāo)志信號(hào)進(jìn)行融合的邏輯結(jié)構(gòu),該融合邏輯結(jié)構(gòu)采用FPGA片內(nèi)進(jìn)位鏈邏輯來實(shí)現(xiàn)。如圖6所示,以4位的輸出信號(hào)為例,故障檢測(cè)單元對(duì)TR1模塊的輸出位進(jìn)行檢測(cè),將故障標(biāo)志信號(hào)分別接入進(jìn)位鏈的C0~C3端口。進(jìn)位鏈CIN端口輸入邏輯1,當(dāng)無故障發(fā)生時(shí)進(jìn)位鏈輸出邏輯1,當(dāng)其中一位或者多位錯(cuò)誤發(fā)生時(shí),進(jìn)位鏈中的二選一選擇器選擇故障標(biāo)志信號(hào)進(jìn)行傳遞,進(jìn)位鏈輸出邏輯0,表示TR1模塊發(fā)生故障。對(duì)于模塊輸出信號(hào)位數(shù)少于4位的情況,可以將進(jìn)位鏈空閑的輸入端輸入邏輯1即可。對(duì)于模塊輸出信號(hào)位數(shù)大于4位的情況,可以將前一進(jìn)位鏈的標(biāo)志輸出FLAG接入后一進(jìn)位鏈的CIN輸入端,將進(jìn)位鏈串行連接。

wdz4-t6.gif

4 實(shí)驗(yàn)設(shè)計(jì)與分析

    本節(jié)中將上文提出的故障自修系統(tǒng)在Xilinx  XC6VLX240T-1FF1156 FPGA上進(jìn)行設(shè)計(jì)實(shí)現(xiàn),實(shí)驗(yàn)中靜態(tài)區(qū)域包含了一基于MicroBlaze核的片上微處理器系統(tǒng),該微處理器系統(tǒng)主要負(fù)責(zé)與上位機(jī)進(jìn)行交互、響應(yīng)重構(gòu)請(qǐng)求、控制片外存儲(chǔ)器讀取比特文件數(shù)據(jù)和控制內(nèi)部配置訪問端口(ICAP)對(duì)重構(gòu)區(qū)域進(jìn)行重配置等任務(wù)。動(dòng)態(tài)區(qū)域中將ITC99 benchmark電路中8個(gè)不同粒度的標(biāo)準(zhǔn)電路進(jìn)行冗余設(shè)計(jì),以分析不同粒度模塊的故障自修復(fù)時(shí)間。

4.1 FPGA系統(tǒng)設(shè)計(jì)流程

    實(shí)驗(yàn)中對(duì)系統(tǒng)進(jìn)行設(shè)計(jì)實(shí)現(xiàn)采用的是基于Xilinx ISE開發(fā)工具的設(shè)計(jì)流程,設(shè)計(jì)流程如圖7所示。在ISE頂層設(shè)計(jì)規(guī)劃中對(duì)系統(tǒng)各模塊進(jìn)行劃分,定義系統(tǒng)中的各靜態(tài)模塊和動(dòng)態(tài)模塊,并對(duì)動(dòng)態(tài)模塊進(jìn)行冗余保護(hù)設(shè)計(jì)。片上微處理器系統(tǒng)在Xilinx的XPS設(shè)計(jì)工具中進(jìn)行設(shè)計(jì)搭建,并在SDK設(shè)計(jì)工具中對(duì)微處理器系統(tǒng)進(jìn)行軟件功能編譯,PlanAhead設(shè)計(jì)工具可通過圖形界面(GUI)對(duì)FPGA進(jìn)行早期分析和布局規(guī)劃功能,施加物理約束,分析布線和時(shí)序的結(jié)果。實(shí)驗(yàn)中各動(dòng)態(tài)模塊的區(qū)域劃分在PlanAhead中進(jìn)行設(shè)計(jì)。PlanAhead中比特流文件生成完成后,需要進(jìn)行軟硬件協(xié)同處理,即將XPS生成的塊存儲(chǔ)器映射文件(*.bmm)、SDK生成的可執(zhí)行文件(*.elf)和PlanAhead生成的全局比特流文件合為一個(gè)新的比特流文件,借助Xilinx命令行工具ISE Design Suite Command Prompt,通過命令指令合成最終的比特流文件。

wdz4-t7.gif

4.2 實(shí)驗(yàn)結(jié)果分析

    實(shí)驗(yàn)中各動(dòng)態(tài)模塊的區(qū)域劃分如圖8所示,動(dòng)態(tài)區(qū)域內(nèi)的邏輯資源能夠滿足各模塊功能實(shí)現(xiàn)。各動(dòng)態(tài)模塊的資源開銷如表1所示,由實(shí)驗(yàn)結(jié)果可知,模塊粒度越小其冗余設(shè)計(jì)中表決器和故障檢測(cè)結(jié)構(gòu)所占的資源比例則越大,即系統(tǒng)模塊粒度劃分越小、重構(gòu)區(qū)域劃分越多,則容錯(cuò)自修復(fù)設(shè)計(jì)所帶來的額外資源開銷越大。

wdz4-t8.gif

wdz4-b1.gif

    各動(dòng)態(tài)模塊重構(gòu)時(shí)間花費(fèi)表2所示。實(shí)驗(yàn)中所采取的故障注入方式同樣采取動(dòng)態(tài)重構(gòu)方式,即通過FPGA的內(nèi)部配置訪問通道(ICAP)動(dòng)態(tài)地對(duì)各模塊進(jìn)行錯(cuò)誤配置來實(shí)現(xiàn)。實(shí)驗(yàn)中故障檢測(cè)方案采用上文所提出的內(nèi)嵌式故障檢測(cè)結(jié)構(gòu),其故障檢測(cè)延遲與信號(hào)在進(jìn)位鏈中的傳播延遲相關(guān),即和進(jìn)位鏈的串聯(lián)個(gè)數(shù)相關(guān),而進(jìn)位鏈中信號(hào)傳播延遲為納秒級(jí),遠(yuǎn)小于模塊重構(gòu)時(shí)間,可認(rèn)為模塊的自修復(fù)時(shí)間近似于模塊的重構(gòu)時(shí)間。由實(shí)驗(yàn)結(jié)果可看出模塊重構(gòu)時(shí)間與模塊占用資源數(shù)和模塊重構(gòu)區(qū)域大小成正比,即模塊占用資源數(shù)越多,其劃分的最小重構(gòu)區(qū)域則越大,模塊重構(gòu)時(shí)間花費(fèi)越大。而同時(shí),功能模塊劃分越小,其進(jìn)行冗余設(shè)計(jì)時(shí)所帶來的額外資源開銷比例則越大。故在系統(tǒng)設(shè)計(jì)時(shí),需要綜合考慮資源分配情況和故障修復(fù)時(shí)間要求,合理地進(jìn)行模塊粒度劃分,實(shí)現(xiàn)粗粒度和細(xì)粒度的靈活組合。

wdz4-b2.gif

5 結(jié)論

    本文提出了一種基于SRAM型FPGA的實(shí)時(shí)容錯(cuò)自修復(fù)系統(tǒng)結(jié)構(gòu)和設(shè)計(jì)方法。該設(shè)計(jì)方法將系統(tǒng)分為若干功能模塊,采用粗粒度三模冗余結(jié)構(gòu)和細(xì)粒度三模冗余結(jié)構(gòu)并結(jié)合動(dòng)態(tài)重構(gòu)對(duì)系統(tǒng)進(jìn)行容錯(cuò)自修復(fù)設(shè)計(jì),實(shí)驗(yàn)結(jié)果表明該設(shè)計(jì)結(jié)構(gòu)下故障修復(fù)時(shí)間短,系統(tǒng)的可靠性得到有效提高。在系統(tǒng)設(shè)計(jì)時(shí),可以綜合考慮資源分配情況和故障修復(fù)時(shí)間要求,合理進(jìn)行模塊粒度劃分,實(shí)現(xiàn)粗粒度和細(xì)粒度的靈活組合。 

參考文獻(xiàn)

[1] 潘雄,鄧威,苑政國(guó),等.SRAM型FPGA單粒子隨機(jī)故障注入模擬與評(píng)估[J].微電子學(xué)與計(jì)算機(jī),2018,35(7):29-33.

[2] 馮彥君,華更新,劉淑芬.航天電子抗輻射研究綜述[J].宇航學(xué)報(bào),2007,28(5):1071-1080.

[3] DEMIRCI M,REVIRIEGO P,MAESTRO J A.Implementing double error correction orthogonal latin squares codes in SRAM-based FPGAs[J].Microelectronics Reliability,2016,56:221-227.

[4] KOESTER M,LUK W,HAGEMEYER J,et al.Design optimizations for tiled partially reconfigurable systems[J].IEEE Transactions on Very Large Scale Integration Systems,2011,19(6):1048-1061.

[5] KOREN I,KRISHNA C M.Fault-tolerant systems[M].Morgan Kaufmann Publishers Inc.,2007.

[6] BAO S,YAN H,CHI Q,et al.A FPGA-Based reconfigurable data acquisition system for industrial sensors[J].IEEE Transactions on Industrial Informatics,2017,13(4):1503-1512.

[7] 鄔貴明.FPGA矩陣計(jì)算并行算法與結(jié)構(gòu)[D].長(zhǎng)沙:國(guó)防科學(xué)技術(shù)大學(xué),2011.

[8] 姚睿,王友仁,于盛林,等.具有在線修復(fù)能力的強(qiáng)容錯(cuò)三模冗余系統(tǒng)設(shè)計(jì)及實(shí)驗(yàn)研究[J].電子學(xué)報(bào),2010,38(1):177-183.

[9] 王宏宇.基于FPGA的片上電路進(jìn)化設(shè)計(jì)研究[D].石家莊:河北師范大學(xué),2017.

[10] KONDELOVA A,CUNTALA J.Time models of dynamic and static reconfiguration in FPGAs[C].Proceedings of ELEKTRO,2014:451-454.

[11] RODRIGUES T,VESTIAS M.Using dynamic reconfiguration to reduce the area of a JPEG decoder on FPGA[C].Proceedings of 2015 Euromicro Conference on Digital System Design,2015:65-71.

[12] 張小林,丁磊,顧黎明.基于三層級(jí)低開銷的FPGA多比特翻轉(zhuǎn)緩解技術(shù)[J].電子技術(shù)應(yīng)用,2018,44(4):61-64.

[13] 佟昕,于勇,趙寶珍,等.基于DMR-CED容錯(cuò)方法的多相結(jié)構(gòu)數(shù)字下變頻SEU防護(hù)設(shè)計(jì)[J].遙測(cè)遙控,2018,39(4):56-61.

[14] 王銳,段小虎.一種具備故障自恢復(fù)能力的容錯(cuò)計(jì)算機(jī)架構(gòu)設(shè)計(jì)[J].信息通信,2017(4):72-73.

[15] RUPE J W.Reliability of computer systems and networks fault tolerance,analysis,and design[M].John Wiley & Sons,Inc.,2003:586-587.



作者信息:

徐偉杰1,謝永樂2,彭禮彪2,沈北辰3

(1.長(zhǎng)安大學(xué) 信息工程學(xué)院,陜西 西安710064;

2.電子科技大學(xué) 自動(dòng)化工程學(xué)院,四川 成都611731;3.四川大學(xué) 軟件學(xué)院,四川 成都610207)

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
主站蜘蛛池模板: 亚洲a区在线观看 | 午夜影院在线观看免费 | 国产网站黄 | 日韩免费网站 | 丰满少妇人妻无码专区 | 东北老女人av | 色视频欧美一区二区三区 | 精品国偷自产国产一区 | 男女吃奶做爰猛烈紧视频 | 精品无码一区二区三区 | 国产h视频在线观看 | 欧美精品成人a区在线观看 欧美精品成人久久 | 福利视频大全 | 成人欧美一区二区三区视频 | 日av一区 | 狠狠色丁香婷婷综合潮喷 | 国产av国片精品jk制服丝袜 | 在线亚洲欧美 | 激情内射日本一区二区三区 | 一二区在线观看 | 国产精品xxxxxx | 一级性毛片| 99久久综合狠狠综合久久止 | 国产素人自拍 | 免费观看黄色一级视频 | 国产精品免费视频网站 | 欧美在线网 | 成人性生交大片免费看中文 | 亚洲欧洲精品一区二区 | 伊人涩 | 国产精品久久久久久爽爽爽 | 一区二区精品在线观看 | 久久在线免费 | 女性高爱潮有声视频 | 国产精品一区二区性色av | 人人干免费 | 国产69精品久久久久毛片 | 情一色一乱一欲一区二区 | 激情av一区二区 | 青娱乐99 | 色综合久久久无码中文字幕波多 | 亚洲深深色噜噜狠狠爱网站 | 亚欧色视频 | 亚洲看片网 | 色就色综合 | 午夜爽爽爽爽技女8888 | www.亚洲国产 | 久久久久久免费精品 | 日韩一区二区三区不卡 | videosgratis极品另类灌满高清资源 | 亚洲午夜成aⅴ人片 | 成人动漫视频在线观看 | 中文在线中文a | 欧美色一区二区三区在线观看 | 韩国19禁无遮挡啪啪无码网站 | www插插插无码免费视频网站 | 中文字幕第一页在线 | 欧美午夜精品久久久 | 不卡中文一二三区 | 无码丰满熟妇juliaann与黑人 | 亚洲欧美一区二区三区国产精品 | 亚洲自偷自拍另类第1页 | 日本特级黄色录像 | 日本毛片在线观看 | 性猛交娇小69hd | a亚洲天堂 | 色综合久久无码五十路人妻 | 日韩色婷婷| 欧美偷拍另类 | 国产福利小视频在线观看 | 免费一级全黄裸片 | 成人av一区二区三区 | 精品成人一区二区三区四区 | sm国产在线调教视频 | 黄色国产精品视频 | 91在线视频| 91免费在线播放 | 黄色三级三级 | 国产欧美日韩综合精品一 | 国产乱妇4p交换乱免费视频 | 桃色网址 | 黑人爱爱视频 | 精品久久久爽爽久久男人和男人 | 中文在线一区 | 日本人dh亚洲人ⅹxx | 一级做a爰片 | 91亚洲精华| 国产一区二区三区免费播放 | 色老头一区 | 国产精品suv一区二区69 | www欧美精品 | 极品少妇xxx | www.香蕉视频在线观看 | 性做久久久久久久免费看 | 精品综合久久久 | 熟女丰满老熟女熟妇 | 91精品系列| 黄色亚洲片 | 国产素人在线观看 | 亚洲香蕉精品 | 亚洲精品日韩丝袜精品 | 久久在线视频免费观看 | 性高潮影院 | 成人国产一区二区三区精品 | 久久国产精品无码网站 | 国产 日韩 欧美 制服丝袜 | 欧美日韩一区精品 | 91精产国品一二三区在线观看 | 亚洲另类激情综合偷自拍图 | 天天艹天天 | 国产精品一线天 | av影院在线 | 动漫精品专区一区二区三区 | 国产日韩在线观看一区 | 97成人在线 | 欧美做爰性生交视频 | 国产精品日韩欧美一区二区三区 | 久久免费视频播放 | 久久精品丝袜高跟鞋 | 男人用嘴添女人私密视频 | 激情久久av一区av二区av三区 | 午夜在线视频免费 | 亚洲一区二区三区在线看 | 黄色天堂av | 自拍视频一区二区 | 免费看一级黄色片 | 伊人黄色片 | 欧美综合天天夜夜久久 | 国产永久视频 | 性色视频| 国内精品久久久久久久久久久久 | 国产女主播福利 | 亚洲色大成网站www久久九九 | 婷婷丁香五月中文字幕 | 亚洲黄色小说图片 | 日本a级c片免费看三区 | 国产精品手机在线观看 | 色婷婷成人网 | 黄色软件视频大全 | 欧美综合在线视频 | 日韩国产精品一区二区三区 | 毛片日韩 | 性裸体bbwbbwbbwbbw | 国产无套粉嫩白浆在线 | 亚洲精品视频在线观看免费视频 | 怡红院一区 | 女同另类之国产女同 | 国产精品偷伦视频免费观看了 | 国产成人久久久精品免费澳门 | 日本xxxxxxxxx8泡妞 | 狠狠躁18三区二区一区张津瑜 | 日韩成人无码一区二区三区 | 亚洲欧美久久久 | 又粗又大内射免费视频小说 | 亚洲第二页 | 在线 丝袜 欧美 日韩 制服 | 无码国产成人午夜电影在线观看 | 欧美亚洲一区二区三区 | 国产成人精品一区二区三区 | 欧美日本韩国一区 | 又大又粗又爽的少妇免费视频 | 成年人免费网站 | 久久精品国产精品亚洲毛片 | 九九九九久久久久 | 女人被狂躁c到高潮喷水一区二区 | 美女露隐私免费网站 | 欧美一区二区三区久久久 | 久久人人爽人人爽人人片亚洲 | 欧美一区2区 | 内射国产内射夫妻免费频道 | 免费观看全黄做爰的视频 | 亚洲国产成人女毛片在线主播 | 中文字幕国产视频 | 一本大道无码日韩精品影视_ | 欧美男人天堂网 | 五十路亲子中出在线观看 | 超碰在线c | 色妞网| 大地资源网中文第五页 | 天天操妹子 | 亚洲s色大片在线观看 | 亚洲va中文字幕无码久久不卡 | 中文字幕一区二区三区在线视频 | 亚洲午夜1000理论片aa | 四虎影视免费 | 新国产三级在线观看播放 | 国产91欧美 | 亚洲日韩中文字幕无码一区 | 色老头网址 | 欧美精品二区三区 | 亚洲欧美在线成人 | 国产一级淫片a免费播放口欧美 | 巨人精品福利官方导航 | 狠狠撸狠狠干 | 国产精品欧美久久久久一区二区 | 国产成人午夜福利在线观看 | 小毛片在线观看 | 六月婷婷综合 | 精品国产999 | 亚州视频在线 | 久久午夜夜伦鲁鲁片不卡 | 中文字幕在线精品视频入口一区 | 天天射天天色天天干 | 丰满少妇小早川怜子影片了 | 日韩成人高清视频在线观看 | 亚洲最大成人网站 | 国产精品91视频 | 亚洲成色www久久网站 | 中国女人性猛交 | 国产青青 | 久在线播放 | 手机看片1024在线 | 人人妻人人藻人人爽欧美一区 | 岛国在线视频 | 一级欧美一级日韩片 | 国产麻豆影视 | 色a在线观看 | 91中文| 中文字幕国产剧情 | 国产精品99久久久久久武松影视 | 亚洲色图制服丝袜 | 麻豆av免费在线 | 一道本av在线 | 日韩欧美激情兽交 | 免费黄色一级大片 | 精品中文字幕在线 | 强制中出し~大桥未久在线 | 成人免费视频国产免费 | 国产69精品久久久久999小说 | 好吊视频一区二区三区 | 日韩av福利在线观看 | 国产av一区二区三区最新精品 | 日韩av中文 | 国产精品女同 | 国产精品夜夜春夜夜爽久久小 | 东北少妇和黑人3p视频 | 色天天干 | 久久精品国产亚洲a∨蜜臀 久久精品国产亚洲沈樵 | 51久久成人国产精品麻豆 | 最新国产网站 | 国产精品91在线 | 爱爱视频免费看 | 男女做爰猛烈叫床爽爽免费网站 | 亚洲av禁18成人毛片一级在线 | 亚洲一区中文字幕永久在线 | 国产精品美女一区二区视频 | 亚洲性猛交xxxx | 日本a大片| 国产爆初菊在线观看免费视频网站 | 羞羞国产一区二区三区四区 | 99精品偷拍在线中文字幕 | 无码人妻久久久一区二区三区 | 蜜臀av免费一区二区三区 | 免费国产在线观看麻豆 | 调教一区二区 | 国产l精品国产亚洲区在线观看 | 日本免费一区视频 | 亚洲论理 | 九色蝌蚪porny | 欧美成本人视频 | 无遮挡又黄又刺激的视频 | 污视频免费在线观看 | 国产欧美精品区一区二区三区 | 欧美视频第二页 | 中文字幕日韩精品欧美一区 | av亚洲产国偷v产偷v自拍麻豆 | 久久永久视频 | 欧美三级乱人伦电影 | 欧美一级大片免费 | 国产成人综合久久精品免费 | 婷婷六月综合网 | 2018久久| aaa亚洲精品 | 免费观看成年人视频 | 亚洲熟妇国产熟妇肥婆 | 国产剧情演绎av | 欧美成人影音 | 日韩美女做爰高潮免费 | 国产精品久久久久久人妻 | 亚洲加勒比无码一区二区 | 国产午夜精品久久久久免费视 | 国产一级片免费 | 米奇777超碰欧美日韩亚洲 | 成人av专区 | 嫩草影院黄色 | 午夜精品久久久久久久久久久久 | 特大黑人巨交吊性xx | 亚洲最大成人在线视频 | 在线欧美成人 | 催眠淫辱の教室3在线观看 村上凉子在线播放av88 | 国偷自产av一区二区三区小尤奈 | 永久免费不卡在线观看黄网站 | 中文字幕人妻无码一区二区三区 | 亚洲黄色毛片视频 | 精品一区二区三区在线观看视频 | 男女啪啪猛烈无遮挡猛进猛出 | 中国美女囗交视频 | 中文字幕在线日本 | 国产夫妻久久 | 草草影院在线播放 | 国产精品另类激情久久久免费 | 男女做爰真人视频直播 | 日韩女优网站 | 国内精品久久久久久影视8 国内精品久久久久影视老司机 | 免费国产黄网站在线观看可以下载 | 亚洲精品久久久久久一区二区 | 国产无遮挡成人免费视频 | 日本aⅴ在线观看 | 台湾av在线 | 乳霸冲田杏梨中文字幕担心学生的 | 日本不卡中文字幕 | 30岁少妇又紧又嫩 | 成人免费视频一区 | 国产v亚洲 | 国产清纯白嫩初高生视频在线观看 | 青青青国产 | 婷婷狠狠干 | 思思久久99热只有频精品66 | 亚洲人成网站精品片在线观看 | 全免费又大粗又黄又爽少妇片 | 一本一道久久综合久久 | 国产女人18毛片水18精 | 日本少妇中文字幕 | 天天视频污 | 国产精品亚洲二区在线观看 | 亚洲午夜精品久久 | 黄色一级片视频 | 欧美三级在线视频 | 狼人综合伊人 | 看全黄大黄大色大片美女 | 亚洲精品福利视频 | 伊人免费视频 | 91精品国产综合久久久蜜臀粉嫩 | 九色中文字幕 | 久久丫精品久久丫 | 亚洲日韩久久综合中文字幕 | 性较小国产交xxxxx视频 | 最新国产在线拍揄自揄视频 | 性欧美在线视频观看 | 一本色道久久99精品综合蜜臀 | 午夜精品一二三区 | 美女视频黄a视频全免费 | 已婚少妇露脸日出白浆 | 免费一级做a爰片久久毛片潮 | 亚洲熟妇无码久久精品 | 国产精品呻吟久久av凹凸 | 中文字幕日本 | 国产女高清在线看免费观看 | 真实强推精品半推半就 | 欧美性受xxxx黑人xyx性爽 | 亚洲国产剧情 | 亚洲精品国偷拍自产在线观看蜜臀 | 91免费视频观看 | 中国少妇乱子伦视频播放 | 久久国产精品99久久久久久丝袜 | 久久99热婷婷精品一区 | 一本色道久久亚洲精品加勒比 | 无码日韩人妻精品久久蜜桃 | 国产乱人偷精品免费视频 | 日韩高清一区 | 噜噜狠狠狠狠综合久久 | 亚洲国产精品女人 | 毛片久久久久久久 | 亚洲高清视频一区二区三区 | 思思久久99热久久精品66 | 成人午夜又粗又硬又大 | 日本欧美在线视频 | 99re8这里有精品热视频免费 | 伊人国产精品 | 91性高湖久久久久久久久_久久99 | 俄罗斯精品一区二区 | 亚洲国产成人一区二区精品区 | 亚洲国产午夜精品理论片 | 亚洲天天做 | 色婷婷久久久亚洲一区二区三区 | 日韩av免费在线观看 | 91成人福利视频 | 亚洲国产精品欧美久久 | 激情综合色综合啪啪开心 | 久久网站av | 人妻丰满熟妇aⅴ无码 | 另类天堂网不卡另类系列 | 2024av天堂手机在线观看 | 好吊一区二区三区 | 国产超碰人人做人人爽aⅴ 国产超碰人人做人人爽av牛牛 | 简单av网| 精品国产黄色片 | 第九色婷婷 | 日韩成人精品一区二区 | 亚洲第一天堂影院 | 少妇性l交大片免潘金莲 | 久久潮| 亚洲国产中文在线二区三区免 | 日韩欧美极品 | 脱岳裙子从后面挺进去在线观看 | 免费国产乱理伦片在线观看 | 99中文字幕在线观看 | 麻豆免费看片 | 久久综合给合久久狠狠狠97色 | 天天插天天爱 | 乱码精品一区二区三区 | 天天毛片 | 久久久无码一区二区三区 | 国产毛片18 | 国产精品精品久久久久久甜蜜软件 | 国产白嫩初高中害羞小美女 | 少妇性荡欲视频 | 美国少妇性做爰 | av在线亚洲天堂 | 少妇中文字幕乱码亚洲影视 | 大尺度做爰呻吟舌吻情头 | 爆操网站 | 日日鲁夜夜视频热线播放 | 天堂а√在线资源在线 | 国产在线黄 | 玩弄放荡人妻一区二区三区 | 色欲久久综合亚洲精品蜜桃 | 探花视频在线版播放免费观看 | 波多野吉衣中文字幕 | 91国在线视频| 看免费黄色大片 | 国产精品久草 | 肉色丝袜一区二区 | 亚洲最新在线观看 | 久久深夜 | 娜娜麻豆国产电影 | 日本高清视频www在线观看 | 亚洲中文字幕久久久一区 | 国产美女特级嫩嫩嫩bbb | 99久久国产综合 | 国产成人a亚洲精品 | 亚洲一区二区无码偷拍 | 精品一区二区超碰久久久 | 中文字幕奈奈美抱公侵犯 | 国产精品无码久久久久久 | 一区二区三区视频 | 国产极品美女高潮抽搐免费网站 | 日本免费一区二区三区四区五区 | 久久久久久视 | 天天爱天天草 | 亚洲日日骚 | 中文字幕 人妻熟女 | 97伦伦午夜电影理伦片 | 亚洲激情精品 | 奇米影视第四色首页 | 少妇资源 | 亚洲色图另类小说 | 91精品国产闺蜜国产在线闺蜜 | 亚洲最新中文字幕 | 成人三级影院 | 精品在线不卡 | 激情婷婷综合 | 思思久久99热只有频精品66 | 少妇饥渴难耐 | 91丨九色丨丰满人妖 | 亚洲一区在线看 | 三级艳丽杨钰莹三级 | 精品在线观看视频 | 久久一区亚洲 | www在线视频| 免费一级片在线观看 | 九色91丨porny丨丝袜 | 裸体黄色片| 99久久久精品免费观看国产 | 99视频在线 | 日韩高清在线播放 | 国产免费久久精品国产传媒 | 日本成人福利视频 | 羞羞视频网站 | h片免费观看 | 台湾佬自拍偷区亚洲综合 | 国产精品高潮呻吟三区四区 | 成人免费版 | 国产精品爽黄69天堂a | 国产欧美精品一区 | 国产激情视频一区二区三区 | 91精品婷婷国产综合久久 | 在线视频99 | 国产一区日韩二区欧美三区 | 人妻熟女欲求不满在线 | 中文字幕在线播出 | 国产另类xxxx| 波多野结衣在线观看一区二区 | 综合av | 伊人五月婷婷 | 久久久久久97免费精品一级小说 | 最新中文字幕免费视频 | 国产精品乱码久久久久久久久 | 国产精品黑丝 | 国产精品无码av无码 | 日韩无砖专区2021嘟嘟网 | 黑人巨大精品欧美一区 | 九色porny视频 | 精品久久久久久久久久久下田 | 亚洲精品aaaa乱码 | 性猛交xxxx乱大交中国 | 欧美亚色| 无码高潮爽到爆的喷水视频app | 国产66av | 搡老女人一区二区三区视频tv | 午夜寂寞少妇aaa片毛片 | 狠狠躁夜夜躁人人爽天天不卡软件 | 亚洲精品国产91 | 欧洲人妻丰满av无码久久不卡 | 无尽3d精品hentai在线视频 | 免费看欧美片 | 永久免费的网站入口 | 精产国品一二三产品99麻豆 | 免费久久网站 | 亚洲人成电影在线观看影院 | 成人免费毛片片v | 欧美精品99久久久久久人 | 色欲av永久无码精品无码蜜桃 | 久久亚洲欧美国产精品 | 一区二区福利视频 | 人人妻人人澡人人爽精品日本 | 一级国产片 | 在线黄视频 | 91精品久久久久久久91蜜桃 | 国产精品制服诱惑 | 91高清在线 | 双性美人强迫叫床喷水h | 人人玩人人弄人人曰 | 丰满人妻熟妇乱又伦精品 | 夜噜噜 | 亚洲精品中文字幕久久久久 | 中文字幕在线乱 | 日日艹夜夜艹 | 欧色av| 亚洲蜜桃v妇女 | 欧美成人综合在线 | 亚洲丝袜一区二区 | 超碰人人做 | 国产在线不卡一区二区三区 | 国产美女视频免费观看的软件 | 乌克兰少妇xxxx做受野外 | av亚洲精华国产精华精 | 国产女无套免费网在线观看 | 少妇精品一区二区 | 国产欧美一区二区视频 | 狠狠躁夜夜躁人人爽视频 | 一边cao一边粗话打奶视频 | 午夜影院免费观看 | www久久亚洲 | 永久免费无码网站在线观看 | 国产乱人伦精品 | 免费a级片在线观看 | 高潮中文字幕 | 欧美日韩不卡在线 | 亚洲品牌自拍一品区9999 | www久久久精品 | 粉嫩av一区二区三区入口 | 国产对白videos麻豆高潮 | 亚洲精品久久久蜜臀av站长工具 | 野花社区www视频最新资源 | 国产高清在线精品一区不卡 | 久久视频热| www成年人视频 | 国内自拍99 | 91蝌蚪91密月 | 911国产视频 | 亚洲va欧美va人人爽午夜 | 最新久久 | jizzjizz在线 | 亚洲精品一区二区精华 | 国产 精品 自在 线免费 | 成 人片 黄 色 大 片 | 久久人人爽人人爽人人片av高清 | 性高湖久久久久久久久aaaaa | 欧美成人免费一区二区三区视频 | 亚洲女人av | 国产成人精品无码免费看夜聊软件 | 国产999精品久久久久久 | 亚洲va中文在线播放免费 | 中文字幕观看 | 中文日韩字幕 | av久操| 国产freexxxx性播放麻豆 | 国产精品国产高清国产av | 欧美日韩精品 | 国产美女精品视频免费播放软件 | 日韩噜噜| 国产91富婆露脸刺激对白 | 91精品国产综合久久久久久久久 | 免费吸乳羞羞网站视频 | 亚洲精品视频免费观看 | 男人一边吃奶一边做爰网站 | 五月天伊人网 | 国产人妖网站 | 超碰人人超碰 | 成人免费无码大片a毛片抽搐色欲 | 亚洲综合久久av一区二区三区 | 女被男啪到哭的视频网站 | 黑人操日本女人视频 | 艳妇臀荡乳欲伦交换h在线观看 | 卡一卡二在线视频 | 激情97综合亚洲色婷婷五 | 久热精品在线观看 | 精品国产一区二区三区久久久蜜月 | www.色天使| yy6080私人伦理一级二级 | 久久国产三级 | 精品96久久久久久中文字幕无 | 国产性猛交普通话对白 | 日色视频| 一区二区国产在线观看 | 男人爱看的网站 | 国产无在线观看软件 | 性少妇videoxxⅹ中国69 | 人人爽久久涩噜噜噜红粉 | 日本无码欧美一区精品久久 | 久久久999精品视频 久久久99久久久国产自输拍 | 天美传煤毛片 | 日日网 | 欧美黑人极品猛少妇色xxxxx |