3atv精品不卡视频,97人人超碰国产精品最新,中文字幕av一区二区三区人妻少妇,久久久精品波多野结衣,日韩一区二区三区精品

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > windows >内容正文

windows

大型web系统数据缓存设计-l转载

發(fā)布時間:2025/4/5 windows 22 豆豆
生活随笔 收集整理的這篇文章主要介紹了 大型web系统数据缓存设计-l转载 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

原文地址:http://www.wmyouxi.com/a/60368.html#ixzz3tGYG9JwC

1.?前言

在高訪問量的web系統(tǒng)中,緩存幾乎是離不開的;但是一個適當、高效的緩存方案設(shè)計卻并不容易;所以接下來將討論一下應用系統(tǒng)緩存的設(shè)計方面應該注意哪些東西,包括緩存的選型、常見緩存系統(tǒng)的特點和數(shù)據(jù)指標、緩存對象結(jié)構(gòu)設(shè)計和失效策略以及緩存對象的壓縮等等,以期讓有需求的同學尤其是初學者能夠快速、系統(tǒng)的了解相關(guān)知識。

?

2.?數(shù)據(jù)庫的瓶頸

2.1?數(shù)據(jù)量

關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)量是比較小的,以我們常用的MySQL為例,單表數(shù)據(jù)條數(shù)一般應該控制在2000w以內(nèi),如果業(yè)務很復雜的話,可能還要低一些。即便是對于Oracle這些大型商業(yè)數(shù)據(jù)庫來講,其能存儲的數(shù)據(jù)量也很難滿足一個擁有幾千萬甚至數(shù)億用戶的大型互聯(lián)網(wǎng)系統(tǒng)。

?

2.2 TPS

在實際開發(fā)中我們經(jīng)常會發(fā)現(xiàn),關(guān)系型數(shù)據(jù)庫在TPS上的瓶頸往往會比其他瓶頸更容易暴露出來,尤其對于大型web系統(tǒng),由于每天大量的并發(fā)訪問,對數(shù)據(jù)庫的讀寫性能要求非常高;而傳統(tǒng)的關(guān)系型數(shù)據(jù)庫的處理能力確實捉襟見肘;以我們常用的MySQL數(shù)據(jù)庫為例,常規(guī)情況下的TPS大概只有1500左右(各種極端場景下另當別論);下圖是MySQL官方所給出的一份測試數(shù)據(jù):

而對于一個日均PV千萬的大型網(wǎng)站來講,每個PV所產(chǎn)生的數(shù)據(jù)庫讀寫量可能要超出幾倍,這種情況下,每天所有的數(shù)據(jù)讀寫請求量可能遠超出關(guān)系型數(shù)據(jù)的處理能力,更別說在流量峰值的情況下了;所以我們必須要有高效的緩存手段來抵擋住大部分的數(shù)據(jù)請求!

?

2.3?響應時間

正常情況下,關(guān)系型數(shù)據(jù)的響應時間是相當不錯的,一般在10ms以內(nèi)甚至更短,尤其是在配置得當?shù)那闆r下。但是就如前面所言,我們的需求是不一般的:當擁有幾億條數(shù)據(jù),1wTPS的時候,響應時間也要在10ms以內(nèi),這幾乎是任何一款關(guān)系型數(shù)據(jù)都無法做到的。

那么這個問題如何解決呢?最簡單有效的辦法當然是緩存!

3.?緩存系統(tǒng)選型

3.1?緩存的類型

3.1.1?本地緩存

本地緩存可能是大家用的最多的一種緩存方式了,不管是本地內(nèi)存還是磁盤,其速度快,成本低,在有些場合非常有效;

但是對于web系統(tǒng)的集群負載均衡結(jié)構(gòu)來說,本地緩存使用起來就比較受限制,因為當數(shù)據(jù)庫數(shù)據(jù)發(fā)生變化時,你沒有一個簡單有效的方法去更新本地緩存;然而,你如果在不同的服務器之間去同步本地緩存信息,由于緩存的低時效性和高訪問量的影響,其成本和性能恐怕都是難以接受的。

3.1.2?分布式緩存

前面提到過,本地緩存的使用很容易讓你的應用服務器帶上“狀態(tài)”,這種情況下,數(shù)據(jù)同步的開銷會比較大;尤其是在集群環(huán)境中更是如此!

分布式緩存這種東西存在的目的就是為了提供比RDB更高的TPS和擴展性,同時有幫你承擔了數(shù)據(jù)同步的痛苦;優(yōu)秀的分布式緩存系統(tǒng)有大家所熟知的MemcachedRedis(當然也許你把它看成是NoSQL,但是我個人更愿意把分布式緩存也看成是NoSQL),還有國內(nèi)阿里自主開發(fā)的Tair等;

對比關(guān)系型數(shù)據(jù)庫和緩存存儲,其在讀和寫性能上的差距可謂天壤之別;memcached單節(jié)點已經(jīng)可以做到15w以上的tpsRedisgooglelevelDB也有不菲的性能,而實現(xiàn)大規(guī)模集群后,性能可能會更高!

所以,在技術(shù)和業(yè)務都可以接受的情況下,我們可以盡量把讀寫壓力從數(shù)據(jù)庫轉(zhuǎn)移到緩存上,以保護看似強大,其實卻很脆弱的關(guān)系型數(shù)據(jù)庫。

?

3.1.3?客戶端緩存

這塊很容易被人忽略,客戶端緩存主要是指基于客戶端瀏覽器的緩存方式;由于瀏覽器本身的安全限制,web系統(tǒng)能在客戶端所做的緩存方式非常有限,主要由以下幾種:

a、?瀏覽器cookie這是使用最多的在客戶端保存數(shù)據(jù)的方法,大家也都比較熟悉;

?

b、?瀏覽器本地緩存;很多瀏覽器都提供了本地緩存的接口,但是由于各個瀏覽器的實現(xiàn)有差異,所以這種方式很少被使用;此類方案有chromeGoogle GearIEuserData、火狐的sessionStorageglobalStorage等;

?

c、?flash本地存儲;這個也是平時比較常用的緩存方式;相較于cookieflash緩存基本沒有數(shù)量和體積的限制,而且由于基于flash插件,所以也不存在兼容性問題;不過在沒有安裝flash插件的瀏覽器上則無法使用;

?

d、?html5的本地存儲;鑒于html5越來越普及,再加上其本地存儲功能比較強大,所以在將來的使用場景應該會越來越多。

?

由于大部分的web應用都會盡量做到無狀態(tài),以方便線性擴容,所以我們能使用的除了后端存儲(DB、NoSQL、分布式文件系統(tǒng)、CDN等)外,就只剩前端的客戶端緩存了。

對客戶端存儲的合理使用,原本每天幾千萬甚至上億的接口調(diào)用,一下就可能降到了每天幾百萬甚至更少,而且即便是用戶更換瀏覽器,或者緩存丟失需要重新訪問服務器,由于隨機性比較強,請求分散,給服務器的壓力也很小!在此基礎(chǔ)上,再加上合理的緩存過期時間,就可以在數(shù)據(jù)準確和性能上做一個很好的折衷。

3.1.4?數(shù)據(jù)庫緩存

這里主要是指數(shù)據(jù)庫的查詢緩存,大部分數(shù)據(jù)庫都是會提供,每種數(shù)據(jù)庫的具體實現(xiàn)細節(jié)也會有所差異,不過基本的原理就是用查詢語句的hash值做key,對結(jié)果集進行緩存;如果利用的好,可以很大的提高數(shù)據(jù)庫的查詢效率!數(shù)據(jù)庫的其他一些緩存將在后邊介紹。

?

3.2?選型指標

現(xiàn)在可供我們選擇使用的(偽)分布式緩存系統(tǒng)不要太多,比如使用廣泛的Memcached、最近炒得火熱的Redis等;這里前面加個偽字,意思是想說,有些所謂的分布式緩存其實仍是以單機的思維去做的,不能算是真正的分布式緩存(你覺得只實現(xiàn)個主從復制能算分布式么?)。

既然有這么多的系統(tǒng)可用,那么我們在選擇的時候,就要有一定的標準和方法。只有有了標準,才能衡量一個系統(tǒng)時好時壞,或者適不適合,選擇就基本有了方向。

下邊幾點是我個人覺的應該考慮的幾個點(其實大部分系統(tǒng)選型都是這么考慮的,并非只有緩存系統(tǒng)):

?

3.2.1?容量

廢話,容量當然是越大越好了,這還用說么,有100G我干嘛還要用10G?其實這么說總要考慮一下成本啦,目前一臺普通的PC Server內(nèi)存128G已經(jīng)算是大的了,再大的話不管是從硬件還是從軟件方面,管理的成本都會增加。單機來講,比如說主板的插槽數(shù)量,服務器散熱、操作系統(tǒng)的內(nèi)存分配、回收、碎片管理等等都會限制內(nèi)存卡的容量;即便使用多機的話,大量內(nèi)存的采購也是很費money的!

有詩云:山不在高,有仙則名;所以內(nèi)存也不在多,夠用就好!每個系統(tǒng)在初期規(guī)劃的時候,都會大致計算一下所要消耗的緩存空間,這主要取決于你要緩存的對象數(shù)量和單個對象的大小。一般來說,你可以采用對象屬性在內(nèi)存中的存儲長度簡單加和的方法來計算單個對象的體積,再乘以緩存對象的數(shù)量和預期增長(當然,這里邊有一個熱點數(shù)據(jù)的問題,這里就不細討論了),大概得出需要使用的緩存空間;之后就可以按照這個指標去申請緩存空間或搭建緩存系統(tǒng)了。

?

3.2.2?并發(fā)量

這里說并發(fā)量,其實還不如說是QPS更貼切一些,因為我們的緩存不是直接面向用戶的,而只面向應用的,所以肯定不會有那個高的并發(fā)訪問(當然,多個系統(tǒng)共用一套緩存那就另當別論了);所以我們關(guān)心的是一個緩存系統(tǒng)平均每秒能夠承受多少的訪問量。

我們之所以需要緩存系統(tǒng),就是要它在關(guān)鍵時刻能抗住我們的數(shù)據(jù)訪問量的;所以,緩存系統(tǒng)能夠支撐的并發(fā)量是一個非常重要的指標,如果它的性能還不如關(guān)系型數(shù)據(jù)庫,那我們就沒有使用的必要了。

對于淘寶的系統(tǒng)來說,我們不妨按照下邊的方案來估算并發(fā)量:

QPS =?PV?×?讀寫次數(shù)/PV?÷?(8?×?60?×?60)

這里我們是按照一天8個小時來計算的,這個值基于一個互聯(lián)網(wǎng)站點的訪問規(guī)律得出的,當然,如果你不同意這個值,可以自己定義。

在估算訪問量的時候,我們不得不考慮一個峰值的問題,尤其是像淘寶、京東這樣大型的電商網(wǎng)站,經(jīng)常會因為一些大的促銷活動而使PVUV沖到平時的幾倍甚至幾十倍,這也正是緩存系統(tǒng)發(fā)揮作用的關(guān)鍵時刻;倍受矚目的12306在站點優(yōu)化過程中也大量的引入了緩存(內(nèi)存文件系統(tǒng))來提升性能。

在計算出平均值之后,再乘以一個峰值系數(shù),基本就可以得出你的緩存系統(tǒng)需要承受的最高QPS,一般情況下,這個系數(shù)定在10以內(nèi)是合理的。

?

3.2.3?響應時間

響應時間當然也是必要的,如果一個緩存系統(tǒng)慢的跟蝸牛一樣,甚至直接就超時了,那和我們使用MySQL也沒啥區(qū)別了。

一般來說,要求一個緩存系統(tǒng)在1ms2ms之內(nèi)返回數(shù)據(jù)是不過分的,當然前提是你的數(shù)據(jù)不會太大;如果想更快的話,那你就有點過分了,除非你是用的本地緩存;因為一般而言,在大型IDC內(nèi)部,一個TCP回環(huán)(不攜帶業(yè)務數(shù)據(jù))差不多就要消耗掉0.2ms0.5ms

大部分的緩存系統(tǒng),由于是基于內(nèi)存,所以響應時間都很短,但是問題一般會出現(xiàn)在數(shù)據(jù)量和QPS變大之后,由于內(nèi)存管理策略、數(shù)據(jù)查找方式、I/O模型、業(yè)務場景等方面的差異,響應時間可能會差異很多,所以對于QPS和響應時間這兩項指標,還要靠上線前充分的性能測試來進一步確認,不能只單純的依賴官方的測試結(jié)果。

?

3.2.4?使用成本

一般分布式緩存系統(tǒng)會包括服務端和客戶端兩部分,所以其使用成本上也要分為兩個部分來講;

首先服務端,優(yōu)秀的系統(tǒng)要是能夠方便部署和方便運維的,不需要高端硬件、不需要復雜的環(huán)境配置、不能有過多的依賴條件,同時還要穩(wěn)定、易維護;

而對于客戶端的使用成本來說,更關(guān)系到程序員的開發(fā)效率和代碼維護成本,基本有三點:單一的依賴、簡潔的配置和人性化的API

另外有一點要提的是,不管是服務端還是客戶端,豐富的文檔和技術(shù)支持也是必不可少的。

?

3.2.5?擴展性

緩存系統(tǒng)的擴展性是指在空間不足的性情況,能夠通過增加機器等方式快速的在線擴容。這也是能夠支撐業(yè)務系統(tǒng)快速發(fā)展的一個重要因素。

一般來講,分布式緩存的負載均衡策略有兩種,一種是在客戶端來做,另外一種就是在服務端來做。

?

客戶端負載均衡

在客戶端來做負載均衡的,諸如前面我們提到的MemcachedRedis等,一般都是通過特定Hash算法將key對應的value映射到固定的緩存服務器上去,這樣的做法最大的好處就是簡單,不管是自己實現(xiàn)一個映射功能還是使用第三方的擴展,都很容易;但由此而來的一個問題是我們無法做到failover。比如說某一臺Memcached服務器掛掉了,但是客戶端還會傻不啦嘰的繼續(xù)請求該服務器,從而導致大量的線程超時;當然,因此而造成的數(shù)據(jù)丟失是另外一回事了。要想解決,簡單的可能只改改改代碼或者配置文件就ok了,但是像Java這種就蛋疼了,有可能還需要重啟所有應用以便讓變更能夠生效。

如果線上緩存容量不夠了,要增加一些服務器,也有同樣的問題;而且由于hash算法的改變,還要遷移對應的數(shù)據(jù)到正確的服務器上去。

?

服務端負載均衡

如果在服務端來做負載均衡,那么我們前面提到的failover的問題就很好解決了;客戶端能夠訪問的所有的緩存服務器的ip和端口都會事先從一個中心配置服務器上獲取,同時客戶端會和中心配置服務器保持一種有效的通信機制(長連接或者HeartBeat),能夠使后端緩存服務器的ip和端口變更即時的通知到客戶端,這樣,一旦后端服務器發(fā)生故障時可以很快的通知到客戶端改變hash策略,到新的服務器上去存取數(shù)據(jù)。

但這樣做會帶來另外一個問題,就是中心配置服務器會成為一個單點。解決辦法就將中心配置服務器由一臺變?yōu)槎嗯_,采用雙機stand by方式或者zookeeper等方式,這樣可用性也會大大提高。

?

3.2.6?容災

我們使用緩存系統(tǒng)的初衷就是當數(shù)據(jù)請求量很大,數(shù)據(jù)庫無法承受的情況,能夠通過緩存來抵擋住大部分的請求流量,所以一旦緩存服務器發(fā)生故障,而緩存系統(tǒng)又沒有一個很好的容災措施的話,所有或部分的請求將會直接壓倒數(shù)據(jù)庫上,這可能會直接導致DB崩潰。

并不是所有的緩存系統(tǒng)都具有容災特性的,所以我們在選擇的時候,一定要根據(jù)自己的業(yè)務需求,對緩存數(shù)據(jù)的依賴程度來決定是否需要緩存系統(tǒng)的容災特性。

?

3.3?常見分布式緩存系統(tǒng)比較

3.3.1 Memcached

Memcached嚴格的說還不能算是一個分布式緩存系統(tǒng),個人更傾向于將其看成一個單機的緩存系統(tǒng),所以從這方面講其容量上是有限制的;但由于Memcached的開源,其訪問協(xié)議也都是公開的,所以目前有很多第三方的客戶端或擴展,在一定程度上對Memcached的集群擴展做了支持,但是大部分都只是做了一個簡單Hash或者一致性Hash

由于Memcached內(nèi)部通過固定大小的chunk鏈的方式去管理內(nèi)存數(shù)據(jù),分配和回收效率很高,所以其讀寫性能也非常高;官方給出的數(shù)據(jù),64KB對象的情況下,單機QPS可達到15w以上。

Memcached集群的不同機器之間是相互獨立的,沒有數(shù)據(jù)方面的通信,所以也不具備failover的能力,在發(fā)生數(shù)據(jù)傾斜的時候也無法自動調(diào)整。

Memcached的多語言支持非常好,目前可支持C/C++JavaC#PHPPythonPerlRuby等常用語言,也有大量的文檔和示例代碼可供參考,而且其穩(wěn)定性也經(jīng)過了長期的檢驗,應該說比較適合于中小型系統(tǒng)和初學者使用的緩存系統(tǒng)。

?

3.3.2 Redis

Redis也是眼下比較流行的一個緩存系統(tǒng),在國內(nèi)外很多互聯(lián)網(wǎng)公司都在使用(新浪微博就是個典型的例子),很多人把Redis看成是Memcached的替代品。

下面就簡單介紹下Redis的一些特性;

Redis除了像Memcached那樣支持普通的<k,v>類型的存儲外,還支持ListSetMap等集合類型的存儲,這種特性有時候在業(yè)務開發(fā)中會比較方便;

Redis源生支持持久化存儲,但是根據(jù)很多人的使用情況和測試結(jié)果來看,Redis的持久化是個雞肋,就連官方也不推薦過度依賴Redis持久化存儲功能。就性能來講,在全部命中緩存時,Redis的性能接近memcached,但是一旦使用了持久化之后,性能會迅速下降,甚至會相差一個數(shù)量級。

Redis支持“集群”,這里的集群還是要加上引號的,因為目前Redis能夠支持的只是Master-Slave模式;這種模式只在可用性方面有一定的提升,當主機宕機時,可以快速的切換到備機,和MySQL的主備模式差不多,但是還算不上是分布式系統(tǒng);

此外,Redis支持訂閱模式,即一個緩存對象發(fā)生變化時,所有訂閱的客戶端都會收到通知,這個特性在分布式緩存系統(tǒng)中是很少見的。

在擴展方面,Redis目前還沒有成熟的方案,官方只給出了一個單機多實例部署的替代方案,并通過主備同步的模式進行擴容時的數(shù)據(jù)遷移,但是還是無法做到持續(xù)的線性擴容。

?

3.3.3?淘寶Tair

Tair是淘寶自主開發(fā)并開源的一款的緩存系統(tǒng),而且也是一套真正意義上的分布式并且可以跨多機房部署,同時支持內(nèi)存緩存和持久化存儲的解決方案;我們數(shù)平這邊也有自己的改進版本。

Tair實現(xiàn)了緩存框架和緩存存儲引擎的獨立,在遵守接口規(guī)范的情況下,可以根據(jù)需求更換存儲引擎,目前支持mdb(基于memcached)、rdb(基于Redis)、kdb(基于kyoto cabinet,持久存儲,目前已不推薦使用)和rdb(基于goooglelevelDB,持久化存儲)幾種引擎;

由于基于mdbrdb,所以Tair能夠間距兩者的特性,而且在并發(fā)量和響應時間上,也接近二者的裸系統(tǒng)。

在擴展性和容災方面,Tair自己做了增強;通過使用虛擬節(jié)點Hash(一致性Hash的變種實現(xiàn))的方案,將key通過Hash函數(shù)映射到到某個虛擬節(jié)點(桶)上,然后通過中心服務器(configserver)來管理虛擬節(jié)點到物理節(jié)點的映射關(guān)系;這樣,Tair不但實現(xiàn)了基于Hash的首次負載均衡,同時又可以通過調(diào)整虛擬節(jié)點和物理節(jié)點的映射關(guān)系來實現(xiàn)二次負載均衡,這樣有效的解決了由于業(yè)務熱點導致的訪問不均衡問題以及線性擴容時數(shù)據(jù)遷移麻煩;此外,Tair的每臺緩存服務器和中心服務器(configserver)也有主備設(shè)計,所以其可用性也大大提高。

?

3.3.4?內(nèi)存數(shù)據(jù)庫

這里的內(nèi)存數(shù)據(jù)庫只要是指關(guān)系型內(nèi)存數(shù)據(jù)庫。一般來說,內(nèi)存數(shù)據(jù)庫使用場景可大致分為兩種情況:

一是對數(shù)據(jù)計算實時性要求比較高,基于磁盤的數(shù)據(jù)庫很難處理;同時又要依賴關(guān)系型數(shù)據(jù)庫的一些特性,比如說排序、加合、復雜條件查詢等等;這樣的數(shù)據(jù)一般是臨時的數(shù)據(jù),生命周期比較短,計算完成或者是進程結(jié)束時即可丟棄;

另一種是數(shù)據(jù)的訪問量比較大,但是數(shù)據(jù)量卻不大,這樣即便丟失也可以很快的從持久化存儲中把數(shù)據(jù)加載進內(nèi)存;

但不管是在哪種場景中,存在于內(nèi)存數(shù)據(jù)庫中的數(shù)據(jù)都必須是相對獨立的或者是只服務于讀請求的,這樣不需要復雜的數(shù)據(jù)同步處理。

3.4?緩存的設(shè)計與策略

3.4.1?緩存對象設(shè)計

3.4.1.1?緩存對象粒度

對于本地磁盤或分布是緩存系統(tǒng)來說,其緩存的數(shù)據(jù)一般都不是結(jié)構(gòu)化的,而是半結(jié)構(gòu)話或是序列化的;這就導致了我們讀取緩存時,很難直接拿到程序最終想要的結(jié)果;這就像快遞的包裹,如果你不打開外層的包裝,你就拿不出來里邊的東西;

如果包裹里的東西有很多,但是其中只有一個是你需要的,其他的還要再包好送給別人;這時候你打開包裹時就會很痛苦——為了拿到自己的東西,必須要拆開包裹,但是拆開后還要很麻煩的將剩下的再包會去;等包裹傳遞到下一個人的手里,又是如此!

所以,這個時候粒度的控制就很重要了;到底是一件東西就一個包裹呢,還是好多東西都包一塊呢?前者拆起來方便,后著節(jié)約包裹數(shù)量。映射到我們的系統(tǒng)上,我們的緩存對象中到底要放哪些數(shù)據(jù)?一種數(shù)據(jù)一個對象,簡單,讀取寫入都快,但是種類一多,緩存的管理成本就會很高;多種數(shù)據(jù)放在一個對象里,方便,一塊全出來了,想用哪個都可以,但是如果我只要一種數(shù)據(jù),其他的就都浪費了,網(wǎng)絡(luò)帶寬和傳輸延遲的消耗也很可觀。

這個時候主要的考慮點就應該是業(yè)務場景了,不同的場景使用不同的緩存粒度,折衷權(quán)衡;不要不在乎這點性能損失,緩存一般都是訪問頻率非常高的數(shù)據(jù),各個點的累積效應可能是非常巨大的!

當然,有些緩存系統(tǒng)的設(shè)計也要求我們必須考慮緩存對象的粒度問題;比如說Memcached,其chunk設(shè)計要求業(yè)務要能很好的控制其緩存對象的大小;淘寶的Tair也是,對于尺寸超過1M的對象,處理效率將大為降低;

Redis這種提供同時提供了MapList結(jié)構(gòu)支持的系統(tǒng)來說,雖然增加了緩存結(jié)構(gòu)的靈活性,但最多也只能算是半結(jié)構(gòu)化緩存,還無法做到像本地內(nèi)存那樣的靈活性。

粒度設(shè)計的過粗還會遇到并發(fā)問題。一個大對象里包含的多種數(shù)據(jù),很多地方多要用,這時如果使用的是緩存修改模式而不是過期模式,那么很可能會因為并發(fā)更新而導致數(shù)據(jù)被覆蓋;版本控制是一種解決方法,但是這樣會使緩存更新失敗的概率大大增加,而且有些緩存系統(tǒng)也不提供版本支持(比如說用的很廣泛的Memcached)。

?

3.4.1.2?緩存對象結(jié)構(gòu)

同緩存粒度一樣,緩存的結(jié)構(gòu)也是一樣的道理。對于一個緩存對象來說,并不是其粒度越小,體積也越小;如果你的一個字符串就有1M大小,那也是很恐怖的;

數(shù)據(jù)的結(jié)構(gòu)決定著你讀取的方式,舉個很簡單的例子,集合對象中,ListMap兩種數(shù)據(jù)結(jié)構(gòu),由于其底層存儲方式不同,所以使用的場景也不一樣;前者更適合有序遍歷,而后者適合隨機存取;回想一下,你是不是曾經(jīng)在程序中遇到過為了merge兩個list中的數(shù)據(jù),而不得不循環(huán)嵌套?

所以,根據(jù)具體應用場景去為緩存對象設(shè)計一個更合適的存儲結(jié)構(gòu),也是一個很值得注意的點。

?

3.4.2?緩存更新策略

緩存的更新策略主要有兩種:被動失效和主動更新,下面分別進行介紹;

?

3.4.2.1?被動失效

一般來說,緩存數(shù)據(jù)主要是服務讀請求的,并設(shè)置一個過期時間;或者當數(shù)據(jù)庫狀態(tài)改變時,通過一個簡單的delete操作,使數(shù)據(jù)失效掉;當下次再去讀取時,如果發(fā)現(xiàn)數(shù)據(jù)過期了或者不存在了,那么就重新去持久層讀取,然后更新到緩存中;這即是所謂的被動失效策略。

但是在被動失效策略中存在一個問題,就是從緩存失效或者丟失開始直到新的數(shù)據(jù)再次被更新到緩存中的這段時間,所有的讀請求都將會直接落到數(shù)據(jù)庫上;而對于一個大訪問量的系統(tǒng)來說,這有可能會帶來風險。所以我們換一種策略就是,當數(shù)據(jù)庫更新時,主動去同步更新緩存,這樣在緩存數(shù)據(jù)的整個生命期內(nèi),就不會有空窗期,前端請求也就沒有機會去親密接觸數(shù)據(jù)庫。

?

3.4.2.2?主動更新

前面我們提到主動更新主要是為了解決空窗期的問題,但是這同樣會帶來另一個問題,就是并發(fā)更新的情況;

在集群環(huán)境下,多臺應用服務器同時訪問一份數(shù)據(jù)是很正常的,這樣就會存在一臺服務器讀取并修改了緩存數(shù)據(jù),但是還沒來得及寫入的情況下,另一臺服務器也讀取并修改舊的數(shù)據(jù),這時候,后寫入的將會覆蓋前面的,從而導致數(shù)據(jù)丟失;這也是分布式系統(tǒng)開發(fā)中,必然會遇到的一個問題。解決的方式主要有三種:

a、鎖控制;這種方式一般在客戶端實現(xiàn)(在服務端加鎖是另外一種情況),其基本原理就是使用讀寫鎖,即任何進程要調(diào)用寫方法時,先要獲取一個排他鎖,阻塞住所有的其他訪問,等自己完全修改完后才能釋放;如果遇到其他進程也正在修改或讀取數(shù)據(jù),那么則需要等待;

?

鎖控制雖然是一種方案,但是很少有真的這樣去做的,其缺點顯而易見,其并發(fā)性只存在于讀操作之間,只要有寫操作存在,就只能串行。

?

b、版本控制;這種方式也有兩種實現(xiàn),一種是單版本機制,即為每份數(shù)據(jù)保存一個版本號,當緩存數(shù)據(jù)寫入時,需要傳入這個版本號,然后服務端將傳入的版本號和數(shù)據(jù)當前的版本號進行比對,如果大于當前版本,則成功寫入,否則返回失敗;這樣解決方式比較簡單;但是增加了高并發(fā)下客戶端的寫失敗概率;

?

還有一種方式就是多版本機制,即存儲系統(tǒng)為每個數(shù)據(jù)保存多份,每份都有自己的版本號,互不沖突,然后通過一定的策略來定期合并,再或者就是交由客戶端自己去選擇讀取哪個版本的數(shù)據(jù)。很多分布式緩存一般會使用單版本機制,而很多NoSQL則使用后者。

?

3.4.3?數(shù)據(jù)對象序列化

由于獨立于應用系統(tǒng),分布式緩存的本質(zhì)就是將所有的業(yè)務數(shù)據(jù)對象序列化為字節(jié)數(shù)組,然后保存到自己的內(nèi)存中。所使用的序列化方案也自然會成為影響系統(tǒng)性能的關(guān)鍵點之一。

一般來說,我們對一個序列化框架的關(guān)注主要有以下幾點:

a?序列化速度;即對一個普通對象,將其從內(nèi)存對象轉(zhuǎn)換為字節(jié)數(shù)組需要多長時間;這個當然是越快越好;

?

b對象壓縮比;即序列化后生成對象的與原內(nèi)存對象的體積比;

?

c支持的數(shù)據(jù)類型范圍;序列化框架都支持什么樣的數(shù)據(jù)結(jié)構(gòu);對于大部分的序列化框架來說,都會支持普通的對象類型,但是對于復雜對象(比如說多繼承關(guān)系、交叉引用、集合類等)可能不支持或支持的不夠好;

?

d易用性;一個好的序列化框架必須也是使用方便的,不需要用戶做太多的依賴或者額外配置;

?

對于一個序列化框架來說,以上幾個特性很難都做到很出色,這是一個魚和熊掌不可兼得的東西(具體原因后面會介紹),但是終歸有自己的優(yōu)勢和特長,需要使用者根據(jù)實際場景仔細考量。

我們接下來會討論幾種典型的序列化工具;

首先我們先針對幾組框架來做一個簡單的對比測試,看看他們在對象壓縮比和性能方面到底如何;

我們先定義一個Java對象,該對象里主要包含了我們常用的intlongfloatdoubleStringDate類型的屬性,每種類型的屬性各有兩個;

測試時的樣本數(shù)據(jù)隨機生成,并且數(shù)據(jù)生成時間不計入測試時間;因為每種序列化框架的內(nèi)部實現(xiàn)策略,所以即便是同一框架在處理不同類型數(shù)據(jù)時表現(xiàn)也會有差異;同時測試結(jié)果也會受到機器配置、運行環(huán)境等影響;限于篇幅,此處只是簡單做了一個對比測試,感興趣的同學可以針對自己項目中的實際數(shù)據(jù),來做更詳細、更有針對性的測試;

首先我們先來看下幾種框架壓縮后的體積情況,如下表:

單位:字節(jié)

工具

Java

Hessian

ProtoBuf

Kryo

僅數(shù)字

392

252

59

56

數(shù)字?+?字符串

494

351

161

149

?

接下來再看一下序列化處理時間數(shù)據(jù);如下表所示:

單位:納秒

工具

Java

Hessian

ProtoBuf

Kryo

僅數(shù)字

8733

6140

1154

2010

數(shù)字?+?字符串

12497

7863

2978

2863

?

綜合來看,如果只處理數(shù)值類型,幾種序列化框架的對象壓縮比相差驚人,Protobufkryo生成的自己數(shù)組只有HessianJava的五分之一或六分之一,加上字符串的處理后(對于大尺寸文檔,有很多壓縮算法都可以做到高效的壓縮比,但是針對對象屬性中的這種小尺寸文本,可用的壓縮算法并不多),差距縮小了大概一倍。而在處理時間上,幾種框架也有者相應程度的差距,二者的增減性是基本一致的。

?

Java源生序列化

Java源生序列化是JDK自帶的對象序列化方式,也是我們最常用的一種;其優(yōu)點是簡單、方便,不需要額外的依賴而且大部分三方系統(tǒng)或框架都支持;目前看來,Java源生序列化的兼容性也是最好的,可支持任何實現(xiàn)了Serializable接口的對象(包括多繼承、循環(huán)引用、集合類等等)。但隨之而來不可避免的就是,其序列化的速度和生成的對象體積和其他序列化框架相比,幾乎都是最差的。

?

我們不妨先來看一下序列化工具要處理那些事情:

a、?首先,要記錄序列化對象的描述信息,包括類名和路徑,反序列化時要用;

b、?要記錄類中所有的屬性的描述信息,包括屬性名稱、類型和屬性值;

c、?如果類有繼承關(guān)系,則要對所有父類進行前述ab步驟的處理;

d、?如果屬性中有復雜類型,這還要對這些對象進行abc步驟的處理;

e、?記錄ListSetMap等集合類的描述信息,同時要對keyvalue中的復雜對象進行abcd步驟的操作

可見,一個對象的序列化所需要做的工作是遞歸的,相當繁瑣,要記錄大量的描述信息,而我們的Java源生序列化不但做了上邊所有的事情,而且還做的規(guī)規(guī)矩矩,甚至還“自作多情”的幫你加上了一些JVM執(zhí)行時要用到的信息。

所以現(xiàn)在就是用腳都能夠想明白,Java原生序列化幫你做了這么多事情,它能不慢么?而且還做得這么規(guī)矩(迂腐?),結(jié)果能不大么?

下面就基本是各個工具針對Java弱點的改進了。

?

Hessian

Hessian的序列化實現(xiàn)和Java的原生序列化很相似,只是對于序列化反序列化本身并不需要的一些元數(shù)據(jù)進行了刪減;所以Hessian可以像Java的源生序列化那樣,可以支持任意類型的對象;但是在存儲上,Hessian并沒有做相應的優(yōu)化,所以其生成的對象體積相較于Java的源生序列化并沒有下降太多;

比如,Hessian對于數(shù)值類型仍然使用了定長存儲,而在通常情況下,經(jīng)常使用的數(shù)據(jù)都是比較小的,大部分的存儲空間是被浪費掉的;

為了標志屬性區(qū)段的結(jié)束,Hessian使用了長度字段來表示,這在一定程度上會增大結(jié)果數(shù)據(jù)的體積;

由于Hessian相較于Java源生序列化并沒有太大的優(yōu)勢,所以一般情況下,如果系統(tǒng)中沒有使用Hessianrpc框架,則很少單獨使用Hessian的序列化機制。

?

Google Protobuf

GPB最大的特點就是自己定義了一套自己數(shù)據(jù)類型,并且規(guī)定只允許用我的這套;所以在使用GPB的時候,我們不得不為它單獨定義一個描述文件,或者叫schema文件,用來完成Java對象中的基本數(shù)據(jù)類型和GPB自己定義的類型之間的一個映射;

不過也正是GPB對類型的自定義,也讓他可以更好的針對這些類型做出存儲和解析上的優(yōu)化,從而避免了Java源生序列化中的諸多弱點。

對于對象屬性,GPB并沒有直接存儲屬性名稱,而是根據(jù)schema文件中的映射關(guān)系,只保存該屬性的順序id;而對于,GPB針對常用的幾種數(shù)據(jù)類型采用了不同程度的壓縮,同時屬性區(qū)段之間采用特定標記進行分隔,這樣可以大大減少存儲所占用的空間。

對于數(shù)值類型,常見的壓縮方式有變長byte、分組byte、差值存儲等,一般都是根據(jù)屬性的使用特點來做定制化的壓縮策略。

GPB的另一個優(yōu)點就是跨語言,支持JavaCPHPPython等目前比較大眾的語言;其他類似的還有FacebookThrift,也需要描述文件的支持,同時也包含了一個rpc框架和更豐富的語言支持;

?

Kryo

前面我們提到,諸如HessianGPB這些三方的序列化框架或多或少的都對Java原生序列化機制做出了一些改進;而對于Kryo來說,改進無疑是更徹底一些;在很多評測中,Kryo的數(shù)據(jù)都是遙遙領(lǐng)先的;

Kryo的處理和Google Protobuf類似。但有一點需要說明的是,Kryo在做序列化時,也沒有記錄屬性的名稱,而是給每個屬性分配了一個id,但是他卻并沒有GPB那樣通過一個schema文件去做id和屬性的一個映射描述,所以一旦我們修改了對象的屬性信息,比如說新增了一個字段,那么Kryo進行反序列化時就可能發(fā)生屬性值錯亂甚至是反序列化失敗的情況;而且由于Kryo沒有序列化屬性名稱的描述信息,所以序列化/反序列化之前,需要先將要處理的類在Kryo中進行注冊,這一操作在首次序列化時也會消耗一定的性能。

另外需要提一下的就是目前kryo目前還只支持Java語言。

?

如何選擇?

Java原生序列化功能而言,雖然它性能和體積表現(xiàn)都非常差,但是從使用上來說卻是非常廣泛,只要是使用Java的框架,那就可以用Java原生序列化;誰讓人家是“親兒子”呢,即便是看在人家“爹”的份兒上,也得給人家?guī)追置孀?#xff01;

尤其是在我們需要序列化的對象類型有限,同時又對速度和體積有很高的要求的時候,我們不妨試一下自己來處理對象的序列化;因為這樣我們可以根據(jù)要序列化對象的實際內(nèi)容來決定具體如何去處理,甚至可以使用一些取巧的方法,即使這些方法對其他的對象類型并不適用;

有一點我們可以相信,就是我們總能在特定的場景下設(shè)計出一個極致的方案!

1.?前言

在高訪問量的web系統(tǒng)中,緩存幾乎是離不開的;但是一個適當、高效的緩存方案設(shè)計卻并不容易;所以接下來將討論一下應用系統(tǒng)緩存的設(shè)計方面應該注意哪些東西,包括緩存的選型、常見緩存系統(tǒng)的特點和數(shù)據(jù)指標、緩存對象結(jié)構(gòu)設(shè)計和失效策略以及緩存對象的壓縮等等,以期讓有需求的同學尤其是初學者能夠快速、系統(tǒng)的了解相關(guān)知識。

?

2.?數(shù)據(jù)庫的瓶頸

2.1?數(shù)據(jù)量

關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)量是比較小的,以我們常用的MySQL為例,單表數(shù)據(jù)條數(shù)一般應該控制在2000w以內(nèi),如果業(yè)務很復雜的話,可能還要低一些。即便是對于Oracle這些大型商業(yè)數(shù)據(jù)庫來講,其能存儲的數(shù)據(jù)量也很難滿足一個擁有幾千萬甚至數(shù)億用戶的大型互聯(lián)網(wǎng)系統(tǒng)。

?

2.2 TPS

在實際開發(fā)中我們經(jīng)常會發(fā)現(xiàn),關(guān)系型數(shù)據(jù)庫在TPS上的瓶頸往往會比其他瓶頸更容易暴露出來,尤其對于大型web系統(tǒng),由于每天大量的并發(fā)訪問,對數(shù)據(jù)庫的讀寫性能要求非常高;而傳統(tǒng)的關(guān)系型數(shù)據(jù)庫的處理能力確實捉襟見肘;以我們常用的MySQL數(shù)據(jù)庫為例,常規(guī)情況下的TPS大概只有1500左右(各種極端場景下另當別論);下圖是MySQL官方所給出的一份測試數(shù)據(jù):

而對于一個日均PV千萬的大型網(wǎng)站來講,每個PV所產(chǎn)生的數(shù)據(jù)庫讀寫量可能要超出幾倍,這種情況下,每天所有的數(shù)據(jù)讀寫請求量可能遠超出關(guān)系型數(shù)據(jù)的處理能力,更別說在流量峰值的情況下了;所以我們必須要有高效的緩存手段來抵擋住大部分的數(shù)據(jù)請求!

?

2.3?響應時間

正常情況下,關(guān)系型數(shù)據(jù)的響應時間是相當不錯的,一般在10ms以內(nèi)甚至更短,尤其是在配置得當?shù)那闆r下。但是就如前面所言,我們的需求是不一般的:當擁有幾億條數(shù)據(jù),1wTPS的時候,響應時間也要在10ms以內(nèi),這幾乎是任何一款關(guān)系型數(shù)據(jù)都無法做到的。

那么這個問題如何解決呢?最簡單有效的辦法當然是緩存!

3.?緩存系統(tǒng)選型

3.1?緩存的類型

3.1.1?本地緩存

本地緩存可能是大家用的最多的一種緩存方式了,不管是本地內(nèi)存還是磁盤,其速度快,成本低,在有些場合非常有效;

但是對于web系統(tǒng)的集群負載均衡結(jié)構(gòu)來說,本地緩存使用起來就比較受限制,因為當數(shù)據(jù)庫數(shù)據(jù)發(fā)生變化時,你沒有一個簡單有效的方法去更新本地緩存;然而,你如果在不同的服務器之間去同步本地緩存信息,由于緩存的低時效性和高訪問量的影響,其成本和性能恐怕都是難以接受的。

3.1.2?分布式緩存

前面提到過,本地緩存的使用很容易讓你的應用服務器帶上“狀態(tài)”,這種情況下,數(shù)據(jù)同步的開銷會比較大;尤其是在集群環(huán)境中更是如此!

分布式緩存這種東西存在的目的就是為了提供比RDB更高的TPS和擴展性,同時有幫你承擔了數(shù)據(jù)同步的痛苦;優(yōu)秀的分布式緩存系統(tǒng)有大家所熟知的MemcachedRedis(當然也許你把它看成是NoSQL,但是我個人更愿意把分布式緩存也看成是NoSQL),還有國內(nèi)阿里自主開發(fā)的Tair等;

對比關(guān)系型數(shù)據(jù)庫和緩存存儲,其在讀和寫性能上的差距可謂天壤之別;memcached單節(jié)點已經(jīng)可以做到15w以上的tpsRedisgooglelevelDB也有不菲的性能,而實現(xiàn)大規(guī)模集群后,性能可能會更高!

所以,在技術(shù)和業(yè)務都可以接受的情況下,我們可以盡量把讀寫壓力從數(shù)據(jù)庫轉(zhuǎn)移到緩存上,以保護看似強大,其實卻很脆弱的關(guān)系型數(shù)據(jù)庫。

?

3.1.3?客戶端緩存

這塊很容易被人忽略,客戶端緩存主要是指基于客戶端瀏覽器的緩存方式;由于瀏覽器本身的安全限制,web系統(tǒng)能在客戶端所做的緩存方式非常有限,主要由以下幾種:

a、?瀏覽器cookie這是使用最多的在客戶端保存數(shù)據(jù)的方法,大家也都比較熟悉;

?

b、?瀏覽器本地緩存;很多瀏覽器都提供了本地緩存的接口,但是由于各個瀏覽器的實現(xiàn)有差異,所以這種方式很少被使用;此類方案有chromeGoogle GearIEuserData、火狐的sessionStorageglobalStorage等;

?

c、?flash本地存儲;這個也是平時比較常用的緩存方式;相較于cookieflash緩存基本沒有數(shù)量和體積的限制,而且由于基于flash插件,所以也不存在兼容性問題;不過在沒有安裝flash插件的瀏覽器上則無法使用;

?

d、?html5的本地存儲;鑒于html5越來越普及,再加上其本地存儲功能比較強大,所以在將來的使用場景應該會越來越多。

?

由于大部分的web應用都會盡量做到無狀態(tài),以方便線性擴容,所以我們能使用的除了后端存儲(DB、NoSQL、分布式文件系統(tǒng)、CDN等)外,就只剩前端的客戶端緩存了。

對客戶端存儲的合理使用,原本每天幾千萬甚至上億的接口調(diào)用,一下就可能降到了每天幾百萬甚至更少,而且即便是用戶更換瀏覽器,或者緩存丟失需要重新訪問服務器,由于隨機性比較強,請求分散,給服務器的壓力也很小!在此基礎(chǔ)上,再加上合理的緩存過期時間,就可以在數(shù)據(jù)準確和性能上做一個很好的折衷。

3.1.4?數(shù)據(jù)庫緩存

這里主要是指數(shù)據(jù)庫的查詢緩存,大部分數(shù)據(jù)庫都是會提供,每種數(shù)據(jù)庫的具體實現(xiàn)細節(jié)也會有所差異,不過基本的原理就是用查詢語句的hash值做key,對結(jié)果集進行緩存;如果利用的好,可以很大的提高數(shù)據(jù)庫的查詢效率!數(shù)據(jù)庫的其他一些緩存將在后邊介紹。

?

3.2?選型指標

現(xiàn)在可供我們選擇使用的(偽)分布式緩存系統(tǒng)不要太多,比如使用廣泛的Memcached、最近炒得火熱的Redis等;這里前面加個偽字,意思是想說,有些所謂的分布式緩存其實仍是以單機的思維去做的,不能算是真正的分布式緩存(你覺得只實現(xiàn)個主從復制能算分布式么?)。

既然有這么多的系統(tǒng)可用,那么我們在選擇的時候,就要有一定的標準和方法。只有有了標準,才能衡量一個系統(tǒng)時好時壞,或者適不適合,選擇就基本有了方向。

下邊幾點是我個人覺的應該考慮的幾個點(其實大部分系統(tǒng)選型都是這么考慮的,并非只有緩存系統(tǒng)):

?

3.2.1?容量

廢話,容量當然是越大越好了,這還用說么,有100G我干嘛還要用10G?其實這么說總要考慮一下成本啦,目前一臺普通的PC Server內(nèi)存128G已經(jīng)算是大的了,再大的話不管是從硬件還是從軟件方面,管理的成本都會增加。單機來講,比如說主板的插槽數(shù)量,服務器散熱、操作系統(tǒng)的內(nèi)存分配、回收、碎片管理等等都會限制內(nèi)存卡的容量;即便使用多機的話,大量內(nèi)存的采購也是很費money的!

有詩云:山不在高,有仙則名;所以內(nèi)存也不在多,夠用就好!每個系統(tǒng)在初期規(guī)劃的時候,都會大致計算一下所要消耗的緩存空間,這主要取決于你要緩存的對象數(shù)量和單個對象的大小。一般來說,你可以采用對象屬性在內(nèi)存中的存儲長度簡單加和的方法來計算單個對象的體積,再乘以緩存對象的數(shù)量和預期增長(當然,這里邊有一個熱點數(shù)據(jù)的問題,這里就不細討論了),大概得出需要使用的緩存空間;之后就可以按照這個指標去申請緩存空間或搭建緩存系統(tǒng)了。

?

3.2.2?并發(fā)量

這里說并發(fā)量,其實還不如說是QPS更貼切一些,因為我們的緩存不是直接面向用戶的,而只面向應用的,所以肯定不會有那個高的并發(fā)訪問(當然,多個系統(tǒng)共用一套緩存那就另當別論了);所以我們關(guān)心的是一個緩存系統(tǒng)平均每秒能夠承受多少的訪問量。

我們之所以需要緩存系統(tǒng),就是要它在關(guān)鍵時刻能抗住我們的數(shù)據(jù)訪問量的;所以,緩存系統(tǒng)能夠支撐的并發(fā)量是一個非常重要的指標,如果它的性能還不如關(guān)系型數(shù)據(jù)庫,那我們就沒有使用的必要了。

對于淘寶的系統(tǒng)來說,我們不妨按照下邊的方案來估算并發(fā)量:

QPS =?PV?×?讀寫次數(shù)/PV?÷?(8?×?60?×?60)

這里我們是按照一天8個小時來計算的,這個值基于一個互聯(lián)網(wǎng)站點的訪問規(guī)律得出的,當然,如果你不同意這個值,可以自己定義。

在估算訪問量的時候,我們不得不考慮一個峰值的問題,尤其是像淘寶、京東這樣大型的電商網(wǎng)站,經(jīng)常會因為一些大的促銷活動而使PVUV沖到平時的幾倍甚至幾十倍,這也正是緩存系統(tǒng)發(fā)揮作用的關(guān)鍵時刻;倍受矚目的12306在站點優(yōu)化過程中也大量的引入了緩存(內(nèi)存文件系統(tǒng))來提升性能。

在計算出平均值之后,再乘以一個峰值系數(shù),基本就可以得出你的緩存系統(tǒng)需要承受的最高QPS,一般情況下,這個系數(shù)定在10以內(nèi)是合理的。

?

3.2.3?響應時間

響應時間當然也是必要的,如果一個緩存系統(tǒng)慢的跟蝸牛一樣,甚至直接就超時了,那和我們使用MySQL也沒啥區(qū)別了。

一般來說,要求一個緩存系統(tǒng)在1ms2ms之內(nèi)返回數(shù)據(jù)是不過分的,當然前提是你的數(shù)據(jù)不會太大;如果想更快的話,那你就有點過分了,除非你是用的本地緩存;因為一般而言,在大型IDC內(nèi)部,一個TCP回環(huán)(不攜帶業(yè)務數(shù)據(jù))差不多就要消耗掉0.2ms0.5ms

大部分的緩存系統(tǒng),由于是基于內(nèi)存,所以響應時間都很短,但是問題一般會出現(xiàn)在數(shù)據(jù)量和QPS變大之后,由于內(nèi)存管理策略、數(shù)據(jù)查找方式、I/O模型、業(yè)務場景等方面的差異,響應時間可能會差異很多,所以對于QPS和響應時間這兩項指標,還要靠上線前充分的性能測試來進一步確認,不能只單純的依賴官方的測試結(jié)果。

?

3.2.4?使用成本

一般分布式緩存系統(tǒng)會包括服務端和客戶端兩部分,所以其使用成本上也要分為兩個部分來講;

首先服務端,優(yōu)秀的系統(tǒng)要是能夠方便部署和方便運維的,不需要高端硬件、不需要復雜的環(huán)境配置、不能有過多的依賴條件,同時還要穩(wěn)定、易維護;

而對于客戶端的使用成本來說,更關(guān)系到程序員的開發(fā)效率和代碼維護成本,基本有三點:單一的依賴、簡潔的配置和人性化的API

另外有一點要提的是,不管是服務端還是客戶端,豐富的文檔和技術(shù)支持也是必不可少的。

?

3.2.5?擴展性

緩存系統(tǒng)的擴展性是指在空間不足的性情況,能夠通過增加機器等方式快速的在線擴容。這也是能夠支撐業(yè)務系統(tǒng)快速發(fā)展的一個重要因素。

一般來講,分布式緩存的負載均衡策略有兩種,一種是在客戶端來做,另外一種就是在服務端來做。

?

客戶端負載均衡

在客戶端來做負載均衡的,諸如前面我們提到的MemcachedRedis等,一般都是通過特定Hash算法將key對應的value映射到固定的緩存服務器上去,這樣的做法最大的好處就是簡單,不管是自己實現(xiàn)一個映射功能還是使用第三方的擴展,都很容易;但由此而來的一個問題是我們無法做到failover。比如說某一臺Memcached服務器掛掉了,但是客戶端還會傻不啦嘰的繼續(xù)請求該服務器,從而導致大量的線程超時;當然,因此而造成的數(shù)據(jù)丟失是另外一回事了。要想解決,簡單的可能只改改改代碼或者配置文件就ok了,但是像Java這種就蛋疼了,有可能還需要重啟所有應用以便讓變更能夠生效。

如果線上緩存容量不夠了,要增加一些服務器,也有同樣的問題;而且由于hash算法的改變,還要遷移對應的數(shù)據(jù)到正確的服務器上去。

?

服務端負載均衡

如果在服務端來做負載均衡,那么我們前面提到的failover的問題就很好解決了;客戶端能夠訪問的所有的緩存服務器的ip和端口都會事先從一個中心配置服務器上獲取,同時客戶端會和中心配置服務器保持一種有效的通信機制(長連接或者HeartBeat),能夠使后端緩存服務器的ip和端口變更即時的通知到客戶端,這樣,一旦后端服務器發(fā)生故障時可以很快的通知到客戶端改變hash策略,到新的服務器上去存取數(shù)據(jù)。

但這樣做會帶來另外一個問題,就是中心配置服務器會成為一個單點。解決辦法就將中心配置服務器由一臺變?yōu)槎嗯_,采用雙機stand by方式或者zookeeper等方式,這樣可用性也會大大提高。

?

3.2.6?容災

我們使用緩存系統(tǒng)的初衷就是當數(shù)據(jù)請求量很大,數(shù)據(jù)庫無法承受的情況,能夠通過緩存來抵擋住大部分的請求流量,所以一旦緩存服務器發(fā)生故障,而緩存系統(tǒng)又沒有一個很好的容災措施的話,所有或部分的請求將會直接壓倒數(shù)據(jù)庫上,這可能會直接導致DB崩潰。

并不是所有的緩存系統(tǒng)都具有容災特性的,所以我們在選擇的時候,一定要根據(jù)自己的業(yè)務需求,對緩存數(shù)據(jù)的依賴程度來決定是否需要緩存系統(tǒng)的容災特性。

?

3.3?常見分布式緩存系統(tǒng)比較

3.3.1 Memcached

Memcached嚴格的說還不能算是一個分布式緩存系統(tǒng),個人更傾向于將其看成一個單機的緩存系統(tǒng),所以從這方面講其容量上是有限制的;但由于Memcached的開源,其訪問協(xié)議也都是公開的,所以目前有很多第三方的客戶端或擴展,在一定程度上對Memcached的集群擴展做了支持,但是大部分都只是做了一個簡單Hash或者一致性Hash

由于Memcached內(nèi)部通過固定大小的chunk鏈的方式去管理內(nèi)存數(shù)據(jù),分配和回收效率很高,所以其讀寫性能也非常高;官方給出的數(shù)據(jù),64KB對象的情況下,單機QPS可達到15w以上。

Memcached集群的不同機器之間是相互獨立的,沒有數(shù)據(jù)方面的通信,所以也不具備failover的能力,在發(fā)生數(shù)據(jù)傾斜的時候也無法自動調(diào)整。

Memcached的多語言支持非常好,目前可支持C/C++JavaC#PHPPythonPerlRuby等常用語言,也有大量的文檔和示例代碼可供參考,而且其穩(wěn)定性也經(jīng)過了長期的檢驗,應該說比較適合于中小型系統(tǒng)和初學者使用的緩存系統(tǒng)。

?

3.3.2 Redis

Redis也是眼下比較流行的一個緩存系統(tǒng),在國內(nèi)外很多互聯(lián)網(wǎng)公司都在使用(新浪微博就是個典型的例子),很多人把Redis看成是Memcached的替代品。

下面就簡單介紹下Redis的一些特性;

Redis除了像Memcached那樣支持普通的<k,v>類型的存儲外,還支持ListSetMap等集合類型的存儲,這種特性有時候在業(yè)務開發(fā)中會比較方便;

Redis源生支持持久化存儲,但是根據(jù)很多人的使用情況和測試結(jié)果來看,Redis的持久化是個雞肋,就連官方也不推薦過度依賴Redis持久化存儲功能。就性能來講,在全部命中緩存時,Redis的性能接近memcached,但是一旦使用了持久化之后,性能會迅速下降,甚至會相差一個數(shù)量級。

Redis支持“集群”,這里的集群還是要加上引號的,因為目前Redis能夠支持的只是Master-Slave模式;這種模式只在可用性方面有一定的提升,當主機宕機時,可以快速的切換到備機,和MySQL的主備模式差不多,但是還算不上是分布式系統(tǒng);

此外,Redis支持訂閱模式,即一個緩存對象發(fā)生變化時,所有訂閱的客戶端都會收到通知,這個特性在分布式緩存系統(tǒng)中是很少見的。

在擴展方面,Redis目前還沒有成熟的方案,官方只給出了一個單機多實例部署的替代方案,并通過主備同步的模式進行擴容時的數(shù)據(jù)遷移,但是還是無法做到持續(xù)的線性擴容。

?

3.3.3?淘寶Tair

Tair是淘寶自主開發(fā)并開源的一款的緩存系統(tǒng),而且也是一套真正意義上的分布式并且可以跨多機房部署,同時支持內(nèi)存緩存和持久化存儲的解決方案;我們數(shù)平這邊也有自己的改進版本。

Tair實現(xiàn)了緩存框架和緩存存儲引擎的獨立,在遵守接口規(guī)范的情況下,可以根據(jù)需求更換存儲引擎,目前支持mdb(基于memcached)、rdb(基于Redis)、kdb(基于kyoto cabinet,持久存儲,目前已不推薦使用)和rdb(基于goooglelevelDB,持久化存儲)幾種引擎;

由于基于mdbrdb,所以Tair能夠間距兩者的特性,而且在并發(fā)量和響應時間上,也接近二者的裸系統(tǒng)。

在擴展性和容災方面,Tair自己做了增強;通過使用虛擬節(jié)點Hash(一致性Hash的變種實現(xiàn))的方案,將key通過Hash函數(shù)映射到到某個虛擬節(jié)點(桶)上,然后通過中心服務器(configserver)來管理虛擬節(jié)點到物理節(jié)點的映射關(guān)系;這樣,Tair不但實現(xiàn)了基于Hash的首次負載均衡,同時又可以通過調(diào)整虛擬節(jié)點和物理節(jié)點的映射關(guān)系來實現(xiàn)二次負載均衡,這樣有效的解決了由于業(yè)務熱點導致的訪問不均衡問題以及線性擴容時數(shù)據(jù)遷移麻煩;此外,Tair的每臺緩存服務器和中心服務器(configserver)也有主備設(shè)計,所以其可用性也大大提高。

?

3.3.4?內(nèi)存數(shù)據(jù)庫

這里的內(nèi)存數(shù)據(jù)庫只要是指關(guān)系型內(nèi)存數(shù)據(jù)庫。一般來說,內(nèi)存數(shù)據(jù)庫使用場景可大致分為兩種情況:

一是對數(shù)據(jù)計算實時性要求比較高,基于磁盤的數(shù)據(jù)庫很難處理;同時又要依賴關(guān)系型數(shù)據(jù)庫的一些特性,比如說排序、加合、復雜條件查詢等等;這樣的數(shù)據(jù)一般是臨時的數(shù)據(jù),生命周期比較短,計算完成或者是進程結(jié)束時即可丟棄;

另一種是數(shù)據(jù)的訪問量比較大,但是數(shù)據(jù)量卻不大,這樣即便丟失也可以很快的從持久化存儲中把數(shù)據(jù)加載進內(nèi)存;

但不管是在哪種場景中,存在于內(nèi)存數(shù)據(jù)庫中的數(shù)據(jù)都必須是相對獨立的或者是只服務于讀請求的,這樣不需要復雜的數(shù)據(jù)同步處理。

3.4?緩存的設(shè)計與策略

3.4.1?緩存對象設(shè)計

3.4.1.1?緩存對象粒度

對于本地磁盤或分布是緩存系統(tǒng)來說,其緩存的數(shù)據(jù)一般都不是結(jié)構(gòu)化的,而是半結(jié)構(gòu)話或是序列化的;這就導致了我們讀取緩存時,很難直接拿到程序最終想要的結(jié)果;這就像快遞的包裹,如果你不打開外層的包裝,你就拿不出來里邊的東西;

如果包裹里的東西有很多,但是其中只有一個是你需要的,其他的還要再包好送給別人;這時候你打開包裹時就會很痛苦——為了拿到自己的東西,必須要拆開包裹,但是拆開后還要很麻煩的將剩下的再包會去;等包裹傳遞到下一個人的手里,又是如此!

所以,這個時候粒度的控制就很重要了;到底是一件東西就一個包裹呢,還是好多東西都包一塊呢?前者拆起來方便,后著節(jié)約包裹數(shù)量。映射到我們的系統(tǒng)上,我們的緩存對象中到底要放哪些數(shù)據(jù)?一種數(shù)據(jù)一個對象,簡單,讀取寫入都快,但是種類一多,緩存的管理成本就會很高;多種數(shù)據(jù)放在一個對象里,方便,一塊全出來了,想用哪個都可以,但是如果我只要一種數(shù)據(jù),其他的就都浪費了,網(wǎng)絡(luò)帶寬和傳輸延遲的消耗也很可觀。

這個時候主要的考慮點就應該是業(yè)務場景了,不同的場景使用不同的緩存粒度,折衷權(quán)衡;不要不在乎這點性能損失,緩存一般都是訪問頻率非常高的數(shù)據(jù),各個點的累積效應可能是非常巨大的!

當然,有些緩存系統(tǒng)的設(shè)計也要求我們必須考慮緩存對象的粒度問題;比如說Memcached,其chunk設(shè)計要求業(yè)務要能很好的控制其緩存對象的大小;淘寶的Tair也是,對于尺寸超過1M的對象,處理效率將大為降低;

Redis這種提供同時提供了MapList結(jié)構(gòu)支持的系統(tǒng)來說,雖然增加了緩存結(jié)構(gòu)的靈活性,但最多也只能算是半結(jié)構(gòu)化緩存,還無法做到像本地內(nèi)存那樣的靈活性。

粒度設(shè)計的過粗還會遇到并發(fā)問題。一個大對象里包含的多種數(shù)據(jù),很多地方多要用,這時如果使用的是緩存修改模式而不是過期模式,那么很可能會因為并發(fā)更新而導致數(shù)據(jù)被覆蓋;版本控制是一種解決方法,但是這樣會使緩存更新失敗的概率大大增加,而且有些緩存系統(tǒng)也不提供版本支持(比如說用的很廣泛的Memcached)。

?

3.4.1.2?緩存對象結(jié)構(gòu)

同緩存粒度一樣,緩存的結(jié)構(gòu)也是一樣的道理。對于一個緩存對象來說,并不是其粒度越小,體積也越小;如果你的一個字符串就有1M大小,那也是很恐怖的;

數(shù)據(jù)的結(jié)構(gòu)決定著你讀取的方式,舉個很簡單的例子,集合對象中,ListMap兩種數(shù)據(jù)結(jié)構(gòu),由于其底層存儲方式不同,所以使用的場景也不一樣;前者更適合有序遍歷,而后者適合隨機存取;回想一下,你是不是曾經(jīng)在程序中遇到過為了merge兩個list中的數(shù)據(jù),而不得不循環(huán)嵌套?

所以,根據(jù)具體應用場景去為緩存對象設(shè)計一個更合適的存儲結(jié)構(gòu),也是一個很值得注意的點。

?

3.4.2?緩存更新策略

緩存的更新策略主要有兩種:被動失效和主動更新,下面分別進行介紹;

?

3.4.2.1?被動失效

一般來說,緩存數(shù)據(jù)主要是服務讀請求的,并設(shè)置一個過期時間;或者當數(shù)據(jù)庫狀態(tài)改變時,通過一個簡單的delete操作,使數(shù)據(jù)失效掉;當下次再去讀取時,如果發(fā)現(xiàn)數(shù)據(jù)過期了或者不存在了,那么就重新去持久層讀取,然后更新到緩存中;這即是所謂的被動失效策略。

但是在被動失效策略中存在一個問題,就是從緩存失效或者丟失開始直到新的數(shù)據(jù)再次被更新到緩存中的這段時間,所有的讀請求都將會直接落到數(shù)據(jù)庫上;而對于一個大訪問量的系統(tǒng)來說,這有可能會帶來風險。所以我們換一種策略就是,當數(shù)據(jù)庫更新時,主動去同步更新緩存,這樣在緩存數(shù)據(jù)的整個生命期內(nèi),就不會有空窗期,前端請求也就沒有機會去親密接觸數(shù)據(jù)庫。

?

3.4.2.2?主動更新

前面我們提到主動更新主要是為了解決空窗期的問題,但是這同樣會帶來另一個問題,就是并發(fā)更新的情況;

在集群環(huán)境下,多臺應用服務器同時訪問一份數(shù)據(jù)是很正常的,這樣就會存在一臺服務器讀取并修改了緩存數(shù)據(jù),但是還沒來得及寫入的情況下,另一臺服務器也讀取并修改舊的數(shù)據(jù),這時候,后寫入的將會覆蓋前面的,從而導致數(shù)據(jù)丟失;這也是分布式系統(tǒng)開發(fā)中,必然會遇到的一個問題。解決的方式主要有三種:

a、鎖控制;這種方式一般在客戶端實現(xiàn)(在服務端加鎖是另外一種情況),其基本原理就是使用讀寫鎖,即任何進程要調(diào)用寫方法時,先要獲取一個排他鎖,阻塞住所有的其他訪問,等自己完全修改完后才能釋放;如果遇到其他進程也正在修改或讀取數(shù)據(jù),那么則需要等待;

?

鎖控制雖然是一種方案,但是很少有真的這樣去做的,其缺點顯而易見,其并發(fā)性只存在于讀操作之間,只要有寫操作存在,就只能串行。

?

b、版本控制;這種方式也有兩種實現(xiàn),一種是單版本機制,即為每份數(shù)據(jù)保存一個版本號,當緩存數(shù)據(jù)寫入時,需要傳入這個版本號,然后服務端將傳入的版本號和數(shù)據(jù)當前的版本號進行比對,如果大于當前版本,則成功寫入,否則返回失敗;這樣解決方式比較簡單;但是增加了高并發(fā)下客戶端的寫失敗概率;

?

還有一種方式就是多版本機制,即存儲系統(tǒng)為每個數(shù)據(jù)保存多份,每份都有自己的版本號,互不沖突,然后通過一定的策略來定期合并,再或者就是交由客戶端自己去選擇讀取哪個版本的數(shù)據(jù)。很多分布式緩存一般會使用單版本機制,而很多NoSQL則使用后者。

?

3.4.3?數(shù)據(jù)對象序列化

由于獨立于應用系統(tǒng),分布式緩存的本質(zhì)就是將所有的業(yè)務數(shù)據(jù)對象序列化為字節(jié)數(shù)組,然后保存到自己的內(nèi)存中。所使用的序列化方案也自然會成為影響系統(tǒng)性能的關(guān)鍵點之一。

一般來說,我們對一個序列化框架的關(guān)注主要有以下幾點:

a?序列化速度;即對一個普通對象,將其從內(nèi)存對象轉(zhuǎn)換為字節(jié)數(shù)組需要多長時間;這個當然是越快越好;

?

b對象壓縮比;即序列化后生成對象的與原內(nèi)存對象的體積比;

?

c支持的數(shù)據(jù)類型范圍;序列化框架都支持什么樣的數(shù)據(jù)結(jié)構(gòu);對于大部分的序列化框架來說,都會支持普通的對象類型,但是對于復雜對象(比如說多繼承關(guān)系、交叉引用、集合類等)可能不支持或支持的不夠好;

?

d易用性;一個好的序列化框架必須也是使用方便的,不需要用戶做太多的依賴或者額外配置;

?

對于一個序列化框架來說,以上幾個特性很難都做到很出色,這是一個魚和熊掌不可兼得的東西(具體原因后面會介紹),但是終歸有自己的優(yōu)勢和特長,需要使用者根據(jù)實際場景仔細考量。

我們接下來會討論幾種典型的序列化工具;

首先我們先針對幾組框架來做一個簡單的對比測試,看看他們在對象壓縮比和性能方面到底如何;

我們先定義一個Java對象,該對象里主要包含了我們常用的intlongfloatdoubleStringDate類型的屬性,每種類型的屬性各有兩個;

測試時的樣本數(shù)據(jù)隨機生成,并且數(shù)據(jù)生成時間不計入測試時間;因為每種序列化框架的內(nèi)部實現(xiàn)策略,所以即便是同一框架在處理不同類型數(shù)據(jù)時表現(xiàn)也會有差異;同時測試結(jié)果也會受到機器配置、運行環(huán)境等影響;限于篇幅,此處只是簡單做了一個對比測試,感興趣的同學可以針對自己項目中的實際數(shù)據(jù),來做更詳細、更有針對性的測試;

首先我們先來看下幾種框架壓縮后的體積情況,如下表:

單位:字節(jié)

工具

Java

Hessian

ProtoBuf

Kryo

僅數(shù)字

392

252

59

56

數(shù)字?+?字符串

494

351

161

149

?

接下來再看一下序列化處理時間數(shù)據(jù);如下表所示:

單位:納秒

工具

Java

Hessian

ProtoBuf

Kryo

僅數(shù)字

8733

6140

1154

2010

數(shù)字?+?字符串

12497

7863

2978

2863

?

綜合來看,如果只處理數(shù)值類型,幾種序列化框架的對象壓縮比相差驚人,Protobufkryo生成的自己數(shù)組只有HessianJava的五分之一或六分之一,加上字符串的處理后(對于大尺寸文檔,有很多壓縮算法都可以做到高效的壓縮比,但是針對對象屬性中的這種小尺寸文本,可用的壓縮算法并不多),差距縮小了大概一倍。而在處理時間上,幾種框架也有者相應程度的差距,二者的增減性是基本一致的。

?

Java源生序列化

Java源生序列化是JDK自帶的對象序列化方式,也是我們最常用的一種;其優(yōu)點是簡單、方便,不需要額外的依賴而且大部分三方系統(tǒng)或框架都支持;目前看來,Java源生序列化的兼容性也是最好的,可支持任何實現(xiàn)了Serializable接口的對象(包括多繼承、循環(huán)引用、集合類等等)。但隨之而來不可避免的就是,其序列化的速度和生成的對象體積和其他序列化框架相比,幾乎都是最差的。

?

我們不妨先來看一下序列化工具要處理那些事情:

a、?首先,要記錄序列化對象的描述信息,包括類名和路徑,反序列化時要用;

b、?要記錄類中所有的屬性的描述信息,包括屬性名稱、類型和屬性值;

c、?如果類有繼承關(guān)系,則要對所有父類進行前述ab步驟的處理;

d、?如果屬性中有復雜類型,這還要對這些對象進行abc步驟的處理;

e、?記錄ListSetMap等集合類的描述信息,同時要對keyvalue中的復雜對象進行abcd步驟的操作

可見,一個對象的序列化所需要做的工作是遞歸的,相當繁瑣,要記錄大量的描述信息,而我們的Java源生序列化不但做了上邊所有的事情,而且還做的規(guī)規(guī)矩矩,甚至還“自作多情”的幫你加上了一些JVM執(zhí)行時要用到的信息。

所以現(xiàn)在就是用腳都能夠想明白,Java原生序列化幫你做了這么多事情,它能不慢么?而且還做得這么規(guī)矩(迂腐?),結(jié)果能不大么?

下面就基本是各個工具針對Java弱點的改進了。

?

Hessian

Hessian的序列化實現(xiàn)和Java的原生序列化很相似,只是對于序列化反序列化本身并不需要的一些元數(shù)據(jù)進行了刪減;所以Hessian可以像Java的源生序列化那樣,可以支持任意類型的對象;但是在存儲上,Hessian并沒有做相應的優(yōu)化,所以其生成的對象體積相較于Java的源生序列化并沒有下降太多;

比如,Hessian對于數(shù)值類型仍然使用了定長存儲,而在通常情況下,經(jīng)常使用的數(shù)據(jù)都是比較小的,大部分的存儲空間是被浪費掉的;

為了標志屬性區(qū)段的結(jié)束,Hessian使用了長度字段來表示,這在一定程度上會增大結(jié)果數(shù)據(jù)的體積;

由于Hessian相較于Java源生序列化并沒有太大的優(yōu)勢,所以一般情況下,如果系統(tǒng)中沒有使用Hessianrpc框架,則很少單獨使用Hessian的序列化機制。

?

Google Protobuf

GPB最大的特點就是自己定義了一套自己數(shù)據(jù)類型,并且規(guī)定只允許用我的這套;所以在使用GPB的時候,我們不得不為它單獨定義一個描述文件,或者叫schema文件,用來完成Java對象中的基本數(shù)據(jù)類型和GPB自己定義的類型之間的一個映射;

不過也正是GPB對類型的自定義,也讓他可以更好的針對這些類型做出存儲和解析上的優(yōu)化,從而避免了Java源生序列化中的諸多弱點。

對于對象屬性,GPB并沒有直接存儲屬性名稱,而是根據(jù)schema文件中的映射關(guān)系,只保存該屬性的順序id;而對于,GPB針對常用的幾種數(shù)據(jù)類型采用了不同程度的壓縮,同時屬性區(qū)段之間采用特定標記進行分隔,這樣可以大大減少存儲所占用的空間。

對于數(shù)值類型,常見的壓縮方式有變長byte、分組byte、差值存儲等,一般都是根據(jù)屬性的使用特點來做定制化的壓縮策略。

GPB的另一個優(yōu)點就是跨語言,支持JavaCPHPPython等目前比較大眾的語言;其他類似的還有FacebookThrift,也需要描述文件的支持,同時也包含了一個rpc框架和更豐富的語言支持;

?

Kryo

前面我們提到,諸如HessianGPB這些三方的序列化框架或多或少的都對Java原生序列化機制做出了一些改進;而對于Kryo來說,改進無疑是更徹底一些;在很多評測中,Kryo的數(shù)據(jù)都是遙遙領(lǐng)先的;

Kryo的處理和Google Protobuf類似。但有一點需要說明的是,Kryo在做序列化時,也沒有記錄屬性的名稱,而是給每個屬性分配了一個id,但是他卻并沒有GPB那樣通過一個schema文件去做id和屬性的一個映射描述,所以一旦我們修改了對象的屬性信息,比如說新增了一個字段,那么Kryo進行反序列化時就可能發(fā)生屬性值錯亂甚至是反序列化失敗的情況;而且由于Kryo沒有序列化屬性名稱的描述信息,所以序列化/反序列化之前,需要先將要處理的類在Kryo中進行注冊,這一操作在首次序列化時也會消耗一定的性能。

另外需要提一下的就是目前kryo目前還只支持Java語言。

?

如何選擇?

Java原生序列化功能而言,雖然它性能和體積表現(xiàn)都非常差,但是從使用上來說卻是非常廣泛,只要是使用Java的框架,那就可以用Java原生序列化;誰讓人家是“親兒子”呢,即便是看在人家“爹”的份兒上,也得給人家?guī)追置孀?#xff01;

尤其是在我們需要序列化的對象類型有限,同時又對速度和體積有很高的要求的時候,我們不妨試一下自己來處理對象的序列化;因為這樣我們可以根據(jù)要序列化對象的實際內(nèi)容來決定具體如何去處理,甚至可以使用一些取巧的方法,即使這些方法對其他的對象類型并不適用;

有一點我們可以相信,就是我們總能在特定的場景下設(shè)計出一個極致的方案!

轉(zhuǎn)載于:https://www.cnblogs.com/davidwang456/p/5018375.html

總結(jié)

以上是生活随笔為你收集整理的大型web系统数据缓存设计-l转载的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。

亚洲日韩av一区二区三区四区 | 中文久久乱码一区二区 | 中文字幕人妻无码一区二区三区 | 国产在线精品一区二区高清不卡 | 国产精品永久免费视频 | 少妇无码一区二区二三区 | 性色欲网站人妻丰满中文久久不卡 | 天下第一社区视频www日本 | 欧美黑人巨大xxxxx | 亚洲中文无码av永久不收费 | 免费人成在线视频无码 | 狠狠cao日日穞夜夜穞av | 2019午夜福利不卡片在线 | 国内综合精品午夜久久资源 | 激情内射日本一区二区三区 | 无码人妻丰满熟妇区毛片18 | 暴力强奷在线播放无码 | 久久久久久久人妻无码中文字幕爆 | 国产午夜福利100集发布 | 97精品国产97久久久久久免费 | 日欧一片内射va在线影院 | 亚洲欧美日韩国产精品一区二区 | 欧美黑人巨大xxxxx | 俄罗斯老熟妇色xxxx | 我要看www免费看插插视频 | 久久久久久国产精品无码下载 | 亚洲国产精品一区二区第一页 | 国产成人综合色在线观看网站 | 亚洲国产av美女网站 | 国产色在线 | 国产 | 在线亚洲高清揄拍自拍一品区 | 亚洲精品一区二区三区四区五区 | 国产成人一区二区三区在线观看 | 黑人玩弄人妻中文在线 | 性欧美牲交在线视频 | 99精品无人区乱码1区2区3区 | 大屁股大乳丰满人妻 | 小鲜肉自慰网站xnxx | 国产精品99爱免费视频 | 自拍偷自拍亚洲精品被多人伦好爽 | 中文字幕人妻无码一夲道 | 欧美性猛交xxxx富婆 | 中文字幕色婷婷在线视频 | 亚洲精品成人av在线 | 亚洲国产av美女网站 | 国产人妻久久精品二区三区老狼 | 亚洲国产精品一区二区第一页 | 老熟妇仑乱视频一区二区 | 国产精品无码永久免费888 | 在线播放免费人成毛片乱码 | 初尝人妻少妇中文字幕 | 一个人免费观看的www视频 | 少妇高潮喷潮久久久影院 | 欧美日韩亚洲国产精品 | 久久久久久亚洲精品a片成人 | 丰满人妻一区二区三区免费视频 | 成人亚洲精品久久久久 | 超碰97人人射妻 | 成人aaa片一区国产精品 | 性生交片免费无码看人 | 亚洲一区二区三区香蕉 | 免费网站看v片在线18禁无码 | 99久久精品无码一区二区毛片 | 午夜嘿嘿嘿影院 | 国产又爽又猛又粗的视频a片 | 国产午夜无码视频在线观看 | 永久免费精品精品永久-夜色 | 国产人妻人伦精品1国产丝袜 | 中文字幕人妻无码一区二区三区 | 日本va欧美va欧美va精品 | 国产69精品久久久久app下载 | 人妻互换免费中文字幕 | 麻豆精产国品 | 婷婷丁香六月激情综合啪 | 精品久久8x国产免费观看 | 久久熟妇人妻午夜寂寞影院 | 性史性农村dvd毛片 | 国产后入清纯学生妹 | 国产绳艺sm调教室论坛 | 精品无人区无码乱码毛片国产 | 色综合久久久无码网中文 | 精品无码一区二区三区的天堂 | 台湾无码一区二区 | 狂野欧美性猛交免费视频 | 日本一区二区更新不卡 | 亚洲精品美女久久久久久久 | 亚洲熟妇色xxxxx欧美老妇y | 又大又紧又粉嫩18p少妇 | 久久久久久a亚洲欧洲av冫 | 午夜精品一区二区三区在线观看 | 青春草在线视频免费观看 | 国产国产精品人在线视 | 国产精品久久久久久无码 | 国产亚洲精品久久久久久国模美 | 亚洲国产精品久久久久久 | 无码播放一区二区三区 | 国产成人精品必看 | 日韩av激情在线观看 | 高潮毛片无遮挡高清免费 | 内射白嫩少妇超碰 | 午夜福利一区二区三区在线观看 | 国产熟女一区二区三区四区五区 | 国产精品亚洲综合色区韩国 | 国产精品无码一区二区三区不卡 | 日本www一道久久久免费榴莲 | 强辱丰满人妻hd中文字幕 | 男女猛烈xx00免费视频试看 | 无码av中文字幕免费放 | 欧美性色19p | 久久久精品456亚洲影院 | 人妻有码中文字幕在线 | 中文字幕无码av激情不卡 | 免费人成网站视频在线观看 | 人人妻人人澡人人爽欧美一区九九 | 国产精品久久久久久亚洲影视内衣 | 日韩少妇白浆无码系列 | 免费无码的av片在线观看 | 婷婷色婷婷开心五月四房播播 | 国产一区二区三区日韩精品 | 中文无码成人免费视频在线观看 | 国内揄拍国内精品人妻 | а天堂中文在线官网 | 好男人www社区 | 国产国产精品人在线视 | 天堂一区人妻无码 | 欧美一区二区三区视频在线观看 | 国产人妖乱国产精品人妖 | 国产熟妇另类久久久久 | 水蜜桃亚洲一二三四在线 | 综合网日日天干夜夜久久 | 国产无遮挡吃胸膜奶免费看 | 无码人妻精品一区二区三区不卡 | 国产99久久精品一区二区 | 天天拍夜夜添久久精品大 | 国产免费久久久久久无码 | 亚洲精品国偷拍自产在线观看蜜桃 | 中文无码精品a∨在线观看不卡 | 国产精品igao视频网 | 亚洲毛片av日韩av无码 | 国产人妻大战黑人第1集 | 欧美xxxx黑人又粗又长 | 99久久精品午夜一区二区 | 国产欧美精品一区二区三区 | 东京热男人av天堂 | a在线观看免费网站大全 | 性生交大片免费看女人按摩摩 | 精品少妇爆乳无码av无码专区 | 亚洲乱码国产乱码精品精 | 日本肉体xxxx裸交 | 国产精品无套呻吟在线 | 欧美黑人乱大交 | 精品 日韩 国产 欧美 视频 | 婷婷五月综合缴情在线视频 | 久久精品国产99精品亚洲 | 麻豆国产人妻欲求不满 | 国产精品视频免费播放 | 久久久久se色偷偷亚洲精品av | 曰韩少妇内射免费播放 | 国产绳艺sm调教室论坛 | 丰满少妇熟乱xxxxx视频 | 国产电影无码午夜在线播放 | 欧美丰满老熟妇xxxxx性 | 内射爽无广熟女亚洲 | 国产成人精品必看 | 国产一精品一av一免费 | 亚洲国产欧美日韩精品一区二区三区 | 中文字幕无码日韩专区 | 好爽又高潮了毛片免费下载 | 亚洲男人av天堂午夜在 | 国产精品高潮呻吟av久久4虎 | 久久精品国产一区二区三区肥胖 | 国产尤物精品视频 | 色情久久久av熟女人妻网站 | 国产精品久久久久久久影院 | 亚洲欧美日韩综合久久久 | 免费人成在线视频无码 | 蜜臀av在线播放 久久综合激激的五月天 | 亚洲乱亚洲乱妇50p | 精品国产青草久久久久福利 | 色婷婷久久一区二区三区麻豆 | 成 人 免费观看网站 | 国产福利视频一区二区 | 少妇一晚三次一区二区三区 | 老司机亚洲精品影院 | 国产亚洲精品久久久闺蜜 | 国产成人一区二区三区在线观看 | 久久天天躁狠狠躁夜夜免费观看 | 天天摸天天碰天天添 | 亚洲精品综合五月久久小说 | 日日鲁鲁鲁夜夜爽爽狠狠 | 特大黑人娇小亚洲女 | 亚洲精品一区二区三区在线观看 | 免费网站看v片在线18禁无码 | 欧美日韩在线亚洲综合国产人 | 精品欧洲av无码一区二区三区 | 亚洲综合伊人久久大杳蕉 | 久久久久久国产精品无码下载 | 国产真人无遮挡作爱免费视频 | 在线欧美精品一区二区三区 | 草草网站影院白丝内射 | 一区二区三区乱码在线 | 欧洲 | 精品国产乱码久久久久乱码 | 国产成人一区二区三区在线观看 | 无码国内精品人妻少妇 | 鲁大师影院在线观看 | 亚拍精品一区二区三区探花 | 成人无码视频在线观看网站 | 久久精品人人做人人综合试看 | 久热国产vs视频在线观看 | 麻豆蜜桃av蜜臀av色欲av | 人妻无码久久精品人妻 | 午夜无码人妻av大片色欲 | 国产精品二区一区二区aⅴ污介绍 | 日韩精品乱码av一区二区 | 99麻豆久久久国产精品免费 | 国产av无码专区亚洲a∨毛片 | 日韩av激情在线观看 | 国产精品多人p群无码 | 成 人 免费观看网站 | 中文字幕无码日韩欧毛 | 在线观看国产午夜福利片 | 国产一区二区三区精品视频 | 午夜无码人妻av大片色欲 | 国产精品毛片一区二区 | 亚洲自偷自拍另类第1页 | 欧美日韩一区二区综合 | av在线亚洲欧洲日产一区二区 | 久久视频在线观看精品 | 国产成人无码av片在线观看不卡 | 无码国产激情在线观看 | 亚洲男人av天堂午夜在 | 欧美35页视频在线观看 | 日日干夜夜干 | 国产精品国产三级国产专播 | 欧美人与善在线com | 亚洲精品国偷拍自产在线麻豆 | 亚洲大尺度无码无码专区 | 亚洲乱亚洲乱妇50p | 国模大胆一区二区三区 | 日韩成人一区二区三区在线观看 | 丰满肥臀大屁股熟妇激情视频 | 久久国产自偷自偷免费一区调 | 一个人看的视频www在线 | 亚洲日本va中文字幕 | 白嫩日本少妇做爰 | 国内少妇偷人精品视频免费 | 成年女人永久免费看片 | 亚洲gv猛男gv无码男同 | 无套内射视频囯产 | 兔费看少妇性l交大片免费 | 天堂亚洲2017在线观看 | 国产又粗又硬又大爽黄老大爷视 | 日本护士xxxxhd少妇 | 欧美性黑人极品hd | 一本色道久久综合亚洲精品不卡 | 色一情一乱一伦一视频免费看 | 亚洲精品国产品国语在线观看 | 青春草在线视频免费观看 | 蜜桃视频韩日免费播放 | 亚拍精品一区二区三区探花 | 欧洲美熟女乱又伦 | 纯爱无遮挡h肉动漫在线播放 | 中文字幕无线码免费人妻 | 熟女少妇人妻中文字幕 | 欧美老人巨大xxxx做受 | 少妇一晚三次一区二区三区 | 日韩亚洲欧美中文高清在线 | 成人av无码一区二区三区 | 东京一本一道一二三区 | 奇米影视7777久久精品人人爽 | 国产激情精品一区二区三区 | 精品国产av色一区二区深夜久久 | 国产成人一区二区三区在线观看 | 国产精品美女久久久网av | 午夜精品一区二区三区的区别 | 欧美精品免费观看二区 | 欧美人与牲动交xxxx | 日韩欧美群交p片內射中文 | 性欧美大战久久久久久久 | 一个人免费观看的www视频 | 久久国产精品_国产精品 | 亚洲精品www久久久 | 3d动漫精品啪啪一区二区中 | 免费人成网站视频在线观看 | 香蕉久久久久久av成人 | 7777奇米四色成人眼影 | 国产乱人伦偷精品视频 | 国产乱人伦av在线无码 | 久久精品视频在线看15 | 欧美高清在线精品一区 | 国产手机在线αⅴ片无码观看 | 女人高潮内射99精品 | 国产乱码精品一品二品 | 成人性做爰aaa片免费看不忠 | 国产口爆吞精在线视频 | 亚洲国产欧美日韩精品一区二区三区 | 亚洲精品国偷拍自产在线观看蜜桃 | 色诱久久久久综合网ywww | 捆绑白丝粉色jk震动捧喷白浆 | 亚洲最大成人网站 | 粉嫩少妇内射浓精videos | 午夜精品久久久久久久 | 色噜噜亚洲男人的天堂 | 2020最新国产自产精品 | 亚洲啪av永久无码精品放毛片 | 日韩精品久久久肉伦网站 | 牲欲强的熟妇农村老妇女视频 | 大地资源网第二页免费观看 | 成在人线av无码免观看麻豆 | 日日摸夜夜摸狠狠摸婷婷 | 极品尤物被啪到呻吟喷水 | 亚洲乱码日产精品bd | 久久久婷婷五月亚洲97号色 | 亚洲爆乳精品无码一区二区三区 | 蜜臀av在线播放 久久综合激激的五月天 | 亚洲精品国产精品乱码不卡 | 狠狠色噜噜狠狠狠狠7777米奇 | 久久99精品国产麻豆蜜芽 | 久精品国产欧美亚洲色aⅴ大片 | 国产av无码专区亚洲awww | 亚洲成a人片在线观看日本 | 网友自拍区视频精品 | www国产亚洲精品久久久日本 | 国产成人无码午夜视频在线观看 | 久久久精品456亚洲影院 | 动漫av网站免费观看 | 成人试看120秒体验区 | 中文字幕无码人妻少妇免费 | 欧美性黑人极品hd | 国产av一区二区精品久久凹凸 | 日韩视频 中文字幕 视频一区 | 亚洲日本va午夜在线电影 | 久久精品国产日本波多野结衣 | 中文字幕无码免费久久9一区9 | 国产精品丝袜黑色高跟鞋 | 一本色道婷婷久久欧美 | 久久久无码中文字幕久... | 亚洲国产综合无码一区 | 大乳丰满人妻中文字幕日本 | 欧美日本免费一区二区三区 | а√天堂www在线天堂小说 | 亚洲人成网站免费播放 | 亚洲а∨天堂久久精品2021 | 日韩av激情在线观看 | 国产深夜福利视频在线 | 图片小说视频一区二区 | 日日橹狠狠爱欧美视频 | 无码人妻精品一区二区三区下载 | 东京热男人av天堂 | 日韩av无码中文无码电影 | 国产一区二区三区四区五区加勒比 | 婷婷丁香六月激情综合啪 | 伊人色综合久久天天小片 | 日日碰狠狠躁久久躁蜜桃 | 国产三级精品三级男人的天堂 | 超碰97人人做人人爱少妇 | 亚洲综合伊人久久大杳蕉 | 亚洲国产午夜精品理论片 | 亚洲 另类 在线 欧美 制服 | 久久国产精品精品国产色婷婷 | 日本精品高清一区二区 | 国产亚av手机在线观看 | 国产99久久精品一区二区 | 色情久久久av熟女人妻网站 | 国产精品高潮呻吟av久久 | 欧美三级不卡在线观看 | 色诱久久久久综合网ywww | 亚洲区小说区激情区图片区 | 一个人看的视频www在线 | 玩弄中年熟妇正在播放 | 国内揄拍国内精品人妻 | av小次郎收藏 | aⅴ亚洲 日韩 色 图网站 播放 | 日本熟妇大屁股人妻 | 曰本女人与公拘交酡免费视频 | 荡女精品导航 | 全球成人中文在线 | 亚洲一区二区三区在线观看网站 | 2020最新国产自产精品 | 国产精品免费大片 | 国产内射老熟女aaaa | 极品嫩模高潮叫床 | 综合人妻久久一区二区精品 | 人人澡人摸人人添 | 色综合久久久无码网中文 | 天堂亚洲免费视频 | 亚洲精品久久久久久一区二区 | 少妇邻居内射在线 | 中文字幕av日韩精品一区二区 | 在线看片无码永久免费视频 | 无遮挡国产高潮视频免费观看 | 性史性农村dvd毛片 | 成人一在线视频日韩国产 | 男女下面进入的视频免费午夜 | 人人妻人人澡人人爽精品欧美 | 麻豆人妻少妇精品无码专区 | 色欲久久久天天天综合网精品 | 国产手机在线αⅴ片无码观看 | 国产一区二区三区四区五区加勒比 | 国产精品久久福利网站 | 夜夜影院未满十八勿进 | 国产午夜福利亚洲第一 | 无码人妻丰满熟妇区五十路百度 | 天下第一社区视频www日本 | 国产性生交xxxxx无码 | 免费乱码人妻系列无码专区 | 免费人成网站视频在线观看 | 欧美一区二区三区视频在线观看 | 国产av剧情md精品麻豆 | 久久zyz资源站无码中文动漫 | 久久久国产精品无码免费专区 | 日韩精品乱码av一区二区 | 亚洲理论电影在线观看 | 日本在线高清不卡免费播放 | 性欧美熟妇videofreesex | 亚洲区欧美区综合区自拍区 | 精品国产麻豆免费人成网站 | 久久久无码中文字幕久... | 国产内射爽爽大片视频社区在线 | 在线观看欧美一区二区三区 | 牛和人交xxxx欧美 | 精品国产成人一区二区三区 | 亚洲热妇无码av在线播放 | 色欲人妻aaaaaaa无码 | 精品熟女少妇av免费观看 | 亚洲综合无码久久精品综合 | 久久国产精品_国产精品 | 又大又硬又爽免费视频 | 老熟妇仑乱视频一区二区 | 97se亚洲精品一区 | 精品欧洲av无码一区二区三区 | 漂亮人妻洗澡被公强 日日躁 | а天堂中文在线官网 | 成人精品天堂一区二区三区 | 亚洲の无码国产の无码影院 | 乱码午夜-极国产极内射 | 少女韩国电视剧在线观看完整 | 天天摸天天碰天天添 | 一区二区三区乱码在线 | 欧洲 | 台湾无码一区二区 | 国产精品无码久久av | 欧美丰满熟妇xxxx性ppx人交 | 黑人粗大猛烈进出高潮视频 | 国产亚洲美女精品久久久2020 | 在线播放免费人成毛片乱码 | 久久人人爽人人人人片 | 亚洲国产欧美国产综合一区 | 帮老师解开蕾丝奶罩吸乳网站 | 欧美性生交xxxxx久久久 | 久久人妻内射无码一区三区 | 国产va免费精品观看 | 国产午夜亚洲精品不卡 | 人人妻人人澡人人爽欧美精品 | 亚洲性无码av中文字幕 | 亚洲成色在线综合网站 | 久久久久se色偷偷亚洲精品av | 久久久久久久女国产乱让韩 | 久久人妻内射无码一区三区 | 天堂一区人妻无码 | 亚洲精品国产精品乱码不卡 | 无码中文字幕色专区 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 免费国产成人高清在线观看网站 | 女人被爽到呻吟gif动态图视看 | 成 人 免费观看网站 | 玩弄少妇高潮ⅹxxxyw | 美女黄网站人色视频免费国产 | 在线播放免费人成毛片乱码 | 亚洲精品中文字幕久久久久 | 牲欲强的熟妇农村老妇女视频 | 国产av一区二区三区最新精品 | 女人被男人躁得好爽免费视频 | 在线播放亚洲第一字幕 | 精品厕所偷拍各类美女tp嘘嘘 | 国产精品毛片一区二区 | 亚洲成av人片在线观看无码不卡 | 国产av人人夜夜澡人人爽麻豆 | 老太婆性杂交欧美肥老太 | 欧美猛少妇色xxxxx | 少妇性l交大片 | 成人精品视频一区二区三区尤物 | 精品无人区无码乱码毛片国产 | 日韩人妻系列无码专区 | 未满成年国产在线观看 | 99精品无人区乱码1区2区3区 | 377p欧洲日本亚洲大胆 | 女人色极品影院 | 精品偷拍一区二区三区在线看 | 初尝人妻少妇中文字幕 | 国产av一区二区精品久久凹凸 | 夜夜夜高潮夜夜爽夜夜爰爰 | 男人的天堂av网站 | 男人的天堂2018无码 | a片免费视频在线观看 | 国产人妖乱国产精品人妖 | а√天堂www在线天堂小说 | 亚洲精品一区二区三区在线观看 | 欧美人妻一区二区三区 | 国产乱码精品一品二品 | 高潮毛片无遮挡高清免费 | 国产三级精品三级男人的天堂 | 亚洲色大成网站www | 亚洲欧美国产精品久久 | 亚洲综合伊人久久大杳蕉 | 欧美日本精品一区二区三区 | 啦啦啦www在线观看免费视频 | 成人精品一区二区三区中文字幕 | 欧美日韩一区二区三区自拍 | 国产口爆吞精在线视频 | 中文字幕乱码人妻无码久久 | 国产 精品 自在自线 | 久久成人a毛片免费观看网站 | 午夜精品久久久内射近拍高清 | 精品人妻人人做人人爽夜夜爽 | 精品夜夜澡人妻无码av蜜桃 | 国产综合色产在线精品 | 久久精品国产一区二区三区 | 国产精品第一国产精品 | 国内揄拍国内精品人妻 | 漂亮人妻洗澡被公强 日日躁 | 亚洲男女内射在线播放 | 亚洲高清偷拍一区二区三区 | 国产成人亚洲综合无码 | 亚洲色www成人永久网址 | 亚洲国精产品一二二线 | 激情亚洲一区国产精品 | 国产精品第一区揄拍无码 | 久久天天躁狠狠躁夜夜免费观看 | 国产一区二区三区影院 | 日韩欧美成人免费观看 | 无码人妻丰满熟妇区毛片18 | 亚洲精品国产品国语在线观看 | 久久久中文字幕日本无吗 | 国产做国产爱免费视频 | 国产无套粉嫩白浆在线 | 国产精品va在线播放 | 亚洲日韩中文字幕在线播放 | 久久综合狠狠综合久久综合88 | 97色伦图片97综合影院 | 日韩欧美中文字幕公布 | 亚洲精品一区三区三区在线观看 | 男女爱爱好爽视频免费看 | 丝袜美腿亚洲一区二区 | 亚洲精品中文字幕久久久久 | 欧美日韩综合一区二区三区 | 国产成人av免费观看 | 国产精品久久久一区二区三区 | 亚洲a无码综合a国产av中文 | 国产亚洲日韩欧美另类第八页 | 国产深夜福利视频在线 | 久久国产精品精品国产色婷婷 | 夜夜躁日日躁狠狠久久av | 欧美午夜特黄aaaaaa片 | 无码国产乱人伦偷精品视频 | 国产成人无码av在线影院 | 欧美怡红院免费全部视频 | 国产精品久久久久影院嫩草 | 婷婷五月综合缴情在线视频 | 天海翼激烈高潮到腰振不止 | 国产亚洲日韩欧美另类第八页 | 亚洲人成人无码网www国产 | 国产精品无码久久av | 国产成人精品优优av | 亚洲毛片av日韩av无码 | 丁香啪啪综合成人亚洲 | 色欲人妻aaaaaaa无码 | 国产性生交xxxxx无码 | 亚洲gv猛男gv无码男同 | 欧美日韩在线亚洲综合国产人 | 精品久久久久久人妻无码中文字幕 | 国产精品无码久久av | 色一情一乱一伦 | 国产乱人无码伦av在线a | 99久久婷婷国产综合精品青草免费 | 国产小呦泬泬99精品 | 亚洲国产精品一区二区美利坚 | 精品国偷自产在线视频 | 老头边吃奶边弄进去呻吟 | 色婷婷综合激情综在线播放 | 久久国语露脸国产精品电影 | 无码人妻精品一区二区三区下载 | 欧美一区二区三区视频在线观看 | 欧美日韩视频无码一区二区三 | 2019午夜福利不卡片在线 | 亚洲精品久久久久久一区二区 | 少妇厨房愉情理9仑片视频 | 人妻天天爽夜夜爽一区二区 | 国产偷抇久久精品a片69 | 中文字幕av日韩精品一区二区 | 亚洲无人区一区二区三区 | 又大又黄又粗又爽的免费视频 | 精品国产麻豆免费人成网站 | 亚洲精品欧美二区三区中文字幕 | 国产九九九九九九九a片 | 日本一卡2卡3卡4卡无卡免费网站 国产一区二区三区影院 | 久久久久99精品国产片 | 精品夜夜澡人妻无码av蜜桃 | 国产激情无码一区二区 | 国产97色在线 | 免 | 自拍偷自拍亚洲精品被多人伦好爽 | 久久99精品国产麻豆 | 特黄特色大片免费播放器图片 | 欧美性猛交内射兽交老熟妇 | 国产成人精品视频ⅴa片软件竹菊 | 国产美女极度色诱视频www | 久久久久成人片免费观看蜜芽 | 久久人人爽人人爽人人片ⅴ | 久在线观看福利视频 | 对白脏话肉麻粗话av | av无码久久久久不卡免费网站 | 强开小婷嫩苞又嫩又紧视频 | 内射白嫩少妇超碰 | 扒开双腿疯狂进出爽爽爽视频 | 搡女人真爽免费视频大全 | 国产亚洲精品久久久闺蜜 | 人妻与老人中文字幕 | 男女下面进入的视频免费午夜 | 色综合久久中文娱乐网 | 亚洲中文无码av永久不收费 | 久久精品国产大片免费观看 | 亚洲成av人片在线观看无码不卡 | 久久亚洲中文字幕精品一区 | 色欲人妻aaaaaaa无码 | 丰满少妇人妻久久久久久 | 亚洲国产精品一区二区美利坚 | 国产成人无码区免费内射一片色欲 | 亚洲阿v天堂在线 | 亚洲色无码一区二区三区 | 蜜桃视频插满18在线观看 | 精品水蜜桃久久久久久久 | 狠狠色噜噜狠狠狠7777奇米 | 伊人久久大香线蕉av一区二区 | 亚洲精品成a人在线观看 | 真人与拘做受免费视频一 | 精品久久久无码人妻字幂 | 久久久久久九九精品久 | 少女韩国电视剧在线观看完整 | 丁香啪啪综合成人亚洲 | 国产一区二区不卡老阿姨 | 在线精品国产一区二区三区 | 国内老熟妇对白xxxxhd | av小次郎收藏 | 久久久久成人片免费观看蜜芽 | 久久无码中文字幕免费影院蜜桃 | 国语自产偷拍精品视频偷 | 国产亲子乱弄免费视频 | 精品亚洲韩国一区二区三区 | 亚洲精品美女久久久久久久 | 无码毛片视频一区二区本码 | 日本熟妇大屁股人妻 | 欧美 丝袜 自拍 制服 另类 | 日产精品高潮呻吟av久久 | 亚洲熟悉妇女xxx妇女av | 亚洲成熟女人毛毛耸耸多 | 婷婷丁香六月激情综合啪 | 亚洲爆乳大丰满无码专区 | 亚洲一区二区三区含羞草 | 欧美黑人性暴力猛交喷水 | 中文字幕无码免费久久99 | 伊人久久大香线蕉av一区二区 | 又大又硬又爽免费视频 | 1000部啪啪未满十八勿入下载 | 少妇性l交大片欧洲热妇乱xxx | 日韩成人一区二区三区在线观看 | 少妇无码av无码专区在线观看 | 国产午夜福利100集发布 | 国产精品第一区揄拍无码 | 牛和人交xxxx欧美 | 久久精品人人做人人综合试看 | 99国产精品白浆在线观看免费 | 国产成人av免费观看 | 国产后入清纯学生妹 | 日韩精品无码一区二区中文字幕 | 国产免费久久久久久无码 | 99在线 | 亚洲 | 狂野欧美性猛交免费视频 | 欧美性猛交xxxx富婆 | 久久国产精品_国产精品 | 久久综合狠狠综合久久综合88 | 又大又紧又粉嫩18p少妇 | 又紧又大又爽精品一区二区 | 国产一区二区三区日韩精品 | 狠狠亚洲超碰狼人久久 | 四十如虎的丰满熟妇啪啪 | 国产在线aaa片一区二区99 | 大屁股大乳丰满人妻 | 精品国偷自产在线视频 | 久久久久久久人妻无码中文字幕爆 | 两性色午夜视频免费播放 | 国产一区二区不卡老阿姨 | 亚洲精品国偷拍自产在线观看蜜桃 | 97无码免费人妻超级碰碰夜夜 | 午夜福利不卡在线视频 | 一本无码人妻在中文字幕免费 | 国产激情一区二区三区 | 久久久av男人的天堂 | 成人欧美一区二区三区 | 久久综合激激的五月天 | 国产亚洲精品久久久久久国模美 | 我要看www免费看插插视频 | ass日本丰满熟妇pics | 久久精品国产99精品亚洲 | 露脸叫床粗话东北少妇 | 亚洲午夜福利在线观看 | 撕开奶罩揉吮奶头视频 | 亚洲欧美精品aaaaaa片 | 男女猛烈xx00免费视频试看 | 久久国语露脸国产精品电影 | 欧美日本免费一区二区三区 | aa片在线观看视频在线播放 | 在线天堂新版最新版在线8 | 欧美freesex黑人又粗又大 | 亚洲经典千人经典日产 | 欧美喷潮久久久xxxxx | 2020最新国产自产精品 | 国产绳艺sm调教室论坛 | 东北女人啪啪对白 | 内射老妇bbwx0c0ck | 性色av无码免费一区二区三区 | 波多野结衣av在线观看 | 中文字幕 人妻熟女 | 亚洲乱码中文字幕在线 | 精品午夜福利在线观看 | 妺妺窝人体色www在线小说 | 天堂а√在线地址中文在线 | 大肉大捧一进一出好爽视频 | 国产精品久久久久久无码 | 欧洲美熟女乱又伦 | 亚洲日韩中文字幕在线播放 | 无码人中文字幕 | 国产av一区二区精品久久凹凸 | 日韩精品成人一区二区三区 | 国产精品资源一区二区 | 国产av久久久久精东av | 国产精品久久久午夜夜伦鲁鲁 | 亚洲色无码一区二区三区 | 欧美丰满熟妇xxxx性ppx人交 | 久久久精品人妻久久影视 | 人人超人人超碰超国产 | 美女毛片一区二区三区四区 | 夜夜夜高潮夜夜爽夜夜爰爰 | 免费男性肉肉影院 | 天天拍夜夜添久久精品大 | 67194成是人免费无码 | 色妞www精品免费视频 | 国精产品一品二品国精品69xx | 国内精品人妻无码久久久影院蜜桃 | 亚洲一区二区三区含羞草 | 欧美丰满熟妇xxxx性ppx人交 | 乌克兰少妇xxxx做受 | 色爱情人网站 | 国产精品第一区揄拍无码 | 99久久精品日本一区二区免费 | 男女下面进入的视频免费午夜 | 亚洲大尺度无码无码专区 | 无遮无挡爽爽免费视频 | 久久国产自偷自偷免费一区调 | 激情爆乳一区二区三区 | 丰满肥臀大屁股熟妇激情视频 | 中国女人内谢69xxxxxa片 | 成人aaa片一区国产精品 | 成人亚洲精品久久久久软件 | 爽爽影院免费观看 | 女人色极品影院 | 国产特级毛片aaaaaaa高清 | 色老头在线一区二区三区 | 免费无码一区二区三区蜜桃大 | 2019nv天堂香蕉在线观看 | 中文精品久久久久人妻不卡 | 国产真人无遮挡作爱免费视频 | 国产精品99爱免费视频 | 激情内射亚州一区二区三区爱妻 | 国产口爆吞精在线视频 | 亚洲国产精品美女久久久久 | 一本一道久久综合久久 | 亚洲 欧美 激情 小说 另类 | 日韩人妻系列无码专区 | 久9re热视频这里只有精品 | 大屁股大乳丰满人妻 | 18精品久久久无码午夜福利 | 色综合久久久无码网中文 | 伊人久久大香线焦av综合影院 | 欧美人与禽猛交狂配 | 久久精品国产99久久6动漫 | 精品成人av一区二区三区 | 欧美精品国产综合久久 | 中文久久乱码一区二区 | 日本护士毛茸茸高潮 | 亚洲成av人片天堂网无码】 | 久久成人a毛片免费观看网站 | 日韩精品乱码av一区二区 | 丰满少妇高潮惨叫视频 | 丰满少妇女裸体bbw | 性欧美熟妇videofreesex | √天堂中文官网8在线 | 亚洲精品一区二区三区四区五区 | 人妻熟女一区 | 亚洲精品国偷拍自产在线观看蜜桃 | 国产成人精品久久亚洲高清不卡 | 亚洲aⅴ无码成人网站国产app | 国产人妻久久精品二区三区老狼 | 岛国片人妻三上悠亚 | 人妻人人添人妻人人爱 | 中文无码精品a∨在线观看不卡 | аⅴ资源天堂资源库在线 | 亚洲精品欧美二区三区中文字幕 | 2019午夜福利不卡片在线 | 国产黄在线观看免费观看不卡 | 亚洲欧美国产精品久久 | 无遮挡国产高潮视频免费观看 | 少妇人妻大乳在线视频 | 欧美亚洲日韩国产人成在线播放 | 久久亚洲精品中文字幕无男同 | 最近免费中文字幕中文高清百度 | 日本一卡二卡不卡视频查询 | 色情久久久av熟女人妻网站 | 中文字幕无码免费久久99 | 性啪啪chinese东北女人 | 国产精品二区一区二区aⅴ污介绍 | 美女黄网站人色视频免费国产 | 亚洲自偷精品视频自拍 | 思思久久99热只有频精品66 | 午夜无码人妻av大片色欲 | 免费无码午夜福利片69 | 国产精品人妻一区二区三区四 | 精品偷拍一区二区三区在线看 | 国产肉丝袜在线观看 | 精品无码一区二区三区的天堂 | 老熟女重囗味hdxx69 | 欧美国产日产一区二区 | 欧美黑人性暴力猛交喷水 | 国产黑色丝袜在线播放 | 国产精品久久久av久久久 | 日本精品人妻无码77777 天堂一区人妻无码 | 7777奇米四色成人眼影 | 亚洲 日韩 欧美 成人 在线观看 | 18精品久久久无码午夜福利 | 亚洲精品久久久久久久久久久 | 国产精品无码一区二区桃花视频 | 免费中文字幕日韩欧美 | 国产成人人人97超碰超爽8 | 99久久久无码国产精品免费 | 精品久久久无码人妻字幂 | 久久综合给合久久狠狠狠97色 | 日本饥渴人妻欲求不满 | 女人被男人爽到呻吟的视频 | 精品国产一区二区三区四区 | 中文无码精品a∨在线观看不卡 | 国产激情无码一区二区 | 人妻无码久久精品人妻 | 国产乱码精品一品二品 | 精品熟女少妇av免费观看 | 色偷偷人人澡人人爽人人模 | 伊在人天堂亚洲香蕉精品区 | 婷婷丁香五月天综合东京热 | 高潮毛片无遮挡高清免费视频 | 九九在线中文字幕无码 | 亚洲一区二区三区在线观看网站 | 欧美人与禽猛交狂配 | 好爽又高潮了毛片免费下载 | 色诱久久久久综合网ywww | 伊人色综合久久天天小片 | 精品无码成人片一区二区98 | 日韩精品无码一区二区中文字幕 | 久久99国产综合精品 | 国产免费无码一区二区视频 | 成 人影片 免费观看 | 亚洲中文字幕无码中文字在线 | 97人妻精品一区二区三区 | 国产精品亚洲专区无码不卡 | 男女下面进入的视频免费午夜 | 好男人社区资源 | 精品久久久无码中文字幕 | 国产精品人妻一区二区三区四 | 国产精品毛多多水多 | 一本久久伊人热热精品中文字幕 | 亚洲人成影院在线无码按摩店 | 99久久婷婷国产综合精品青草免费 | 色综合久久88色综合天天 | 久久人人爽人人爽人人片ⅴ | 99久久精品国产一区二区蜜芽 | 精品久久久无码中文字幕 | 最近的中文字幕在线看视频 | 沈阳熟女露脸对白视频 | 日韩亚洲欧美中文高清在线 | 国产精品沙发午睡系列 | 少妇无码一区二区二三区 | 久久五月精品中文字幕 | 99久久精品国产一区二区蜜芽 | 亚洲熟女一区二区三区 | 久久综合网欧美色妞网 | 亚洲性无码av中文字幕 | 成人精品天堂一区二区三区 | 日韩欧美中文字幕在线三区 | 欧美三级a做爰在线观看 | 国产成人无码午夜视频在线观看 | 丝袜人妻一区二区三区 | 99久久人妻精品免费二区 | 亚洲一区二区三区含羞草 | 久久亚洲日韩精品一区二区三区 | 欧美激情一区二区三区成人 | 久久伊人色av天堂九九小黄鸭 | 55夜色66夜色国产精品视频 | 欧美日本精品一区二区三区 | 成人无码视频在线观看网站 | 1000部夫妻午夜免费 | 欧美人与物videos另类 | 亚洲爆乳无码专区 | 少妇被黑人到高潮喷出白浆 | 国产av无码专区亚洲a∨毛片 | 亚洲欧洲日本无在线码 | 亚洲 激情 小说 另类 欧美 | 亚洲国产精品成人久久蜜臀 | 欧美国产亚洲日韩在线二区 | 美女黄网站人色视频免费国产 | 国产精品无码一区二区桃花视频 | 久久综合给久久狠狠97色 | 国产绳艺sm调教室论坛 | 秋霞成人午夜鲁丝一区二区三区 | 亚洲无人区午夜福利码高清完整版 | 无码精品国产va在线观看dvd | 日本又色又爽又黄的a片18禁 | 亚洲国产精品成人久久蜜臀 | 两性色午夜视频免费播放 | 久久天天躁狠狠躁夜夜免费观看 | 日本爽爽爽爽爽爽在线观看免 | 国产精品美女久久久久av爽李琼 | 国产亚洲精品久久久闺蜜 | 全黄性性激高免费视频 | 又紧又大又爽精品一区二区 | 成人试看120秒体验区 | 中文字幕无码人妻少妇免费 | 97夜夜澡人人双人人人喊 | 奇米影视888欧美在线观看 | 日本熟妇乱子伦xxxx | 欧美国产日韩亚洲中文 | 精品少妇爆乳无码av无码专区 | 亚洲中文字幕在线无码一区二区 | 又紧又大又爽精品一区二区 | 午夜精品一区二区三区的区别 | 曰韩少妇内射免费播放 | 亚洲国产av美女网站 | 免费人成在线观看网站 | 精品无码一区二区三区爱欲 | 日韩精品无码免费一区二区三区 | 日日天干夜夜狠狠爱 | 久久精品国产99精品亚洲 | 国产艳妇av在线观看果冻传媒 | 天天躁日日躁狠狠躁免费麻豆 | 中文字幕无码视频专区 | 美女极度色诱视频国产 | 中文字幕日韩精品一区二区三区 | 欧美老人巨大xxxx做受 | 色一情一乱一伦一区二区三欧美 | 久精品国产欧美亚洲色aⅴ大片 | 日韩人妻无码中文字幕视频 | 水蜜桃av无码 | 狠狠色色综合网站 | 久久久久国色av免费观看性色 | 奇米影视888欧美在线观看 | 久久亚洲中文字幕无码 | 国产精品办公室沙发 | 欧美日韩人成综合在线播放 | 日韩精品a片一区二区三区妖精 | 丰满少妇熟乱xxxxx视频 | 亚洲成熟女人毛毛耸耸多 | 久久久中文字幕日本无吗 | 在线观看国产一区二区三区 | 国产午夜福利100集发布 | 人妻无码αv中文字幕久久琪琪布 | 日韩欧美群交p片內射中文 | 国产亚洲日韩欧美另类第八页 | 久久精品国产一区二区三区 | 999久久久国产精品消防器材 | 精品人人妻人人澡人人爽人人 | 欧美性生交xxxxx久久久 | 久久这里只有精品视频9 | 免费中文字幕日韩欧美 | 欧洲美熟女乱又伦 | 中文字幕色婷婷在线视频 | 日日躁夜夜躁狠狠躁 | 97夜夜澡人人爽人人喊中国片 | 丁香花在线影院观看在线播放 | 国产又爽又黄又刺激的视频 | а√资源新版在线天堂 | 露脸叫床粗话东北少妇 | 蜜桃臀无码内射一区二区三区 | 国产人妻人伦精品1国产丝袜 | 精品国产av色一区二区深夜久久 | 成熟妇人a片免费看网站 | 久久天天躁狠狠躁夜夜免费观看 | 性色av无码免费一区二区三区 | 亚拍精品一区二区三区探花 | 亚洲娇小与黑人巨大交 | 无码av中文字幕免费放 | 日本高清一区免费中文视频 | 日本精品人妻无码免费大全 | 76少妇精品导航 | 成 人影片 免费观看 | 波多野结衣乳巨码无在线观看 | 亚洲国产精品毛片av不卡在线 | 欧美 日韩 亚洲 在线 | 兔费看少妇性l交大片免费 | 综合人妻久久一区二区精品 | 免费国产成人高清在线观看网站 | 久久人妻内射无码一区三区 | 成熟人妻av无码专区 | 国产激情艳情在线看视频 | 亚洲中文字幕av在天堂 | 色综合视频一区二区三区 | 九九久久精品国产免费看小说 | 麻豆精品国产精华精华液好用吗 | 亚洲色成人中文字幕网站 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 性欧美熟妇videofreesex | 性做久久久久久久免费看 | 精品国产青草久久久久福利 | 小sao货水好多真紧h无码视频 | 老熟女重囗味hdxx69 | 国产精品亚洲а∨无码播放麻豆 | 性色av无码免费一区二区三区 | 国产麻豆精品精东影业av网站 | 欧美兽交xxxx×视频 | 性啪啪chinese东北女人 | 亚洲精品无码国产 | 国产手机在线αⅴ片无码观看 | 高清无码午夜福利视频 | 帮老师解开蕾丝奶罩吸乳网站 | 久久久久免费精品国产 | 99久久婷婷国产综合精品青草免费 | 国产两女互慰高潮视频在线观看 | 精品人妻人人做人人爽夜夜爽 | 沈阳熟女露脸对白视频 | 欧美老妇交乱视频在线观看 | 免费国产黄网站在线观看 | 最新版天堂资源中文官网 | 亚洲色偷偷男人的天堂 | 亚洲伊人久久精品影院 | 亚洲阿v天堂在线 | 国产成人综合色在线观看网站 | 精品水蜜桃久久久久久久 | 玩弄少妇高潮ⅹxxxyw | 日韩精品无码一区二区中文字幕 | 精品国产一区av天美传媒 | 天天做天天爱天天爽综合网 | 欧美人与动性行为视频 | 牲欲强的熟妇农村老妇女 | 一本色道久久综合亚洲精品不卡 | 麻豆人妻少妇精品无码专区 | 成年美女黄网站色大免费全看 | 欧美 丝袜 自拍 制服 另类 | 国产高潮视频在线观看 | 1000部夫妻午夜免费 | 亚洲第一网站男人都懂 | 精品厕所偷拍各类美女tp嘘嘘 | 青草青草久热国产精品 | 国产精品爱久久久久久久 | 免费乱码人妻系列无码专区 | 欧美日韩在线亚洲综合国产人 | 亚洲国产精品久久久天堂 | 黑人粗大猛烈进出高潮视频 | 国产在线aaa片一区二区99 | 波多野结衣av一区二区全免费观看 | 中文字幕无码人妻少妇免费 | 青青青爽视频在线观看 | 久久99精品久久久久久动态图 | 国产 浪潮av性色四虎 | 国产特级毛片aaaaaa高潮流水 | 国产免费无码一区二区视频 | 67194成是人免费无码 | 欧美丰满少妇xxxx性 | 久久这里只有精品视频9 | 精品国产成人一区二区三区 | 国产国产精品人在线视 | 亚洲精品综合五月久久小说 | 99久久婷婷国产综合精品青草免费 | 99精品久久毛片a片 | 蜜桃臀无码内射一区二区三区 | 大乳丰满人妻中文字幕日本 | 亚洲日韩av一区二区三区四区 | 成人毛片一区二区 | 午夜精品久久久久久久久 | 亚洲国产精品毛片av不卡在线 | 成人免费视频视频在线观看 免费 | 又紧又大又爽精品一区二区 | 麻豆国产人妻欲求不满谁演的 | 牛和人交xxxx欧美 | 午夜无码区在线观看 | 亚洲 欧美 激情 小说 另类 | 中文字幕无码免费久久99 | 国产人妻久久精品二区三区老狼 | 午夜无码区在线观看 | 又黄又爽又色的视频 | 成人欧美一区二区三区黑人免费 | 国产女主播喷水视频在线观看 | 国产做国产爱免费视频 | 久久精品国产99久久6动漫 | 日日碰狠狠躁久久躁蜜桃 | 又粗又大又硬又长又爽 | 国产 精品 自在自线 | 久久天天躁夜夜躁狠狠 | 在线观看国产一区二区三区 | 激情内射亚州一区二区三区爱妻 | 久久99精品久久久久婷婷 | 精品无码成人片一区二区98 | 丰满少妇女裸体bbw | 国产激情一区二区三区 | 亚洲午夜无码久久 | 亚洲国产午夜精品理论片 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 国产精品人妻一区二区三区四 | 亚洲爆乳精品无码一区二区三区 | 国产精品a成v人在线播放 | 亚洲大尺度无码无码专区 | 玩弄少妇高潮ⅹxxxyw | 人妻少妇精品视频专区 | 亚洲精品久久久久久一区二区 | 成人免费视频一区二区 | 精品国产青草久久久久福利 | 久久久久久av无码免费看大片 | 亚洲一区二区三区香蕉 | 麻豆精品国产精华精华液好用吗 | 国产偷自视频区视频 | 成年美女黄网站色大免费全看 | 日日摸天天摸爽爽狠狠97 | 色诱久久久久综合网ywww | 大屁股大乳丰满人妻 | 欧美国产日韩亚洲中文 | 六十路熟妇乱子伦 | 久久亚洲中文字幕精品一区 | 成人免费视频视频在线观看 免费 | 日韩精品成人一区二区三区 | 99久久婷婷国产综合精品青草免费 | 女人被男人躁得好爽免费视频 | 国产亚洲精品久久久久久久 | 国产精品久免费的黄网站 | 精品国产一区二区三区av 性色 | 漂亮人妻洗澡被公强 日日躁 | 亚洲娇小与黑人巨大交 | 中文字幕无码免费久久99 | 男女下面进入的视频免费午夜 | 激情人妻另类人妻伦 | 中文字幕无码av波多野吉衣 | 99麻豆久久久国产精品免费 | 亚洲精品欧美二区三区中文字幕 | 日本饥渴人妻欲求不满 | 久久久久久久久蜜桃 | 国产精品沙发午睡系列 | 人人妻人人澡人人爽精品欧美 | 欧美丰满熟妇xxxx | 中文字幕乱妇无码av在线 | 国产精品久久久一区二区三区 | 天堂亚洲2017在线观看 | 巨爆乳无码视频在线观看 | 男人的天堂av网站 | 国内综合精品午夜久久资源 | 人人超人人超碰超国产 | 久久无码中文字幕免费影院蜜桃 | 欧美xxxxx精品 | 乌克兰少妇性做爰 | 人妻无码久久精品人妻 | 日韩 欧美 动漫 国产 制服 | 极品嫩模高潮叫床 | 一区二区三区乱码在线 | 欧洲 | 成人无码精品1区2区3区免费看 | 亚洲国产精品美女久久久久 | 女人被男人爽到呻吟的视频 | 天天躁夜夜躁狠狠是什么心态 | 精品国偷自产在线 | 国产精品va在线观看无码 | 国产精品-区区久久久狼 | 99久久人妻精品免费一区 | 少妇性l交大片欧洲热妇乱xxx | 亚洲精品www久久久 | 亚洲啪av永久无码精品放毛片 | 97无码免费人妻超级碰碰夜夜 | 国产精品亚洲一区二区三区喷水 | 欧美性生交活xxxxxdddd | 国内精品久久久久久中文字幕 | 55夜色66夜色国产精品视频 | 久久 国产 尿 小便 嘘嘘 | 男女超爽视频免费播放 | 久久亚洲国产成人精品性色 | 午夜福利电影 | 中文亚洲成a人片在线观看 | 亚洲欧洲中文日韩av乱码 | 九九在线中文字幕无码 | 亚洲欧美精品aaaaaa片 | 精品国产青草久久久久福利 | 狠狠色噜噜狠狠狠7777奇米 | 性欧美熟妇videofreesex | 欧美丰满少妇xxxx性 | 日韩 欧美 动漫 国产 制服 | 久久aⅴ免费观看 | 熟妇激情内射com | 性欧美熟妇videofreesex | 日韩人妻无码一区二区三区久久99 | 中国女人内谢69xxxxxa片 | 欧美肥老太牲交大战 | 国产精品丝袜黑色高跟鞋 | 高清无码午夜福利视频 | 人人妻人人澡人人爽欧美精品 | 国产精品美女久久久网av | 伊人久久大香线蕉亚洲 | 欧美野外疯狂做受xxxx高潮 | 天堂亚洲2017在线观看 | 国产无套粉嫩白浆在线 | 日产国产精品亚洲系列 | 色综合久久久久综合一本到桃花网 | 色噜噜亚洲男人的天堂 | 久久婷婷五月综合色国产香蕉 | 99久久久国产精品无码免费 | 四虎影视成人永久免费观看视频 | 狠狠躁日日躁夜夜躁2020 | 亚洲熟妇色xxxxx亚洲 | 中文字幕久久久久人妻 | 日本爽爽爽爽爽爽在线观看免 | 国产精品多人p群无码 | 夜夜影院未满十八勿进 | 日本熟妇浓毛 | 国产明星裸体无码xxxx视频 | 亚洲成av人片在线观看无码不卡 | 欧美35页视频在线观看 | 久久精品人人做人人综合试看 | а天堂中文在线官网 | 国产精品无套呻吟在线 | 国精产品一区二区三区 | 国产精品久久久久影院嫩草 | 中文字幕+乱码+中文字幕一区 | 丰满少妇人妻久久久久久 | 中文亚洲成a人片在线观看 | 久久精品国产一区二区三区肥胖 | 亚洲爆乳无码专区 | 性生交大片免费看l | av无码电影一区二区三区 | 波多野结衣 黑人 | 久久国产精品萌白酱免费 | 综合人妻久久一区二区精品 | 久久99精品国产.久久久久 | 日日摸夜夜摸狠狠摸婷婷 | 国内精品久久久久久中文字幕 | 亚洲欧洲日本综合aⅴ在线 | 国产无遮挡又黄又爽又色 | 欧美日韩在线亚洲综合国产人 | 免费网站看v片在线18禁无码 | 一本久久a久久精品亚洲 | 色情久久久av熟女人妻网站 | 亚洲七七久久桃花影院 | 啦啦啦www在线观看免费视频 | 久久久久免费精品国产 | www国产亚洲精品久久网站 | 精品无人区无码乱码毛片国产 | 色一情一乱一伦一视频免费看 | 免费乱码人妻系列无码专区 | 牲欲强的熟妇农村老妇女视频 | 色综合天天综合狠狠爱 | 日日躁夜夜躁狠狠躁 | 日本乱偷人妻中文字幕 | 蜜桃视频插满18在线观看 | 国产乱人伦偷精品视频 | 婷婷五月综合激情中文字幕 | 人人妻人人澡人人爽人人精品 | 亚洲日韩av一区二区三区中文 | 色一情一乱一伦 | 六月丁香婷婷色狠狠久久 | 2019nv天堂香蕉在线观看 | 一本久久a久久精品vr综合 | 免费看男女做好爽好硬视频 | 国产精品久久久久7777 | 亚洲成色在线综合网站 | 成 人 免费观看网站 | 无码人妻精品一区二区三区不卡 | 成人无码视频在线观看网站 | 激情五月综合色婷婷一区二区 | 国精品人妻无码一区二区三区蜜柚 | 久久综合网欧美色妞网 | 人妻体内射精一区二区三四 | 人人妻人人澡人人爽精品欧美 | 亚洲精品久久久久avwww潮水 | 亚洲人成网站在线播放942 | 免费网站看v片在线18禁无码 | 国产口爆吞精在线视频 | 久久精品女人天堂av免费观看 | 性生交大片免费看l | 丰满少妇人妻久久久久久 | 亚洲精品久久久久久一区二区 | 亚洲精品一区二区三区四区五区 | 欧美人与善在线com | 国产精品人人妻人人爽 | 久久久久久a亚洲欧洲av冫 | 奇米影视7777久久精品人人爽 | 亚洲一区二区观看播放 | 一区二区传媒有限公司 | 国产精品成人av在线观看 | 色欲人妻aaaaaaa无码 | 亚洲熟妇色xxxxx欧美老妇 | 99久久人妻精品免费一区 | 国产电影无码午夜在线播放 | 亚洲精品综合一区二区三区在线 | 日本护士xxxxhd少妇 | 蜜桃av抽搐高潮一区二区 | 伊人久久大香线焦av综合影院 | 欧美性生交活xxxxxdddd | 国产精品久久久久久久影院 | 日本va欧美va欧美va精品 | 亚洲另类伦春色综合小说 | 中文字幕av无码一区二区三区电影 | 亚洲综合另类小说色区 | 成人免费视频一区二区 | 人人超人人超碰超国产 | 久久国产劲爆∧v内射 | 日本一区二区三区免费播放 | 精品少妇爆乳无码av无码专区 | 1000部啪啪未满十八勿入下载 | 久久99精品久久久久久动态图 | 2020久久超碰国产精品最新 | 中文字幕av无码一区二区三区电影 | 国产乱人伦av在线无码 | 99久久人妻精品免费二区 | 国产av无码专区亚洲awww | 成年美女黄网站色大免费全看 | 性色欲情网站iwww九文堂 | 搡女人真爽免费视频大全 | 成人性做爰aaa片免费看 | 国产精品久久久 | а√天堂www在线天堂小说 | 内射巨臀欧美在线视频 | 成人无码精品1区2区3区免费看 | 大乳丰满人妻中文字幕日本 | 5858s亚洲色大成网站www | 国产精品永久免费视频 | 在线观看国产午夜福利片 | 亚洲成a人片在线观看无码 | 奇米综合四色77777久久 东京无码熟妇人妻av在线网址 | 沈阳熟女露脸对白视频 | 国产舌乚八伦偷品w中 | 夜精品a片一区二区三区无码白浆 | 欧美 亚洲 国产 另类 | 精品成人av一区二区三区 | 国产一区二区不卡老阿姨 | 夜精品a片一区二区三区无码白浆 | 夫妻免费无码v看片 | 四虎影视成人永久免费观看视频 | 国产97在线 | 亚洲 | 久久人人爽人人爽人人片av高清 | 久久精品国产99精品亚洲 | 国产成人av免费观看 | 国产精品久久国产三级国 | 日韩精品久久久肉伦网站 | 国产亚洲精品久久久ai换 | 日本欧美一区二区三区乱码 | 久久久久99精品国产片 | 欧美野外疯狂做受xxxx高潮 | 日本精品久久久久中文字幕 | 精品国产一区二区三区四区 | 中文字幕无码av激情不卡 | 亚洲精品久久久久avwww潮水 | 国产熟女一区二区三区四区五区 | 免费人成网站视频在线观看 | 又粗又大又硬毛片免费看 | 日本一区二区三区免费高清 | 熟妇人妻中文av无码 | 99久久久国产精品无码免费 | 国产在线aaa片一区二区99 | 欧美一区二区三区 | 2020最新国产自产精品 | 澳门永久av免费网站 | 色一情一乱一伦 | 日本又色又爽又黄的a片18禁 | 精品日本一区二区三区在线观看 | 无码福利日韩神码福利片 | 久久久中文字幕日本无吗 | 东京无码熟妇人妻av在线网址 | 免费人成在线观看网站 | 黑森林福利视频导航 | 一本一道久久综合久久 | 亚拍精品一区二区三区探花 | √天堂中文官网8在线 | 国产另类ts人妖一区二区 | 精品偷拍一区二区三区在线看 | 日本大香伊一区二区三区 | 久久久久av无码免费网 | 国产精品高潮呻吟av久久4虎 | 国内综合精品午夜久久资源 | 欧美丰满熟妇xxxx性ppx人交 | 久久久婷婷五月亚洲97号色 | 国产人妻精品午夜福利免费 | 荫蒂被男人添的好舒服爽免费视频 | 7777奇米四色成人眼影 | 精品一区二区三区波多野结衣 | 美女极度色诱视频国产 | 日日摸夜夜摸狠狠摸婷婷 | 欧洲精品码一区二区三区免费看 | 东京一本一道一二三区 | 色综合天天综合狠狠爱 | 成人欧美一区二区三区黑人免费 | 日日摸日日碰夜夜爽av | 欧美第一黄网免费网站 | 99久久99久久免费精品蜜桃 | 人人妻人人澡人人爽欧美一区 | 丰满少妇弄高潮了www | 国产精品第一区揄拍无码 | 蜜桃无码一区二区三区 | 国产成人一区二区三区别 | 亚洲中文字幕乱码av波多ji | 一个人看的www免费视频在线观看 | 少妇无码一区二区二三区 | 黑人巨大精品欧美一区二区 | 日韩精品成人一区二区三区 | 精品无码成人片一区二区98 | 一本色道久久综合狠狠躁 | 丝袜足控一区二区三区 | av无码电影一区二区三区 | 国精品人妻无码一区二区三区蜜柚 | 亚洲 激情 小说 另类 欧美 | 亚洲熟妇自偷自拍另类 | 欧美日韩一区二区免费视频 | 人妻无码久久精品人妻 | 日韩精品成人一区二区三区 | 三上悠亚人妻中文字幕在线 | 精品国产成人一区二区三区 | 国产精品无码一区二区桃花视频 | www国产亚洲精品久久久日本 | 青青草原综合久久大伊人精品 | 久久久久av无码免费网 | 国产成人无码区免费内射一片色欲 | 精品成在人线av无码免费看 | 色爱情人网站 | 精品无人国产偷自产在线 | 国产精品免费大片 | 国产无遮挡又黄又爽免费视频 | 无码吃奶揉捏奶头高潮视频 | 激情综合激情五月俺也去 | 国产人妻精品一区二区三区不卡 | 麻豆成人精品国产免费 | 欧美丰满熟妇xxxx性ppx人交 | 最近免费中文字幕中文高清百度 | 亚洲精品鲁一鲁一区二区三区 | 成年美女黄网站色大免费全看 | 国产农村妇女aaaaa视频 撕开奶罩揉吮奶头视频 | 欧美一区二区三区视频在线观看 | 东京一本一道一二三区 | 少妇愉情理伦片bd | 一个人看的www免费视频在线观看 | 男女作爱免费网站 | 日韩 欧美 动漫 国产 制服 | 午夜精品久久久内射近拍高清 | 一个人免费观看的www视频 | 丰满岳乱妇在线观看中字无码 | 国产午夜手机精彩视频 | 亚洲午夜福利在线观看 | 婷婷五月综合缴情在线视频 | 久在线观看福利视频 | 少妇的肉体aa片免费 | 最新国产麻豆aⅴ精品无码 | 国内精品久久久久久中文字幕 | 精品国偷自产在线视频 | 国产偷抇久久精品a片69 | 久久无码专区国产精品s | 一本久道久久综合狠狠爱 | 呦交小u女精品视频 | 亚洲中文字幕成人无码 | 精品 日韩 国产 欧美 视频 | 无码精品国产va在线观看dvd | 久久国产自偷自偷免费一区调 | 久久国产精品二国产精品 | 乱人伦人妻中文字幕无码 | 精品国产国产综合精品 | 国产极品美女高潮无套在线观看 | 牲欲强的熟妇农村老妇女 | 国产精华av午夜在线观看 | 国产亚洲人成在线播放 | 国产精品理论片在线观看 | 最近免费中文字幕中文高清百度 | 97夜夜澡人人双人人人喊 | 中文字幕乱码人妻二区三区 | 久久久久亚洲精品男人的天堂 | 日日摸天天摸爽爽狠狠97 | 亚洲男人av香蕉爽爽爽爽 | 中文字幕日韩精品一区二区三区 | 久久人人97超碰a片精品 | 人人妻人人澡人人爽精品欧美 | 欧美性猛交xxxx富婆 | av小次郎收藏 | 丝袜人妻一区二区三区 | 久久久久99精品成人片 | 在线精品国产一区二区三区 | 麻豆果冻传媒2021精品传媒一区下载 | 日韩少妇内射免费播放 | 国内精品九九久久久精品 | 日本精品人妻无码免费大全 | 激情人妻另类人妻伦 | 人人澡人人透人人爽 | 国产无套内射久久久国产 | 男女爱爱好爽视频免费看 | 亚洲午夜无码久久 | 老子影院午夜伦不卡 | 无码成人精品区在线观看 | 无遮挡啪啪摇乳动态图 | 国产精品-区区久久久狼 | 久久99精品久久久久婷婷 | 欧美熟妇另类久久久久久多毛 | 真人与拘做受免费视频一 | 国产三级久久久精品麻豆三级 | 久久久精品456亚洲影院 | 妺妺窝人体色www婷婷 | 欧美三级a做爰在线观看 | 好男人www社区 | 久久国产精品二国产精品 | 久久午夜无码鲁丝片午夜精品 | 国产色精品久久人妻 | 97久久精品无码一区二区 | 国产另类ts人妖一区二区 | 国产成人无码区免费内射一片色欲 | 老熟女乱子伦 | 荫蒂被男人添的好舒服爽免费视频 | 国产两女互慰高潮视频在线观看 | 国产av人人夜夜澡人人爽麻豆 | 无码一区二区三区在线观看 | 性做久久久久久久久 | 高清无码午夜福利视频 | 国产成人一区二区三区在线观看 | 日韩人妻无码中文字幕视频 | 国产亚洲精品久久久久久久久动漫 | 久久国产精品_国产精品 | 亚无码乱人伦一区二区 | 丰满少妇高潮惨叫视频 | 人妻少妇精品无码专区二区 | 少妇人妻偷人精品无码视频 | 99久久99久久免费精品蜜桃 | 亚洲啪av永久无码精品放毛片 | 日产国产精品亚洲系列 | 国产人妖乱国产精品人妖 | 无码成人精品区在线观看 | 精品久久久无码人妻字幂 | 亚洲精品一区二区三区在线 | 精品国产一区av天美传媒 | 任你躁国产自任一区二区三区 | 久久精品视频在线看15 | 日本va欧美va欧美va精品 | 欧美老妇与禽交 | 亚洲自偷自拍另类第1页 | 久久久久99精品成人片 | 日韩精品无码免费一区二区三区 | 无码免费一区二区三区 | 久久无码人妻影院 | 午夜男女很黄的视频 | 中文字幕人成乱码熟女app | 成人免费视频一区二区 | 中文字幕无码免费久久9一区9 | 婷婷丁香五月天综合东京热 | 欧美成人高清在线播放 | 日日橹狠狠爱欧美视频 | 国产精品无码永久免费888 | 久久久久久亚洲精品a片成人 | 欧美喷潮久久久xxxxx | 亚洲色www成人永久网址 | 欧美成人高清在线播放 | 精品无码一区二区三区爱欲 | 亚洲自偷自拍另类第1页 | 日本免费一区二区三区最新 | 台湾无码一区二区 | 老熟女乱子伦 | yw尤物av无码国产在线观看 | 国产精品毛片一区二区 | 精品国产一区二区三区av 性色 | 无套内射视频囯产 | 综合激情五月综合激情五月激情1 | 内射老妇bbwx0c0ck | 老司机亚洲精品影院无码 | 成人精品视频一区二区 | 亚洲の无码国产の无码影院 | 久久国内精品自在自线 | 两性色午夜视频免费播放 | 老子影院午夜伦不卡 | 国产熟妇高潮叫床视频播放 | 人人妻人人澡人人爽欧美一区九九 | 日本成熟视频免费视频 | 亚洲最大成人网站 | 国色天香社区在线视频 | 99久久精品国产一区二区蜜芽 | 无码人中文字幕 | 久久视频在线观看精品 | 樱花草在线社区www | 日本xxxx色视频在线观看免费 | 午夜丰满少妇性开放视频 | 亚洲中文字幕在线无码一区二区 | 领导边摸边吃奶边做爽在线观看 | 成人动漫在线观看 | 伊人久久大香线焦av综合影院 | 18禁止看的免费污网站 | 中文字幕乱码亚洲无线三区 | 人妻少妇精品视频专区 | 国内综合精品午夜久久资源 | 国产精品国产自线拍免费软件 | 亚洲综合色区中文字幕 | 亚洲第一无码av无码专区 | 无遮挡啪啪摇乳动态图 | 久久精品国产亚洲精品 | 天下第一社区视频www日本 | 成年美女黄网站色大免费全看 | 麻豆av传媒蜜桃天美传媒 | 狂野欧美激情性xxxx | 亚洲人成网站在线播放942 | 免费无码av一区二区 | 纯爱无遮挡h肉动漫在线播放 | 天干天干啦夜天干天2017 | 又粗又大又硬又长又爽 | 扒开双腿疯狂进出爽爽爽视频 | 日本精品少妇一区二区三区 | 国产艳妇av在线观看果冻传媒 | 无码av免费一区二区三区试看 | 日本一卡二卡不卡视频查询 | 亚洲中文字幕在线观看 | 欧美老熟妇乱xxxxx | 精品亚洲成av人在线观看 | 午夜成人1000部免费视频 | 成人一在线视频日韩国产 | 人妻aⅴ无码一区二区三区 | 成人aaa片一区国产精品 | 国产乱人偷精品人妻a片 | 性生交大片免费看女人按摩摩 | www国产亚洲精品久久网站 | 欧美喷潮久久久xxxxx | 国产精品人妻一区二区三区四 | 亚洲色偷偷男人的天堂 | 永久免费精品精品永久-夜色 | 色诱久久久久综合网ywww | a在线亚洲男人的天堂 | 精品偷拍一区二区三区在线看 | 最新国产乱人伦偷精品免费网站 | 美女扒开屁股让男人桶 | 日本欧美一区二区三区乱码 | 国语精品一区二区三区 | 伊人色综合久久天天小片 | 久久99精品国产麻豆蜜芽 | 99久久婷婷国产综合精品青草免费 | 亚洲欧洲无卡二区视頻 | 日韩人妻无码一区二区三区久久99 | 国精产品一品二品国精品69xx | 99riav国产精品视频 | 国产va免费精品观看 | 日日橹狠狠爱欧美视频 | 夜夜夜高潮夜夜爽夜夜爰爰 | 我要看www免费看插插视频 | 国产精品第一区揄拍无码 | 亚洲国产精品久久人人爱 | 天天躁日日躁狠狠躁免费麻豆 | 久久久中文久久久无码 | 初尝人妻少妇中文字幕 | 高清不卡一区二区三区 | 高清国产亚洲精品自在久久 | 国产欧美亚洲精品a | 久久久久se色偷偷亚洲精品av | 久久久久久久久888 | 无码国产色欲xxxxx视频 | 美女极度色诱视频国产 | 无码纯肉视频在线观看 | av香港经典三级级 在线 | 国产成人无码午夜视频在线观看 | 精品偷自拍另类在线观看 | 国内精品一区二区三区不卡 | 国产精品久久久久无码av色戒 | 欧美35页视频在线观看 | 亚洲成a人片在线观看无码 | 精品国偷自产在线视频 | 精品日本一区二区三区在线观看 | 国产又爽又猛又粗的视频a片 | 少妇人妻大乳在线视频 | 亚洲精品一区二区三区在线观看 | 久久综合激激的五月天 | 麻豆果冻传媒2021精品传媒一区下载 | 久久久精品欧美一区二区免费 | 任你躁国产自任一区二区三区 | 免费观看的无遮挡av | 国产福利视频一区二区 |