小型的網(wǎng)站,比如個人網(wǎng)站,可以使用最簡單的html靜態(tài)頁面就實現(xiàn)了,配合一些圖片達到美化效果,所有的頁面只要存放在一個目錄下,這樣的網(wǎng)站對系統(tǒng)架構(gòu)、性能的要求都很簡單。但是對于大型網(wǎng)站來說,所采用的技術(shù)更是涉及面非常廣,從硬件到軟件、編程語言、防火墻等各個領(lǐng)域都有了很高的要求,已經(jīng)不是原來簡單的html靜態(tài)網(wǎng)站所能比擬的。還沒法根本解決大型網(wǎng)站面臨的高負載和高并發(fā)問題。下面從低成本、高性能和高擴張性的角度來說說一些經(jīng)驗。下面就由小編和大家講一講建設(shè)大型網(wǎng)站建設(shè)的注意事項有哪些。
對于大量內(nèi)容并且頻繁更新的網(wǎng)站,我們無法全部手動去挨個實現(xiàn),于是出現(xiàn)了我們常見的信息發(fā)布系統(tǒng)cms。除了門戶和信息發(fā)布類型的網(wǎng)站,對于交互性要求很高的社區(qū)類型網(wǎng)站來說,盡可能的靜態(tài)化也是提高性能的必要手段,將社區(qū)內(nèi)的帖子、文章進行實時的靜態(tài)化,有更新的時候再重新靜態(tài)化也是大量使用的策略,像mop的大雜燴就是使用了這樣的策略,網(wǎng)易社區(qū)等也是如此。
同時,html靜態(tài)化也是某些緩存策略使用的手段,對于系統(tǒng)中頻繁使用數(shù)據(jù)庫查詢但是內(nèi)容更新很小的應(yīng)用,可以考慮使用html靜態(tài)化來實現(xiàn)。
二、圖片服務(wù)器分離
大家知道,對于web服務(wù)器來說,不管是apache、iis還是其他容器,圖片是最消耗資源的,于是我們有必要將圖片與頁面進行分離,這是基本上大型網(wǎng)站都會采用的策略,他們都有獨立的圖片服務(wù)器,甚至很多臺圖片服務(wù)器。這樣的架構(gòu)可以降低提供頁面訪問請求的服務(wù)器系統(tǒng)壓力,提高服務(wù)器的穩(wěn)定性,并且可以保證系統(tǒng)不會因為圖片問題而崩潰,在應(yīng)用服務(wù)器和圖片服務(wù)器上,可以進行不同的配置優(yōu)化,比如apache在配置contenttype的時候可以盡量少支持,盡可能少的 loadmodule,保證更高的系統(tǒng)消耗和執(zhí)行效率。
三、數(shù)據(jù)庫集群和庫表散列
大型網(wǎng)站都有復雜的應(yīng)用,這些應(yīng)用必須使用數(shù)據(jù)庫,那么在面對大量訪問的時候,數(shù)據(jù)庫的瓶頸很快就能顯現(xiàn)出來,這時一臺數(shù)據(jù)庫將很快無法滿足應(yīng)用,于是我們需要使用數(shù)據(jù)庫集群或者庫表散列。在數(shù)據(jù)庫集群方面,很多數(shù)據(jù)庫都有自己的解決方案,oracle、sybase等都有很好的方案,常用的mysql提供的master/slave也是類似的方案,您使用了什么樣的db,就參考相應(yīng)的解決方案來實施即可。
上面提到的數(shù)據(jù)庫集群由于在架構(gòu)、成本、擴張性方面都會受到所采用db類型的限制,于是我們需要從應(yīng)用程序的角度來考慮改善系統(tǒng)架構(gòu),庫表散列是常用并且最有效的解決方案。我們在應(yīng)用程序中安裝業(yè)務(wù)和應(yīng)用或者功能模塊將數(shù)據(jù)庫進行分離,不同的模塊對應(yīng)不同的數(shù)據(jù)庫或者表,再按照一定的策略對某個頁面或者功能進行更小的數(shù)據(jù)庫散列,比如用戶表,按照用戶id進行表散列,這樣就能夠低成本的提升系統(tǒng)的性能并且有很好的擴展性。sohu的論壇就是采用了這樣的架構(gòu),將論壇的用戶、設(shè)置、帖子等信息進行數(shù)據(jù)庫分離,然后對帖子、用戶按照板塊和id進行散列數(shù)據(jù)庫和表,最終可以在配置文件中進行簡單的配置便能讓系統(tǒng)隨時增加一臺低成本的數(shù)據(jù)庫進來補充系統(tǒng)性能。
四、緩存
最基本的兩種緩存。架構(gòu)方面的緩存,對apache比較熟悉的人都能知道apache提供了自己的緩存模塊,也可以使用外加的squid模塊進行緩存,這兩種方式均可以有效的提高apache的訪問響應(yīng)能力。
網(wǎng)站程序開發(fā)方面的緩存,linux上提供的memory cache是常用的緩存接口,可以在web開發(fā)中使用,比如用java開發(fā)的時候就可以調(diào)用memorycache對一些數(shù)據(jù)進行緩存和通訊共享,一些大型社區(qū)使用了這樣的架構(gòu)。另外,在使用web語言開發(fā)的時候,各種語言基本都有自己的緩存模塊和方法,php有pear的cache模塊,java就更多了,.net不是很熟悉,相信也肯定有。
五、鏡像
鏡像是大型網(wǎng)站常采用的提高性能和數(shù)據(jù)安全性的方式,鏡像的技術(shù)可以解決不同網(wǎng)絡(luò)接入商和地域帶來的用戶訪問速度差異,比如chinanet和 edunet之間的差異就促使了很多網(wǎng)站在教育網(wǎng)內(nèi)搭建鏡像站點,數(shù)據(jù)進行定時更新或者實時更新。在鏡像的細節(jié)技術(shù)方面,這里不闡述太深,有很多專業(yè)的現(xiàn)成的解決架構(gòu)和產(chǎn)品可選。也有廉價的通過軟件實現(xiàn)的思路,比如linux上的rsync等工具。
六、負載均衡
負載均衡將是大型網(wǎng)站解決高負荷訪問和大量并發(fā)請求采用的終極解決辦法。
負載均衡技術(shù)發(fā)展了多年,有很多專業(yè)的服務(wù)提供商和產(chǎn)品可以選擇,我個人接觸過一些解決方法,其中有兩個架構(gòu)可以給大家做參考。
硬件四層交換 第四層交換使用第三層和第四層信息包的報頭信息,根據(jù)應(yīng)用區(qū)間識別業(yè)務(wù)流,將整個區(qū)間段的業(yè)務(wù)流分配到合適的應(yīng)用服務(wù)器進行處理。 第四層交換功能就象是虛ip,指向物理服務(wù)器。它傳輸?shù)臉I(yè)務(wù)服從的協(xié)議多種多樣,有http、ftp、nfs、telnet或其他協(xié)議。這些業(yè)務(wù)在物理服務(wù)器基礎(chǔ)上,需要復雜的載量平衡算法。在ip世界,業(yè)務(wù)類型由終端tcp或udp端口地址來決定,在第四層交換中的應(yīng)用區(qū)間則由源端和終端ip地址、tcp和udp端口共同決定。小伙伴們要想獲得更多建設(shè)大型網(wǎng)站建設(shè)的內(nèi)容,請關(guān)注。
騰訊云linux云服務(wù)器配置穩(wěn)定云服務(wù)器購買微軟再次推出Office2016更新:更加整潔有條理steam怎么設(shè)置中文 steam中文界面設(shè)置聚美優(yōu)品戴雨森離職后發(fā)文docker如何重啟某個容器阿里云金牌服務(wù)器價格多少電腦中wifi圖標不見了怎么辦 電腦右下角wifi圖標不見了如何找回來