線上服務咨詢
Article/文章
記錄成長點滴 分享您我感悟
必須考慮作為大型網站架構的前10個問題
發表時間:2019-07-30 16:08:24
文章來源:沈陽軟件開發
標簽:網站建設 小程序開發 小程序制作 微信小程序開發 公眾號開發 微信公眾號開發 網頁設計 網站優化 網站排名 網站設計 微信小程序設計 小程序定制 微信小程序定制
瀏覽次數:0
這里的大型網站架構僅包括高度交互且高度交互的數據類型網站。出于眾所周知的原因,我們不會談論新聞類和一些可以依賴HTML靜態實現的體系結構。我們使用高負載和高數據。以高數據移動性交換網站為例
例如,海南,開心網等類似web2.0系列架構。我們不在這里討論PHP或JSP或.NET環境。我們從架構方面來看問題。實現語言不是問題。語言的優點是實現而不是好或壞。無論您選擇哪種語言,都必須實施架構。面對。
在這里,我們討論大型網站需要考慮和考慮的問題
1.處理海量數據眾所周知,對于一些相對較小的站點,數據量不是很大,選擇和更新可以解決我們面臨的問題,負載不是很大,最多可以做幾個索引。對于大的網站,每天的數據量可能是數百萬。如果存在設計糟糕的多對多關系,則在早期階段沒有問題,但隨著用戶的增長,數據量將以幾何方式增長。此時,我們選擇和更新表的成本非常高(更不用說多表聯合查詢)。
2,數據并發處理在某些時候,2.0的CTO有一把劍,它是一個緩存。對于緩存,當高并發性很高時,這也是一個大問題。在整個應用程序下,緩存是全局共享的,但是當我們進行更改時,如果兩個或多個請求同時對緩存進行更新,則應用程序將直接死亡。這時,您需要一個良好的數據并發處理策略和緩存策略。
另外,它是數據庫的死鎖問題。也許我們感覺不到。在高并發性的情況下出現死鎖的概率非常高。磁盤緩存是一個大問題。
3.文件存儲問題對于一些支持文件上傳2.0的站點,我們應該更關注如何在硬盤容量增長時有效地存儲和索引文件。常見的解決方案是按日期和類型存儲文件。但是當文件數量是海量數據時,如果硬盤存儲500G的普通文件,那么磁盤Io在維護和使用過程中是一個很大的問題,即使你的帶寬足夠,但你的磁盤不一定會響應。如果此時間涉及上傳,則磁盤很容易結束。
也許使用raid和專用存儲服務器可以解決目前的問題,但是到處都存在訪問問題。也許我們的服務器在沈陽,如何解決云南或新疆的訪問速度?如果是分布式的,那么我們就是文件索引以及如何規劃架構。
所以我們不得不承認文件存儲是一個非常困難的問題
4.數據關系的處理我們可以輕松地規劃符合第三范式的數據庫,該范例包含多對多關系,并且可以用GUID替換INDENTIFY COLUMN。然而,2.0時代充滿了多對多的關系。第三種范式是第一種范式。應該放棄。必須有效地最小化多表聯合查詢。
5,數據索引的問題眾所周知,索引是提高數據庫效率查詢的最便宜和最簡單的方法。但是,在UPDATE很高的情況下,更新和刪除的成本會很高,我無法想到它。我遇到了一個在更新聚焦索引時需要10分鐘才能完成的情況。所以對于網站來說,這些基礎知識是無法忍受的。
索引和更新是一對自然的。問題A,D和E是我們在進行架構時必須考慮的問題,它們可能是花費最多時間的問題。
6,分布式處理對于2.0網站由于其高交互性,CDN實現的效果基本上為0,內容實時更新,我們經常處理。為了確保每個地方的訪問速度,我們需要面對一個大問題,即如何有效地實現數據同步和更新,各地服務器的實時通信都存在必須考慮的問題。
7.分析Ajax的優缺點程也AJAX,擊敗了AJAX,AJAX成了主流趨勢,突然發現基于XML的帖子和獲取是如此簡單。客戶端獲取或發布到服務器數據,服務器在收到數據請求后返回。這是一個普通的AJAX請求。但是在AJAX處理中,如果我們使用數據包捕獲工具,數據返回和處理一目了然。對于一些計算密集型的AJAX請求,我們可以構造一個發夾,可以輕松殺死網絡服務器。
8.數據安全性分析對于HTTP協議,數據包以純文本形式傳輸。也許我們可以說我們可以使用加密,但對于G問題,加密過程可能是純文本(例如,我們知道QQ很容易。判斷他的加密并有效地編寫像他這樣的加密和解密方法)。當您的網站流量不是很大時,沒有人關心您,但是當您的流量出現時,所謂的插件,所謂的群發郵件將陸續出現(從qq群組可見性開始)。也許我們可以非常說我們可以使用更高級別的判斷甚至HTTPS來實現,注意,當你做這些處理時會付出巨大的數據庫,io和CPU成本。對于一些團體頭發,它基本上是不可能的。作者已經能夠實現百度空間和qq空間的大規模分發。每個人都愿意嘗試,這并不是很難。
9.數據同步和集群處理的問題當我們的某個數據庫服務器不堪重負時,我們需要在此時執行基于數據庫的工作負載和集群。這個時間可能是最棘手的問題。數據基于網絡傳輸。根據數據庫的設計,數據延遲是一個可怕的問題,也是一個不可避免的問題。在這種情況下,我們需要使用另一種方法。確保在此延遲的幾秒鐘內或更長時間內實現有效的交互。如數據散列,分割,內容處理等。
10.數據共享渠道和OPENAPI趨勢Openapi已成為一種必然趨勢,從谷歌,臉書,臉譜到學校,正在考慮這個問題,它可以更有效地留住用戶,激發用戶的興趣,讓更多的人幫助你做最有效的發展。這時,一個有效的數據共享平臺,數據開放平臺已經成為不可或缺的方式,并且在開放接口的情況下確保數據的安全性和性能,這是一個我們必須認真考慮的問題。
網站建設,小程序開發,小程序制作,微信小程序開發,公眾號開發,微信公眾號開發,網頁設計,網站優化,網站排名,網站設計,微信小程序設計,小程序定制,微信小程序定制