數據庫加速解決方案

2024-07-21 02:39:09

字體：大中小

來源：轉載

供稿：網友

　　一. 數據庫為什么要加速
　　隨著互聯網和電子商務的迅猛發展，傳統的大型結構化數據庫系統越來越多的應用在Internet/Internet上，并擔當著企業業務和信息系統核心的重任。
　　但是，本來是為了傳統業務的開展而設計出來的數據庫系統，已經越來越多的受到超大規模數據量和高強度瞬時并發訪問的折磨和考驗。無論是企業在Internet上的企業商務網站，還是企業內部Intranet/ERP/CRM等內部業務治理系統，隨著數據量和業務量的不斷高速增長，數據庫系統的執行效率的低下，已經越來越成為制約整個系統性能和效率提升的瓶頸。目前企業級數據庫系統面臨的挑戰：
　　1）企業業務信息和數據隨業務的發展而持續膨脹
　　2）企業數據庫訪問量隨著數據量本身增長而快速增長
　　3）信息數據來源的多樣化，導致了數據治理的復雜化
　　4）數據統一集中治理后系統負載大規模增加
　　5）要對海量數據信息的整合處理
　　6）數據的深層次挖掘和分析的需求
　　7）企業數據的智能化處理的迫切要求
　　8）提供更個性化與專業化相結合的新服務
　　9）服務模式由以服務器為中心轉變為以客戶為中心，對數據庫系統提出了更高的要求
　　10）信息系統的負載嚴重不均衡，急需有高強度瞬時大規模并發操作的能力
　　所以，我們認為，對于數據庫企業級應用來說，應當采用加速技術，確保企業利益。
　　二. 如何為數據庫加速
　　我們認為，為數據庫提速應當包括三方面的含義：
　　◆提高數據庫在大規模并發訪問時的數據處理能力；
　　◆提高數據庫索引的效率，從而大幅度提高單機數據查詢效率；
　　◆豐富信息查詢手段，適應網站信息查詢的要求。
　　所以，我們建議用三個步驟來達到這個目的。
　　第一步：使用I-Search for DataBase提高單機檢索速度
　　為了達到提高數據庫索引的效率，豐富信息查詢手段，提高數據庫復合查詢效率的目的，我們推薦使用I-Search for Database產品。I-Search for Database產品是I-Search檢索系統與大型關系型數據庫無逢對接的產品。
　　◆提高數據庫索引的效率
　　我們將以往的全文信息檢索的核心技術應用到提高數據庫索引的效率方面來，形成了自己獨特的I-Search for Database數據庫內嵌式產品。
　　全文檢索核心算法，其穩定性、安全性和高效性早已被象新華社這樣的龐大信息量級的用戶所驗證。該系統主要是針對中文自然語言的特點，大量借鑒計算機技術、通訊網絡技術、人工智能、漢語語言學、情報學、圖書館學等多學科多領域的成熟理論和技術，實現了一系列要害技術的突破，，如"混合索引機制"、"智能檢索"、"機器學習機制" 、"中英文混合索引" 等等。這些技術被用戶所普遍認同、被業界同行所接受并逐步學習。　
　　◆豐富信息查詢手段，提高數據庫復合查詢效率
　　I-Search for Database通過建立"進階"索引的方式，可以提高多字段聯合查詢的效率。而多字段聯合查詢則是復合查詢中一種較為簡單的查詢方式。
　　而I-Search 作為專業的檢索系統，本身就提供了十幾種專業的信息查詢方式，例如：詞檢索、字包含檢索、聯想檢索、智能檢索等等。而且，I-Search還支持二次檢索，支持檢索詞之間的邏輯運算。甚至專業的搜索引擎功能，也可以被I-Search很好的支持。
　　第二步：采用分布式檢索方案提高并發檢索效率
　　單機系統（不管是NT還是UNIX）的系統負載能力總是有限度的，當系統負載達到極限時，系統整體的運作效率就會嚴重下降。根本解決這個問題的方法，就是采用多機分布式計算方案。采用分布式檢索技術并輔以負載
　　均衡設備（軟件或硬件），可以使系統大幅度提高并發檢索的效率。其系統信息流程結構圖如下：
　　　數據庫加速解決方案（圖一）

　　第三步：采用Cache Server提高大規模并發檢索效率
　　采用多WWW服務器和多數據庫服務器與高速緩存服務器，將多用戶并發檢索訪問時的系統檢索效率提高到一個新的水平。
　　　數據庫加速解決方案（圖二）

　　在WWW的內存和多CPU，其單機內存緩沖能力可達100萬至1000萬條紀錄，并且可以達到200~400次/秒的并發處理能力，在經過一段時間的實際使用后，通過內部的自學習和自適應機制，可以為數據庫緩解50%至80%的數據查詢壓力。這就是說，會有50%~80%的查詢請求根本不通過數據庫，即可得到查詢結果。網站整體效率可以提高100%~500%。大大緩解了數據庫服務器數據查詢壓力的作用。
　　而且，I-Cache也可以把不同的查詢請求"分發"給不同的數據庫服務器，進一步降低單臺數據庫服務器的數>據查詢壓力，并且形成一套完整的分布式計算的應用?！?br />　　該方案的特點是，可以通過增加WWW服務器的方式提高網站的負載能力，并且通過增加數據庫服務器的方式，來提高并發檢索的效率。

　　三. 數據庫加速帶來的利益與好處
　　數據庫加速解決方案（圖三）