首頁 考試吧論壇 Exam8視線 考試商城 網絡課程 模擬考試 考友錄 實用文檔 求職招聘 論文下載 | ||
![]() |
2011中考 | 2011高考 | 2012考研 | 考研培訓 | 在職研 | 自學考試 | 成人高考 | 法律碩士 | MBA考試 MPA考試 | 中科院 |
|
![]() |
四六級 | 職稱英語 | 商務英語 | 公共英語 | 托福 | 雅思 | 專四專八 | 口譯筆譯 | 博思 | GRE GMAT 新概念英語 | 成人英語三級 | 申碩英語 | 攻碩英語 | 職稱日語 | 日語學習 | 法語 | 德語 | 韓語 |
|
![]() |
計算機等級考試 | 軟件水平考試 | 職稱計算機 | 微軟認證 | 思科認證 | Oracle認證 | Linux認證 華為認證 | Java認證 |
|
![]() |
公務員 | 報關員 | 銀行從業資格 | 證券從業資格 | 期貨從業資格 | 司法考試 | 法律顧問 | 導游資格 報檢員 | 教師資格 | 社會工作者 | 外銷員 | 國際商務師 | 跟單員 | 單證員 | 物流師 | 價格鑒證師 人力資源 | 管理咨詢師考試 | 秘書資格 | 心理咨詢師考試 | 出版專業資格 | 廣告師職業水平 駕駛員 | 網絡編輯 |
|
![]() |
衛生資格 | 執業醫師 | 執業藥師 | 執業護士 | |
![]() |
會計從業資格考試(會計證) | 經濟師 | 會計職稱 | 注冊會計師 | 審計師 | 注冊稅務師 注冊資產評估師 | 高級會計師 | ACCA | 統計師 | 精算師 | 理財規劃師 | 國際內審師 |
|
![]() |
一級建造師 | 二級建造師 | 造價工程師 | 造價員 | 咨詢工程師 | 監理工程師 | 安全工程師 質量工程師 | 物業管理師 | 招標師 | 結構工程師 | 建筑師 | 房地產估價師 | 土地估價師 | 巖土師 設備監理師 | 房地產經紀人 | 投資項目管理師 | 土地登記代理人 | 環境影響評價師 | 環保工程師 城市規劃師 | 公路監理師 | 公路造價師 | 安全評價師 | 電氣工程師 | 注冊測繪師 | 注冊計量師 |
|
![]() |
繽紛校園 | 實用文檔 | 英語學習 | 作文大全 | 求職招聘 | 論文下載 | 訪談 | 游戲 |
說到數據庫,我就不由地想到同步數據,如何盡可能地減少每次的同步數據量,以此來提高同步效率,降低對網絡帶寬的消耗是我們使用者所關心的。對于大批量的數據同步,這一點是應引起重視的。獲取差異數據是解決這個問題的關鍵點,即我們僅僅同步變化了的數據,至于沒有變化的,就不再同步。對于減少每次同步數據量,以下提供了6個方法:
1、日期欄位(時間戳)
一般情況下,在設計表的時候,添加兩個日期欄位,createdOn, ChangedOn, 分別記錄數據產生時間和變更時間。同步程序可以根據兩個欄位來獲取差異的數據。
2、Trigger
它可以實時獲取差異數據, Trigger使用較為容易,不需要改變原表的結構,可以只監視部分的欄位變更,以獲取你需要的變化數據,并對數據做二次處理。Trigger需要你對源表的維護狀況比較了解,否則可能產生一些意想不到的影響。
3、SQLServer本身的復制服務
本身支持多種數據同步方式,功能很強大,但是使用上會比較復雜,而且如果在同步過程中,需要對差異數據做二次處理,似乎無路可走。
這種方法可以保證隨時獲取某個時間段內新增(變化)的數據,同時對于追蹤問題也大有裨益。但是缺陷也不少,其一是這兩個欄位完全由開發人員控制,切實保證這兩個欄位每次都得到正確的維護比較困難,其二是不容易確定你下一次取差異數據的基準時間。
4、timestamp欄位
timestamp可以理解為行的版本號,每次插入或更新包含 timestamp 列的行時,timestamp 列中的值均會更新。利用這一特性,建立一個包含源表ID和timestamp值的基準表,就可以找到哪些數據發生變化了,每次同步成功后,再更新該基準表。
5、監控并記錄基于某數據對象的所有DML語句
這種方法,我沒有具體嘗試過,但是一個很不錯的思路,如果網絡狀況糟糕,而且對數據實時性要求不高,可以采用。具體做法是每天定時獲取你需要同步表的所有update, delete語句,然后定點打包發送到另外一臺服務器執行。
6、使用BINARY_CHECKSUM
這個是我認為最簡單的方法。BINARY_CHECKSUM是SQLServer內置的一個聚合函數,它可以針對一行,或者某些列計算出一個值,如果它計算的那些列中的任何一個值發生變化,那么那個計算值就會發生變化。這樣我只要建立一個包含源表ID和最初計算值的基準表,就可以找到哪些數據發生變化了,每次同步成功后,再更新該基準表。與方法4不同的是,BINARY_CHECKSUM可以只監視部分變化的欄位,這一點又類似于Trigger了。
使用BINARY_CHECKSUM有些限制,因為它在計算中會忽略具有不可比數據類型的列(不可比數據類型是 text、ntext、image、cursor 以及基本類型為前4個數據類型之一的 sql_variant),所以如果要監控這些列變化,這種方法是不起作用的。
北京 | 天津 | 上海 | 江蘇 | 山東 |
安徽 | 浙江 | 江西 | 福建 | 深圳 |
廣東 | 河北 | 湖南 | 廣西 | 河南 |
海南 | 湖北 | 四川 | 重慶 | 云南 |
貴州 | 西藏 | 新疆 | 陜西 | 山西 |
寧夏 | 甘肅 | 青海 | 遼寧 | 吉林 |
黑龍江 | 內蒙古 |