一、數(shù)據(jù)庫、數(shù)據(jù)集市、數(shù)據(jù)倉庫

概念介紹

數(shù)據(jù)倉庫其實就像“農(nóng)貿(mào)市場”，把各種供貨商手上的貨源收集起來，按照一定的規(guī)則擺放整齊供客戶挑選，同時可以通過整個農(nóng)貿(mào)市場的銷售經(jīng)營情況進行一些細致的分析，對整個市場有更好的了解，從而促銷相應的采購，銷售策略等等。數(shù)據(jù)倉庫是構建面向分析的集成化數(shù)據(jù)環(huán)境，為企業(yè)提供決策支持，它出于分析性報告和決策支持的目的而創(chuàng)建。

那什么是數(shù)據(jù)集市呢？數(shù)據(jù)集市可以比喻成各種專區(qū)，賣蔬菜農(nóng)產(chǎn)品的，賣水產(chǎn)海鮮的，賣肉禽的等等。數(shù)據(jù)集市其實就是一個面向小型的部門或工作組級別的小型數(shù)據(jù)倉庫，只專注于某一個方面的主題分析。

數(shù)據(jù)倉庫本身并不生產(chǎn)數(shù)據(jù)，數(shù)據(jù)來源于外部，并且開放給外部應用，這也是為什么叫倉庫，不叫工廠的原因。例如農(nóng)貿(mào)市場并不種植蔬菜、養(yǎng)殖各種水產(chǎn)禽類，而是從各供貨商獲取材料。數(shù)據(jù)集市可以從自己的數(shù)據(jù)源獲取數(shù)據(jù)，也可以從數(shù)據(jù)倉庫中獲取某一主題的數(shù)據(jù)。

那從供貨商到農(nóng)貿(mào)市場的中間過程，其實就是所謂的“ETL”過程。ETL就是extract，Transform和load，指的是清洗，轉(zhuǎn)換和加載。我們都知道，供貨商提供的貨不是什么都要的，我們要篩選出有價值的，暢銷的品種，有些壞的，不新鮮的菜在進農(nóng)貿(mào)市場的過程中就需要去除掉。而不同的供貨商提供的貨可能也存在一些一樣的種類，那么在搬運到農(nóng)貿(mào)市場中就需要做一些歸類合并，按照更好的一種陳列方式擺放整齊供客戶挑選。這個從供貨商搬運，清洗，轉(zhuǎn)換，加載各種菜的過程就是ETL過程。

在這個過程中，還涉及到ETL的方式和頻率。比如水產(chǎn)海鮮，很多都是速凍空運過來的，一些需求量比較小的比如澳龍可能幾天才送一次，而一些蔬菜是人們?nèi)粘Ｐ枰?，大都是周邊蔬菜大棚產(chǎn)的，就會由貨車每天運輸進農(nóng)貿(mào)市場。

這些菜被運送到農(nóng)貿(mào)市場后，會根據(jù)一定的規(guī)則進行擺放讓客戶挑選。我們可以根據(jù)不同的規(guī)則對這些菜進行管理，就像數(shù)據(jù)倉庫的技術框架一樣，我們可以選擇一般的技術框架或者大數(shù)據(jù)技術框架，不同的選擇最終決定了我們數(shù)據(jù)倉庫的使用效果和投入成本。

因此，數(shù)據(jù)倉庫的本質(zhì)還是一個數(shù)據(jù)庫，它將各個異構的數(shù)據(jù)源，數(shù)據(jù)庫的數(shù)據(jù)統(tǒng)一管理起來，并且完成了相應數(shù)據(jù)的剔除，格式轉(zhuǎn)換，最終按照一種合理的建模方式來完成源數(shù)據(jù)的組織形式的轉(zhuǎn)變，以更好的支持前端的可視化分析。

區(qū)別

數(shù)據(jù)倉庫、數(shù)據(jù)湖與關系數(shù)據(jù)庫系統(tǒng)之間的主要區(qū)別在于：

關系數(shù)據(jù)庫創(chuàng)建起來相對簡單，可用于存儲和整理實時數(shù)據(jù)，例如交易數(shù)據(jù)等。關系數(shù)據(jù)庫的缺點是它們不支持非結構化數(shù)據(jù)庫數(shù)據(jù)或現(xiàn)在不斷生成的大量數(shù)據(jù)。這使得我們只能在數(shù)據(jù)倉庫與數(shù)據(jù)湖間做出選擇。盡管如此，很多企業(yè)仍然繼續(xù)依賴關系數(shù)據(jù)庫來完成運營數(shù)據(jù)分析或趨勢分析等任務。

內(nèi)部或云端可用的關系數(shù)據(jù)庫包括Microsoft SQL Server、Oracle數(shù)據(jù)庫、MySQL和IBM Db2、以及Amazon Relational Database Service、Google Cloud Spanner等。

延伸閱讀：

二、Navicat是什么

Navicat是一套快速、可靠和全面的數(shù)據(jù)庫管理工具，專門用于簡化數(shù)據(jù)庫管理和降低管理成本。Navicat圖形界面直觀，提供簡便的管理方法，設計和操作MySQL、MariaDB、SQL Server、Oracle、PostgreSQL和SQLite的數(shù)據(jù)。

Navicat提供一個直觀和設計完善的用戶界面，用于創(chuàng)建、修改和管理資料庫的所有對象，例如表、視圖、函數(shù)或過程、索引、觸發(fā)器和序列。我們的表設計器幫助用戶創(chuàng)建和修改數(shù)據(jù)庫的表，讓設置高級選項，如關系、限制、觸發(fā)器和更多。

使用Navicat瀏覽和修改數(shù)據(jù)，插入、編輯、刪除數(shù)據(jù)或復制和粘貼記錄到數(shù)據(jù)表形式的數(shù)據(jù)編輯器，Navicat將運行相應的命令（例如INSERT或UPDATE），免除寫復雜的SQL。廣泛的數(shù)據(jù)編輯工具令編輯工作更為方便，例如外鍵查找、set/enum選擇器和記錄篩選。