“數(shù)據(jù)分析需要懂?dāng)?shù)據(jù)庫(kù)的知識(shí)嗎?”

李老頭最近經(jīng)常聽(tīng)到這樣的問(wèn)題，很多新人都覺(jué)得如果自己只做業(yè)務(wù)，不走技術(shù)線，是不是就可以不用學(xué)習(xí)數(shù)據(jù)庫(kù)了?是不是面試的時(shí)候就不需要準(zhǔn)備了?

畢竟很多新人剛進(jìn)公司，一看到數(shù)據(jù)庫(kù)里各種表的復(fù)雜鏈接方式，就開(kāi)始犯起頭疼了，更有甚者連SQL與數(shù)據(jù)庫(kù)的區(qū)別都不知道，數(shù)據(jù)倉(cāng)庫(kù)這些概念就更不用提了。

然而，讓很多人失望的是，數(shù)據(jù)庫(kù)知識(shí)是我在面試新人時(shí)最常問(wèn)的問(wèn)題，沒(méi)有之一。

數(shù)據(jù)分析需要懂?dāng)?shù)據(jù)庫(kù)嗎?

對(duì)數(shù)據(jù)庫(kù)的了解程度，要看你定位在數(shù)據(jù)分析的哪一種層次，我見(jiàn)過(guò)一些數(shù)據(jù)分析人員不懂?dāng)?shù)據(jù)庫(kù)，都是基于 Excel 的文件源做數(shù)據(jù)分析，他們更擅長(zhǎng)業(yè)務(wù)。

但是，他們通常情況下必須依賴于 IT 部門的支持，需要 IT 部門提供一些基本的分析數(shù)據(jù)。憑借對(duì)業(yè)務(wù)的理解，對(duì)業(yè)務(wù)數(shù)據(jù)的理解也一樣可以做好數(shù)據(jù)分析工作。

也有一類數(shù)據(jù)分析人員，本身就是從數(shù)據(jù)庫(kù)、商業(yè)智能BI的角色轉(zhuǎn)向純粹的數(shù)據(jù)分析人員，通過(guò)對(duì)業(yè)務(wù)的理解加上數(shù)據(jù)處理的技能和知識(shí)在分析領(lǐng)域也可以做的很好。

他們的一大優(yōu)點(diǎn)就是在很大程度上不需要過(guò)度依賴IT部門，給他們一定的權(quán)限就可以自己動(dòng)手直接面對(duì)統(tǒng)一的數(shù)據(jù)源做數(shù)據(jù)分析，有時(shí)一條SQL就是數(shù)據(jù)分析的一個(gè)環(huán)節(jié)。

所以，作為數(shù)據(jù)分析人員，個(gè)人覺(jué)得技多不壓身，多一種獲取不同數(shù)據(jù)渠道的本領(lǐng)，自然是有好處的。

什么是數(shù)據(jù)庫(kù)?

首先在了解數(shù)據(jù)庫(kù)之前，我們要先了解一下數(shù)據(jù)是怎么儲(chǔ)存的?

我們都知道，當(dāng)我們的祖先還在荒野中茹毛飲血的時(shí)候，就學(xué)會(huì)了利用結(jié)繩記事來(lái)進(jìn)行數(shù)據(jù)儲(chǔ)存，這些被打上結(jié)的繩子就是“數(shù)據(jù)”，雖然這種數(shù)據(jù)很難保存、很難提取。

后來(lái)祖先利用甲骨、竹簡(jiǎn)、紙張來(lái)儲(chǔ)存文字?jǐn)?shù)據(jù)，近代發(fā)明了錄音機(jī)、攝像機(jī)儲(chǔ)存音頻數(shù)據(jù)，雖然數(shù)據(jù)載體一直在變化，但是數(shù)據(jù)存儲(chǔ)的方式并沒(méi)有發(fā)生很大的變化，都屬于傳統(tǒng)存儲(chǔ)方式。

直到信息時(shí)代的到來(lái)，數(shù)據(jù)存儲(chǔ)的方式才發(fā)生了重大變革并朝著兩分方向發(fā)展：文件與數(shù)據(jù)庫(kù)。

1、文件相當(dāng)于把數(shù)據(jù)存放在Excel當(dāng)中，形成讀寫文件后進(jìn)行存儲(chǔ)，然后通過(guò)python等工具對(duì)文件數(shù)據(jù)進(jìn)行篩選、處理、提取;

2、數(shù)據(jù)庫(kù)則是把數(shù)據(jù)按照其結(jié)構(gòu)將其儲(chǔ)存在計(jì)算機(jī)中，形成一個(gè)具有大數(shù)據(jù)量的數(shù)據(jù)集合，相當(dāng)于存放文件的文件柜。

利用數(shù)據(jù)庫(kù)存儲(chǔ)數(shù)據(jù)是目前最為流行的方式，因?yàn)閿?shù)據(jù)庫(kù)擁有持久化存儲(chǔ)、讀寫速度也很高，更關(guān)鍵的是數(shù)據(jù)庫(kù)可以極大程度保證數(shù)據(jù)的有效性，而不像是Excel等文件極易容易產(chǎn)生修改錯(cuò)誤。

數(shù)據(jù)庫(kù)分類?

按照早期的數(shù)據(jù)庫(kù)理論，比較流行的數(shù)據(jù)庫(kù)模型有三種，分別為層次式數(shù)據(jù)庫(kù)、網(wǎng)狀數(shù)據(jù)庫(kù)和關(guān)系型數(shù)據(jù)庫(kù)。而在當(dāng)今的互聯(lián)網(wǎng)企業(yè)中，最常用的數(shù)據(jù)庫(kù)模式主要有兩種，即關(guān)系型數(shù)據(jù)庫(kù)和非關(guān)系型數(shù)據(jù)庫(kù)。

關(guān)系型數(shù)據(jù)庫(kù)模型是把復(fù)雜的數(shù)據(jù)結(jié)構(gòu)歸結(jié)為簡(jiǎn)單的二元關(guān)系(即二維表格形式)。在關(guān)系型數(shù)據(jù)庫(kù)中，對(duì)數(shù)據(jù)的操作幾乎全部建立在一個(gè)或多個(gè)關(guān)系表格上，通過(guò)這些關(guān)聯(lián)的表格分類、合并、連接或選取等運(yùn)算來(lái)實(shí)現(xiàn)數(shù)據(jù)的管理。

關(guān)系型通俗的理解是，數(shù)據(jù)作為二維數(shù)組存在，你可以理解為圖書館的圖書排列。

書架、樓層你可以理解為關(guān)系型的數(shù)據(jù)結(jié)構(gòu)，書作為數(shù)據(jù)存在，而所有圖書館管理員就是數(shù)據(jù)庫(kù)的進(jìn)程，用于不同的工作。有人救火(數(shù)據(jù)修復(fù)、備份)，有人整理書架、書籍(數(shù)據(jù)整理、歸檔)，而用戶進(jìn)程就是指的來(lái)到圖書館的顧客，他們看書、移動(dòng)書籍，而管理員就會(huì)對(duì)著維護(hù)。

關(guān)系型數(shù)據(jù)庫(kù)誕生距今已有40多年了，從理論產(chǎn)生到發(fā)展到實(shí)現(xiàn)產(chǎn)品，例如：常見(jiàn)的MySQL和Oracle，oracle在數(shù)據(jù)庫(kù)領(lǐng)域里上升到了霸主地位，形成每年高達(dá)數(shù)百億美元的龐大產(chǎn)業(yè)市場(chǎng)，而MySQL也是不容忽視的數(shù)據(jù)庫(kù)，以至于被Oracle重金收購(gòu)了。

非關(guān)系型數(shù)據(jù)庫(kù)也被稱為NoSQL數(shù)據(jù)庫(kù)，本意是“Not Only SQL”，作為傳統(tǒng)數(shù)據(jù)庫(kù)的一個(gè)有效補(bǔ)充。NoSQL數(shù)據(jù)庫(kù)在特定的場(chǎng)景下可以發(fā)揮難以想象的高效率和高性能。

因?yàn)殡S著web2.0網(wǎng)站的興起，海量數(shù)據(jù)對(duì)關(guān)系型數(shù)據(jù)庫(kù)存儲(chǔ)的容量要求高，單機(jī)無(wú)法滿足需求，很多時(shí)候需要用集群來(lái)解決問(wèn)題，關(guān)系型數(shù)據(jù)庫(kù)就顯得力不從心了。

非關(guān)系型數(shù)據(jù)庫(kù)因而誕生，實(shí)際上非關(guān)系型數(shù)據(jù)庫(kù)就是針對(duì)特定場(chǎng)景，以高性能和使用便利為目的功能特異化的數(shù)據(jù)庫(kù)產(chǎn)品，比如Google的BigTable與Amazon的Dynamo。

SQL與數(shù)據(jù)庫(kù)的關(guān)系

這個(gè)時(shí)候很多人就會(huì)把sql與數(shù)據(jù)庫(kù)的概念搞混了，很多新人就以為Sql就是用來(lái)存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)庫(kù)，還有的以為sql是數(shù)據(jù)庫(kù)的一種。

為了方便大家理解，我給大家打個(gè)比方：

如果數(shù)據(jù)就是一張張的表格，我們就可以按照不同的表格關(guān)系放在不同的文件夾里，這個(gè)文件夾就相當(dāng)于數(shù)據(jù)庫(kù)的基礎(chǔ)構(gòu)成要素——數(shù)據(jù)表。

而當(dāng)我們的文件夾也非常繁多復(fù)雜的時(shí)候，我們就可以將文件夾按照不同的構(gòu)成分類儲(chǔ)存在文件柜中，每個(gè)文件柜中可能有非常多的分類用來(lái)存放不同的文件夾，這個(gè)文件柜就相當(dāng)于數(shù)據(jù)庫(kù)。

而當(dāng)我們想要從文件柜中找到某份文件的時(shí)候，我們需要按照一定的規(guī)則去尋找，比如說(shuō)“合同文件放在第三層第四排的架子上”，這種查找規(guī)則的實(shí)施就需要數(shù)據(jù)庫(kù)管理系統(tǒng)(DBMS)來(lái)實(shí)現(xiàn)，相當(dāng)于一名文件管理員，幫助我們管理數(shù)據(jù)庫(kù)中的數(shù)據(jù)。

最常見(jiàn)的數(shù)據(jù)庫(kù)管理系統(tǒng)包括SqlServer、MySql、Oracle等。

而我們?nèi)绻胍獙?duì)文件管理員下達(dá)指令，就需要一種溝通語(yǔ)言，這種溝通語(yǔ)言就是SQL，所以SQL就是一種結(jié)構(gòu)化的查詢語(yǔ)言，用來(lái)操作數(shù)據(jù)庫(kù)管理系統(tǒng)。

他們之間的關(guān)系可以這樣表示：

這樣大家應(yīng)該不會(huì)再把SQL當(dāng)做數(shù)據(jù)庫(kù)了吧?