傳統資料庫大數據
① 如何理解傳統數據與大數據之間的區別
針對大數據帶給教育的機遇與挑戰，與讀者深入探討和分享大數據與傳統數據的區別，及其行業落地的進展情況。
二、大數據時代潛藏的教育危機
「不得不承認，對於學生，我們知道得太少」——這是卡耐基·梅隆大學（Carnegie Mellon University）教育學院研究介紹中的一句自白，也同樣是美國十大教育類年會中出鏡率最高的核心議題。這種對於學生認識的匱乏，在21世紀之前長達數百甚至上千年的教育史中並沒有產生什麼消極的效應，但卻在信息技術革命後的近十年來成為教育發展的致命痼疾。
「過去，對於學生來說，到學校上學學習知識具有無可辯駁的重要性，而那是因為當時人們能夠接觸知識的渠道太少，離開學校就無法獲取成體系的知識」斯坦福大學教授Arnetha Ball在AERA（美國教育研究會）大會主旨發言中說道，「但是，互聯網的普及將學校的地位從神壇上拉了下來。」Ball的擔心不無道理。根據Kids Count Census Data Online發布的數據，2012年全美在家上學（Home-Schooling）的5-17歲學生已達到197萬人，相對逐年價下降的出生人口，這一人口比重十分可觀。
與此同時，應運而生的則是內容越來越精緻的網上課堂，而創立於2009年並迅速風靡全球的可汗學院（Khan Academy）正是其中的傑出代表。從知名學府的公開課到可汗學院，這種網路學習模式受到熱捧恰恰證明了：人們對於學習的熱情並沒有過去，但是人們已經極端希望與傳統的學院式授課模式告別。一成不變，甚至「目中無人」的傳統集體教學模式在適應越來越多元化、也越來越追求個性化的學生群體時顯得捉襟見肘。
可汗學院模式不但支持學生自主選擇感興趣的內容，還可以快速跳轉到自己適合的難度，從而提高了學習的效率。學習者沒有學習的壓力，時長、時機、場合、回顧遍數都可以由自己控制。
可以想像，如果可汗學院的模式進一步發展，與計算機自適應（CAT）的評估系統相聯系，讓使用者可以通過自我評估實現對學習進度的掌握以及學習資料的精準獲取，那麼它將形成互聯網產品的「閉環」，其優勢與力量將是顛覆性的。
而如果傳統教育的課程模式不革新，課堂形態不脫胎換骨，教師角色與意識不蛻變，那麼學校的存在就只有對現代化學習資源匱乏的學生才有意義；而對於能夠自主獲得更適宜學習資源的學生來說，去學校可能只是為了完成一項社會角色賦予的義務，甚至談不上必要性，也就更談不上愉快的體驗或興趣的驅使了。
大數據的研究可以幫助教育研究者重新審視學生的需求，通過高新的技術以及細致的分析找到怎樣的課程、課堂、教師是能夠吸引學生的。但問題在於，社會發展給予教育研究者的時間窗口並不寬裕，因為有太多人同樣在試圖通過大數據挖掘設法瓜分學生們有限的精力與注意力。而且從某種程度上，他們做得遠比教育研究者更有動力與誠意。
首當其沖的是游戲的設計者——青少年是其主要消費群體。撇開馳名世界的暴雪公司（Blizzard Entertainment），美國藝電公司（Electronic Arts Inc.），日本任天堂公司（Nintendo）等國際巨鱷不談；即使是國內的盛大網路，第九城市，巨人科技，淘米網路等游戲公司，亦都早已組建了專業實力強勁的「用戶體驗」研究團隊。他們會通過眼動跟蹤，心律跟蹤，血壓跟蹤，鍵盤與滑鼠微操作速率等各種微觀行為來研究如何讓玩家在游戲中投入更多的時間，更加願意花真實世界的錢來購買虛擬世界的物品。什麼時候應該安排敵人出現，敵人應當是什麼級別，主人公需要耗費多少精力才能夠將其擊敗，這些變數都得到了嚴格的設計與控制，原因只有一個——大數據告訴游戲創作者，這樣的設計是最能夠吸引玩家持續游戲的。
其次是電影視頻、青春小說等鏈式文化產業。為什麼在網站上看視頻會一個接一個，無法停止，因為它會根據該賬號的歷史瀏覽記錄推算出其喜歡看什麼樣的視頻，喜歡聽什麼類型風格的歌，並投其所好；而暢銷網路小說看似並沒有「營養」，但裡面的遣詞造句、語段字數，故事起伏設定，甚至主人公性格的類型都是有相關研究進行支持——讀者往往並不喜歡結構嚴密、精心設計的劇情——這就是為什麼情節千篇一律的韓劇受人追捧的原因，他們通過收視率的反復研究，挖掘到了觀眾最需要的那些元素，並且屢試不爽。
此外還有許多更強大的研究者，比如電子商務，總能通過數據找到你可能願意購買的商品——他們甚至知道買尿片的父親更願意買啤酒。
這些領域看似與我們教育者並無特別關聯，但是他們與我們最關心的對象——學生卻有著千絲萬縷的聯系。數百年甚至數十年前，學生並不會面對如此多的誘惑，學校在其生活中占據極大比重，對其影響也最為顯著，因此教育者對於學生的控制總是有著充分的自信。但是，當不同的社會機構與產品開始爭奪學生的注意力時，教育者的自信就只能被認為是一種無法認清形勢的傲慢了——因為在這場「學生爭奪戰」中，傳統學校看上去實在缺乏競爭力。
即使教育研究者願意放下身段，通過大數據的幫助來悉心研究學生的需求與個性。但是人才的匱乏也是非常不利的一點因素——相比於商業環境下對研究實效的追逐，教育研究的緩慢與空洞顯得相形見絀。在互聯網企業紛紛拋出「首席數據官」的頭銜，向各種數據科學狂人拋出橄欖枝，並且在風險投資的鼓舞下，動輒以百萬年薪進行延聘時，大數據研究的前沿陣地必然仍是在互聯網行業中最轟轟烈烈地開戰。
分析形勢後的姿態，以及投入的力度與強度，或許是教育領域在進入大數據研究時最先需要充分考慮的兩個先決條件。
三、誰在為大數據歡呼：一場關於「人性」研究的啟蒙
孜孜不倦地觀測、記錄、挖掘海量的數據，有朝一日終會推導出或簡約或繁復的方程，以此得以在自然科學的歷史豐碑上留名——數百年來，這種對數據的崇拜早已成為了物理學家、化學家、生物學家、天文地理學家們的信念。而牛頓，貝葉斯，薛定諤等一代代巨匠的偉業也揭示了數據對於科學發現的無限重要價值。
相形之下，社會科學領域的研究就要慘淡地多——他們同樣看重數據，同樣追求統計與分析的「程序正義」，同樣勤勤懇懇地設計實驗與調研，去尋找成千上萬的被試，同樣像模像樣地去嵌套方程……但是幾乎很少有研究結果能夠得到普遍的承認，不管是社會學、心理學、經濟學、管理學還是教育學。
當然，社會科學領域的研究者們遇到的困難是顯而易見的：「人性」與「物性」是不同的，物質世界比較穩定，容易尋找規律；而由人組成的社會極其善變，難以總結。從數據的角度來說，人的數據不如物的數據那麼可靠：
首先是人不會像物那樣忠實地進行回應：誰知道一個人填寫的問卷有多少是注意力不集中填錯的、語文水平不高理解錯的、還是壓根沒打算講真話？此外，人與人本身的差距也大於物與物的差距：兩個化學組成相同的物質表現出各種性質幾乎是完全一樣的，但即使是兩個基因完全相同的雙胞胎也會因為不同的人生經驗，而表現出大相徑庭的行為特徵。
但這些都還並不關鍵，最最重要的是：人無法被反復研究。人不是牛頓的木塊，不是伽利略的鉛球，不是巴普洛夫的狼狗，人不會配合一次次從斜坡上被滑下來，一次次從比薩塔頂被扔下來，一次次流著口水乾等著送肉來的鈴聲。而我們知道，在「科學」的三個標准中，首當其沖的就是「可重復驗證」。
換句話說，我們可以獲得的關於「人性」的數據不夠大，不夠多，不夠隨時隨地，因此我們無法從數據中窺見人性。2002年諾貝爾經濟學獎授予心理學家丹尼爾?卡尼曼（Daniel Kahneman）時，似乎標示著社會科學領域已經接受了這樣一種事實：人類的行為是無法尋找規律、無法預測、難以進行科學度量的。社會科學開始懷疑用純粹理性的方法是否可以解答關於「人性」的種種現象。與此相映成趣的是2012年的美國大選，奧巴馬的團隊依靠對網路數據的精準篩選捕捉到了大量的「草根」選民，而對於其喜好與需求的分析與把握更是贏得其信任，從而在不被傳統民調與歷史數據規律看好的情況下一舉勝出。這跨越十年的兩個標志性事件讓人們對於「數據揭示人性」可能性的認識經歷了戲劇性的轉變。
如今，迅速普及的互聯網與移動互聯網悄然為記錄人的行為數據提供了最為便利、持久的載體。手機，iPad等貼近人的終端無時不刻不在記錄關於人的點點滴滴思考、決策與行為。最最重要的是，在這些強大的數據收集終端面前，人們沒有掩飾的意圖，人們完整地呈現著自己的各種經歷，人們不厭其煩一遍又一遍重復著他們不願在實驗情境下表現出來的行為，從而創造著海量的數據——傳統數據研究無法做到的事，傳統研究範式苦苦糾結的許多難點，都在大數據到來的那一剎那遁於無形。
大數據的到來，讓所有社會科學領域能夠藉由前沿技術的發展從宏觀群體走向微觀個體，讓跟蹤每一個人的數據成為了可能，從而讓研究「人性」成為了可能。而對於教育研究者來說，我們比任何時候都更接近發現真正的學生。
② 大數據和傳統資料庫的區別是什麼
現在的大數據分析，跟傳統意義的分析有一個本質區別，就是傳統的分析是基於結構化、關系性的數據。
而且往往是取一個很小的數據集，來對整個數據進行預測和判斷。但現在是大數據時代，理念已經完全改變了，現在的大數據分析，是對整個數據全集直接進行存儲和管理分析
③ 傳統數據和大數據的區別
傳統數據和大數據的區別
無疑，數據信息的大爆炸不斷提醒著我們，未來將會因大數據技術而改變。大數據（Big data）通常用來形容數字化時代下創造出的大量非結構化和半結構化數據。大數據無疑是未來影響各行各業發展的最受矚目的技術之一。2009年時，全世界關於大數據的研究項目還非常有限，從2011年開始，越來越多的管理者開始意識到，大數據將是未來發展不可規避的問題，而到2012年年底，世界財富500 強企業中90%的企業都開展了大數據的項目。IDC的研究顯示，到2015年，大數據市場前景將達到169億美元的規模。當前所有企業的商業數據每隔1.2年就將遞增一倍。
那麼，大數據為什麼成為所有人關注的焦點？大數據帶來了什麼樣的本質性改變？為此，我們與中國計算機學會大數據學術帶頭人、中國人民大學信息學院院長杜小勇教授進行了訪談。
杜小勇教授認為，大數據帶來了三大根本改變：第一、大數據讓人們脫離了對演算法和模型的依賴，數據本身即可幫助人們貼近事情的真相；第二、大數據弱化了因果關系。大數據分析可以挖掘出不同要素之間的相關關系。人們不需要知道這些要素為什麼相關就可以利用其結果，在信息復雜錯綜的現代社會，這樣的應用將大大提高效率；第三、與之前的資料庫相關技術相比，大數據可以處理半結構化或非結構化的數據。這將使計算機能夠分析的數據范圍迅速擴大。
傳統數據和大數據的區別
第一、計算機科學在大數據出現之前，非常依賴模型以及演算法。人們如果想要得到精準的結論，需要建立模型來描述問題，同時，需要理順邏輯，理解因果，設計精妙的演算法來得出接近現實的結論。因此，一個問題，能否得到最好的解決，取決於建模是否合理，各種演算法的比拼成為決定成敗的關鍵。然而，大數據的出現徹底改變了人們對於建模和演算法的依賴。舉例來說，假設解決某一問題有演算法A和演算法B。在小量數據中運行時，演算法A的結果明顯優於演算法B。也就是說，就演算法本身而言，演算法A能夠帶來更好的結果；然而，人們發現，當數據量不斷增大時，演算法B在大量數據中運行的結果優於演算法A在小量數據中運行的結果。這一發現給計算機學科及計算機衍生學科都帶來了里程碑式的啟示：當數據越來越大時，數據本身（而不是研究數據所使用的演算法和模型）保證了數據分析結果的有效性。即便缺乏精準的演算法，只要擁有足夠多的數據，也能得到接近事實的結論。數據因此而被譽為新的生產力。
第二、當數據足夠多的時候，不需要了解具體的因果關系就能夠得出結論。
例如，Google 在幫助用戶翻譯時，並不是設定各種語法和翻譯規則。而是利用Google資料庫中收集的所有用戶的用詞習慣進行比較推薦。Google檢查所有用戶的寫作習慣，將最常用、出現頻率最高的翻譯方式推薦給用戶。在這一過程中，計算機可以並不了解問題的邏輯，但是當用戶行為的記錄數據越來越多時，計算機就可以在不了解問題邏輯的情況之下，提供最為可靠的結果。可見，海量數據和處理這些數據的分析工具，為理解世界提供了一條完整的新途徑。
第三、由於能夠處理多種數據結構，大數據能夠在最大程度上利用互聯網上記錄的人類行為數據進行分析。大數據出現之前，計算機所能夠處理的數據都需要前期進行結構化處理，並記錄在相應的資料庫中。但大數據技術對於數據的結構的要求大大降低，互聯網上人們留下的社交信息、地理位置信息、行為習慣信息、偏好信息等各種維度的信息都可以實時處理，立體完整地勾勒出每一個個體的各種特徵。
④ 傳統資料庫處理方式和大數據處理方式的區別
文件系統把數據組織成相互獨立的數據文件，實現了記錄內的結構性，但整體無結構；而資料庫系統實現整體數據的結構化，這是資料庫的主要特徵之一，也是資料庫系統與文件系統的本質區別。
在文件系統中，數據冗餘度大，浪費存儲空間，容易造成數據的不一致；資料庫系統中，數據是面向整個系統，數據可以被多個用戶、多個應用共享使用，減少了數據冗餘。
文件系統中的文件是為某一特定應用服務的，當要修改數據的邏輯結構時，必須修改應用程序，修改文件結構的定義，數據和程序之間缺乏獨立性；資料庫系統中，通過DBMS的兩級映象實現了數據的物理獨立性和邏輯獨立性，把數據的定義從程序中分離出去，減少了應用程序的維護和修改。
文件系統和資料庫系統均可以長期保存數據，由數據管理軟體管理數據，資料庫系統是在文件系統基礎上發展而來。
⑤ 大數據時代和傳統數據有什麼區別
大數據是一種規模大到在獲取、存儲、管理、分析方面大大超出了傳統資料庫軟體工具能力范圍的數據集合，具有海量的數據規模、快速的數據流轉、多樣的數據類型和價值密度低四大特徵。
從技術上看，大數據與雲計算的關系就像一枚硬幣的正反面一樣密不可分。大數據必然無法用單台的計算機進行處理，必須採用分布式架構。它的特色在於對海量數據進行分布式數據挖掘。但它必須依託雲計算的分布式處理、分布式資料庫和雲存儲、虛擬化技術。
(5)傳統資料庫大數據擴展閱讀
大數據的價值體現在以三方面：
1、對大量消費者提供產品或服務的企業可以利用大數據進行精準營銷；
2、做小而美模式的中小微企業可以利用大數據做服務轉型；
3、面臨互聯網壓力之下必須轉型的傳統企業需要與時俱進充分利用大數據的價值。
大數據技術主要包括以下作用：
第一，對大數據的處理分析正成為新一代信息技術融合應用的結點。
移動互聯網、物聯網、社交網路、數字家庭、電子商務等是新一代信息技術的應用形態，這些應用不斷產生大數據。雲計算為這些海量、多樣化的大數據提供存儲和運算平台。通過對不同來源數據的管理、處理、分析與優化，將結果反饋到上述應用中，將創造出巨大的經濟和社會價值。
第二，大數據是信息產業持續高速增長的新引擎。
面向大數據市場的新技術、新產品、新服務、新業態會不斷涌現。在硬體與集成設備領域，大數據將對晶元、存儲產業產生重要影響，還將催生一體化數據存儲處理伺服器、內存計算等市場。在軟體與服務領域，大數據將引發數據快速處理分析、數據挖掘技術和軟體產品的發展。
第三，大數據利用將成為提高核心競爭力的關鍵因素。
各行各業的決策正在從「業務驅動」 轉變「數據驅動」。
大數據是大量、高速、多變的信息，它需要新型的處理方式去促成更強的決策能力、洞察力與最佳化處理。大數據為企業獲得更為深刻、全面的洞察能力提供了前所未有的空間與潛力。
⑥ 大數據和傳統資料庫的區別表現在
文件系統把數據組織成相互獨立的數據文件，實現了記錄內的結構性，但整體無結版構；而資料庫系統實現整體數權據的結構化，這是資料庫的主要特徵之一，也是資料庫系統與文件系統的本質區別。
在文件系統中，數據冗餘度大，浪費存儲空間，容易造成數據的不一致；資料庫系統中，數據是面向整個系統，數據可以被多個用戶、多個應用共享使用，減少了數據冗餘。
文件系統中的文件是為某一特定應用服務的，當要修改數據的邏輯結構時，必須修改應用程序，修改文件結構的定義，數據和程序之間缺乏獨立性；資料庫系統中，通過DBMS的兩級映象實現了數據的物理獨立性和邏輯獨立性，把數據的定義從程序中分離出去，減少了應用程序的維護和修改。
文件系統和資料庫系統均可以長期保存數據，由數據管理軟體管理數據，資料庫系統是在文件系統基礎上發展而來。
⑦ 大數據時代和傳統數據有什麼區別
1,無疑，數據信息的大爆炸不斷提醒著，未來將會因大數據技術而改變。大數據(Big
data)通常用來形容數字化時代下創造出的大量非結構化和半結構化數據。大數據無疑是未來影響各行各業發展的最受矚目的技術之一。2009年時，全世界關於大數據的研究項目還非常有限，從2011年開始，越來越多的管理者開始意識到，大數據將是未來發展不可規避的問題，而到2012年年底，世界財富500
強企業中90%的企業都開展了大數據的項目。IDC的研究顯示，到2015年，大數據市場前景將達到169億美元的規模。當前所有企業的商業數據每隔1.2年就將遞增一倍。
那麼，大數據為什麼成為所有人關注的焦點?大數據帶來了什麼樣的本質性改變?為此，與中國計算機學會大數據學術帶頭人、中國人民大學信息學院院長杜小勇教授進行了訪談。
互聯網是個神奇的大網，大數據開發和軟體定製也是一種模式，這里提供最詳細的報價，如果真的想做，可以來這里，這個手技的開始數字是一八七中間的是三兒
零最後的是一四二五零，按照順序組合起來就可以找到，想說的是，除非想做或者了解這方面的內容，如果只是湊熱鬧的話，就不要來了。
杜小勇教授認為，大數據帶來了三大根本改變：第一、大數據讓人們脫離了對演算法和模型的依賴，數據本身即可幫助人們貼近事情的真相;第二、大數據弱化了因果關系。大數據分析可以挖掘出不同要素之間的相關關系。人們不需要知道這些要素為什麼相關就可以利用其結果，在信息復雜錯綜的現代社會，這樣的應用將大大提高效率;第三、與之前的資料庫相關技術相比，大數據可以處理半結構化或非結構化的數據。這將使計算機能夠分析的數據范圍迅速擴大。
第三、由於能夠處理多種數據結構，大數據能夠在最大程度上利用互聯網上記錄的人類行為數據進行分析。大數據出現之前，計算機所能夠處理的數據都需要前期進行結構化處理，並記錄在相應的資料庫中。但大數據技術對於數據的結構的要求大大降低，互聯網上人們留下的社交信息、地理位置信息、行為習慣信息、偏好信息等各種維度的信息都可以實時處理，立體完整地勾勒出每一個個體的各種特徵。
⑧ 大數據時代還需要用到傳統的資料庫管理系統嗎
下個開發工具如NETBEANS（有官方中文版）英語好的話也可就考慮eclipse.資料庫可選擇SQL2000比較簡單
⑨ 大數據是否能代替傳統資料庫
當然不能！
先學習好某一樣，再去分析、比較這種對你太遠的問題。
⑩ 傳統數據採集和大數據數據的區別
傳統數據和大數據的區別
第一、計算機科學在大數據出現之前，非常依賴模型以及演算法。人們如果想要得到精準的結論，需要建立模型來描述問題，同時，需要理順邏輯，理解因果，設計精妙的演算法來得出接近現實的結論。因此，一個問題，能否得到最好的解決，取決於建模是否合理，各種演算法的比拼成為決定成敗的關鍵。然而，大數據的出現徹底改變了人們對於建模和演算法的依賴。舉例來說，假設解決某一問題有演算法A 和演算法B。在小量數據中運行時，演算法A的結果明顯優於演算法B。也就是說，就演算法本身而言，演算法A能夠帶來更好的結果；然而，人們發現，當數據量不斷增大時，演算法B在大量數據中運行的結果優於演算法A在小量數據中運行的結果。這一發現給計算機學科及計算機衍生學科都帶來了里程碑式的啟示：當數據越來越大時，數據本身（而不是研究數據所使用的演算法和模型）保證了數據分析結果的有效性。即便缺乏精準的演算法，只要擁有足夠多的數據，也能得到接近事實的結論。數據因此而被譽為新的生產力。
第二、當數據足夠多的時候，不需要了解具體的因果關系就能夠得出結論。
例如，Google 在幫助用戶翻譯時，並不是設定各種語法和翻譯規則。而是利用Google資料庫中收集的所有用戶的用詞習慣進行比較推薦。Google檢查所有用戶的寫作習慣，將最常用、出現頻率最高的翻譯方式推薦給用戶。在這一過程中，計算機可以並不了解問題的邏輯，但是當用戶行為的記錄數據越來越多時，計算機就可以在不了解問題邏輯的情況之下，提供最為可靠的結果。可見，海量數據和處理這些數據的分析工具，為理解世界提供了一條完整的新途徑。
第三、由於能夠處理多種數據結構，大數據能夠在最大程度上利用互聯網上記錄的人類行為數據進行分析。大數據出現之前，計算機所能夠處理的數據都需要前期進行結構化處理，並記錄在相應的資料庫中。但大數據技術對於數據的結構的要求大大降低，互聯網上人們留下的社交信息、地理位置信息、行為習慣信息、偏好信息等各種維度的信息都可以實時處理，立體完整地勾勒出每一個個體的各種特徵。
在大數據領域發展較早也做的比較好的算是八爪魚採集器了。