云計算與大數據學習報告(已改無錯字)

　　

【正文】 與大數據大數據時代已經悄然到來，如何應對大數據時代所帶來的挑戰與機遇，是我們當代大學生特別是我們計算機專業學生的一個必須面對的嚴峻課題。在這次課上通過陶老師的講解以及在課后查閱相關資料，我了解到什么是大數據，什么是云計算，它們都有什么用處，有什么關系。近幾年，云計算和大數據的概念受到了學術界、商界、甚至政府的熱傳，一時間云計算無處不在。秉承著“按需服務”理念的云計算正高速發展，“數據即資源”的“大數據”時代已經來臨。大數據利用對數據處理的實時性、有效性提出來更高要求，需要根據大數據特點對傳統的常規數據處理技術進行變革，形成適用于大數據收集、存儲、管理、處理、分析、共享和可視化的技術。大數據的規模效應給數據存儲和管理以及數據分析帶來了極大的挑戰。一、云計算概念在課后，經過翻閱各種資料，了解到狹義的云計算是指IT基礎設施的交付和使用模式。指通過網絡以按需、易擴展的方式獲得所需的資源；廣義的云計算是指服務的交付和使用模式，指通過網絡以按需、易擴展的方式獲得所需的服務，這種服務可以是IT和軟件、互聯網相關的，也可以是任意其他的服務，它具有超大規模、虛擬化、可靠安全等獨特功能。通俗的理解是，云計算的“云”就是存在于互聯網上的服務器集群上的資源，它包括硬件資源和軟件資源，本地計算機只需要通過互聯網發送一個需求信息，遠端就會有成千上萬的計算機為你提供需要的資源并將結果返回到本地計算機。這樣，本地計算機幾乎不需要做什么，所有的處理都在云計算提供商所提供的計算機群體來完成。Kevin Hartig：云是一個龐大的資源地，你按需購買；云是虛擬化的；云可以像自來水、電、煤氣那樣計費。Jan Pritzker：云計算是用戶友好的網絡計算。云計算，它是基于數據中心，強調性價比、效率、可行性的服務運營模式，這是提高高端計算利用率，同時提升低端計算事物處理能力，我們不關注本身計算機的能力，更多提供給后臺，由于后臺強大的處理能力完成。二、云計算部署模式根據云計算服務對象范圍的不同，云計算有四種部署模式：私有云、社區云、公有云和混合云。私有云是由一個用戶組織（例如政府、軍隊、企業）建立運維的云計算平臺，專供組織內部人員使用，不提供對外服務。社區云也稱機構云，云基礎設施由多個組織共同提供，平臺由多個組織共同管理。社區云被一些組織共享，為一個有共同關注點的社區或大機構提供服務。公有云的基礎設施由一個提供云計算服務的大型運營商組織建立和運維，該運營組織一般是擁有大量計算資源的IT巨頭，這些IT公司將云計算服務以“按需購買”的方式銷售給一般用戶或中小企業群體。用戶只需將請求提交給云計算系統，付費租用所需的資源和服務。混合云的云基礎設施是由兩種或兩種以上的云組成，每種云仍然保持獨立，但用標準的或專用的技術將它們組合起來，具有數據和應用程序的可移植性。三、云計算服務模式計算就要有就算環境，一般計算環境都有硬件的一層，資源組合調度的一層即操作層，以及計算任務的應用業務的軟件層。云計算提供的三種服務模式對應了計算環境的三個層面。這三種服務模式分別是基礎設施即服務IaaS、軟件即服務SaaS、平臺即服務PaaS。IaaS即把廠商的由多臺服務器組成的“云端”基礎設施，作為計量服務提供給客戶。它的優點是用戶只需低成本硬件，按需租用相應計算能力和存儲能力，大大降低了用戶在硬件上的開銷。目前以Google云應用最具代表性，例如GoogleDocs、GoogleApps、Googlesites。SaaS服務提供商將應用軟件統一部署在自己的服務器上，用戶根據需求通過互聯網向廠商訂購應用軟件服務，服務提供商根據客戶所定軟件的數量、時間的長短等因素收費，并且通過瀏覽器像客戶提供軟件的模式。對于小型企業來說，SaaS是采用先進技術的最好途徑。PaaS把開發環境作為一種服務來提供。PaaS能夠給企業或個人提供研發的中間件平臺，提供應用程序開發、數據庫、應用服務器、試驗、托管及應用服務。四、大數據大數據（big data），或稱巨量資料，就是對全球各種大規模數據資料進行深度挖掘，并進行高速度及多樣式計算后，整理出來的高價值的分析結果；重點應用在國防領域建設，未來發展方向在人工智能領域，可以讓計算機自主地從經驗中進行學習和反饋。個人總結，大數據的特點主要有如下4點：一是大量。存儲大，計算量大。二是數據類型多樣。現在的數據類型不僅是文本形式，更多的是圖片、視頻、音頻、地理位置信息等多類型的數據，個性化數據占絕對多數。三是處理速度快。增長速度快，處理速度要求快。四是價值密度低。浪里淘沙卻彌足珍貴，數據沒有辦法在可忍受的時間下使用常規軟件方法完成存儲、管理和處理任務。大數據已經不簡簡單單是數據大的事實了，而最重要的現實是對大數據進行分析，只有通過分析才能獲得很多智能的，深入的，有價值的信息。大數據分析普遍存在的方法理論有：可視化分析、數據挖掘算法、預測性分析、語義引擎、數據質量和數據管理。五、云計算與大數據關系云計算和大數據是這個時代的兩個王者，是一個硬幣的兩面，云計算是大數據的IT基礎，而大數據是云計算的一個殺手級應用。張亞勤說，云計算是大數據的驅動力，而另一方面，由于數據越來越多，越來越復雜，越來越實時，這就更加需要云計算去處理，所以二者之間是相輔相成的。本質上，云計算和大數據的關系是靜與動的關系；云計算強調的是計算，這是動的概念；數據則是計算的對象，是靜的概念。在實際的應用中，前者強調的是計算能力，或者看重的是存儲能力；但是這樣說，并不意味著兩個概念如此涇渭分明。大數據需要處理大數據的能力如數據獲取、清潔、轉換、統計等，其實就是需要強大的計算能力，另一方面，云計算的動也好是相對而言，比如基礎設施即服務中存儲設備提供的主要是數據能力，所以可謂是動中有靜。如果數據是財富，那么大數據就是寶藏，而云計算就是挖掘和利用寶藏的利器。沒有強大的計算能力，數據寶藏終究是鏡中花，沒有大數據的積淀，云計算也只能是殺雞用的宰牛刀。六、心得體會通過這次課程的學習，了解到在如此快速到來的大數據革命時代，我們還有很多知識需要學習，許多思維需要轉變，許多技術需要研究。職業規劃中，也需要充分考慮到大數據對于自身職業的未來發展所帶來的機遇和挑戰。第四篇：大數據與云計算的安全云計算和大數據結合的安全問題摘要：云計算的浪潮還沒有過去，大數據時代已經到來。在對大數據的含義、特征、影響和意義進行系統總結的基礎上，分析了大數據與云計算的關系，論述大數據和云計算的安全將給消費者和電商帶來更加高效的轉型。關鍵字：云計算，大數據，電商所謂通信，最簡單的理解，也是最基本的理解，就是人與人溝通的方法。無論是現在的電話，還是網絡，解決的最基本的問題，實際還是人與人的溝通。現代通信技術，就是隨著科技的不斷發展，如何采用最新的技術來不斷優化通信的各種方式，讓人與人的溝通變得更為便捷，有效。隨著計算機技術的廣泛普及與計算機遠程信息處理應用的發展，云計算和大數據應運而生。、一、大數據的介紹大數據（Big Data)，或稱巨量資料，指的是所涉及的資料量規模巨大到無法通過目前主流軟件工具，在合理時間內達到擷取、管理、處理、并整理成為幫助企業經營決策更積極目的的資訊(在維克托邁爾舍恩伯格及肯尼斯庫克耶編寫的《大數據時代》中大數據指不用隨機分析法（抽樣調查）這樣的捷徑，而采用所有數據的方法）。大數據可分成大數據技術、大數據工程、大數據科學和大數據應用等領域，目前人們談論最多的是大數據技術和大數據應用。大數據技術的戰略意義不在于掌握龐大的數據信息，而在于對這些含有意義的數據進行專業化處理。換言之，如果把大數據比作一種產業，那么這種產業實現盈利的關鍵，在于提高對數據的“加工能力”，通過“加工”實現數據的“增值”。從技術上看，大數據與云計算的關系就像一枚硬幣的正反面一樣密不可分。大數據必然無法用單臺的計算機進行處理，必須采用分布式計算架構。它的特色在于對海量數據的挖掘，但它必須依托云計算的分布式處理、分布式數據庫、云存儲和或虛擬化技術。二、云計算的介紹云計算是一種基于互聯網的計算方式，通過這種方式，共享的軟硬件資源和信息可以按需求提供給計算機和其他設備。云是網絡、互聯網的一種比喻說法。過去在圖中往往用云來表示電信網，后來也用來表示互聯網和底層基礎設施的抽象。幾年之內,云計算已從新興技術發展成為當今的熱點技術。云計算從節約成本的工具到盈利的推動器，從ISP（網絡服務提供商）到電信企業，已然成功地從內置的IT 系統演變成公共的服務。然而人們擔心他們在云端的數據安全。正因為此，用戶應該期待看到更安全的應用程序和技術上來。許多新的加密技術，安全協議，在未來會越來越多的呈現出來。其中的安全性和遵從性的問題仍然是阻礙云計算發展的重要原因。三、二者聯系和安全策略近幾年由于科技的不斷發展，3G網絡視頻通話，移動互聯網、物聯網、智能手機，這些科技產品都一一涌現，充斥著我們的生活，確實互聯網給我們的生活帶來了方便，但同時惡意軟件，黑客入