自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

<legend id="3tuid"><abbr id="3tuid"></abbr></legend>

<blockquote id="3tuid"><p id="3tuid"></p></blockquote>

AI.x社區(qū)

軟考社區(qū)

企業(yè)培訓

鴻蒙開發(fā)者社區(qū)

WOT技術(shù)大會

公眾號矩陣

移動端

視頻課免費課排行榜短視頻直播課軟考學堂

全部課程軟考華為認證廠商認證 IT技術(shù)PMP項目管理免費題庫

文章資源問答課堂專欄直播

51CTO

鴻蒙開發(fā)者社區(qū)

51CTO技術(shù)棧

51CTO官微

51CTO學堂

51CTO博客

CTO訓練營

鴻蒙開發(fā)者社區(qū)訂閱號

51CTO軟考

51CTO學堂APP

51CTO學堂企業(yè)版APP

鴻蒙開發(fā)者社區(qū)視頻號

51CTO軟考題庫

賬號設置退出

Hadoop

839內(nèi)容??

關注

涵蓋Hadoop相關研究熱點、技術(shù)難點與應用場景，讓用戶更加深入地學習這一大數(shù)據(jù)基礎技術(shù)。

共 839 條

Hadoop架構(gòu)中的HDFS和NameNode

到目前為止，我們談到Hadoop是一個創(chuàng)建分布式集群的框架，能夠處理大的、不同的數(shù)據(jù)集。然而，另一個說法是將Hadoop理解為一個存儲設備或存儲環(huán)境。確實，它是一個能夠在其上創(chuàng)建應用的平臺，有存儲PB級數(shù)據(jù)的能力。此外，它能夠處理并分析數(shù)據(jù);提供越來越多的“大數(shù)據(jù)”應用結(jié)果。

2012-07-11 17:21:23

Hadoop集群系列9:HDFS初探之旅

本文為Hadoop集群系列第九。HDFS（Hadoop Distributed File System）是Hadoop項目的核心子項目，是分布式計算中數(shù)據(jù)存儲管理的基礎篇，今天我們講講Hadoop條件下，Eclipse開發(fā)環(huán)境設置。

2012-07-05 10:51:57

告訴你Hadoop是什么

Hadoop是什么？Hadoop是一個開發(fā)和運行處理大規(guī)模數(shù)據(jù)的軟件平臺,是Appach的一個用java語言實現(xiàn)開源軟件框架，實現(xiàn)在大量計算機組成的集群中對海量數(shù)據(jù)進行分布式計算.

2012-07-03 16:56:12

Facebook的Hadoop應用與故障轉(zhuǎn)移方案

我們知道，F(xiàn)acebook使用Hadoop來進行大數(shù)據(jù)的處理，但Facebook又是如何保障頻繁、龐大的數(shù)據(jù)請求等高壓環(huán)境下不發(fā)生故障的呢？我們一起來了解一下Facebook內(nèi)部的Hadoop使用情況以及其NameNode故障轉(zhuǎn)移技術(shù)。

2012-07-03 11:38:32

Facebook Hadoop

Hadoop核心機制詳細解析

Hadoop的核心機制是通過HDFS文件系統(tǒng)和MapReduce算法進行存儲資源、內(nèi)存和程序的有效利用與管理。在現(xiàn)實的實例中，通過Hadoop，可以輕易的將多臺普通的或低性能的服務器組合成分布式的運算-存儲集群，提供大數(shù)據(jù)量的存儲和處理能力。

2012-07-03 10:57:54

Hadoop 核心機制

Hadoop集群系列8：Eclipse開發(fā)環(huán)境設置

本文為Hadoop集群系列第八篇，今天我們講講Hadoop條件下，Eclipse開發(fā)環(huán)境設置。

2012-07-03 08:37:24

Hadoop集群系列7：WordCount運行詳解

本文為Hadoop集群系列第七篇，單詞計數(shù)是最簡單也是最能體現(xiàn)MapReduce思想的程序之一，可以稱為MapReduce版"Hello World"。

2012-06-29 10:58:27

大數(shù)據(jù)計算：Hadoop的前世今生

大數(shù)據(jù)計算我們把它理解成為一個什么事情呢?目前現(xiàn)在這個時代通信、網(wǎng)絡等等這些電子信息技術(shù)發(fā)展，使數(shù)據(jù)規(guī)模得到了極大的增加。

2012-06-29 09:19:39

大數(shù)據(jù)

了解關于Hadoop的12個事實

本文中，分析師給出了關于Hadoop的12點事實，幫助您認識一個真實的Apache Hadoop生態(tài)系統(tǒng)。

2012-06-28 15:57:08

Hadoop集群6：JDK和SSH無密碼配置

本文為Hadoop集群系列第六篇，包括JDK和SSH無密碼配置。如果你的計算機僅僅作為開發(fā)使用時推薦使用這種方法，因為所有用戶的shell都有權(quán)使用這些環(huán)境變量，可能會給系統(tǒng)帶來安全性問題。

2012-06-28 10:52:06

Hadoop 2.0預計將在一年內(nèi)面世

Hadoop 1.0于2011年年底發(fā)布，具有強大的Kerberos身份驗證功能，并支持HBase數(shù)據(jù)庫，但該版本由于MapReduce的限制，讓個人用戶無法卸載集群。新的Hadoop 2.0即將面世，HortonWorks公司(該公司一直是Apache Hadoop的貢獻者)首席技術(shù)官Eric Baldeschwieler透露了即將發(fā)布的2.0中包含的功能。

2012-06-26 15:20:30

快速部署Hadoop基礎架構(gòu)

據(jù)國外媒體消息，為應對海量數(shù)據(jù)浪潮，VMware啟動Serengeti開放原始碼計劃，便于企業(yè)在VMware vSphere虛擬化平臺上快速部署與管理Apache Hadoop集群，部署虛擬化技術(shù)與分布式計算混用的基礎架構(gòu)。

2012-06-26 15:13:50

Hadoop 數(shù)據(jù)架構(gòu)

Hadoop集群系列5:Hadoop安裝配置

本文為Hadoop集群系列第五篇，SecureCRT是一款支持SSH（SSH1和SSH2）的終端仿真程序，同時支持Telnet和rlogin協(xié)議。

2012-06-25 10:30:06

VMware的Hadoop大數(shù)據(jù)戰(zhàn)略：精明還是錯誤？

虛擬基礎架構(gòu)云上的Hadoop消除了可靠性問題;通過vSphere,Hadoop應用如果節(jié)點失敗能夠自動重啟。此外，虛擬化巨鱷也正致力于同Hadoop社區(qū)成員合作，包括Cloudera Inc.、Greenplum、Hortonworks、IBM,繼續(xù)致力于ASF的可擴展性，這也是Hadoop“虛擬化感知”的要害所在。

2012-06-21 09:56:50

VMware 大數(shù)據(jù)

Hadoop集群系列4:SecureCRT使用

本文為Hadoop集群系列第四篇，SecureCRT是一款支持SSH（SSH1和SSH2）的終端仿真程序，同時支持Telnet和rlogin協(xié)議。

2012-06-20 09:19:19

Hadoop集群系列3:VSFTP安裝配置

本文為Hadoop集群系列第三篇，VSFTP是一個基于GPL發(fā)布的類Unix系統(tǒng)上使用的FTP服務器軟件，它的全稱是Very Secure FTP。

2012-06-19 15:51:22

Hadoop，有所為而有所不為譯文

但是盡管Hadoop頗具吸引力，想了解Hadoop能夠為企業(yè)扮演什么角色、如何最有效地部署它，仍要面臨一條很陡的學習曲線。換句話說，學起來很費勁。只有明白了Hadoop的有所為而有所不為，你才能更清楚地了解如何才能最有效地把它部署到你自己的數(shù)據(jù)中心或云環(huán)境。然后，才可以為部署的Hadoop落實最佳實踐。

2012-06-19 09:28:46

Hadoop集群系列2:機器信息分布表

本文為Hadoop集群系列第二篇，講述如何采用4臺安裝Linux環(huán)境的機器來構(gòu)建一個小規(guī)模的分布式集群。

2012-06-19 09:28:33

Hadoop體系的強大工具組合

HDFS和MapReduce只是打造Hadoop平臺最基本的核心套件，在Apache基金會的網(wǎng)站中還有其他的相關開源套件，共同組成了一個Hadoop體系（Hadoop Ecosystem）。

2012-06-15 14:38:29

Hadoop 分布式文件系統(tǒng)

Facebook分享：解決Hadoop的單一故障點譯文

Facebook的工程師們開發(fā)出了一種方法，以規(guī)避Hadoop數(shù)據(jù)分析平臺的一個根本缺點：只依賴單單一臺名稱服務器來協(xié)調(diào)所有運營。Facebook估計，如果可以克服這個缺點，就能將其數(shù)據(jù)倉庫的停機時間縮短幾乎一半。為了解決這個問題，F(xiàn)acebook開發(fā)出了一款名為Avatarnode的軟件：萬一主名稱節(jié)點由于某種原因而失效，該軟件就會切換至備用名稱節(jié)點。

2012-06-15 09:54:19

Facebook Hadoop

VMware推Serengeti項目支持Hadoop虛擬化

VMware于美國時間本周三宣布了Serengeti開源項目，旨在為Hadoop在VMware虛擬化環(huán)境中的使用進行優(yōu)化。

2012-06-15 09:22:56

Hadoop集群系列1:CentOS安裝配置

本文為Hadoop集群系列第一篇，CentOS安裝配置。CentOS是一個基于Red Hat企業(yè)級Linux提供的可自由使用的源代碼企業(yè)級的Linux發(fā)行版本。

2012-06-13 09:56:53

SQL Server 2012將與Hadoop無縫集成

SQL Server 2012致力提供大規(guī)模且低成本的分析數(shù)據(jù)和數(shù)據(jù)倉庫解決方案，并保證實現(xiàn)規(guī)?；挽`活性。在大數(shù)據(jù)時代Microsoft也做出了一些完善：SQL Server 2012將與Hadoop無縫集成。

2012-06-08 10:00:01

SQL Server Big Data Hadoop

IT企業(yè)利用云計算平臺Hadoop的10種方式

如果你是世界上廣大Hadoop用戶的一員，你肯定知道Google曾經(jīng)靠著分布式計算技術(shù)（Hadoop），在搜索引擎和廣告方面取得了舉世矚目的成就。而今天我們要探討的是，Hadoop 作為基礎云計算平臺，除了廣告，IT公司還用哪些方式在利用Hadoop。

2012-06-07 13:39:20

Hadoop 云計算

IT企業(yè)利用云計算平臺Hadoop的10種方式

如果你是世界上廣大Hadoop用戶的一員，你肯定知道Google曾經(jīng)靠著分布式計算技術(shù)(Hadoop)，在搜索引擎和廣告方面取得了舉世矚目的成就。今天我們要探討的是，Hadoop 作為基礎云計算平臺，除了廣告，IT公司還用哪些方式在利用Hadoop。

2012-06-07 09:28:41

云計算 Hadoop

Hadoop也需要有數(shù)據(jù)生命周期管理

我們希望讓Hadoop來承載海量結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)的存儲，以及部分的數(shù)據(jù)加工，也許以后還會通過HIVE或者PIG的方式承載一些高端的即席查詢?nèi)蝿?。這種混合而不是單一的任務注定了也需要實施生命周期管理，因為數(shù)據(jù)加工通常是對近段時間的數(shù)據(jù)進行，而數(shù)據(jù)存儲和數(shù)據(jù)查詢則需要對歷史數(shù)據(jù)進行。

2012-06-06 15:55:36

Hadoop 數(shù)據(jù)

分散處理 Hadoop架構(gòu)服務器角色

在Hadoop運算集群架構(gòu)中，先分解任務，分工處理再匯總結(jié)果這些服務器依據(jù)用途可分成Master節(jié)點和Worker節(jié)點，Master負責分配任務，而Worker負責執(zhí)行任務，如負責分派任務的操作，角色就像是Master節(jié)點。

2012-06-05 08:59:35

Hadoop架構(gòu)服務器

給Hadoop一個支點：撬動大數(shù)據(jù)

大數(shù)據(jù)大概是繼云計算之后，最熱門的科技名詞了。一些科技廠商不約而同，紛紛打出大數(shù)據(jù)口號，情況就像云計算熱潮一樣。那么大數(shù)據(jù)到底是怎么回事？

2012-06-01 16:13:09

Hadoo 大數(shù)據(jù)

如何使用Hadoop進入大數(shù)據(jù)庫時代？

Hadoop有多火？從業(yè)界的一系列舉動就可以看出來。包括甲骨文、微軟、Sybase在內(nèi)的主流數(shù)據(jù)庫廠商都紛紛發(fā)布了Hadoop連接器產(chǎn)品，為的就是讓用戶可以在傳統(tǒng)關系型數(shù)據(jù)庫與開源分布式處理系統(tǒng)之間更輕松地傳輸信息。

2012-05-31 15:56:23

Hadoop 大數(shù)據(jù)

大數(shù)據(jù)與Hadoop之間的關系

大數(shù)據(jù)，一種新興的數(shù)據(jù)挖掘技術(shù)，它正在讓數(shù)據(jù)處理和分析變得更便宜更快速。大數(shù)據(jù)技術(shù)一旦進入超級計算時代，很快便可應用于普通企業(yè)，在遍地開花的過程中，它將改變許多行業(yè)業(yè)務經(jīng)營的模式。但是很多人對大數(shù)據(jù)存在誤解，下面就來縷一縷大數(shù)據(jù)與Hadoop之間的關系。

2012-05-31 14:54:59

Hadoop 大數(shù)據(jù)

Hadoop并非大數(shù)據(jù)處理的一切

Hadoop作為一個重量級的分布式處理開源框架已經(jīng)在大數(shù)據(jù)處理領域有所作為，企業(yè)希望利用Hadoop來規(guī)劃其自身未來數(shù)據(jù)處理的藍圖。從EMC、Oracle到Microsoft，幾乎所有高科技廠商都在過去幾個月中宣布了自己以Hadoop為基礎的大數(shù)據(jù)戰(zhàn)略。然而Hadoop并非大數(shù)據(jù)處理的一切。

2012-05-31 14:37:10

Hadoop 大數(shù)據(jù)

Hadoop源碼分析之心跳機制

既然“心跳”是Datanode主動給Namenode發(fā)送的。那Datanode是怎么樣發(fā)送的呢？本文作者將對Hadoop的心跳機制進行詳細的分析，詳細請看內(nèi)容

2012-05-31 02:54:07

如何利用Hadoop降低大數(shù)據(jù)分析成本

大數(shù)據(jù)將成為代替云計算的新一代熱門話題。這是必然的結(jié)果：隨著時間的推移，企業(yè)產(chǎn)生的數(shù)據(jù)量已經(jīng)越來越大了，這些數(shù)據(jù)包括客戶購買偏好趨勢、網(wǎng)站訪問和習慣、客戶審查數(shù)據(jù)等等;那如何利用Hadoop降低大數(shù)據(jù)分析成本呢?

2012-05-30 11:29:14

Hadoop 大數(shù)據(jù)

淺析Hadoop文件格式

Hadoop 作為MR 的開源實現(xiàn)，一直以動態(tài)運行解析文件格式并獲得比MPP數(shù)據(jù)庫快上幾倍的裝載速度為優(yōu)勢。不過，MPP數(shù)據(jù)庫社區(qū)也一直批評Hadoop由于文件格式并非為特定目的而建，因此序列化和反序列化的成本過高[7]。本文介紹Hadoop目前已有的幾種文件格式，分析其特點、開銷及使用場景。希望加深讀者對Hadoop文件格式及其影響性能的因素的理解。

2012-05-29 09:48:21

Hadoop文件格式解讀

Hadoop 作為MR 的開源實現(xiàn)，一直以動態(tài)運行解析文件格式并獲得比MPP數(shù)據(jù)庫快上幾倍的裝載速度為優(yōu)勢。本文介紹Hadoop目前已有的幾種文件格式，分析其特點、開銷及使用場景。希望加深讀者對Hadoop文件格式及其影響性能的因素的理解。

2012-05-29 09:06:32

Hadoop 文件格式

Big Data, Hadoop and StreamInsight

微軟的首席StreamInsight™ 項目經(jīng)理發(fā)布的一篇博客 Big Data, Hadoop and StreamInsight™，微軟的大數(shù)據(jù)解決方案中包含 Microsoft StreamInsight™ 和微軟的 Hadoop-based Services for Windows。

2012-05-28 13:58:36

Hadoop 大數(shù)據(jù)

Apache Hadoop 2.0 Alpha 發(fā)布

Hadoop并不僅僅是一個用于存儲的分布式文件系統(tǒng)，而是設計用來在由通用計算設備組成的大型集群上執(zhí)行分布式應用的框架。

2012-05-28 09:23:40

Java Hadoop Apache

如何使用Linux、Hadoop進行分布式計算

Hadoop 的一個應用是并行索引 Internet Web 頁面。Hadoop 是一個受到 Yahoo!、Google 和 IBM 等公司支持的 Apache 項目。本文將介紹 Hadoop 框架，并展示它為什么是最重要的基于 Linux® 的分布式計算框架之一。

2012-05-21 16:28:29

基于Hadoop的云計算模型研究

云計算是在網(wǎng)格計算基礎上新興的計算模型，是互聯(lián)網(wǎng)公司爭相追逐的新技術(shù)。云計算作為一種商業(yè)計算模型，可以把任務分布在大量的計算機構(gòu)成的資源池上。介紹了云計算的關鍵技術(shù)，這些技術(shù)包含虛擬機和計算模型等，還基于Hadoop對云計算模型進行了研究。

2012-05-21 16:08:07

Hadoop 云計算

如何用Hadoop搭建大型分布式應用？

在去年Techonomy會議上參加討論時，谷歌CEO Eric Schmidt引用一個驚人的事實指出，我們現(xiàn)在每兩天創(chuàng)造的信息和2003年以來整個歷史上所創(chuàng)建的信息一樣多。信息泛濫帶來了一系列的技術(shù)突破，這讓企業(yè)的數(shù)據(jù)存儲擴展到數(shù)千億字節(jié)甚至是數(shù)拍字節(jié)。谷歌在此領域的貢獻是尤其值得注意，包括它在MapReduce上的工作，它是一種大型分布式數(shù)據(jù)處理的方法，谷歌采用此方法來記錄位于索引資源（映射這些數(shù)據(jù)）收藏里的關鍵字或短語，接著再把這些位置的記錄和清單返回給用戶（將映射數(shù)據(jù)減少到緊密相關的結(jié)果）。映射和減少操作可以涵蓋模式識別、圖解

2012-05-21 10:19:31

三臺主機建立Hadoop小集群

我們將介紹如何用三臺主機建立Hadoop小集群，先用VMWare安裝三臺虛擬機（可以先安裝一臺，然后clone兩臺），按照節(jié)點安排及網(wǎng)絡拓撲配置網(wǎng)絡。

2012-05-21 09:42:12

Hadoop是一個值得信賴的推動引擎

2011年，對Hadoop來說注定是載入史冊的一年：Yahoo!與風險投資公司BenchmarkCapital聯(lián)合建立獨立公司Hortonworks，接手Yahoo!開源軟件平臺ApacheHadoop；Hadoop海量數(shù)據(jù)分析平臺Datameer、Karmasphere和Hadapt分別獲得千萬美元級別投資；一向?qū)﹂_源趨勢不屑一顧的微軟轉(zhuǎn)投Hadoop懷抱；Hadoop之父DougCutting第一次蒞臨中國，布道Hadoop0.23……

2012-05-10 16:32:01

IDC：Hadoop、MapReduce相關收入預計將暴漲

根據(jù)IDC周一發(fā)布的最新報告，用于大數(shù)據(jù)分析的Hadoop和MapReduce編程框架相關的軟件市場將會從2011年的7700萬美元暴漲至2016年的8.128億美元，年復合增長率為60.2%。

2012-05-09 09:13:29

IDC Hadoop MapReduce

分布式計算平臺Hadoop發(fā)展現(xiàn)狀亂而穩(wěn)定的解讀

雅虎開發(fā)者Doug Cutting六年前創(chuàng)建了一個用于管理，存儲和分析大量數(shù)據(jù)的平臺，用他兒子的玩具大象命名，并把它交給阿帕奇軟件基金會。鑒于圍繞Hadoop建立的整個行業(yè)的迅速，這會使某些人覺得非常驚訝，那就是阿帕奇軟件基金會最近才推出了Apache Hadoop 1.0——被認為是足夠穩(wěn)定而成為“企業(yè)就緒”的第一個版本。

2012-05-08 10:46:38

Hadoop在MapReduce中使用壓縮詳解

Hadoop對于壓縮格式的是透明識別,我們的MapReduce任務的執(zhí)行是透明的，Hadoop能夠自動為我們將壓縮的文件解壓，而不用我們?nèi)リP心。

2012-04-23 10:30:38

數(shù)據(jù)分析不使用Hadoop的五大理由

我一度是Hadoop的忠實擁護者。我喜歡它可以輕而易舉地處理PB級別的數(shù)據(jù)，喜歡它可以將運算擴展到數(shù)千個節(jié)點的分布式計算能力，也喜歡它存儲和加載數(shù)據(jù)的靈活性。但在經(jīng)歷過一系列的探索與使用之后，我對Hadoop非常失望。

2012-04-18 09:42:36

數(shù)據(jù)分析 Hadoop

Hadoop——Microsoft大數(shù)據(jù)戰(zhàn)略的核心

眾所周知，大數(shù)據(jù)浪潮正在漸漸的席卷全球的各個角落。而Hadoop正是這股風暴的動力之源。Microsoft更是史無前例的與Apache Hadoop社區(qū)合作。Microsoft此舉就是希望利用自己在軟件領域的優(yōu)勢構(gòu)建一個打上Microsoft烙印的Hadoop生態(tài)圈。

2012-03-12 10:09:50

Hadoop 微軟大數(shù)據(jù)

大數(shù)據(jù)時代：Hadoop認證變身高薪敲門磚

眾所周知，積極的參加各類的培訓并獲得相關的認證是IT專業(yè)人士的顯著特征。而在2012年哪種技術(shù)會成為熱點?毫無疑問是Hadoop。Apache Hadoop作為開源數(shù)據(jù)管理軟件主要用來在分布式環(huán)境中的分析大量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。Hadoop已被用在包括Yahoo，F(xiàn)acebook，LinkedIn和eBay等眾多流行的網(wǎng)站之中。

2012-03-12 09:45:57

大數(shù)據(jù)Hadoop 云計算

Microsoft大數(shù)據(jù)計劃：在Hadoop上用C#編程

Microsoft在去年10月西雅圖舉行的SQL PASS 2011峰會上宣布將與從Yahoo分拆出來的Hortonworks合作開發(fā)，旨在實現(xiàn)Windows Server和Windows Azure平臺之上的Hadoop。Microsoft官方將未來支持Windows Azure和Windows Server的Hadoop框架的產(chǎn)品套件的代號定義為“Isotope”。

2012-03-05 10:19:23

微軟 Hadoop 編程

除了Hadoop：帶你了解更多大數(shù)據(jù)解決方案譯文

要對當下的大數(shù)據(jù)解決方案進行分類評估可著實不是易事。首先，大數(shù)據(jù)工具似乎是在一夜之間就如雨后春筍般涌現(xiàn)出來，因此大家自然會對它們抱有一絲懷疑，畢竟像Hadoop與NoSQL這樣的大項目也才剛剛付諸實際應用。

2012-02-29 09:20:24

Hadoop 大數(shù)據(jù)解決方案

上一頁 1 ··· 12 13 14 15 16 17 下一頁

51CTO技術(shù)棧公眾號

業(yè)務
速覽

媒體

51CTO CIOAge HC3i

社區(qū)

51CTO博客鴻蒙開發(fā)者社區(qū) AI.x社區(qū)

教育

51CTO學堂精培企業(yè)培訓 CTO訓練營