大數據

hadoop(02)、使用JAVA API對HDFS進行基本操作

       本文源碼碼雲地址:https://gitee.com/MaxBill/hadoop       在上篇《

ceph對象存儲ceph

友情提示:本部署隻是用一個虛擬機,最小安裝軟件,所有ceph組件都安裝在一個linux系統中。。。請酌情參考。。。 一:環境配置

Spark內存管理模型

 Spark是現在很流行的一個基於內存的分佈式計算框架,既然是基於內存,那麼自然而然的,內存的管理就是Spark存儲管理的重中之重瞭。那麼,Spark究竟采用什麼樣的內存管理模型呢?本

Playful MySQL 2: Transactions and some of its potential problems

A Brief Introduction to Transaction in MySQLTransactions has 4 properties called "ACID". (Atomicity, Consistency, Isolation and Durability)To write

unbuntu安裝Docker

核心概念docker鏡像、docker容器、docker倉庫docker鏡像:類似於虛擬機鏡像,隻讀的模板,是創建docker容器的基礎。通過版本管理和增量文件系統,有一個很簡單的機制來創建和更新現有鏡像。如:一個鏡像可以包含一個基本的操作系統環境,裡面僅安裝瞭apache應用程序,可以稱為一個apache鏡像。docker容器:類似於一個輕量

docker配置

參考文章http://www.cnblogs.com/wt11/p/5705540.htmlhttp:/

使用docker鏡像

獲取、查看、搜索、刪除、定制、推送鏡像。下載最新的ubuntu鏡像,默認標簽latest命令docker pull ubuntu可以選擇版本如docker pull ubuntu :14.04嚴格來說要有註冊服務器如docker pull registry.hub.docker.com/ubuntu :16.04層次關系下載,有相同的層就共

docker容器

容器帶有可寫文件層。虛擬機是獨立運行的一整套操作系統和跑在上面的應用。docker容器是獨立運行的一個應用,以及他們必須的運行環境。創建、啟動、終止容器,進入容器內執行操作、刪除、導入導出等操作。創建容器虛擬機的進化。對容器進行操作和直接操作應用一樣簡單快速。docker create -it ubuntu:14.

sqoop對比

DataX是一個在異構的數據庫/文件系統之間高速交換數據的工具,實現瞭在任意的數據處理系統(RDBMS/Hdfs/Local filesystem)之間的數據交換

docker基礎命令

docker images查看可用鏡像docker ps -a 查看可用容器docker run -it ubuntu:14.04 /bin/bash快速創建可用容器docker create -it name創建容器docker start id 運行容器exit退出容