字母哥的文章

docker registry V2私有仓库搭建

向您推荐 Dcoker入门与实践系列文章欢迎加入QQ技术交流群：300139299 前提条件 docker版本大于1.6.0 创建registry server端下载镜像 docker pull registry:2.2 生成自签名证书 cd ~/; mkdir r...

4年前 (2016-05-18) 7017℃

向您推荐 Dcoker入门与实践系列文章欢迎加入QQ技术交流群：300139299 什么是Dockerfile？ Dockerfile是自动构建docker镜像的配置文件，Dockerfile中的命令非常类似linux shell下的命令 Dockerfile,可以让用户自定义...

4年前 (2016-05-18) 7643℃

向您推荐 Dcoker入门与实践系列文章欢迎加入QQ技术交流群：300139299 Ubuntu安装docker docker目前支持如下的一些ubuntu操作系统: Ubuntu Wily 15.10 Ubuntu Trusty 14.04 (LTS) Ubuntu Pre...

4年前 (2016-04-01) 5976℃

向您推荐 Dcoker入门与实践系列文章欢迎加入QQ技术交流群：300139299 Docker是软件工程中的集装箱技术 Docker是一个虚拟化的容器技术，它轻巧，且易移植，“build once, configure once and run anywhere”。集...

4年前 (2016-04-01) 8256℃

数据装载入表 LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1, partcol2=val2 ...)] 注意事项： hive建表默认使...

4年前 (2016-03-16) 3985℃

本文假设hive已经做了基础安装，基础配置参考《Hive安装》配置hive-site.xml 启动HiveServer2还需要下面的设置  <property> <name>hive.support.concur...

4年前 (2016-03-16) 4009℃

Hive安装软件需求与环境说明假设已经搭建好 Hadoop-2.6.0 环境，并能正常运行 mysql 安装软件服务端：MySQL-server-5.5.16-1.rhel5.x86_64.rpm 客户端：MySQL-client-5.5.16-1.rhel5.x86_6...

4年前 (2016-03-16) 2769℃

设计目的：让有SQL技能，但无hadoop知识的人来查询分析大数据。 1. 基于hadoop的数据仓库工具， 2. Hive中的一张表对应的是HDFS的一个目录。 3. 支持一种与SQL几乎完全相同的语言HiveQL，除了不支持更新,索引和事务控制。 4. SQL到MapRedu...

4年前 (2016-03-16) 2442℃

Hadoop的HDFS和MapReduce子框架主要是针对大数据文件来设计的，在小文件的处理上不但效率低下，而且十分消耗磁盘空间(每一个小文件占用一个Block,HDFS默认block大小为64M)。解决办法:通常是选择一个容器，将这些小文件组织起来统一存储。HDFS提供了两...

4年前 (2016-03-16) 2454℃

HDFS（Hadoop Distributed FileSystem）hadoop 分布式文件系统把数据文件分布到不同的节点上的目的是什么？在不同的节点上分布式计算,计算靠近数据的原则。 Hadoop集群硬件部署结构： * Rack为机架，Switch为交换机（千兆，百兆） ...

4年前 (2016-03-16) 2363℃