• 欢迎访问MACD实战投资网站,推荐使用最新版谷歌Chrome浏览器访问本网站,关注公众号 丁火甲木庚金 www.macd11.com/subscriptions
Hadoop组件Hbase配置项详解

Hadoop组件Hbase配置项详解

重读hbase文档,把所有的配置项整理一遍: hbase.tmp.dir:hadoop本地文件系统的临时目录,默认是${hbase.tmp.dir}/hbase,或者直接用绝对路径如/data/hbase; hbase.rootdir:hbase持久化的目录,被所有regionserver共享,默认${hbase.tmp.dir}/hbase,一般设置为hd……

Docker命令行详解

Docker命令行详解

【编者按】Docker是PaaS供应商dotCloud开源的一个基于LXC 的高级容器引擎,源代码托管在 GitHub 上, 基于Go语言开发并遵从Apache 2.0协议开源。Docker提供了一种在安全、可重复的环境中自动部署软件的方式,它的出现拉开了基于云计算平台发布产品方式的变革序幕。为了更好的促进Docker在国内的发展以及传播,我们决定开设《深入……

为Hadoop集群选择合适的硬件配置

为Hadoop集群选择合适的硬件配置

随着Apache Hadoop的起步,云客户的增多面临的首要问题就是如何为他们新的的Hadoop集群选择合适的硬件。 尽管Hadoop被设计为运行在行业标准的硬件上,提出一个理想的集群配置不想提供硬件规格列表那么简单。 选择硬件,为给定的负载在性能和经济性提供最佳平衡是需要测试和验证其有效性。(比如,IO密集型工作负载的用户将会为每个核心主轴投资更多)。 在……

腾讯TDW:大型Hadoop集群应用

腾讯TDW:大型Hadoop集群应用

PS:TDW是腾讯最大的离线数据处理平台。本文主要从需求、挑战、方案和未来计划等方面,介绍了TDW在建设单个大规模集群中采取的JobTracker分散化和NameNode高可用两个优化方案。 TDW(Tencent distributed Data Warehouse,腾讯分布式数据仓库)基于开源软件Hadoop和Hive进行构建,打破了传统数据仓库不能线性……

WordPress提示“缺少临时文件夹”的解决方法

WordPress提示“缺少临时文件夹”的解决方法

PS:昨天写一篇博客发现上传图片报错,文件已经上传100%但又跳出来“上传失败”,提示“缺少临时文件夹”。因之前更换了VPS,以为是图片目录权限问题,最后发现不是,是php的一个配置问题导致。 解决方法: vim php.ini 找到upload_tmp_dir,改成如下: upload_tmp_dir = /tmp 保存退出,重启php就ok。 ……

关于云计算基础架构IaaS层的几点看法

关于云计算基础架构IaaS层的几点看法

PS:本文作者是前盛大云CEO、Ucloud创始人季昕华,本人的工作经历使然对此文观点比较同感,也是比较不错的云计算IaaS层概念科普文。特记录如下: 真实的云计算什么样? 云计算对普通用户来说,总是一个云里雾里的话题。本文从最基础的概念开始科普,说明了四个常见的错误理解,和作者的四个猜想。 IaaS(Infrastructure as a Service……

当世钢铁侠:Elon Musk

当世钢铁侠:Elon Musk

Steve Jobs的光环已经随着他的离去而淡褪,短期内世上恐怕再难有人像他这样惊世骇俗般的改变了世界。但是如果你了解到一个人,一个来自南非年仅42岁的企业家在短短的20年里在全世界最酷的三个领域:互联网、可持续能源和航天技术中所取得的辉煌成就,你恐怕不会再眷恋Steve Jobs带给你的震撼。这个人就是Elon Musk。 这哥们的神奇之处首先就在于,……

存储基础:DAS/NAS/SAN存储类型及应用

存储基础:DAS/NAS/SAN存储类型及应用

PS:这篇对存储的基本类型概述很好,我做了部分补充和修改。 一. 硬盘接口类型 1. 并行接口还是串行接口 (1) 并行接口,指的是并行传输的接口,比如有0~9十个数字,用10条传输线,那么每根线只需要传输一位数字,即可完成。 从理论上看,并行传输效率很高,但是由于线路上的物理原因,它的传输频率不能太高,所以实际的传输速度并不和并行度成正比,甚至可能更差。 ……

Docker常用命令总结

Docker常用命令总结

PS:Docker这个虚拟化容器(跟虚拟机原理有区别,可以理解成内核级虚拟化应用容器)最近比较流行,花点时间研究一下,确实是个好东西,以后可能会对云计算的PaaS层有很大改变。目前只支持Linux 3.8以上内核,安装很简单,这里不说了,纪录下常用的命令,以后再深入研究是否上生产环境。 直接输入docker –help可以查看Docker的子命令……

Hadoop组件Hbase配置项详解

Hadoop组件Hbase配置项详解

重读hbase文档,把所有的配置项整理一遍: hbase.tmp.dir:hadoop本地文件系统的临时目录,默认是${hbase.tmp.dir}/hbase,或者直接用绝对路径如/data/hbase; hbase.rootdir:hbase持久化的目录,被所有regionserver共享,默认${hbase.tmp.dir}/hbase,一般设置为hd……

(原创)VMware2014年所有产品简介

(原创)VMware2014年所有产品简介

PS:很多童鞋对VMware的产品线不了解,本人使用VMware的产品刚好10年,VMware是目前业界的虚拟化王者,无论是虚拟化技术还是商用市场份额,都引领业界牛耳,背后更有存储巨头EMC的支撑。本文对VMware的产品线做个梳理,资料来自VMware官方网站,并加入本人的说明,括号的红字为本人加的注解。 以下产品按照所属应用类别来分: 数据中心和云计算基……