现在位置: 首页 >
所有2014年06月文章
玩转Ambari之二:本地yum源建立已关闭评论
2014年06月07日
⁄ hadoop
⁄ 共 3653字 ⁄ 被围观 23,832 views+
生产中的hadoop集群机器都很多,而且基本都不允许连接公网,为方便快速部署,非常有必要建立一个本地Repository,下面详细介绍建立过程。
主要资源:
CentOS 6.5 x86_64 镜像
Ambari-1.5.1
HDP-2.1
HDP-UTILS-1.1.0.17
一、安装基本软件并配置:
yum install yum-utils createrepo yum-plugin-priorities
yum install httpd
编辑/etc/yum/pluginconf.d/priorities.conf,修改为如下:
[main]
enabled=1
gpgcheck=0
...
阅读全文
玩转Ambari之一:系统架构已关闭评论
说在前面:
这段时间为公司部署了测试环境的Hadoop,采用了apache最新社区版,在使用中也遇到了各种各样的问题,但还是跑起来了,其他同事已能再其上运行推荐算法等基础应用。但在管理和后继部署中,越来越多的问题不断出现,主要如下:
各集群节点的配置同步:我采用rsync+sersync+inotify实现,但配置较复杂
新应用的部署:比如为集群添加hbase应用,需要很细心复杂的配置才能完成,而且要是操作错误,还可能导致正常的集...
阅读全文
FBI通缉俄“黑客之王” 指控其盗取超1亿美元已关闭评论
小型企业如何成功牵手OpenStack?已关闭评论
地球那么大的望远镜,见过没?已关闭评论
大数据四个“战场”:实时打击欺诈犯罪已关闭评论
如今,当人们谈到欺诈时,可能第一个想到的是银行,事实也是如此——银行是最容易受到威胁的行业。但过去Interac Association的一份报告显示在加拿大借记卡欺诈损失实际上已经下降了62%,而且到了2013年受益于芯片和PIN技术的发展,随着一些安全性高、欺诈检测机制发展起来,可以帮助企业实时检测到欺诈行为,提升惩治犯罪机率。
对于欺诈率下降是个好消息,但是相比好消息,技术的发展不可能消除诈骗犯罪,欺诈者仍然能够利用许...
阅读全文