<strong id="w2z11"></strong>
  • <span id="w2z11"><sup id="w2z11"></sup></span>

    <optgroup id="w2z11"><i id="w2z11"><del id="w2z11"></del></i></optgroup>

    1. <optgroup id="w2z11"><i id="w2z11"><del id="w2z11"></del></i></optgroup>
      1. <ruby id="w2z11"><i id="w2z11"></i></ruby>
        1. <optgroup id="w2z11"></optgroup>

          Logo

          • xpleaf

            发布于:2018-04-08 22:36:04

            58

            大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例
            大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例
            阅读 10000+ 评论 142 收藏 27 赞赏 1
          • cs312779641

            发布于:2018-02-07 18:57:15

            24

            详解Linux运维工程师高级篇(大数据安全方向)
            详解linux运维工程师高级篇(大数据安全方向)
            阅读 10000+ 评论 10 收藏 17
          • Slaytanic

            发布于:2017-11-02 19:25:32

            5

            Hadoop运维记录系列(二十一)
            Zeppelin启用https过程和Hack内核以满足客户需求的记录。原因是这客户很有意思,该客户中国分公司的人为了验证内网安全性,从国外找了一个***测试小组对Zeppelin和其他产品进行***测试,结果发现Zeppelin主要俩问题,一个是在内网没用https,一个是zeppelin里面可以执行shell命令和python语句。其实这不算大问题,zeppelin本来就是干这个用的。但是***小组不
            阅读 10000+ 评论 3 收藏 0
          • bingyang87628

            发布于:2017-09-26 23:24:31

            3

            大数据实践总结--两个故障的处理及思路总结
                已经有一段时间没有更新实践内容了,不是因为没有在学习。而是工作上出现一个新的挑战,又在忙论文查重,论文也是大数据方向的,主要是ICT方向的一个技术(若有人感兴趣,我会另开一个帖子来详细谈这个内容)。    而且最近,把之前所有的实践环境换了一台电脑来重新搭建。按理说会很顺利,但没想到,还是出了许多问题。一些简单的问题就直接解决了,但仍是有两
            阅读 8707 评论 1 收藏 1
          • Slaytanic

            发布于:2016-12-30 15:22:50

            3

            Apache Bigtop再论与卖书求生存
            快一年没写博客了,终于回来了,最近因公司业务需要,要基于cdh发行版打包自定义patch的rpm,于是又搞起了bigtop,就是那个hadoop编译打包rpm和deb的工具,由于国内基本没有相关的资料和文档,所以觉得有必要把阅读bigtop源码和修改的思路分享一下。我记得很早以前,bigtop在1.0.0以前版本吧,是用make进行打包的,其实这个0.9.0以前的版本,搁我觉得就不应该出现在apa
            阅读 8050 评论 3 收藏 0
          • yushaoqing

            发布于:2016-07-07 00:27:38

            3

            hadoop源码解析---INodeReference机制
            本文主要介绍了hadoop源码中hdfs的INodeReference机制。在hdfs2.6版本中,引入了许多新的功能,一些原有的源代码设计也有一定的改造。一个重要的更新就是引入了快照功能。但是当HDFS文件或者目录处于某个快照中,并且这个文件或者目录被重命名或者移动到其他路径时,该文件或者目录就会存在多条访问路径。INodeReference就是为了解决这个问题产生的。问题描述/a是hdfs中的
            阅读 5711 评论 0 收藏 1
          • 酱酱酱子啊

            发布于:2016-07-06 11:18:14

            3

            logstash将Kafka中的日志数据订阅到HDFS
            前言:通常情况下,我们将Kafka的日志数据通过logstash订阅输出到ES,然后用Kibana来做可视化分析,这就是我们通常用的ELK日志分析模式。但是基于ELK的日志分析,通常比较常用的是实时分析,日志存个十天半个月都会删掉。那么在一些情况下,我需要将日志数据也存一份到我HDFS,积累到比较久的时间做半年、一年甚至更长时间的大数据分析。下面就来说如何最简单的通过logstash将kafka中
            阅读 10000+ 评论 5 收藏 1
          • gdutccd

            发布于:2016-02-05 11:38:09

            0

            hadoop+zookepper实现namenode的高可用
            Hadoop+zookeepker安装与配置: 在hadoop-env.sh中添加export JAVA的环境变量修改hostname文件的名称,/etc/hosts文件配置主机名和ip的映射关系,将mstaer,slave的主机名和ip地址都添加进来 配置ssh免密钥配置Ssh-keygen –t rsa在./.ssh文件中生成两个文件id_rsa(私钥),id_rsa.pu
            阅读 7440 评论 0 收藏 1
          • Slaytanic

            发布于:2015-11-13 19:00:35

            8

            Hadoop运维记录系列(十七)
            上个月通过email,帮朋友的朋友解决了一个Cloudera的Spark-SQL无法访问HBase做数据分析的问题,记录一下。
            阅读 10000+ 评论 5 收藏 0
          • Slaytanic

            发布于:2015-07-13 14:50:53

            1

            使用flume替代原有的scribe服务
            以前很多业务都是用scribe做日志收集的支撑的,后来fb停止了对scribe的开发支持。而且scribe在机器上编译一次的代价太大了,各种坑,正好后来flume从1.3.0开始加入了对scribe的支持。就可以把原来scribe上面接入的数据转用flume收集了。虽然我很喜欢scribe,但是失去了官方支持毕竟还是很闹心的。agent.channels=c1 agent.channels.c1.
            阅读 8776 评论 1 收藏 0
          写文章
          神算67期六合特码 海门市| 商都县| 六枝特区| 兴化市| 屯门区| 岳西县| 图们市| 阿拉善右旗| 大方县| 祥云县| 台南县| 称多县| 凉山| 漳平市| 盐山县| 高邑县| 弋阳县| 平度市| 甘洛县| 大丰市| 平遥县| 五家渠市| 揭东县| 海林市| 闽清县| 年辖:市辖区| http://www.bpmhe0.com 仁化县| 四川省| 津南区| 安义县| 西乌珠穆沁旗| 交城县| 突泉县| 永平县| 镇坪县| 永善县| 冀州市| 英山县| 阿荣旗| 会宁县| 石屏县| 仁寿县| 天门市| 蛟河市| 阿勒泰市| 太和县| 龙井市| 嘉义县| 鸡东县| 万宁市| 化州市| 吉隆县| 德阳市| 平江县| 沙雅县| http://ofpzhut.tw 托克托县| 利川市| 寻甸| 买车| 两当县| 个旧市| 平昌县| 牙克石市| 泾川县| 大英县| 北票市| 修水县| 贡觉县| 河北省| 太保市| 济宁市| 江门市| 嘉定区| 香河县| 新野县| 辽阳市| 常熟市| 常德市| 灵宝市| 嘉义市| 从江县| 衡阳县| 巴楚县| 武城县| 剑川县| 芮城县| 沅陵县| 六盘水市| 无为县| http://krxhdgl.tw 南康市| 长宁县| 台东县| 和龙市| 石林| 崇义县| 临夏市| 奎屯市| 新野县| 潜江市| 栖霞市| 迁安市| 乐昌市| 滁州市| 柏乡县| 竹北市| 韩城市| 遂溪县| 二手房| 嫩江县| 平南县| 富蕴县| 扎鲁特旗| 云安县| 利辛县| 娄烦县| 修文县| 常山县| 阿合奇县| http://www.efbrzz.cn 万载县| 西和县| 泸水县| 塔城市| 措勤县| 宝丰县| 桦甸市| 射阳县| 普兰县| 招远市| 忻州市| 临西县| 罗甸县| 山东| 合山市| 奈曼旗| 伊川县| 延边| 清丰县| 车致| 徐水县| 庄浪县| 怀柔区| 潮州市| 怀化市| 马龙县| 莲花县| 麻江县| 财经| http://jhhtwgj.tw 宁乡县| 库伦旗| 汶川县| 松滋市| 南丹县| 砀山县| 历史| 葫芦岛市| 阜城县| 澄江县| 黔江区| 上杭县| 巩留县| 稻城县| 岚皋县| 绥宁县| 木兰县| 沿河| 柳河县| 连平县| 同心县| 犍为县| 城市| 崇明县| 隆化县| 上栗县| 威宁| 潮州市| http://www.mnj939.co 华池县| 渑池县| 青浦区| 兴国县| 常宁市| 黄石市| 宜君县| 都匀市| 兴化市| 衡阳县| 牟定县| 台湾省| 亚东县| 泗水县| 汶上县| 富顺县| 林西县|