当前访客身份:游客 [ 登录  | 注册加入尚学堂]
直播

我来了!

拥有积分:3972
尚学堂雄起!!威武。。。

博客分类

笔记中心

课题中心

提问中心

答题中心

解答题中心

  • Twitter Storm 概念
    概念 这个页面列出了storm的主要概念和查找更多信息的链接。讨论的概述有: 1. 拓扑( Topologies) 2. 流( Streams) 3. 喷嘴(Spouts) 4. 螺栓(Bolts) 5. 流分组(Stream groupi...
  • Twitter Storm安装配置(集群)笔记
    本篇幅主要是讲述在单机版本的基础上扩展成为集群。 集群中所有的机器都需要安装与单机版一样的所需工具软件: python、zookeeper、zeromq、jzmq、storm 将上述工具安装单机版教程中所描述的一一安装即可。 区别就在于配置...
  • 【流式计算】Twitter Storm源代码分析之Topology的执行过程
     我们通过前面的文章(Twitter Storm源代码分析之ZooKeeper中的目录结构)知道了storm集群里面nimbus是通过zookeeper来给supervisor发送指令的,并且知道了通过zookeeper到底交换了哪些信息。...
  • Twitter Storm的一些关键概念
    这篇文章翻译自storm官方wiki: https://github.com/nathanmarz/storm/wiki/Concepts, 主要介绍storm的一些关键概念。 先看一张storm里面各种对象的一个示意图: storm里面各...
  • Storm-0.8.1集群部署
    1、配置Zookeeper集群配置     安装配置参照:f.dataguru.cn/thread-333245-1-1.html 2、下载storm-0.8.1.zip 3、用unzip解压缩 [root@S1PA124 storm-0....
  • storm集群的配置与启动
    配置  storm在conf/storm.yaml包含了一些配置信息。 storm.zookeeper.servers: - "10.16.15.6" storm.zookeeper.port: 2181 sto...
  • storm实时流式计算框架集群搭建过程
    这几天在其他同事的帮助下,调研了twitter的开源流式计算框架storm的使用,下面分享一下storm集群的安装配置过程。以作备忘之用。 我的实验机器为:195和196 如果转载请注明出处:comaple的博客 首先:安装依赖包 1,  ...
  • Spark 性能相关参数配置详解-压缩与序列化篇
    随着Spark的逐渐成熟完善, 越来越多的可配置参数被添加到Spark中来, 本文试图通过阐述这其中部分参数的工作原理和配置思路, 和大家一起探讨一下如何根据实际场合对Spark进行配置优化。 由于篇幅较长,所以在这里分篇组织,如果要看最新...
  • Storm实时流处理Hello World
    近来在看Storm的相关资料,以下总结一下配置过程和Hello World例子。 Storm是分布式的实时计算系统。详细文档可参考Storm网站,也可以参阅《Getting started with storm》,以下程序示例即来自于这本书...
  • Storm, Spark, Hadoop三个大数据处理工具谁将成为主流?
    话题讨论:Storm, Spark, Hadoop三个大数据处理工具谁将成为主流      大数据现在是业内炙手可热的话题,随着技术的发展,大数据存储技术已经不在是难点,但是对大数据如何做好存储后的下一步处理将是未来竞争的焦点,目前比较受欢...
北京总部地址:北京市海淀区西三旗桥东建材城西路85号神州科技园B座三层尚学堂 咨询电话:400-009-1906 010-56233821
Copyright 2007-2015 北京尚学堂科技有限公司 京ICP备13018289号-1 京公网安备11010802015183