当前访客身份:游客 [ 登录  | 注册加入尚学堂]
直播

easychart

拥有积分:4
这家伙太懒,还没有签名!

博客分类

笔记中心

课题中心

提问中心

答题中心

解答题中心

  • 云服务三大部署模式-私有云、公有云、混合云谁才是云计算未来的主流
     近两年来,云计算产业发展迅猛,被称为ICT领域下一个金矿。几乎ICT产业内的所有参与者都开始涉足云计算领域。运营商、IT厂商、通信厂商、IT服务提供商、电信服务提供商、软件厂商、系统厂商……纷纷出台云计算定战略。近来,围绕云计算的并购频出...
  • scala学习3 数组相关操作映射和元组
    一.定长数组     如果需要一个长度不变的数组,可以使用Scala中的Array.      val nums = new Array[int](10)         val s = Array("Hello","world") 二.变...
  • 【samza系列】实时计算框架Samza学习指南-前言
        首先欢迎大家来到这里和笔者一起共同学习出自LinkedIn的一款优秀的实时计算框架Samza。我目前就职于百度,负责电商数据平台架构和开发的工作,大数据离线和在线计算平台都需要投入精力搭建、使用和维护,特别对实时计算这一块的技术感兴...
  • spark调优经验(待续)
    spark调优是需要根据业务需要调整的,并不是说某个设置是一成不变的,就比如机器学习一样,是在不断的调试中找出当前业务下更优的调优配置。下面零碎的总结了一些我的调优笔记。 spark 存储的时候存在严重的分配不均的现象,有几台机器在过渡使用...
  • pig的limit无效(返回所有记录)sample有效
    pig中,limit可以取样少部分数据,但有很多问题,比如数据不能少于10条,否则返回全部。 今天又遇到另一个问题: group后的数据,limit无效:也就是group后的数据,不能用limit,估计是含group结构不行(没验证) 相比...
  • pig加载两个不同字段个数的文件?load file with different items(f1有42列,f2有43列读到一个对象中)
    我文章提到,加载一个文件的部分列是可行。两列,你只读一列,没问题。 但是,两个文件,f1和f2,f1有42列,f2有43列,同时加载到一个流对象,如何? 答:成功加载。但是无结构(schema unknown),discribe后看到:Sc...
  • Hive学习(一)hive初始
    1.没有接触,不知道这个事物是什么,所以不会产生任何问题。 2.接触了,但是不知道他是什么,反正我每天都在用。 3.有一定的了解,不够透彻。 那么hive, 1.我们对它了解多少? 2.它到底是什么? 3.hive和hadoop是什么关系?...
  • Hive学习(九)Hive体系结构
    1、Hive架构与基本组成     下面是Hive的架构图。 图1.1 Hive体系结构     Hive的体系结构可以分为以下几部分:     (1)用户接口主要有三个:CLI,Client 和 WUI。其中最常用的是CLI,Cli启动的...
  • hive优化总结
    优化时,把hive sql当做map reduce程序来读,会有意想不到的惊喜。 理解hadoop的核心能力,是hive优化的根本。这是这一年来,项目组所有成员宝贵的经验总结。   长期观察hadoop处理数据的过程,有几个显著的特征: 1...
  • Android数据库高手秘籍(五)——LitePal的存储操作
    经过前面几篇文章的学习,我们已经把LitePal的表管理模块的功能都很好地掌握了,相信大家都已经体会到了使用LitePal来创建表、升级表、以及建立表关联所带来的便利。那么从本篇文章开始,我们将进入到一个新模块的学习旅程当中,使用LiteP...
北京总部地址:北京市海淀区西三旗桥东建材城西路85号神州科技园B座三层尚学堂 咨询电话:400-009-1906 010-56233821
Copyright 2007-2015 北京尚学堂科技有限公司 京ICP备13018289号-1 京公网安备11010802015183