当前位置: 首页  > 产品与方案

大数据/云计算系统架构

2015/11/28 20:06:49 人评论

大数据,云计算

大数据开发核心技术 - 大数据仓库Hive精讲

       hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行
运行。其优点是学习成本低,可以通类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适合数据仓库的统计分析。

一、Hive 初识入门

1)Hive功能、体系结构、使用场景
2)Hive环境搭建、初级使用 
3)Hive原数据配置、常见交互方式

二、Hive深入使用

1)Hive中的内部表、外部表、分区表
2)Hive 数据迁移
3)Hive常见查询(select、where、distinct、join、group by)
4)Hive 内置函数和UDF编程

三、Hive高级进阶

1)Hive数据的存储和压缩
2)Hive常见优化(数据倾斜、压缩等)

四、实际案例分析

1)依据业务设计表
2)数据清洗、导入(ETL) 
3)使用HiveQL,统计常见的网站指标


附件下载

相关资源

  • 医院药品及收费系统

    医博士HIS是一个面向中型医院应用的完整的通用系统,它覆盖了医院主要管理职能和病人在医院就诊的各主要环节,将医院的管理思想、各部门的业务流程与最新计算机技术完美统一,是实现数字化医院建设的全面解决方案。

    2017/11/28 19:31:19
  • 区域公共卫生信息系统

    区域公共卫生信息系统以数据采集与交换等技术为手段,以卫生资源管理和卫生服务管理为主线,融合各业务系统的关联与使用,实现区域内卫生资源的共享和不同部门之间的信息交换。

    2015/4/18 23:57:36
  • 缩略图插件

    为一堆不同尺寸的图片创建相同尺寸的缩略图可不是件容易的事,除非有一个强大的后台程序或靠谱的软件,如果都没有或不想使用后台程序,那么可以试试 jQThumb。jQThumb 是一款基于 jQuery 的缩略图插件,它能够很方便的制作指定的尺寸的缩略图。jQThumb 兼容所有浏览器,包…

    2015/4/18 23:37:55
  • 制作积分抽奖效果

    一个类似机锋网积分抽奖的效果。其实这个效果和之前的“百度红包大放送抽奖效果”是一样的,使用了 jQuery 旋转插件——jquery.rotate.js,只是转盘不一样罢了。

    2015/4/18 23:24:54