博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
初识Hive---大数据分析学习笔记7
阅读量:3904 次
发布时间:2019-05-23

本文共 578 字,大约阅读时间需要 1 分钟。

Hive数据仓库

一,数据仓库和传统关系型数据库的区别与联系:

(1)
数据库(database):传统的关系型数据库的主要应用(OLTP),主要是基本的、日常的事务处理,例如银行交易。
数据仓库(data warehouse):数据仓库系统的主要应用主要是OLAP(On-Line Analytical Processing),支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果。
(2)
数据库通常追求交易的速度,交易完整性,数据的一致性,在数据库模型上主要遵从范式模型(1NF,2NF,3NF,等等),从而尽可能减少数据冗余,保证引用完整性;
数据仓库强调数据分析的效率,复杂查询的速度,数据之间的相关性分析,所以在数据库模型上,数据仓库喜欢使用多维模型,从而提高数据分析的效率。
(3)
数据库一般存储在线交易数据,数据仓库存储的一般是历史数据
(4)
数据库是“写时模式”,在传统数据库里,表的模式是在数据加载时强制确定的。如果在加载时发现数据不符合模式,则被拒绝加载数据
数据仓库是“读时模式”
二,Hive的特点
1.面向主题
2.集成
3.数据不可修改
4.相对稳定,反应数据历史变化
5.它可以把元数据保存在MySQL、Oracle或者Derby这些具体的数据库“技术”里;它在进行查询时把SQL转化成MapReduce job
23

转载地址:http://mrqen.baihongyu.com/

你可能感兴趣的文章
451. 根据字符出现频率排序
查看>>
部门年度工作总结的内容
查看>>
pandas学习笔记
查看>>
Numpy笔记
查看>>
正则表达式
查看>>
python线程进程笔记
查看>>
TensorFlow初学者必须了解的55个经典案例
查看>>
机器学习笔记
查看>>
数十种TensorFlow实现案例汇集:代码+笔记
查看>>
python记录的错误与知识
查看>>
内核中各种套接字的关系
查看>>
linux sysctl 参数实现 暨 ip_forward参数对Linux内核转发影响分析
查看>>
linux 路由表 的一些相关资料
查看>>
Linux 路由 学习笔记 之三 路由查找流程分析
查看>>
LINUX IP 路由实现
查看>>
快速重传与快速恢复算法
查看>>
TCP重传定时器
查看>>
CentOS 6.3 - 安装 Nginx 1.2.7(yum源)
查看>>
shell中trap捕获信号
查看>>
关于Linux Shell的信号trap功能你必须知道的细节
查看>>