当前位置:首页>开发>正文

Hadoop与数据仓库是什么关系 hadoop什么用来搭建数据仓库

2023-05-30 13:10:11 互联网 未知 开发

 Hadoop与数据仓库是什么关系 hadoop什么用来搭建数据仓库

Hadoop与数据仓库是什么关系

hadoop是一个开源的大数据分析软件,或者说编程模式。它是通过分布式的方式处理大数据的,因为开元的原因现在很多的企业或多或少的在运用hadoop的技术来解决一些大数据的问题,在数据仓库方面hadoop是非常强大的。但在数据集市以及实时的分析展现层面,hadoop也有着明显的不足,现在一个比较好的解决方案是架设hadoop的数据仓库而数据集市以及实时分析展现层面使用永洪科技的大数据产品,能够很好地解决hadoop的分时间长以及其他的问题。

hadoop什么用来搭建数据仓库

数据仓库是为了管理数据,主要是思想。 具体实施的工具就是为了解决问题而选取了 比如异构/不同源数据的数据抽取问题,要用到etl,可能会用工具 或者自己写程序,看情况而定‘ 数据仓库的模型建设,要用到erwin等建模工具

hadoop 数据分析---hive数据仓库

用命令行吧。hive查询语句和SQL非常类似,如果你能用SQL统计出想要结果,用HIVE也肯定没问题。如果hive查询结果集很大,你也可以把结果集直接写进HDFS。
hive底层就是MapReduce算法,用Java写的话代码量肯定很大,而且逻辑也要复杂点