当前位置：学术参考网 > hive数据仓库论文
2.2传统数据仓库17-202.3Hive数据仓库20-262.4Sqoop26-282.5数据ETL28-292.6本章小结29-303基于Hive的物流数据仓库分析与设计30-423.1需求整理30-343.1.1功能性需求30-333.1.2非功能性需求33-343.2系统设计34-363.2.1总体架构
基于Hive的物流数据仓库研究与实现.【摘要】：近年来,随着大数据技术的发展和应用,Hadoop已经得到学术界和工业界的广泛认可。.Hive作为构建于Hadoop集群之上的开源数据仓库应用,具备模式自由、高可扩展性和高容错性的特点,能够很好地满足企业级数据仓库的...
关键词：Hive；数据仓库；水利普查；模型优化；大规模数据处理中图分类号：TP311．13文献标识码：Adoi：10．3969／j．issn．1006－2475．2014．05．0
基于Hive的大数据在线分析处理.摘要:摘要：随着传统行业与互联网的快速匹配，企业面对大量堆积的业务数据和用户数据而无从下手，用户的查询需求也越来越复杂且涉及跨库、跨表的大数据量综合分析查询，传统关系型数据库的方式已无法满足企业大数据...
Hive是基于Hadoop的数据仓库工具，可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理，提供了类似于SQL语言的查询语言–HiveQL，可通过HQL语句实现简单的MR统计，Hive将HQL语句转换成MR任务进行…
Hive优化总结hive建表设计层面1.使用分区表优化分区表是在某一个或者几个维度上对数据进行分类存储，一个分区对应一个目录。如果筛选条件里有分区字段，那么Hive只需要遍历对应分区目录下的文件即可，不需要遍历全局数据，使得处理的数据量大大减少，从而提高查询效率。
Hive日志分析的大数据存储优化探讨.摘要：由于近些年我国信息化水平的提升，数据为我们工作与生活带来了不可估量的机制，怎样快速地转化大数据为可用信息，可以说是现阶段研究的重要课题。.该研究基于Hive磁盘利用率与数据仓库查询性能的优化方式...
基于Hive数据仓库的用户行为模型研究.潘家腾.【摘要】：随着信息技术的进步,人们在互联网上的信息交互变得越来越普遍,通过服务器的日志反馈机制,已经能很方便记录下用户的行为轨迹,在交互过程中产生的海量数据中,蕴含了非常多有价值的信息。.面对快速...
Hive是基于Hadoop的一个数据仓库工具，可以将结构化数据文件映射成一张表，并提供类似SQL的查询功能。Hive相当于一个客户端。Hive框架的作用：（1）可以让不懂java的数据分析人员使用hadoop进行数据分析；（2）MapReduce开发非常繁琐复杂，使用
基于Hive数据仓库的物流大数据平台的研究与设计.【摘要】：针对物流企业数据仓库扩展性不好、运行自动化程度不高、处理大规模数据效果较差等问题。.本文通过对Hive技术的物流数据仓库进行分析,提出物流数据仓库的具体实现方案,该数据仓库结合云平台...
无法有效处理不同类型的数据计算和处理能力不足2Hive简介真是因为传统数据仓库无法更好满足企业应用需求,基于Hadoop平台的数据仓库产品Hive很自然的就填补空白。依赖分布式文件...
Hive数据仓库一、数据仓库基础1、概念2、特点效率足够高数据质量扩展性3、数据模型二、Hive数据仓库1、概念2、优点3、缺点4、Hive体系结构及执行流程4.1、Hive...
搭建了基于虚拟化技术的大数据处理平台,同时,基于此平台,从数据ETL和数据查询分析处理两方面实现了基于Hive的物流数据仓库,包括数据仓库的可扩展性研究、自动化多线程ETL脚本...
hive配置和功能测试hadoop-0.19.1tbdata.org/archives/266分布式计算开源框架Hadoop介绍infoq/cn/articles/hadoop-intro暴风影音在线研发部-平台研...
从数据仓库系统对比看Hive发展前景_信息与通信_工程科技_专业资料。大数据时代的信息,使得分布式/并行处理变得如此重要。无论是传统行业,还是新兴行业(特别...
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–HiveQL,可通过HQL语句实现简单的MR统计,Hive将...
Hive概述Hive是Hadoop上的数据仓库工具,处理的是结构化数据。注意:定位是数据仓库,所以适用于实时性要求不高的场合。Facebook设计Hive时针对的业务场景就是处...
数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用。按照数据流入流出的过程，数据仓库架构可分为三层——源数据、数...
如果超过百亿级别数据量，那么一般选择离线数仓，如使用Hive或Spark等（SparkSQL3.0看起来性能提升很明显...
MeteCloud平台下基于Hive的气象数据仓库构建的研究测试结果研究背景现状气象行业需求:气象行业是一个资源极其丰富、数据极其庞大的行业。随着气象事业现代...