大数据归档 - 专注着的博客

Hive提供了多种操作数据的方式，但是一些操作比较耗费时间，性能较低，不能满足在写入数据时的性能要求，这篇文章主要介绍Hive的常规操作方式，以及在插入数据时如何能够快速将数据插入到Hive表中，提高写入数据的性能。

专注着 14 1 月, 2025hive

hiveserver2为hive提供了远程客户端链接的方式，但是在配置hiveserver2的时候，需要使用用户信息帮助对用户操作进行授权，这篇文章就是说明在hive中如何创建用户并为用户授权，帮助在hive使用过程中进行权限控制，保证数据安全

专注着 10 1 月, 2025hive, hiveserver2

- Lateral View 用于和UDTF函数(explode, split)结合来使用 - 首先通过UDTF函数拆分成多行，再将多行结果组合成一个支持别名的虚拟表 - 主要解决在select使用UDTF做查询的过程中，查询只能包含单个UDTF，

专注着 6 1 月, 2025hive, 索引, 视图

Hadoop中存在很多的名词，包括各个节点名称，每个节点的用处在这篇文章中都是有介绍了，同时也介绍了Hadoop的数据存储结果，数据存储涉及到的文件，每个文件中存储的内容，在本文章都有比较详细的介绍，同时也介绍了在分布式集群中每个节点的作用。

专注着 5 1 月, 2025hadoop

在Hadoop中时常需要MapRed任务对已有的文件进行处理，Hadoop定义了MapReduce任务的执行过程，包括了读取文件，文件的Splits， Map任务，Partitioner分区，Sorter排序，Reudcer任务来完成目的，这一篇文章说明了MapReduce任务执行流程

专注着 2 1 月, 2025mapreduce

这篇文章主要介绍了HIVE中的SQL使用方法，已经Hive提供了一些基础的函数方便查询，同时介绍了每个函数的意义以及使用方式，方便后期使用的时候查询

专注着 23 12 月, 2024function, hive, sql

在Hive查询数据的时候，有些时候hive提供的函数并不能满足查询和统计的需求，就需要开发函数。在Hive中提供了三种方式实现自定义，分别是UDF、UDAF和UDTF三种方式，这三种方式基本上满足了对单行数据处理, 统计和其他的一些需求。

专注着 18 12 月, 2024hive, udaf, udf

在安装完成hive metastore服务后，我们需要通过代码或者工具类访问hive并操作hive, 在hive中提供了hiveserver2的服务方便开发通过外部的方式访问hive, 这片文章就主要介绍配置hiveserver2并能够通过外部访问hive.

专注着 12 12 月, 2024hive, hiveserver2

hive一共有三种运行方式，分别是derby的内存数据库，远程存储，和远程服务器，这三种方式都有各自的使用场景，这篇文件介绍了hive在这三种模式下如何配置，如何执行，已经通过什么样的方式访问hive, 在文中都有很详细的介绍。

专注着 11 12 月, 2024hive, metastore

本篇文章介绍了hive的基本架构，已经每个组成部分，帮助理解hive的数据存储方式，在内部是由哪些基本的组件构成，可以帮助更好的理解hive.

专注着 11 12 月, 2024hive