Posted inhadoop hbase 大数据 Base框架结构 HBase是Hadoop数据库,是一个分布式,可伸缩,面向列,高性能,高可靠性,实时读写,大数据存储区的分布式NOSQL数据库,HBase能够满足随机、实时读/写访问大数据。它是一个非关系型数据库。HBase是在Hadoop和HDFS之上提供了类似BigTable的功能。 Posted by 专注着 10 3 月, 2025No Comments Posted inhadoop hbase 大数据 HBase基本操作有哪些?一起来看看吧 HBase安装完成后,就需要对HBase的基本操作有一些了解,主要了解数据的存储,数据的读取,数据的删除等,这些操作能够很好的帮助我们认识HBase。同时本文也介绍了HBase的一些数据存储结构,帮助我们深如的了解和学习HBase Posted by 专注着 6 3 月, 2025No Comments Posted inhadoop hbase 大数据 HBase分布式安装 HBase是在Hadoop体系下很重要的组件,该组装能够对数据存储,数据检索提供比较强劲的性能支持。这篇文章主要介绍了HBase如何进行分布式安装,以及和Hadoop之间的版本依赖,能够帮助我们快速的搭建起Hbase开发环境 Posted by 专注着 1 3 月, 2025No Comments Posted inhadoop hive 大数据 Hive中如何为hiveserver2配置授权? Hive在外部客户端链接时,通常会使用hiveserver2进行配置,为了访问的安全,则需要对hiveserver2进行访问控制,hiveserver2提供了多种授权的方式以供使用,我们可以从中选择一种方式满足需求即可 Posted by 专注着 23 2 月, 2025No Comments Posted inhadoop hive 大数据 Hive基础知识详解 Hive提供了多种操作数据的方式,但是一些操作比较耗费时间,性能较低,不能满足在写入数据时的性能要求,这篇文章主要介绍Hive的常规操作方式,以及在插入数据时如何能够快速将数据插入到Hive表中,提高写入数据的性能。 Posted by 专注着 14 1 月, 2025No Comments Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hbase 大数据 HBase基本操作有哪些?一起来看看吧 HBase安装完成后,就需要对HBase的基本操作有一些了解,主要了解数据的存储,数据的读取,数据的删除等,这些操作能够很好的帮助我们认识HBase。同时本文也介绍了HBase的一些数据存储结构,帮助我们深如的了解和学习HBase Posted by 专注着 6 3 月, 2025No Comments Posted inhadoop hbase 大数据 HBase分布式安装 HBase是在Hadoop体系下很重要的组件,该组装能够对数据存储,数据检索提供比较强劲的性能支持。这篇文章主要介绍了HBase如何进行分布式安装,以及和Hadoop之间的版本依赖,能够帮助我们快速的搭建起Hbase开发环境 Posted by 专注着 1 3 月, 2025No Comments Posted inhadoop hive 大数据 Hive中如何为hiveserver2配置授权? Hive在外部客户端链接时,通常会使用hiveserver2进行配置,为了访问的安全,则需要对hiveserver2进行访问控制,hiveserver2提供了多种授权的方式以供使用,我们可以从中选择一种方式满足需求即可 Posted by 专注着 23 2 月, 2025No Comments Posted inhadoop hive 大数据 Hive基础知识详解 Hive提供了多种操作数据的方式,但是一些操作比较耗费时间,性能较低,不能满足在写入数据时的性能要求,这篇文章主要介绍Hive的常规操作方式,以及在插入数据时如何能够快速将数据插入到Hive表中,提高写入数据的性能。 Posted by 专注着 14 1 月, 2025No Comments Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hbase 大数据 HBase分布式安装 HBase是在Hadoop体系下很重要的组件,该组装能够对数据存储,数据检索提供比较强劲的性能支持。这篇文章主要介绍了HBase如何进行分布式安装,以及和Hadoop之间的版本依赖,能够帮助我们快速的搭建起Hbase开发环境 Posted by 专注着 1 3 月, 2025No Comments Posted inhadoop hive 大数据 Hive中如何为hiveserver2配置授权? Hive在外部客户端链接时,通常会使用hiveserver2进行配置,为了访问的安全,则需要对hiveserver2进行访问控制,hiveserver2提供了多种授权的方式以供使用,我们可以从中选择一种方式满足需求即可 Posted by 专注着 23 2 月, 2025No Comments Posted inhadoop hive 大数据 Hive基础知识详解 Hive提供了多种操作数据的方式,但是一些操作比较耗费时间,性能较低,不能满足在写入数据时的性能要求,这篇文章主要介绍Hive的常规操作方式,以及在插入数据时如何能够快速将数据插入到Hive表中,提高写入数据的性能。 Posted by 专注着 14 1 月, 2025No Comments Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hive 大数据 Hive中如何为hiveserver2配置授权? Hive在外部客户端链接时,通常会使用hiveserver2进行配置,为了访问的安全,则需要对hiveserver2进行访问控制,hiveserver2提供了多种授权的方式以供使用,我们可以从中选择一种方式满足需求即可 Posted by 专注着 23 2 月, 2025No Comments Posted inhadoop hive 大数据 Hive基础知识详解 Hive提供了多种操作数据的方式,但是一些操作比较耗费时间,性能较低,不能满足在写入数据时的性能要求,这篇文章主要介绍Hive的常规操作方式,以及在插入数据时如何能够快速将数据插入到Hive表中,提高写入数据的性能。 Posted by 专注着 14 1 月, 2025No Comments Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hive 大数据 Hive基础知识详解 Hive提供了多种操作数据的方式,但是一些操作比较耗费时间,性能较低,不能满足在写入数据时的性能要求,这篇文章主要介绍Hive的常规操作方式,以及在插入数据时如何能够快速将数据插入到Hive表中,提高写入数据的性能。 Posted by 专注着 14 1 月, 2025No Comments Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hive 大数据 Hive为Hiveserver2客户端授权 hiveserver2为hive提供了远程客户端链接的方式,但是在配置hiveserver2的时候,需要使用用户信息帮助对用户操作进行授权,这篇文章就是说明在hive中如何创建用户并为用户授权,帮助在hive使用过程中进行权限控制,保证数据安全 Posted by 专注着 10 1 月, 2025No Comments
Posted inhadoop hive 大数据 Hive SQL 这篇文章主要介绍了HIVE中的SQL使用方法,已经Hive提供了一些基础的函数方便查询,同时介绍了每个函数的意义以及使用方式,方便后期使用的时候查询 Posted by 专注着 23 12 月, 2024Tags: function, hive, sql
Posted inhadoop hive 大数据 Hive创建自定义函数 在Hive查询数据的时候,有些时候hive提供的函数并不能满足查询和统计的需求,就需要开发函数。在Hive中提供了三种方式实现自定义,分别是UDF、UDAF和UDTF三种方式,这三种方式基本上满足了对单行数据处理, 统计和其他的一些需求。 Posted by 专注着 18 12 月, 2024Tags: hive, udaf, udf
Posted indjango Python 如何单独使用django orm框架 最近在学习python语言,然后自己用python写一些小的程序,然后从各个网站爬取一些数据,并把这些数据存放在mysql数据库中,然后又不想自己写sql, 因此了解到django中有orm的模块,但是django又必须在web项目中使用,但是我又不想运行web项目,因此考虑将orm框架提出来,单独能够操作数据库使用。 Posted by 专注着 15 12 月, 2024Tags: django, orm, python
Posted inhadoop hive 大数据 Hive中hiveserver2和客户端配置 在安装完成hive metastore服务后,我们需要通过代码或者工具类访问hive并操作hive, 在hive中提供了hiveserver2的服务方便开发通过外部的方式访问hive, 这片文章就主要介绍配置hiveserver2并能够通过外部访问hive. Posted by 专注着 12 12 月, 2024Tags: hive, hiveserver2
Posted inhadoop hive 大数据 Hive三种安装方式区别和搭建 hive一共有三种运行方式,分别是derby的内存数据库,远程存储,和远程服务器,这三种方式都有各自的使用场景,这篇文件介绍了hive在这三种模式下如何配置,如何执行,已经通过什么样的方式访问hive, 在文中都有很详细的介绍。 Posted by 专注着 11 12 月, 2024Tags: hive, metastore
Posted inhadoop hive 大数据 hive与关系型数据库的比较 本篇文章介绍了hive的基本架构,已经每个组成部分,帮助理解hive的数据存储方式,在内部是由哪些基本的组件构成,可以帮助更好的理解hive. Posted by 专注着 11 12 月, 2024Tags: hive
Posted inhadoop yarn 大数据 yarn集群配置 yarn作为hadoop中比较重要的组件,主要负责节点的管理,资源的申请和应用管理,是非常重要的,因此在这篇文章主要介绍了yarn高级群如何部署,如何在执行mapreduce任务的时候使用yarn进行调度,希望可以帮助到大家 Posted by 专注着 6 12 月, 2024Tags: ha, mapreduce, yarn
Posted inhadoop yarn 大数据 yarn架构:资源管理和任务调度 该篇文章介绍了yarn的架构以及资源管理,节点管理,任务调度相关的基础概念,并通过流程图的方式介绍了yarn任务的调度流程已经关键的配置信息,帮助更好的了解yarn的工作原理和实现价值,能够帮助我们更好使用yarn对hadoop mr任务的管理和实现。 Posted by 专注着 6 12 月, 2024Tags: nodemanager, resourcenamager, yarn
Posted inhadoop 大数据 Hadoop HA集群搭建 本文主要记录了hadoop的高可用安装教程,主要是针对NameNode的高可用,其中主要使用了Zookeeper,JournalNode等配置,可以理解为是在之前DataNode主从复制上的一个扩展安装,保证了整个集群的高可用 Posted by 专注着 28 11 月, 2024Tags: ha, hadoop
Posted inhadoop 大数据 hadoop安装 hadoop支持伪分布式部署和集群的部署方法,这篇文章主要记录了dfs的集群配置方法,记录在配置过程中遇到的问题并解决问题,其中包含了dns解析问题,端口问题,防火墙问题等。希望可以帮助到又需要的同学。 Posted by 专注着 27 11 月, 2024Tags: cluster, hadoop