导语
在大数据环境中,误删除(drop)了 hive 表后如何恢复表数据呢?通过本文步骤可以快速恢复。
2025年08月31日
摘要: 数据建模工具-PDManer使用技巧-贴源层
关键词: 数据建模 数据治理 数据模型 数据字典 数据血缘
在数据治理过程中,我们经常和数据模型打交道,这时候我们就需要一个好的工具,来完成建模这个过程,PDManer就是本文的主角。
2025年08月31日
好程序员大数据培训分享Hive的静态分区与动态分区:分区是hive存放数据的一种方式。将列值作为目录来存放数据,就是一个分区。这样查询时使用分区列进行过滤,只需根据列值直接扫描对应目录下的数据,不扫描其他不关心的分区,快速定位,提高查询效率。分动态和静态分区两种:
1. 静态分区:若分区的值是确定的,那么称为静态分区。新增分区或者是加载分区数据时,已经指定分区名。
create table if not exists day_part1(
uid int,
2025年08月31日
本文为《大数据分析师入门课程》系列的第9篇,在本系列的第8篇-Spark基础中,已经对Spark做了一个入门介绍,在此基础上本篇拎出Spark SQL,主要站在使用者的角度来进行讲解,需要注意的是本文中的例子的代码均使用Scala语言。
2025年08月31日
这个标题也是用血的教训换来的,希望对刚进入hive圈的童鞋和正在hive圈爬坑的童鞋有所帮助。打算分以下几个部分去描述:
2025年08月31日
Hive是基于Hadoop的一个数据仓库(Data Aarehouse,简称数仓、DW),可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。是用于存储、分析、报告的数据系统。