Hive 安装
hive 的下载地址为:
https://archive.apache.org/dist/hive/
2025年08月04日
hive 的下载地址为:
https://archive.apache.org/dist/hive/
2025年08月04日
嵌入模式下,元数据保存在Derby数据库中,且只允许一个会话连接,若尝试多个会话连接时会报错。下面讲解Hive安装之嵌入模式的配置步骤。
下载Hive安装包
首先在Apache镜像网站下载Linux下的Hive安装包(本次教材使用1.2.1版本),下载完毕后,将安装包
apache-hive-1.2.1-bin.tar.gz上传至Linux系统中(本次操作在hadoop01节点上进行演示说明)的/export/software文件夹下,将压缩包解压至/export/servers文件夹下,命令如下:
2025年08月04日
hive版本hive-1.1.2
同事反馈一个客户端使用op无法正常插入数据,SQL如下
hive --hiveconf mapreduce.job.queuename=root.normal_queues.backstage.yfzx.op --hiveconf mapreduce.job.name="client_10.142.97.123:3000420211211:hql##pdwd.pdwd_pf_test2:1:dwarch:20210908_1:xiaoli" -e "insert overwrite table pdwd.pdwd_pf_test2 PARTITION (pt = '20211211')
select path from yfzx.hdfs_fsimage_analyze where dt = '20211212' and ns in ('ns3');"
2025年08月04日
作者:谢敏灵,Cloudera资深解决方案架构师
数据质量平台基于定义好的数据稽核和数据质量规则,生成Spark SQL并提交运行到HDP 3.1.5集群的Spark 2.3.2上。Spark 通过以下方式之一获取某Hadoop集群上Hive表的数据:
2025年08月04日
Hive的运行是基于Hadoop集群上的,所以Hive的安装优先得先搭建好Hadoop集群,可以参考:
hadoop 详细安装步骤:
https://www.oraclejsq.com/hdpjc/060102558.html
2025年08月04日
本系列几章系统地介绍了开发中Hive常见的用户配置属性(有时称为参数,变量或选项),并说明了哪些版本引入了哪些属性,常见有哪些属性的使用,哪些属性可以进行Hive调优,以及如何使用的问题。以及日常Hive开发中如何进行性能调优。
2025年08月04日
Hive 1.2.1000.2.6.5.0-292
交付项目上基本所有的脚本任务,都是使用hive脚本的方式生成数据,但是dolphinscheduler的数据质量sql,是基于sparksql构建的
2025年08月04日
今天有同事问我,我也蒙了一下,他问我们一直说控制图的管制线是均值μ±3σ,但实际中计算管制线时却是按照μ±A2·R(μ、R是均值)来计算的,为什么?有什么差异?
没人问也就算了,平时都随口说正负三个标注差,实际却一直用A2系数计算,习惯了也没感觉有问题了,被人问了,脑子一下好像短路了,只能回过头来好好学习一下,避免下次再出丑。
2025年08月04日
“大半夜的,吓死我了。”1月15日,上海一名男子夜间驾车出行,中控屏突然显示有人在后方追车,但检查后发现车后并没有人。
当事人告诉记者,事发13日当晚下着雨,他开车回家无意间看到中控屏显示车后有人在奔跑追车,吓了一跳,“当时车的时速最快达到60多公里,人不可能跑那么快。”不少网友看了新闻,也同样感到害怕!
针对此事,理想汽车作出以下回应:
近日,一条“理想车主夜间驾车中控显示有人追车”的视频受到了大家的广泛关注,这既不是灵异事件,也不是误入了高维空间翘曲碎片,而是理想L8 Pro(AD Pro平台4.2版本)视觉感知算法的BUG,有一定概率在雨天夜间的环境,后视相机被水滴所干扰。