Hive日志-低调大师

Hive日志

2017-11-26 638

日志记录了程序运行的过程，是一种查找问题的利器。

Hive中的日志分为两种
1. 系统日志，记录了hive的运行情况，错误状况。
2. Job 日志，记录了Hive 中job的执行的历史过程。

系统日志存储在什么地方呢？
在hive/conf/ hive-log4j.properties 文件中记录了Hive日志的存储情况，
默认的存储情况：

hive.root.logger=WARN,DRFA
hive.log.dir=/tmp/${user.name} # 默认的存储位置
hive.log.file=hive.log # 默认的文件名

Job日志又存储在什么地方呢？

//Location of Hive run time structured log file
HIVEHISTORYFILELOC("hive.querylog.location", "/tmp/" + System.getProperty("user.name")),

默认存储与 /tmp/{user.name}目录下。

本文转自 SimplePoint 51CTO博客，原文链接：http://blog.51cto.com/2226894115/1898273，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/501858

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

hbase 安装配置

hbase 安装我这里用的是 CentOS-6.5-x86_64 的linux系统； hbase 用的是 hbase-0.99.2-bin.tar.gz 版本；用的 vm虚拟机和 CRT 终端软件。我这里预先安装了， hadoop-2.6.4，jdk1.7.0_45，zookeeper 等环境，如果没有安装，请自行安装。我这里用的 3 台虚拟机，mini1,mini2,mini3 ，电脑不给力，3台凑合玩。如果，配置好的话，7台虚拟机，效果最佳，配置ha，最好效果的模拟真实环境。 ha 环境配置请参考Hadoop 12节点集群搭建 mini1 是主从兼备，mini2,mini3 是从机器。安装步骤： 1) 上传首先确保用户是hadoop，用工具将hbase安装包hbase-0.99.2-bin.tar.gz上传到/home/hadoop下。 2) 解压 # 确认是 Hadoop 用户，找到上传的 hbase 安装包 # 解压的软件安装目录，我的个人习惯是放在 apps下 $ tar –zxvf hbase-0.99.2-bin.tar.gz -C /ho...

2017-11-27

509

来源： http://michael-roshen.iteye.com/blog/2115268 例子： INSERT OVERWRITE TABLE prices_collected_${hiveconf:wid_version} select pc.collect_id as product_id , regexp_extract(pc.price,'(\\d*\\.?\\d+)',1) as price , pc.region, '' as location_area_code, '' as city_code, from_unixtime(unix_timestamp() , 'yyyy-MM-dd hh:mm:ss') as created_at, from_unixtime(unix_timestamp() , 'yyyy-MM-dd hh:mm:ss') as updated_at from products_compared_${hiveconf:wid_version} as pc 1.根据hive执行的参数来动态的设置表名称prices_collected_${...

2017-11-27

571

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Hive日志

hbase 安装配置

hive 使用技巧笔记

相关文章

发表评论

资源下载

优质分享App

Mario

Spring

Rocky Linux

欢迎您来访！