hive数据表结构导出到文件

hyalone2010

于 2014-07-09 10:52:39 发布

阅读量5.2k

点赞数

CC 4.0 BY-SA版权

分类专栏： hive 文章标签： hive

本文链接：https://blog.csdn.net/hyalone2010/article/details/37593961

hive 专栏收录该内容

4 篇文章

订阅专栏

本文介绍了如何使用Hive的desc命令将数据表的字段信息详细导出到文件，以便进一步进行外部的数据处理和分析工作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

通过hive的desc命令把数据表字段写到文件中，方便外部数据处理。

#!/bin/bash
    
set -o nounset
    
if [[ $# -eq 0 ]]; then
    echo need at least 1 paramter for hive table name
    exit 1
fi      
    
HIVE_HOME=${HIVE_HOME:-/sysdir/hive-0.11}
    
tablename="$1"
tabledef="stdin : "
seperator=""
${HIVE_HOME}/bin/hive -e "desc ${tablename}" | awk '{print $1}' > gentabledeftemp.txt 
while read fieldline
do
    tabledef="${tabledef}""${seperator}""${fieldline}"
    seperator=","
    #echo "${tabledef}"
done < gentabledeftemp.txt
echo "${tabledef}"

while [[ $# -gt 0 ]]
do
    tablename="$1"
    tabledef="${tablename} : "
    seperator=""
    ${HIVE_HOME}/bin/hive -e "desc ${tablename}" | awk '{print $1}' > gentabledeftemp.txt
    while read fieldline
    do
        tabledef="${tabledef}""${seperator}""${fieldline}"
        seperator=","
        #echo "${tabledef}"
    done < gentabledeftemp.txt
    echo "${tabledef}"
    shift
done

rm gentabledeftemp.txt