hive元数据研究

hive的元数据存放在关系型数据库中，元数据中存储了hive中所有表格的信息，包括表格的名字，表格的字段，字段的类型，注释。这些信息分散的存放在各个表中，给定一个hive中的表格名字，查询这个表中含有的所有字段，使用如下的SQL语句：

mysql> select COLUMNS_V2.* from COLUMNS_V2,SDS, TBLS where COLUMNS_V2.CD_ID = SDS.CD_ID and SDS.SD_ID = TBLS.SD_ID and TBLS.TBL_NAME='dwd_medical_hospital_dd';
+-------+--------------------------------------+-------------+-----------+-------------+
| CD_ID | COMMENT                              | COLUMN_NAME | TYPE_NAME | INTEGER_IDX |
+-------+--------------------------------------+-------------+-----------+-------------+
|   603 | 地址                                 | address     | string    |           2 |
|   603 | 医院类型                             | clean_type  | string    |          14 |
|   603 | 采集时间                             | create_time | string    |          10 |
|   603 | 所在大区                             | extend_area | string    |          13 |
|   603 | 所在城市                             | extend_city | string    |          11 |
|   603 | 所在省份                             | extend_prov | string    |          12 |
|   603 | 路线                                 | howtogo     | string    |           3 |
|   603 | 主键ID/在其它表中表示为外键：hosp_id | id          | string    |           0 |
|   603 | 医院等级                             | level       | string    |           4 |
|   603 | 医院名字                             | name        | string    |           1 |
|   603 | 简介                                 | profiles    | string    |           7 |
|   603 | 区域ID/城市ID                        | prov_id     | string    |           5 |
|   603 | 资源配置量                           | resouce     | string    |           8 |
|   603 | 电话                                 | telephone   | string    |           6 |
|   603 | 采集URL                              | url         | string    |           9 |
|   583 | 地址                                 | address     | string    |           2 |
|   583 | 医院类型                             | clean_type  | string    |          14 |
|   583 | 采集时间                             | create_time | string    |          10 |
|   583 | 所在大区                             | extend_area | string    |          13 |
|   583 | 所在城市                             | extend_city | string    |          11 |
|   583 | 所在省份                             | extend_prov | string    |          12 |
|   583 | 路线                                 | howtogo     | string    |           3 |
|   583 | 主键ID/在其它表中表示为外键：hosp_id | id          | string    |           0 |
|   583 | 医院等级                             | level       | string    |           4 |
|   583 | 医院名字                             | name        | string    |           1 |
|   583 | 简介                                 | profiles    | string    |           7 |
|   583 | 区域ID/城市ID                        | prov_id     | string    |           5 |
|   583 | 资源配置量                           | resouce     | string    |           8 |
|   583 | 电话                                 | telephone   | string    |           6 |
|   583 | 采集URL                              | url         | string    |           9 |
+-------+--------------------------------------+-------------+-----------+-------------+
30 rows in set

mysql> select COLUMNS_V2.* from COLUMNS_V2,SDS, TBLS where COLUMNS_V2.CD_ID = SDS.CD_ID and SDS.SD_ID = TBLS.SD_ID and TBLS.TBL_NAME='dws_info_doctor_dd';
+-------+----------+----------------+-----------+-------------+
| CD_ID | COMMENT  | COLUMN_NAME    | TYPE_NAME | INTEGER_IDX |
+-------+----------+----------------+-----------+-------------+
|   673 | 年龄     | age            | string    |           3 |
|   673 | 科室ID   | department_id  | string    |          10 |
|   673 | 从诊年限 | diagnosis_time | string    |           6 |
|   673 | 履历     | experience     | string    |           8 |
|   673 | 擅长疾病 | good           | string    |           5 |
|   673 | NULL     | hosp_id        | string    |          11 |
|   673 | 主键ID   | id             | string    |           0 |
|   673 | 医生名称 | name           | string    |           1 |
|   673 | 门诊量   | outpatient_num | string    |           7 |
|   673 | 医生职称 | position       | string    |           2 |
|   673 | 评分     | score          | string    |           9 |
|   673 | 性别     | sex            | string    |           4 |
|   758 | 年龄     | age            | string    |           3 |
|   758 | 科室ID   | department_id  | string    |          10 |
|   758 | 从诊年限 | diagnosis_time | string    |           6 |
|   758 | 履历     | experience     | string    |           8 |
|   758 | 擅长疾病 | good           | string    |           5 |
|   758 | NULL     | hosp_id        | string    |          11 |
|   758 | 主键ID   | id             | string    |           0 |
|   758 | 医生名称 | name           | string    |           1 |
|   758 | 门诊量   | outpatient_num | string    |           7 |
|   758 | 医生职称 | position       | string    |           2 |
|   758 | 评分     | score          | string    |           9 |
|   758 | 性别     | sex            | string    |           4 |
|   732 | 年龄     | age            | string    |           3 |
|   732 | 科室ID   | department_id  | string    |          10 |
|   732 | 从诊年限 | diagnosis_time | string    |           6 |
|   732 | 履历     | experience     | string    |           8 |
|   732 | 擅长疾病 | good           | string    |           5 |
|   732 | 主键ID   | id             | string    |           0 |
|   732 | 医生名称 | name           | string    |           1 |
|   732 | 门诊量   | outpatient_num | string    |           7 |
|   732 | 医生职称 | position       | string    |           2 |
|   732 | 评分     | score          | string    |           9 |
|   732 | 性别     | sex            | string    |           4 |
+-------+----------+----------------+-----------+-------------+
35 rows in set

hive元数据中相关的表格关系如下：