Hive - 建立表



本章介紹如何建立表以及如何向表中插入資料。在 HIVE 中建立表的約定與使用 SQL 建立表非常相似。

建立表語句

Create Table 是用於在 Hive 中建立表的語句。語法和示例如下所示

語法

CREATE [TEMPORARY] [EXTERNAL] TABLE [IF NOT EXISTS] [db_name.] table_name

[(col_name data_type [COMMENT col_comment], ...)]
[COMMENT table_comment]
[ROW FORMAT row_format]
[STORED AS file_format]

示例

假設您需要使用 **CREATE TABLE** 語句建立一個名為 **employee** 的表。下表列出了 employee 表中的欄位及其資料型別

序號 欄位名稱 資料型別
1 Eid int
2 Name String
3 Salary Float
4 Designation string

以下資料是註釋,行格式化欄位,如欄位分隔符、行分隔符和儲存的檔案型別。

COMMENT ‘Employee details’
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED IN TEXT FILE

以下查詢使用上述資料建立一個名為 **employee** 的表。

hive> CREATE TABLE IF NOT EXISTS employee ( eid int, name String,
salary String, destination String)
COMMENT ‘Employee details’
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ‘\t’
LINES TERMINATED BY ‘\n’
STORED AS TEXTFILE;

如果您新增 IF NOT EXISTS 選項,則如果表已存在,Hive 會忽略該語句。

成功建立表後,您將看到以下響應

OK
Time taken: 5.905 seconds
hive>

JDBC 程式

JDBC 程式示例用於建立表。

import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;

public class HiveCreateTable {
   private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
   
   public static void main(String[] args) throws SQLException {
   
      // Register driver and create driver instance
      Class.forName(driverName);
      
      // get connection
      Connection con = DriverManager.getConnection("jdbc:hive://:10000/userdb", "", "");
      
      // create statement
      Statement stmt = con.createStatement();
      
      // execute statement
      stmt.executeQuery("CREATE TABLE IF NOT EXISTS "
         +" employee ( eid int, name String, "
         +" salary String, destignation String)"
         +" COMMENT ‘Employee details’"
         +" ROW FORMAT DELIMITED"
         +" FIELDS TERMINATED BY ‘\t’"
         +" LINES TERMINATED BY ‘\n’"
         +" STORED AS TEXTFILE;");
         
      System.out.println(“ Table employee created.”);
      con.close();
   }
}

將程式儲存在名為 HiveCreateDb.java 的檔案中。以下命令用於編譯和執行此程式。

$ javac HiveCreateDb.java
$ java HiveCreateDb

輸出

Table employee created.

載入資料語句

通常,在 SQL 中建立表後,我們可以使用 Insert 語句插入資料。但在 Hive 中,我們可以使用 LOAD DATA 語句插入資料。

在將資料插入 Hive 時,最好使用 LOAD DATA 儲存批次記錄。載入資料有兩種方法:一種是從本地檔案系統,另一種是從 Hadoop 檔案系統。

語法

載入資料的語法如下

LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename 
[PARTITION (partcol1=val1, partcol2=val2 ...)]
  • LOCAL 是用於指定本地路徑的識別符號。它是可選的。
  • OVERWRITE 是可選的,用於覆蓋表中的資料。
  • PARTITION 是可選的。

示例

我們將以下資料插入表中。它是一個名為 **sample.txt** 的文字檔案,位於 **/home/user** 目錄中。

1201  Gopal       45000    Technical manager
1202  Manisha     45000    Proof reader
1203  Masthanvali 40000    Technical writer
1204  Kiran       40000    Hr Admin
1205  Kranthi     30000    Op Admin

以下查詢將給定的文字載入到表中。

hive> LOAD DATA LOCAL INPATH '/home/user/sample.txt'
OVERWRITE INTO TABLE employee;

成功下載後,您將看到以下響應

OK
Time taken: 15.905 seconds
hive>

JDBC 程式

下面是將給定資料載入到表的 JDBC 程式。

import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;

public class HiveLoadData {

   private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";
   
   public static void main(String[] args) throws SQLException {
   
      // Register driver and create driver instance
      Class.forName(driverName);
      
      // get connection
      Connection con = DriverManager.getConnection("jdbc:hive://:10000/userdb", "", "");
      
      // create statement
      Statement stmt = con.createStatement();
      
      // execute statement
      stmt.executeQuery("LOAD DATA LOCAL INPATH '/home/user/sample.txt'" + "OVERWRITE INTO TABLE employee;");
      System.out.println("Load Data into employee successful");
      
      con.close();
   }
}

將程式儲存在名為 HiveLoadData.java 的檔案中。使用以下命令編譯和執行此程式。

$ javac HiveLoadData.java
$ java HiveLoadData

輸出

Load Data into employee successful
廣告

© . All rights reserved.