Hive中的分区

Hive中的分区是指根据特定列（如日期、课程、城市或国家）的值将表分成几个部分。分区的优点是由于数据存储在切片中，查询响应时间会更快。

众所周知，Hadoop用于处理大量数据，因此始终需要使用最佳方法来处理它。Hive中的分区是最好的例子。

假设我们有1000万名在某所学校学习的学生的数据。现在，我们必须获取特定课程的学生。如果我们使用传统方法，则必须浏览整个数据。这会导致性能下降。在这种情况下，我们可以采用更好的方法，即在Hive中进行分区，并根据特定列将数据划分为不同的数据集。

Hive中的分区可以通过两种方式执行 -

• 静态分区
• 动态分区

静态分区

在静态或手动分区中，需要在将数据加载到表中时手动传递分区列的值。因此，数据文件不包含分区列。

静态分区的示例

• 首先，选择我们要创建表的数据库。

• 使用以下命令创建表并提供分区列： -

• 让我们检索与该表关联的信息。

• 使用以下命令将数据加载到表中，并传递带有分区列的值： -

在这里，我们根据课程对学校的学生进行分区。

• 使用以下命令将另一个文件的数据加载到同一表中，并传递带有分区列的值： -

在以下屏幕截图中，我们可以看到学生表分为两类。

• 让我们使用以下命令检索整个表的数据： -

• 现在，尝试使用以下命令根据分区列检索数据： -

在这种情况下，我们没有检查整个数据。因此，这种方法提高了查询响应时间。

• 让我们也使用以下命令检索另一个分区数据集的数据： -