hive复杂数据类型如何进行数据过滤

Hive支持复杂数据类型，如STRUCT、ARRAY和MAP

1. 使用WHERE子句过滤Struct类型：

假设我们有一个名为employee的表，其中包含一个名为info的STRUCT类型字段，该字段包含员工的姓名、年龄和部门信息。

CREATE TABLE employee (
  id INT,
  info STRUCT<name STRING, age INT, department STRING>
);

要过滤出年龄大于30岁的员工，可以使用以下查询：

SELECT * FROM employee
WHERE info.age > 30;

2. 使用LATERAL VIEW和EXPLODE过滤ARRAY类型：

假设我们有一个名为products的表，其中包含一个名为tags的ARRAY类型字段，该字段包含产品标签。

CREATE TABLE products (
  id INT,
  tags ARRAY<STRING>
);

要过滤出包含"electronics"标签的产品，可以使用以下查询：

SELECT p.*
FROM products p
LATERAL VIEW INLINE(p.tags) t AS tag
WHERE tag = 'electronics';

3. 使用LATERAL VIEW和EXPLODE过滤MAP类型：

假设我们有一个名为orders的表，其中包含一个名为metadata的MAP类型字段，该字段包含订单元数据。

CREATE TABLE orders (
  id INT,
  metadata MAP<STRING, STRING>
);

要过滤出包含"priority"键且值为"high"的订单，可以使用以下查询：

SELECT o.*
FROM orders o
LATERAL VIEW INLINE(o.metadata) m AS key, value
WHERE key = 'priority' AND value = 'high';

这些示例展示了如何在Hive中过滤复杂数据类型。根据实际需求和数据结构，可以相应地调整查询。