Debian Hadoop与Hive连接方法

以下是在Debian系统上连接Hadoop与Hive的步骤，以Beeline工具为例：

1. 安装Hadoop和Hive
   通过包管理器或手动下载安装包，配置环境变量（HADOOP_HOME、HIVE_HOME等），并添加到PATH中。
2. 配置Hadoop
   • 在hdfs-site.xml中启用WebHDFS：<property><name>dfs.webhdfs.enabled</name><value>true</value></property>。
   • 在core-site.xml中配置代理用户权限：<property><name>hadoop.proxyuser.root.hosts</name><value>*</value></property>。
     重启Hadoop服务：$HADOOP_HOME/sbin/start-dfs.sh、$HADOOP_HOME/sbin/start-yarn.sh。
3. 配置Hive
   • 在hive-site.xml中设置HiveServer2端口（默认10000）：<property><name>hive.server2.thrift.port</name><value>10000</value></property>。
   • 配置临时目录等参数（可选）。
4. 启动Hive服务
   后台启动HiveServer2：nohup hive --service hiveserver2 > /dev/null 2>&1 &。
5. 使用Beeline连接
   执行命令：beeline -u "jdbc:hive2://localhost:10000/default"，输入用户名（默认当前用户）即可连接。

说明：

• Debian系统可通过apt-get安装Hive（部分版本需手动配置），Hadoop需手动部署或使用Docker镜像（如registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base）。
• 若需远程连接，需确保防火墙开放对应端口（如10000），并正确配置主机名解析。