首页 > 编程知识 正文

python连接数据库导入数据,python连接hive写入数据

时间:2023-05-06 12:00:17 阅读:196791 作者:2923

使用的是impala包。
如何安装impala:https://blog.csdn.net/weixin_43713105/article/details/111921221

def read_sql(sql): ''' 读取hive的sql,二维列表 参数: sql:sql语句 返回: DataFrame ''' from impala.dbapi import connect import pandas as pd import time start = time.time() # 开始时间 host_name = '主机地址' port = 10000 user = '用户名' password = '密码' conn = connect(host=host_name, port=port, auth_mechanism='PLAIN', user=user, password=password) cur = conn.cursor() cur.execute(sql) # 执行查询语句 sql_data = cur.fetchall() # 获取查询结果:二维列表 end = time.time() # 结束时间 print('耗时%s秒'%(end - start)) # 计算耗时 columns = [i[0] for i in cur.description] # dataframe的列名 sql_data = pd.DataFrame(sql_data, columns=columns) # 将二维列表转为dataframe,并设置列名 cur.close() conn.close() return sql_data # 返回DataFrame

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。