LuckyJiang.2021 2017-03-20 09:13 采纳率: 0%
浏览 1339
已结题

关于频繁入库慢的优化问题

我希望数据能够实时入库,现在是用线程定时去抓文件入库到Hbase。
但是,现在有两个入库方式。
1---使用官方已经废弃的方法。每次入库到Hbase(是用的put(list)方法),每次都要关闭掉table,再重新连接hbase,Htable table开销非常大。使用后如果只调用table.flushCommits()接口,资源并没有释放,内存一直涨.....
请问有没有比较好的建议?

2---使用新的API。用ConnectionFactory.createConnection获取连接,然后通过连接获取table,这时候table释放资源只提供了close方法。我尝试table.close();connection.close(),资源仍然未释放,内存一直涨。

最后还是使用了旧api,每次put后table.close(),在线等解决办法图片说明图片说明

  • 写回答

1条回答 默认 最新

  • Tiger_Zhao 2017-03-20 09:33
    关注

    数据库有缓存,涨内存是正常表现啊。

    评论

报告相同问题?

悬赏问题

  • ¥15 如何让企业微信机器人实现消息汇总整合
  • ¥50 关于#ui#的问题:做yolov8的ui界面出现的问题
  • ¥15 如何用Python爬取各高校教师公开的教育和工作经历
  • ¥15 TLE9879QXA40 电机驱动
  • ¥20 对于工程问题的非线性数学模型进行线性化
  • ¥15 Mirare PLUS 进行密钥认证?(详解)
  • ¥15 物体双站RCS和其组成阵列后的双站RCS关系验证
  • ¥20 想用ollama做一个自己的AI数据库
  • ¥15 关于qualoth编辑及缝合服装领子的问题解决方案探寻
  • ¥15 请问怎么才能复现这样的图呀