postgresql联表如何创建(postgresql动态添加过滤条件)

技术用sequoiasql-postgresql创建一个关联表怎么优化本篇内容介绍了“用sequoiasql-postgresql创建一个关联表怎么优化”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下

本文介绍了关于“如何使用sequoiasql-postgresql优化关联表的创建”的知识。很多人在实际办案过程中都会遇到这样的困难。接下来,让边肖带领大家学习如何应对这些情况!希望大家认真阅读,学点东西!

[用户咨询]

使用sequoiasql-postgresql创建一个关联表,并存储500W数据。在创建索引的情况下,用pg进行简单的分组查询平均需要50秒。能否进一步优化?

[问题描述]

1.集群部署

三台主机对应一个分区组,每台主机配有coord、cata和数据节点。

2.表格属性

一个500w数据关联表b_qt_swdj和一个800w数据pg原生表b_qt_swdj1。这两个表的结构相同,共有39个字段。

3 .样本和陈述

对关联的表执行查询:

SELECT sw_scjy_yb,count(se_scjy_yb)为count FROM b_qt_swdj组by sw _ scjy _ yb

从b_qt_swdj中选择计数(1);

对本机表执行查询:

SELECT sw_scjy_yb,count(se_scjy_yb)为count FROM b_qt_swdj1组by sw _ scjy _ yb

从b_qt_swdj1中选择计数(1);

使用db内置sql执行需要57秒。执行需要33秒。

用pg执行,耗时50秒。执行需要44秒。

用pg执行,耗时8秒。执行需要3秒。

4.网络带宽

数据传输时间约为46 MB/s。

[解决方案]

选择sw_scjy_yb,通过sw_scjy_yb将计数(se_scjy_yb)作为计数FROM b_qt_swdj1组;pg花费的时间和内置sql的sdb差不多,大约是50S。和pg关系不大。

从pg的访问计划来看(见截图3),大部分时间都花在了select上。

建议1:我们应该考虑在sdb中对表进行分区,以提高数据提取的并发性,从而提高性能。

建议2:推荐使用Sparksql作为大型表统计的sql引擎。

这就是“如何用sequoiasql-postgresql优化关联表的创建”的内容。感谢您的阅读。如果你想了解更多的行业,可以关注网站。边肖将为您输出更多高质量的实用文章!

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/155625.html

(0)

相关推荐

  • 压测时cpu上不去是代码问题吗(怎么用指令cpu压力测试)

    技术cpu测压shell脚本是什么本篇内容介绍了“cpu测压shell脚本是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有

    攻略 2021年12月17日
  • 自制柚子茶,家庭自制蜂蜜柚子茶要怎么做

    技术自制柚子茶,家庭自制蜂蜜柚子茶要怎么做在冬天这个时候,是吃柚子的最佳时节,柚子皮具有很好的清热去火功能,并且柚子皮在擦拭水龙头等厨具上面还可以很好的清洁污渍,所以小编的柚子皮都是充分利用的,最喜欢的就是用它来做蜂蜜柚

    生活 2021年10月28日
  • 如何进行MySQL索引条件下推的简单测试

    技术如何进行MySQL索引条件下推的简单测试本篇文章给大家分享的是有关如何进行MySQL索引条件下推的简单测试,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

    攻略 2021年11月16日
  • Nginx怎么实现限流

    技术Nginx怎么实现限流这篇文章主要为大家展示了“Nginx怎么实现限流”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Nginx怎么实现限流”这篇文章吧。Nginx 限流N

    攻略 2021年11月24日
  • AtomicInteger中的方法有哪些

    技术AtomicInteger中的方法有哪些这篇文章主要介绍“AtomicInteger中的方法有哪些”,在日常操作中,相信很多人在AtomicInteger中的方法有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好

    攻略 2021年10月28日
  • 冬天来了写一段话,冬天的早晨真冷呀写一段话

    技术冬天来了写一段话,冬天的早晨真冷呀写一段话早上,冬天的风啊,真讨厌,我只开着一扇窗户,它就拼命的往我房间里钻,惊醒了我这个小懒虫冬天来了写一段话。我伸了伸懒腰,打了个哈欠,说:冬天啊真冷,恨不得整天睡大觉。虽然我已经

    生活 2021年10月27日