Recent work measures how much offset-value coding speeds up database query operations. It speeds up not only sorting but also duplicate removal, grouping (aggregation) in sorted streams, order-preserving exchange (shuffle), and merge join. It already saves thousands of CPUs in Google's Napa and F1~Query systems, e.g., in grouping algorithms and in log-structured merge-forests. In order to achieve the full benefits of interesting orderings, however, query execution algorithms must not only consume and exploit offset-value codes but also provide offset-value codes to the next operation in the pipeline. This short paper describes in detail how order-preserving algorithms (from filter to merge join and even shuffle) can compute offset-value codes for their outputs. These calculations are surprisingly simple and very efficient.


翻译:最近的工作量度了多少抵消值编码可以加速数据库查询操作。 它不仅加快了分类, 而且还加快了分类流、 命令保存交换( shuffle) 和合并的删除( 集合) 的重复清除( 集合) 。 它已经在 Google 的 Napa 和 F1 { ⁇ uery 系统中节省了数千个 CPU, 例如在 组合算法 和 日志结构合并- 森林中 。 但是, 为了实现有趣的排序的全部好处, 查询执行算法不仅必须消耗和开发抵消值代码, 还必须为管道中的下一个操作提供抵消值代码 。 这份简短的论文详细描述了排序算法( 从过滤器到合并连连连) 如何计算其输出的抵消值代码 。 这些计算是惊人的简单和非常有效的 。

0
下载
关闭预览

相关内容

Linux导论,Introduction to Linux,96页ppt
专知会员服务
82+阅读 · 2020年7月26日
【SIGGRAPH2019】TensorFlow 2.0深度学习计算机图形学应用
专知会员服务
41+阅读 · 2019年10月9日
ACM MM 2022 Call for Papers
CCF多媒体专委会
5+阅读 · 2022年3月29日
AIART 2022 Call for Papers
CCF多媒体专委会
1+阅读 · 2022年2月13日
【ICIG2021】Check out the hot new trailer of ICIG2021 Symposium8
中国图象图形学学会CSIG
0+阅读 · 2021年11月16日
Hierarchically Structured Meta-learning
CreateAMind
27+阅读 · 2019年5月22日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
国家自然科学基金
0+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Arxiv
0+阅读 · 2022年11月7日
VIP会员
相关资讯
ACM MM 2022 Call for Papers
CCF多媒体专委会
5+阅读 · 2022年3月29日
AIART 2022 Call for Papers
CCF多媒体专委会
1+阅读 · 2022年2月13日
【ICIG2021】Check out the hot new trailer of ICIG2021 Symposium8
中国图象图形学学会CSIG
0+阅读 · 2021年11月16日
Hierarchically Structured Meta-learning
CreateAMind
27+阅读 · 2019年5月22日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
相关基金
国家自然科学基金
0+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2008年12月31日
Top
微信扫码咨询专知VIP会员