腾讯云数据库2篇论文入选行业顶会SIGMOD,技术创新获权威认可
2024-06-13 16:04:47爱云资讯100482
6月13日消息,腾讯云数据库TDSQL和中国人民大学合作的2篇论文成功入选行业顶级会议SIGMOD,被SIGMOD 2024 Research Full Paper(研究类长文)收录。
SIGMOD(Special Interest Group on Management Of Data)作为数据库领域的“风向标”,拥有40余年发展历史,每年为数据库领域提供大量高质量的研究论文和研究成果,具有重要的学术价值和行业引导意义,与VLDB、ICDE并称数据库三大顶级会议。
本次收录的研究成果中,同态压缩理论和SALI学习索引框架均属于业界首次提出,表明腾讯云数据库在存储、压缩以及学习索引等方面的前沿创新获得国际权威认可。
面对现代社会数据量的爆发式增长,行业普遍使用数据压缩来减少存储空间和提升传输效率。
但目前,多数压缩方案专注于只读文本处理任务,涉及文本修改操作必须将文本进行解压后再执行,这会对数据处理的性能和存储空间带来负面影响。
在腾讯云和人大合作入选SIGMOD会议的论文《Homomorphic Compression: Making Text Processing on Compression Unlimited》中,研究团队创新性提出了同态压缩理论,并在此基础上开发了高效文本数据管理引擎HOCO。HOCO引擎结合了三种代表性压缩方案,通过数据结构和算法设计实现对不同数据集语法规则的解析,实现了在压缩文本上直接进行多种处理任务。
实验表明,在不影响压缩效果的情况下, HOCO可以实现9.18倍的吞吐量提升,文本分析任务的延迟缩短7.16倍。
另一篇入选论文《SALI: A Scalable Adaptive Learned Index based on Probability Models》提出了基于概率模型的可扩展自适应学习索引框架。
在数据库中,索引是提高数据库查询性能的重要方式。为了提高索引的性能和效率,业内引进了学习索引,通过学习模型来预测数据存储位置,进一步提高查找效率。但传统学习索引存在技术局限,一旦数据集发生频繁查询更新等工作负载变化,学习索引也会频繁调整,多线程高并发情况下会面临阻塞。SALI 通过概率模型感知工作负载的变化,使学习索引可动态“进化”局部结构以适应新的负载。此方法在尽可能减少结构变化对性能的影响的同时,大幅降低线程间阻塞问题,从而实现高可扩展性、提高效率并增强学习索引的鲁棒性。
实验数据显示,SALI在64个线程下提高了2.04倍的插入吞吐量。
作为国产数据库行业的开拓者,腾讯云在数据库领域已深耕十余年,服务超过50万客户。而中国人民大学作为数据库研究的摇篮,为数据库技术在中国的持续发展奠定了坚实基础。2020年,腾讯与中国人民大学共同建立中国人民大学-腾讯协同创新实验室,聚焦数据库前沿技术探索和突破。据悉,合作至今,双方在科研方面研发超过10项前沿技术原型系统、申请数十项专利、多篇论文入选SIGMOD、VLDB、ICDE、TKDE等国际顶会顶刊。未来,腾讯将持续发挥其多年的技术研发创新成果和产业应用经验,联合人大一起推动国产数据库的学术进步和技术成果转化。
相关文章
- 腾讯云 TVP 走进青岛啤酒,解码数字化驱动智慧零售增长引擎
- 腾讯云架构师技术沙龙 · 长沙站圆满落幕,共话AI驱动下的技术架构与前沿应用
- 腾讯云深耕山东成绩单:服务2万家企业,Top 10千亿企业8家选择腾讯云
- 腾讯云副总裁王麒:全链路AI技术帮助企业拥抱大模型新机遇
- 腾讯云青岛峰会:已服务2万家山东企业,助力山东打造数字经济发展新高地
- 腾讯云TencentOS Server AI,助力荣耀打造高性能AI底座
- 年度攻防演练专题 | 历经挑战赛锤炼,腾讯云安全RASP2.0版本即将上线!
- PPIO与腾讯云达成战略合作,共同推动AI基础设施升级
- 腾讯云推出云开发AI Toolkit,国内首个面向智能编程的后端服务
- 腾讯云安全发布云上红蓝对抗防护神器,破解重保盲区与溯源难题
- 腾讯云天御发布海外交易风控解决方案,AI+情报双擎护航企业全球化安全
- 腾讯云TVP走进泸州老窖,解码AI数智未来
- 腾讯云入选Gartner®《如何建设实施网络检测与响应》报告全球代表厂商
- 印象笔记与腾讯云战略合作升级,推动AI普惠,拓展全球布局
- 海亮科技集团与腾讯云达成战略合作 共筑AI教育新生态
- 2天开发一款复杂应用,腾讯云代码助手推动软件工程进入AI驱动时代