破解分布式库使用难点：数据分片策略
文章ID：392时间：2023-11-30人气：
业内分布式数据库产品，针对数据分片策略通常有三种做法。一种是基于主键/唯一索引/隐含主键等做统一数据分片，即用户无需人为设置分片策略；一种是开放若干数据分片算法，用户可自行创建数据对象时人为指定；还有一些数据库中间件产品，支持更为灵活的分片方式，可以让用户自行扩展。上面三种，我们可命名为内置、开放、自定义。下面从开发者角度，简单对比下这几种方式。
除了第一种方式外，其余两种都涉及一个问题就是现有数据对象如何拆分？好的拆分策略，一定是兼顾业务模型、性能最佳、稳定可靠、研发改造、运维难点等多种因素下，结合分布式数据库的特点而做的最优解，这是在多种因素下平衡的结果。在具体实施上，需要收集大量信息后才能做出决定，下面将主要部分整理为一个表格。
从上表可见，数据分片设计过程中，需考虑的问题很多，是一个多维立体的模型分析过程。包括对企业的业务流、数据流、数据模型、业务特征、基础环境等诸多方面的考虑。上述还需要结合分布式架构数据库的能力理解才能得出一个相对“适合”的设计方案。这对于企业来说是非常痛苦的，也是阻碍企业上到分布式数据库的难点之一。不能将上述包袱完全推给用户去完成，而是尽量在数据库产品侧给出答案，即产品需具备数据分片优化推荐功能。如果分片设计不合理，可能造成影响到业务系统的稳定可靠、服务体验，往往服务体验是忽快忽慢且最可怕是某一些时刻或者业务场景是最慢的，从而导致排错分析的困难复杂增加。当然，开始设计很难做到十全十美，但系统在运行中经过不断摸索后还需数据库具备一定的在线分片调整能力，例如针对分片类型或分片字段的调整。在这一过程中要做到不中断现有业务服务的正常运行，其次要做到尽量少地影响现有业务服务的性能体验（也即控制资源占用对生产环境的业务服务影响），最后要做到尽量快地完成分片信息的调整。
目前国内很多分布式数据库厂商都加强了迁移能力的支持，一般是通过外置工具的方式提供收集、评估、辅助迁移、验证等一系列流程的支持。下图是以OceanBase的OMA工具举例，说明其提供的支持能力。
通过上图可见，产品针对数据分片策略部分做的不多，主要是对兼容类的评估工具；即根据数据库自身能力，评估原有对象、SQL语句需要做哪些改造等。尚没有实现数据分片策略的推荐工作，处于空白。其实去年公众号也发布过一篇文章，就是想通过小工具去完成这一过程，只是目前还未看到有厂商产品支持。相信未来这一能力得到支持后，将加快国内企业选择分布式数据库实践之路。
北京市海淀区中关村南1条甲1号ECO中科爱克大厦6-7层
北京市公安局海淀分局备案编号：110108002980号营业执照
发表评论
内容声明：1、本站收录的内容来源于大数据收集，版权归原网站所有！
2、本站收录的内容若侵害到您的利益，请联系我们进行删除处理！
3、本站不接受违规信息，如您发现违规内容，请联系我们进行清除处理！
4、本文地址：http://www.wkong.net/article-392.html，复制请保留版权链接！
打包机-缠绕机包装机-自动捆扎机-码垛加固防滑系统-青岛安捷利包装技术有限公司
解析算网一体化调度和算力度量
随着信息技术的发展，算力已经成为推动社会进步和发展的重要驱动力。在云计算、大数据、人工智能等领域，算力的大小直接影响到业务的质量和效率。然而，由于不同的应用场景对算力的需求和要求不同，如何实现高效的算力调度和度量成为了当前亟待解决的问题。
2023-11-30 18:00:52
深入探讨Spring扩展点及其应用
Spring是当前使用最广的框架之一，作为一名Java程序员，深入了解Spring框架的各种扩展点以及它们的实际应用场景是至关重要的。
2023-11-30 18:00:27
国内AI绘画网站突然批量关停
就在昨晚，一场突如其来的神秘事件席卷了国内的AI绘画界。据网友向松松爆料的消息，有部分AI绘画网站突然关闭，常用的几个网站无一例外都变得无法打开。官方给出的理由仅仅是“网站升级”，但具体的原因却无人知晓。
2023-09-15 19:54:26
便宜衣服批发网,衣服批发网站大全最便宜
随着互联网的兴起这几年有越来越多的商家选择网上批发货源的尤其是关于服装货源网站平台非常多商家进货选择也更多了服装货源网上批发在哪里进货好哪个服装货源网站更便宜呢聚猫货源网小编整理了一份衣服批发网站大全最便宜卖赶紧来看...
互联网资讯 2022-06-09 22:51:25