小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

电商订单系统在两年内数据量激增,导致查询性能下降。分库分表成为解决方案,需考虑分片策略、分片键选择及跨分片查询的复杂性。文章探讨了分库分表的时机、分片策略(如范围分片、哈希分片、目录分片)及其优缺点,并分析了NewSQL数据库(如TiDB、CockroachDB)是否能替代传统分库分表。强调选择方案时需考虑团队运维能力与数据规模。

【系统架构设计百科】数据库扩展:分库分表的工程实践与替代方案

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-04-13T00:00:00Z

在数据驱动应用中,EF Core在大规模数据插入时性能不足。引入BulkExecutor库后,插入10万条数据的时间从58秒缩短至3秒,显著提升性能。同时,采用分库分表策略优化存储,确保系统的稳定性和扩展性。

EF Core绞杀战:10万数据插入从58秒到3秒的逆袭

dotNET跨平台
dotNET跨平台 · 2025-08-04T00:03:13Z

随着用户和订单量的增加,数据库架构出现瓶颈。为了解决这一问题,采用了分库分表和构建ES宽表的方法。文章介绍了基于DTS的实时ES宽表构建方案,包括同步双写、异步双写和基于Binlog的实时同步,分析了各方案的优缺点,并分享了实践经验。

分库分表后复杂查询的应对之道:基于DTS实时性ES宽表构建技术实践

京东科技开发者
京东科技开发者 · 2025-05-06T09:13:15Z

文章探讨了数据库的分库分表与分区概念,作者认为在资源充足时,单表更高效。MySQL的分区功能不断改进,可能替代分表。建议在性能瓶颈时考虑分区,并强调数据库应简化用户操作,提升可用性。

或许我们都被分库分表约束了思维

京东科技开发者
京东科技开发者 · 2025-02-21T01:18:22Z

本文介绍了构建高并发系统所需考虑的技术点,包括单机维度和多机维度。在单机维度上,需要考虑硬件和代码优化。多线程和异步方法可以提升部分服务的并发能力,但对性能提升有限。在多机维度上,可以通过负载均衡集群和垂直拆分来提高系统的并发性能。垂直维度上,需要根据具体业务场景进行分析和设计,包括业务应用和数据库。对于数据库,可以考虑分库分表和读写分离等技术手段。

高并发系统的艺术:如何在流量洪峰中游刃有余

京东科技开发者
京东科技开发者 · 2024-08-05T02:57:11Z

数据库性能优化是软件开发和运维过程中的重要课题,通过合理设计表结构、优化查询语句、建立索引、分库分表、清理垃圾数据等策略可以提升数据库性能,减少响应时间,提高用户体验。持续监控与调优是保证数据库性能稳定的重要手段。

数据库性能优化:提升系统响应速度的关键策略

dotNET跨平台
dotNET跨平台 · 2024-07-23T00:00:28Z

文章介绍了数据库架构在业务发展初期往往是单库单表,随着用户量和订单量的增加,数据库成为系统瓶颈。解决方案有分库分表、构建ES宽表和构建查询条件到表主键Mapping映射表。ES宽表的构建解决方案有同步双写、异步双写和基于Binlog的实时同步。文章对解决方案的优缺点进行了对比,并介绍了实践中的顺序性保证、幂等性保证、数据一致性保证和存量数据迁移。最后,介绍了ES复杂检索的分类和查询条件构建。

分库分表后复杂查询的应对之道:基于DTS实时性ES宽表构建技术实践

京东科技开发者
京东科技开发者 · 2024-06-24T03:11:33Z

本文介绍了京东物流系统中使用的分库分表中间件ShardingSphere的问题分析和解决方案。通过改造sharding-jdbc,解决了MYSQL集群架构连接数上限的问题,实现了横向扩展。文章详细介绍了sharding-jdbc的工作流程和源码分析,并给出了改造步骤。改造后的系统通过自定义分片算法实现了分库分表。文章总结了分库分表的概念和优势,并强调了在系统设计中需要权衡利弊来决策是否需要进行分库分表。

Sharding-JDBC分库连接数优化

京东科技开发者
京东科技开发者 · 2023-07-27T10:00:56Z

面对数据激增,分库分表方案有两种常用的路由算法:Hash取模和Range范围。为兼顾两者优势,可以设计一个分组概念,每个分组存储几年的数据,扩容时只需增加一个分组。可以根据业务情况对旧数据进行归档处理,减轻生产库压力。分库分表方案需要根据实际情况选择适合的工具,并结合项目场景进行设计。

关于数据库分库分表的一点想法

京东科技开发者
京东科技开发者 · 2023-03-27T00:58:27Z

Apache ShardingSphere是一个分布式数据库生态系统,可实现SQL解析、执行器优化、SQL路由、SQL改写、SQL执行和结果归并等功能,以O2O公司的订单服务为例,可实现分库分表、基因法和自定义复合分片算法,以及数据同步的实时双向同步方案,以保证数据库的稳定和数据可靠。

理论+实战,详解Sharding Sphere-jdbc

华为云官方博客
华为云官方博客 · 2023-03-02T07:38:37Z
月刊-201904

本文介绍了基于MySQL数据库下亿级数据的分库分表方案,Mysql高性能优化规范建议和Linux发行版选择。推荐了中国色、中国独立开发者项目列表、Papers With Code等资源和工具。还介绍了英语学习相关的项目和工具,如《A Programmer’s Guide to English》和chinese-programmer-wrong-pronunciation。最后推荐了视频编辑工具和参考文献。

月刊-201904

Seven's blog
Seven's blog · 2019-04-02T02:05:38Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码