小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

电商订单系统在两年内数据量激增,导致查询性能下降。分库分表成为解决方案,需考虑分片策略、分片键选择及跨分片查询的复杂性。文章探讨了分库分表的时机、分片策略(如范围分片、哈希分片、目录分片)及其优缺点,并分析了NewSQL数据库(如TiDB、CockroachDB)是否能替代传统分库分表。强调选择方案时需考虑团队运维能力与数据规模。

【系统架构设计】数据库扩展:分库分表的工程实践与替代方案

土法炼钢兴趣小组的博客
土法炼钢兴趣小组的博客 · 2026-04-13T00:00:00Z

在数据驱动应用中,EF Core在大规模数据插入时性能不足。引入BulkExecutor库后,插入10万条数据的时间从58秒缩短至3秒,显著提升性能。同时,采用分库分表策略优化存储,确保系统的稳定性和扩展性。

EF Core绞杀战:10万数据插入从58秒到3秒的逆袭

dotNET跨平台
dotNET跨平台 · 2025-08-04T00:03:13Z

随着用户和订单量的增加,数据库架构出现瓶颈。为了解决这一问题,采用了分库分表和构建ES宽表的方法。文章介绍了基于DTS的实时ES宽表构建方案,包括同步双写、异步双写和基于Binlog的实时同步,分析了各方案的优缺点,并分享了实践经验。

分库分表后复杂查询的应对之道:基于DTS实时性ES宽表构建技术实践

京东科技开发者
京东科技开发者 · 2025-05-06T09:13:15Z

文章探讨了数据库的分库分表与分区概念,作者认为在资源充足时,单表更高效。MySQL的分区功能不断改进,可能替代分表。建议在性能瓶颈时考虑分区,并强调数据库应简化用户操作,提升可用性。

或许我们都被分库分表约束了思维

京东科技开发者
京东科技开发者 · 2025-02-21T01:18:22Z

本文介绍了构建高并发系统所需考虑的技术点,包括单机维度和多机维度。在单机维度上,需要考虑硬件和代码优化。多线程和异步方法可以提升部分服务的并发能力,但对性能提升有限。在多机维度上,可以通过负载均衡集群和垂直拆分来提高系统的并发性能。垂直维度上,需要根据具体业务场景进行分析和设计,包括业务应用和数据库。对于数据库,可以考虑分库分表和读写分离等技术手段。

高并发系统的艺术:如何在流量洪峰中游刃有余

京东科技开发者
京东科技开发者 · 2024-08-05T02:57:11Z

数据库性能优化是软件开发和运维过程中的重要课题,通过合理设计表结构、优化查询语句、建立索引、分库分表、清理垃圾数据等策略可以提升数据库性能,减少响应时间,提高用户体验。持续监控与调优是保证数据库性能稳定的重要手段。

数据库性能优化:提升系统响应速度的关键策略

dotNET跨平台
dotNET跨平台 · 2024-07-23T00:00:28Z

文章介绍了数据库架构在业务发展初期往往是单库单表,随着用户量和订单量的增加,数据库成为系统瓶颈。解决方案有分库分表、构建ES宽表和构建查询条件到表主键Mapping映射表。ES宽表的构建解决方案有同步双写、异步双写和基于Binlog的实时同步。文章对解决方案的优缺点进行了对比,并介绍了实践中的顺序性保证、幂等性保证、数据一致性保证和存量数据迁移。最后,介绍了ES复杂检索的分类和查询条件构建。

分库分表后复杂查询的应对之道:基于DTS实时性ES宽表构建技术实践

京东科技开发者
京东科技开发者 · 2024-06-24T03:11:33Z

本文介绍了京东物流系统中使用的分库分表中间件ShardingSphere的问题分析和解决方案。通过改造sharding-jdbc,解决了MYSQL集群架构连接数上限的问题,实现了横向扩展。文章详细介绍了sharding-jdbc的工作流程和源码分析,并给出了改造步骤。改造后的系统通过自定义分片算法实现了分库分表。文章总结了分库分表的概念和优势,并强调了在系统设计中需要权衡利弊来决策是否需要进行分库分表。

Sharding-JDBC分库连接数优化

京东科技开发者
京东科技开发者 · 2023-07-27T10:00:56Z

面对数据激增,分库分表方案有两种常用的路由算法:Hash取模和Range范围。为兼顾两者优势,可以设计一个分组概念,每个分组存储几年的数据,扩容时只需增加一个分组。可以根据业务情况对旧数据进行归档处理,减轻生产库压力。分库分表方案需要根据实际情况选择适合的工具,并结合项目场景进行设计。

关于数据库分库分表的一点想法

京东科技开发者
京东科技开发者 · 2023-03-27T00:58:27Z

Apache ShardingSphere是一个分布式数据库生态系统,可实现SQL解析、执行器优化、SQL路由、SQL改写、SQL执行和结果归并等功能,以O2O公司的订单服务为例,可实现分库分表、基因法和自定义复合分片算法,以及数据同步的实时双向同步方案,以保证数据库的稳定和数据可靠。

理论+实战,详解Sharding Sphere-jdbc

华为云官方博客
华为云官方博客 · 2023-03-02T07:38:37Z
月刊-201904

本文介绍了基于MySQL数据库下亿级数据的分库分表方案,Mysql高性能优化规范建议和Linux发行版选择。推荐了中国色、中国独立开发者项目列表、Papers With Code等资源和工具。还介绍了英语学习相关的项目和工具,如《A Programmer’s Guide to English》和chinese-programmer-wrong-pronunciation。最后推荐了视频编辑工具和参考文献。

月刊-201904

Seven's blog
Seven's blog · 2019-04-02T02:05:38Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
友情链接: MOGE.AI 九胧科技 模力方舟 Gitee AI 菜鸟教程 Remio.AI DeekSeek连连 53AI 神龙海外代理IP IPIPGO全球代理IP 东波哥的博客 匡优考试在线考试系统 开源服务指南 蓝莺IM Solo 独立开发者社区 AI酷站导航 极客Fun 我爱水煮鱼 周报生成器 He3.app 简单简历 白鲸出海 T沙龙 职友集 TechParty 蟒周刊 Best AI Music Generator

小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码