分类: 数据库

Hangfire + 工厂策略模式 + 幂等性控制:一套完整的 .NET 后台任务调度架构

基于 SwitchData 项目真实代码,讲解如何用 Hangfire 做后台任务调度,用工厂+策略模式让每种任务独立实现,用幂等性 Key 和 CAS 状态机防重复执行,用 BackgroundService 在 Worker 启动时一次性把数据库任务同步到 Hangfire。从配置、调度封装、策略接口、工厂注册到执行记录持久化,完整实现一条可扩展的后台任务链路。

C# Channel 实战:高性能生产者-消费者数据管道(IAsyncEnumerable + Batch BulkCopy + CancellationToken 完整实现)

在处理百万级数据导入场景时,传统同步流水线让数据库成为瓶颈。本文结合 SwitchData 项目中的语音专线数据同步实战,展示如何用 .NET 8 的 System.Threading.Channels 构建生产者-消费者并行管道:一个异步任务负责从数据库逐条读取+聚合去重,另一个任务负责批量 BulkCopy 入库,两者通过有界 Channel 解耦,吞吐提升 3.6 倍。

从零实现可扩展查询条件体系:FilterOperator 策略模式 + 组合模式构建动态 SQL WHERE 子句

在业务系统中,动态构建 SQL WHERE 子句是绕不开的需求。本文以 SwitchData 项目中的 FilterOperator + IFilterNode 实现为例,剖析一套完整的可扩展查询条件体系:策略模式封装 15 种运算符的 SQL 生成逻辑,组合模式构建条件树支持 AND/OR 嵌套,递归遍历 + 参数化查询安全翻译成 SQL,还能通过 virtual 属性适配不同数据库方言。

从零构建 ADO.NET 抽象层:参数缓存、Schema 缓存与数据类型映射完整实现

本文基于实际项目源码,详细讲解如何从零构建一套完整的 ADO.NET 数据库抽象层。通过 Database 基类封装通用数据库操作,使用 ParameterCache 和 SchemaCache 实现参数与元数据缓存,提供 CLR 类型到 DbType 的自动映射,支持批量操作和异步调用。这套抽象层已在生产环境中运行良好,显著提升了数据库访问的性能和代码可维护性。

记录ado.net批量新增最快的一种入库方式

实测对比三种 ADO.NET 批量入库方案:逐行 Insert、Table-Valued Parameter(TVP)、SqlBulkCopy,给出基准性能数据并推荐 SqlBulkCopy 作为百万级数据快速落库的最优方案。

mysql索引失效

列举 MySQL 中导致索引失效的典型写法:隐式类型转换、最左前缀不匹配、OR 条件未建索引、LIKE %前缀、对索引列使用函数/运算,配合 Explain 分析并给出改写建议。