.Net中EF针对大数据量查询超时的一种优化

时间：2016-01-19 10:46:34 阅读：363 评论：0 收藏：0 [点我收藏+]

标签：

旧代码：
--receiptIds id集合，每次查1000左右
var mappingList = new List<FinanceSettlementMapping>();
mappingList.AddRange(SettlementMappingRepository.Entities.Include(o => o.ReceiptsTo).Include(d => d.FinanceSettlement).Where(d => receiptIds.Contains(d.ReceiptIdFrom)).ToList());
mappingList.AddRange(SettlementMappingRepository.Entities.Include(o => o.ReceiptsTo).Include(d => d.FinanceSettlement).Where(d => receiptIds.Contains(d.ReceiptIdTo)).ToList());
--FinanceSettlementMapping -500w数据，9个字段
--ReceiptsTo，外键表，FinanceReceipts --800w数据，64个字段
--FinanceSettlement --200w数据，15个字段
//FinanceSettlementMapping join FinanceSettlement join FinanceReceipts 表数据越大，连接越慢，可能会超时

新代码：外键表FinanceReceipts数据单独查询
var mappingList = new List<FinanceSettlementMapping>();
var settlementmapFromList = SettlementMappingRepository.Entities.Include(d => d.FinanceSettlement).Where(d => receiptIds.Contains(d.ReceiptIdFrom)).ToList();
if (settlementmapFromList.Count > 0)
{
var toreceiptIds = settlementmapFromList.Select(o => o.ReceiptIdTo).ToArray();
var toreceipts = ReceiptsRepository.Entities.Where(o => toreceiptIds.Contains(o.ReceiptId)).ToList();//查询数据到内存
foreach (var map in settlementmapFromList)//循环内存数据赋值
{
var tempreceipt = toreceipts.Where(o => o.ReceiptId == map.ReceiptIdTo).FirstOrDefault();
map.ReceiptsTo = tempreceipt;
}
}
mappingList.AddRange(settlementmapFromList);
var settlementmapToList = SettlementMappingRepository.Entities.Include(d => d.FinanceSettlement).Where(d => receiptIds.Contains(d.ReceiptIdTo)).ToList();
if (settlementmapToList.Count > 0)
{
var toreceiptIds = settlementmapToList.Select(o => o.ReceiptIdTo).ToArray();
var toreceipts = ReceiptsRepository.Entities.Where(o => toreceiptIds.Contains(o.ReceiptId)).ToList();//查询数据到内存
foreach (var map in settlementmapToList)//循环内存数据赋值
{
var tempreceipt = toreceipts.Where(o => o.ReceiptId == map.ReceiptIdTo).FirstOrDefault();
map.ReceiptsTo = tempreceipt;
}
}

mappingList.AddRange(settlementmapToList);

//1000条数据，最差的线性查询时间复杂度（1+1000）*1000/2 ,本次查询的是Id,是数字类型，如果系统用的是二叉树或其他快速查询方法，就更快，再者，查询到之后，把toreceipts 值赋给map.ReceiptsTo，只是修改了map.ReceiptsTo的指针地址，没有赋值操作，当然也是很快的，实测1000数据0.006s。

解决了大数据量表的Join查询慢的问题，能加快程序总体运行速度，因为，我们网站应用，大部分时间是耗在数据库操作上，所以能减少数据库查询时间，就能减少完成一个操作的整体运行时间。

.Net中EF针对大数据量查询超时的一种优化

标签：

原文地址：http://blog.csdn.net/pukuimin1226/article/details/50536034

踩

(0)

评论一句话评论（0）

分享档案

更多>

2021年07月29日 (22)
2021年07月28日 (40)
2021年07月27日 (32)
2021年07月26日 (79)
2021年07月23日 (29)
2021年07月22日 (30)
2021年07月21日 (42)
2021年07月20日 (16)
2021年07月19日 (90)
2021年07月16日 (35)

周排行