sqlserver 巧妙的自关联运用
更新时间：2012年07月17日 21:36:21 作者：
最近在改报表分页，遇到一个很棘手的问题，需要将比较正常的数据记录新增加两列
第一列按照goodsid局部分组，然后在分组后的记录中按照audittime升序排序得到序号，从而显示某商品得第几次变迁。
第二列是取该商品的最后变迁价格newPrice，然后将该值赋到这个商品的其他行中，例如对于goodsid为1的，最后一个newprice为20，那么对于所有goodsid为1的记录curprice都写为20，从而达到外面控件分布的效果。
如下，比较正常的数据记录：
private void ChangeDataTable(DataTable dt)
{
dt.Columns.Add("curprice");
dt.Columns.Add("expandfield");
int goodsid = 0;
int index = 1; //指针
decimal curprice = 0;
IHashObject curpriceobj = new HashObject(); //键值对
//增加分布列
foreach(DataRow row in dt.Rows){
if (goodsid != Convert.ToInt32(row["goodsid"])) {
curpriceobj.Add("goodsid_"+goodsid, curprice);
//处理
index = 0;
goodsid = Convert.ToInt32(row["goodsid"]);
}
curprice = Convert.ToDecimal(row["newprice"]);
index += 1;
row["expandfield"] = "第" + index + "次变迁";
}
if(dt.Rows.Count != 0){ //添加最后一个商品的现行价
curpriceobj.Add("goodsid_"+goodsid, curprice);
}
//增加现行价
foreach (DataRow row in dt.Rows) {
row["curprice"] = curpriceobj["goodsid_" + row["goodsid"]];
}
}
但现在报表存储过程必须分页，分页后还要支持排序，如果客户端要求按照最新价格newPrice排序，很明显这样通过服务端转换的数据源是没办法支持的（因为在数据库分页前的数据源并没有newPrice这个字段）。
另外在C#服务端处理，其实是比较占内存的，其一对DataTable遍历了两次，另外还用了临时键值对对象，反复赋值是有性能消耗。
综上所述，最终我选择放在数据库来构建这两列。
关于第一列局部排序，我很快想到了一个以前看过的语法 ROW_NUMBER() OVER(PARTITION BY...ORDER BY)，于是第一列expandfield很容易就构建了，SQL如下：
SELECT '第' + CAST(ROW_NUMBER() OVER(PARTITION BY GoodsId ORDER BY audittime DESC) AS VARCHAR(10)) + '次变迁' AS expandfield,
GoodsId, price , discount , newPrice , begindate as [date]
FROM #test
但真正麻烦的是第二列，我抠破脑壳来想都没想出来，甚至想到用临时表来记录这个结果集，然后用游标来遍历结果集，update这个表来修改记录，但还是感觉相当的繁琐，而且性能很差。后来我请教了下公司的DBA，她给出了一种思路，这种方案无论从效率还是可行性都是最优的。先贴出代码如下：
WITH _TEMP AS (
SELECT ROW_NUMBER() OVER ( PARTITION BY GoodsId ORDER BY audittime DESC ) AS num2 ,
ROW_NUMBER() OVER ( PARTITION BY GoodsId ORDER BY audittime ) AS num ,
GoodsId, price , discount , newPrice , begindate as [date]
FROM #test
)
SELECT '第' + CAST(a.num AS VARCHAR(10)) + '次变迁' AS expandfield ,
a.goodsid , a.price , a.discount , a.newprice , a.date , b.newprice AS curprice
FROM _TEMP a
INNER JOIN _TEMP b ON a.GoodsId = b.GoodsId AND b.num2 = 1
这里用了一个CTE表达式的自关联查询，从性能上说是很有优势的，相对于临时表减少了对tempdb的开销，另外代码的可读性也比嵌套查询更强，num列是用来构建第几次变迁列的，这里很巧妙得多加了按照audittime降序列的num2列，在下面临时记录b中，通过指定b.num2 = 1取得所有goodsid最后变价的记录，再通过一个INNER JOIN就得到了我们想要的值curprice值。
另外补充一下，像上面存在多个列上排序字段时，SQL会选择后者进行重排，即先按goodsid分组，然后再各个组中按audittime升序排列，如果将num放在前，num2放在后，是得不到我们要的记录。
第二列是取该商品的最后变迁价格newPrice，然后将该值赋到这个商品的其他行中，例如对于goodsid为1的，最后一个newprice为20，那么对于所有goodsid为1的记录curprice都写为20，从而达到外面控件分布的效果。
如下，比较正常的数据记录：
复制代码 代码如下:
private void ChangeDataTable(DataTable dt)
{
dt.Columns.Add("curprice");
dt.Columns.Add("expandfield");
int goodsid = 0;
int index = 1; //指针
decimal curprice = 0;
IHashObject curpriceobj = new HashObject(); //键值对
//增加分布列
foreach(DataRow row in dt.Rows){
if (goodsid != Convert.ToInt32(row["goodsid"])) {
curpriceobj.Add("goodsid_"+goodsid, curprice);
//处理
index = 0;
goodsid = Convert.ToInt32(row["goodsid"]);
}
curprice = Convert.ToDecimal(row["newprice"]);
index += 1;
row["expandfield"] = "第" + index + "次变迁";
}
if(dt.Rows.Count != 0){ //添加最后一个商品的现行价
curpriceobj.Add("goodsid_"+goodsid, curprice);
}
//增加现行价
foreach (DataRow row in dt.Rows) {
row["curprice"] = curpriceobj["goodsid_" + row["goodsid"]];
}
}
但现在报表存储过程必须分页，分页后还要支持排序，如果客户端要求按照最新价格newPrice排序，很明显这样通过服务端转换的数据源是没办法支持的（因为在数据库分页前的数据源并没有newPrice这个字段）。
另外在C#服务端处理，其实是比较占内存的，其一对DataTable遍历了两次，另外还用了临时键值对对象，反复赋值是有性能消耗。
综上所述，最终我选择放在数据库来构建这两列。
关于第一列局部排序，我很快想到了一个以前看过的语法 ROW_NUMBER() OVER(PARTITION BY...ORDER BY)，于是第一列expandfield很容易就构建了，SQL如下：
复制代码 代码如下:
SELECT '第' + CAST(ROW_NUMBER() OVER(PARTITION BY GoodsId ORDER BY audittime DESC) AS VARCHAR(10)) + '次变迁' AS expandfield,
GoodsId, price , discount , newPrice , begindate as [date]
FROM #test
但真正麻烦的是第二列，我抠破脑壳来想都没想出来，甚至想到用临时表来记录这个结果集，然后用游标来遍历结果集，update这个表来修改记录，但还是感觉相当的繁琐，而且性能很差。后来我请教了下公司的DBA，她给出了一种思路，这种方案无论从效率还是可行性都是最优的。先贴出代码如下：
复制代码 代码如下:
WITH _TEMP AS (
SELECT ROW_NUMBER() OVER ( PARTITION BY GoodsId ORDER BY audittime DESC ) AS num2 ,
ROW_NUMBER() OVER ( PARTITION BY GoodsId ORDER BY audittime ) AS num ,
GoodsId, price , discount , newPrice , begindate as [date]
FROM #test
)
SELECT '第' + CAST(a.num AS VARCHAR(10)) + '次变迁' AS expandfield ,
a.goodsid , a.price , a.discount , a.newprice , a.date , b.newprice AS curprice
FROM _TEMP a
INNER JOIN _TEMP b ON a.GoodsId = b.GoodsId AND b.num2 = 1
这里用了一个CTE表达式的自关联查询，从性能上说是很有优势的，相对于临时表减少了对tempdb的开销，另外代码的可读性也比嵌套查询更强，num列是用来构建第几次变迁列的，这里很巧妙得多加了按照audittime降序列的num2列，在下面临时记录b中，通过指定b.num2 = 1取得所有goodsid最后变价的记录，再通过一个INNER JOIN就得到了我们想要的值curprice值。
另外补充一下，像上面存在多个列上排序字段时，SQL会选择后者进行重排，即先按goodsid分组，然后再各个组中按audittime升序排列，如果将num放在前，num2放在后，是得不到我们要的记录。
相关文章
这篇文章是笔记的总结，主要介绍了MySQL slave延迟一列，外键检查和自增加锁，感兴趣的朋友可以参考下文，希望能帮助到你2021-09-09
sqlserver合并DataTable并排除重复数据的通用方法分享
网上合并DataTable通用方法的文章很多，结合项目开发中的常用需求，并借鉴网上的做法，写了一个合并DataTable的通用方法，主要功能是合并两个DataTable（结构可以不同，如字段不完全一致），并可以根据某一列值进行排重处理2011-12-12
这篇文章主要介绍了SQL server 定时自动备份数据库的图文方法,需要的朋友可以参考下2017-02-02
Row_number()函数是SQL SERVER系统函数中的一种，本文主要介绍了Row_number()函数用法小结，文中根据实例编码详细介绍的十分详尽，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2023-05-05
这篇文章主要介绍了SQL中EXISTS的用法，本文结合示例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2023-06-06
这篇文章主要介绍了SQL 使用 VALUES 生成带数据的临时表，本文通过实例代码给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下2007-09-09
SQL Server 2012 sa用户登录错误18456的解决方法
这篇文章主要为大家详细介绍了SQL Server 2012 sa用户登录错误18456的解决方法，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2017-09-09
批量执行数据库插入，可以了解下sql的begin使用方法2008-12-12
在关系数据库的世界中,SQL Server 一直以其强大的功能脱颖而出,在本文中,我将探讨如何在 SQL Server 中存储、查询和操作 XML 数据,需要的可以参考下2024-12-12
总出现“SQL Server不存在或访问被拒绝”。1,SQL Server名称或IP地址拼写有误 2,服务器端网络配置有误3,客户端网络配置有误2007-12-12
最新评论