学习并行LINQ的一点总结

开发 后端
学习并行LINQ的时候我们需要明白什么概念以及应用呢?学习并行LINQ的前期需要准备什么知识呢?那么本文就向你介绍具体的内容。

我们了解和学习并行LINQ的时候首先来看看LINQ,LINQ(Language Integrated Query)是Visual Studio 2008中的重头戏,那么什么是并行LINQ呢?下面我们来看看具体的内容。

学习并行LINQ的前期:

借助于LINQ技术,我们可以使用一种类似SQL的语法来查询任何形式的数据。目前为止LINQ所支持的数据源有SQL Server、XML以及内存中的数据集合。开发人员也可以使用其提供的扩展框架添加更多的数据源,例如MySQL、Amazon甚至是Google Desktop。

一般来讲,这类查询语句的一个重要特点就是可以并行化执行。虽然有些情况下并行可能会带来一些问题,但这种情况非常少见。这样也就水到渠成地引出了PLINQ这个并行处理的LINQ类库。

PLINQ原名为Parallel LINQ,支持XML和内存中的数据集合。执行于远程服务器上的查询语句(例如LINQ to SQL)显然无法实现这个功能。

将LINQ语句转换为PLINQ语句极为简单——只需要在查询语句中From子句所指定的数据源的最后添加.AsParallel()即可。随后Where、OrderBy和Select子句将自动改为调用这个并行的LINQ版本。

并行LINQ之PLINQ可以以三种方式执行。

第一种是管道处理:一个线程用来读取数据源,而其他的线程则用来处理查询语句,二者同步进行——虽然这个单一的消费线程可能并不那么容易与多个生产线程同步。不过若是能够仔细配置好负载平衡的话,仍然会极大地减少内存占用。

第二种模式叫做“stop and go”,用于处理结果集需要被一次返回时(例如调用ToList、ToArray或对结果排序)的情况。在这种模式下,将依次完成各个处理过程,并将结果统一返回给消费线程。这个模式在性能上将优于第一种模式,因为它省去了用来保持线程同步所花费的开销。

第三种方法叫做“inverted enumeration”。该方法并不需要实现收集到所有的输出,然后在单一的线程中处理,而是将最终调用的函数通过ForAll扩展传递到每个线程中。 这是目前为止最快的一种处理模式,不过这需要传递到ForAll中的函数是线程安全的,且最好不包含任何lock之类的互斥语句。

若是PLINQ中任意的一个线程抛出异常,那么所有的其他线程将会被终止。若是抛出了多个异常,那么这些异常将被组合成一个MultipleFailuresException类型的异常,但每个异常的调用堆栈仍会被保留。

学习并行LINQ的相关内容就向你介绍到这里,希望对你了解和学习学习并行LINQ有所帮助。

【编辑推荐】

  1. LINQ动态查询的实现浅析
  2. LINQ TO SQL动态修改表名称的实现浅析
  3. LINQ To SQL的一点讨论
  4. 浅析LINQ事务处理的实现
  5. 浅析DataSet和DataTable
责任编辑:仲衡 来源: ittang.com
相关推荐

2009-09-14 16:00:51

LINQ基本操作LINQ

2009-09-14 19:44:27

LINQ To SQL

2012-03-27 08:49:19

Json

2009-08-28 16:30:24

C#线程

2010-05-20 15:29:43

优化IIS

2009-08-18 17:20:17

C#操作符重载

2018-03-21 14:23:39

vagrant测试环境

2009-08-18 13:06:17

C#枚举类型

2018-03-28 15:07:16

测试环境vagrant

2009-09-16 17:13:54

学习Linq

2017-12-29 21:49:36

2009-08-27 17:50:09

interface接口

2009-08-13 17:52:13

C#构造函数

2009-09-09 10:53:25

C# MessageB

2017-04-13 11:20:56

机器学习代码

2009-06-17 14:36:02

学习Java心得

2009-08-14 11:29:28

C#创建Windows

2009-07-09 15:09:05

JDK卸载

2009-09-03 14:28:23

C#日期格式化

2016-04-05 10:12:58

HiveSQLHadoop
点赞
收藏

51CTO技术栈公众号