PLINQ neden sadece iki iş parçacığı kullanıyor?

Question

G/Ç bağımlı görevim var. WithDegreeOfParallelism = 10 ve WithExecution = ForceParallelism modunu kullanıyorum, ancak yine de sorgu yalnızca iki iş parçacığı kullanıyor. Niye ya?

PLINQ'nin genellikle çekirdek sayımla eşdeğer bir paralellik derecesi seçeceğini anlıyorum, ancak neden daha yüksek bir paralellik için özel isteğimi görmezden geliyor? Eğer bir olsaydı

static void Main(string[] args) 
{ 
    TestParallel(0.UpTo(8)); 
} 

private static void TestParallel(IEnumerable<int> input) 
{ 
    var timer = new Stopwatch(); 
    timer.Start(); 
    var size = input.Count(); 

    if (input.AsParallel(). 
     WithDegreeOfParallelism(10). 
     WithExecutionMode(ParallelExecutionMode.ForceParallelism). 
     Where(IsOdd).Count() != size/2) 
     throw new Exception("Failed to count the odds"); 

    timer.Stop(); 
    Console.WriteLine("Tested " + size + " numbers in " + timer.Elapsed.TotalSeconds + " seconds"); 
} 

private static bool IsOdd(int n) 
{ 
    Thread.Sleep(1000); 
    return n%2 == 1; 
} 

Answer 1

PLINQ buradaki bilgileri sadece cpu üzerinde 2 çekirdek varsa, mümkün olduğunca çabuk yapmak istediğim gerçekleştirmek için Uygun thread sayısına bulmaya çalışır, bu sayı büyük olasılıkla 2'dir Dört çekirdekli, 4 başlığın göründüğünü görmeniz daha muhtemeldir, ancak çift çekirdekli bir makinede 4 iş parçacığı oluşturmak, yalnızca 2 iş parçacığı aynı anda etkin olabileceğinden performansı gerçekten iyileştirmez. Ayrıca, IO tabanlı işlemlerde, herhangi bir fazla iş parçacığının gerçekleştirilen ilk IO işlemi üzerinde basit bir şekilde bloke olması muhtemeldir.

Answer 2

sorguda kullanımı paralellik derecesini ayarlar maksimumdur. Paralellik derecesi , eşzamanlı olarak maksimum sayısıdır, sorgusu için kullanılacak görevleri yürütür. Buradan

:

MSDN

Answer 3

O PLINQ parçacığı sayısını ayarlamaktadır görünür. Yukarıdaki kodu bir süre (true) döngüsüne sardığımda, ilk iki yinelemenin çalışması iki saniye sürdü, ancak üçüncü ve üstü sadece bir saniye sürdü. PLINQ, çekirdeklerin boş olduğunu ve iplik sayısını artırdığını anladı. Etkileyici!

Answer 4

IO hariç Rory'ye katılıyorum. Disk IO ile test edilmedi, ancak ağ IO, CPU üzerinde çekirdekler olduğundan daha fazla iş parçacığı ile daha etkili olabilir.

Basit testi (ağ hızı sabit değildir gibi birkaç kez saymak her iş parçacığı ile testi çalıştırmak için daha doğru olacaktır, ama yine de) olduğunu kanıtlamak için: CDN dan 500x500px görüntü ile

[Test] 
    public void TestDownloadThreadsImpactToSpeed() 
    { 
     var sampleImages = Enumerable.Range(0, 100) 
      .Select(x => "url to some quite large file from good server which does not have anti DSS stuff.") 
      .ToArray();    

     for (int i = 0; i < 8; i++) 
     { 
      var start = DateTime.Now; 
      var threadCount = (int)Math.Pow(2, i); 
      Parallel.For(0, sampleImages.Length - 1, new ParallelOptions {MaxDegreeOfParallelism = threadCount}, 
         index => 
          { 
           using (var webClient = new WebClient()) 
           { 
            webClient.DownloadFile(sampleImages[index], 
                  string.Format(@"c:\test\{0}", index)); 
           } 
          }); 

      Console.WriteLine("Number of threads: {0}, Seconds: {1}", threadCount, (DateTime.Now - start).TotalSeconds); 
     } 
    } 

Sonucu SSD ile 8 çekirdekli makinesi kullanılarak: 1 olarak, Saniye: parçacığı 25,3904522
sayısı: 2, saniye: parçacığı

Sayı 4, Saniye: 9,9325681parçacığı 10,8986233
sayısı parçacığı sayısı: 8, saniye: 3,7352137
parçacığı sayısı: 16, Saniye: parçacığı 3,3071892
sayısı: 32, saniye: 3,1421797
parçacığı sayısı: 64, saniye: 3,1161782
parçacığı sayısı: 128, Saniye: 3,7272132

Son sonuç bu konuda biz yalnızca 100 görüntü :) 8-64 konuları büyük değil kullanılarak

zaman farklılıkları indirmek zorunda çünkü ben öncelikle düşünmek böyle bir zaman, ama 8 çekirdekli makine.Eğer 2 çekirdekli makine (ucuz endüzör dizüstü bilgisayar) olsaydı, 8 iş parçacığı kullanmak için zorlamak 8 iş parçacığı 64 iş parçacığı kullanmak için zorlama daha fazla etkiye sahip olacağını düşünüyorum.