ループの中でawaitすると、呼び出しが1つずつ順に実行されます。それぞれ200 msの見積もりが10件なら、2秒かかります。呼び出し同士が依存しない場合は、まずすべてを開始し、その後Task.WhenAllでまとめてawaitしてください。待ち時間の合計は、最も遅い呼び出しとほぼ同じになります。WhenAllは、完了した順ではなく、渡したタスクの順に結果を返します。
いずれかのタスクが失敗すると、await Task.WhenAll(tasks)は最初の例外だけを投げます。他の例外も、なくなったわけではありません。後で各タスクのIsCompletedSuccessfully、Result、Exceptionを確認してください。
Task.WhenAnyは、最初に完了したタスクを返します。これを使って、タイムアウトのために呼び出しとTask.Delayを競わせます(または、.NET 6で追加されたtask.WaitAsync(timeout)を使います)。
すべてを同時に開始すると、相手側に過負荷をかけることがあります。カウントが3のSemaphoreSlimは、一度に3つの呼び出しを通します。呼び出しの前にawait gate.WaitAsync()、その後のfinallyでgate.Release()です。ここでの並行性とは、より多くのプロセッサーコアを使うことではなく、まとめて待つことです。これらの呼び出しは、ネットワークを待つことに時間を費やしているからです。