Un método que usa yield return es un iterador: produce una secuencia elemento a elemento, solo a medida que el llamador pide el siguiente. Nada del método se ejecuta hasta el primer MoveNext (la primera vuelta de un foreach), y puede parar antes o incluso no acabar nunca, porque es el llamador quien decide cuántos elementos toma.
Esa evaluación diferida tiene una trampa: las comprobaciones de argumentos dentro de un iterador también esperan a que alguien recorra la secuencia. Para que falle en la llamada, pon las comprobaciones en un método normal que después devuelva un iterador privado.
Un iterador async devuelve IAsyncEnumerable<T> y puede hacer await entre elementos, algo ideal para API paginadas y archivos: el llamador lo lee con await foreach, y la página siguiente solo se pide cuando se ha usado la actual. Para la cancelación, dale al método un parámetro CancellationToken marcado con [EnumeratorCancellation]; así los llamadores pueden escribir .WithCancellation(token) sobre el flujo.
Un iterador async que pide páginas solo a medida que el llamador lee, y el await foreach que lo lee.