实现C#yield语句的算法

时间:2008-09-25 07:15:28

标签: c# algorithm compiler-construction iterator state-machine

我想自己弄明白但是我想知道粗略地将带有yield语句的函数转换为枚举器的状态机的算法是什么?例如C#如何转为:

IEnumerator<string> strings(IEnumerable<string> args)
 { IEnumerator<string> enumerator2 = getAnotherEnumerator();     
   foreach(var arg in arg) 
    { enumerator2.MoveNext();
      yield return arg+enumerator.Current;
    } 
 }

进入这个:

bool MoveNext()
 { switch (this.state)
    {
        case 0:
            this.state = -1;
            this.enumerator2 = getAnotherEnumerator();
            this.argsEnumerator = this.args.GetEnumerator();
            this.state = 1;
            while (this.argsEnumerator.MoveNext())
            {
                this.arg = this.argsEnumerator.Current;
                this.enumerator2.MoveNext();
                this.current = this.arg + this.enumerator2.Current;
                this.state = 2;
                return true;

              state1:
                this.state = 1;
            }
            this.state = -1;
            if (this.argsEnumerator != null) this.argsEnumerator.Dispose();
            break;

        case 2:
            goto state1;
    }
    return false;
}

当然,根据原始代码,结果可能完全不同。

3 个答案:

答案 0 :(得分:59)

您正在查看的特定代码示例涉及一系列转换。 请注意,这是算法的近似描述。编译器使用的实际名称及其生成的确切代码可能不同。然而,这个想法是一样的。

第一个转换是“foreach”转换,它转换了这段代码:

foreach (var x in y)
{
   //body
}

进入此代码:

var enumerator = y.GetEnumerator();
while (enumerator.MoveNext())
{
    var x = enumerator.Current;
    //body
}

if (y != null)
{
    enumerator.Dispose();
}

第二个转换在函数体中查找所有yield return语句,为每个语句赋值(状态值),并在yield之后创建一个“goto label”。

第三个转换将方法体中的所有局部变量和函数参数提升到一个名为闭包的对象中。

鉴于您示例中的代码,它看起来与此类似:

 class ClosureEnumerable : IEnumerable<string>
 {
    private IEnumerable<string> args;
    private ClassType originalThis;
    public ClosureEnumerator(ClassType origThis, IEnumerable<string> args)
    {
        this.args = args;
        this.origianlThis = origThis;
    }
    public IEnumerator<string> GetEnumerator()
    {
        return new Closure(origThis, args);
    }
 }

class Closure : IEnumerator<string>
{
    public Closure(ClassType originalThis, IEnumerable<string> args)
    {
        state = 0;
        this.args = args;
        this.originalThis = originalThis;
    }

    private IEnumerable<string> args;
    private IEnumerator<string> enumerator2;
    private IEnumerator<string> argEnumerator;

    //- Here ClassType is the type of the object that contained the method
    //  This may be optimized away if the method does not access any 
    //  class members
    private ClassType originalThis;

    //This holds the state value.
    private int state;
    //The current value to return
    private string currentValue;

    public string Current
    {
        get 
        {
            return currentValue;
        }
    }
}

然后将方法体从原始方法移动到名为MoveNext的“Closure”内的方法,该方法返回bool,并实现IEnumerable.MoveNext。 对任何本地人的任何访问都通过“this”进行路由,对任何类成员的任何访问都通过this.originalThis进行路由。

任何“yield return expr”都会被翻译成:

currentValue = expr;
state = //the state number of the yield statement;
return true;

任何yield break语句都会被翻译成:

state = -1;
return false;

函数末尾有一个“隐式”yield break语句。 然后在过程开始时引入switch语句,该语句查看状态编号并跳转到关联的标签。

然后将原始方法翻译成如下:

IEnumerator<string> strings(IEnumerable<string> args)
{
   return new ClosureEnumerable(this,args);
}

将方法的状态全部推入对象并且MoveNext方法使用switch语句/状态变量的事实允许迭代器的行为就像控件被传递回最后一个点之后的那样“yield return”语句下次调用“MoveNext”时。

然而,重要的是要指出C#编译器使用的转换不是执行此操作的最佳方法。当尝试使用递归算法的“yield”时,它的性能很差。有一篇好文章概述了一种更好的方法:

http://research.microsoft.com/en-us/projects/specsharp/iterators.pdf

如果你还没读过,那值得一读。

答案 1 :(得分:7)

Raymond chen回答这个问题; http://blogs.msdn.com/b/oldnewthing/archive/2008/08/12/8849519.aspx

(编辑指向系列的第1部分,而不是第4部分)

答案 2 :(得分:7)

刚刚发现了这个问题 - 我wrote an article。我将不得不将这里提到的其他链接添加到文章中......