如何直接访问显卡的输出?

时间:2016-07-22 21:57:37

标签: c graphics gpu

显卡通常会将输出写入我可以访问的内存中的某个位置吗?我必须使用驱动程序吗?如果是这样,我可以使用OpenGL吗?

我想知道是否有可能“捕获”Linux上可直接访问GPU的VM的输出,并且正在运行Windows。理想情况下,我可以直接访问内存中的输出,而无需触及GPU,因为此代码可以在Linux主机上运行。

另一个选择是编写一个Windows驱动程序,它读取GPU的输出并将其写入内存中的某个位置。然后,在Linux端,程序可以读取此内存。这似乎有些不可能,因为我不确定如何让主机上的进程与guest虚拟机上的进程共享内存。

是否可以执行选项1并简单地从内存中读取输出?

1 个答案:

答案 0 :(得分:4)

我不在 Linux 下编码,但在 Windows 中(无论如何都是在模拟器中运行),您可以使用 WinAPI 直接访问画布来自第3个派对应用程序的任何窗口甚至桌面一些 GPU 叠加可能会有问题(尤其是基于 DirectX ),但我现在对我的 GL / GLSL 没有任何问题。

如果您有权访问应用源代码,则可以直接使用glReadPixels GL 中提取图像(但这仅适用于当前基于 GL 的渲染)。

  1. 使用glReadPixels

    如上所述,这必须直接在目标应用中实现,因此您需要拥有源代码或在正确的位置/时间注入代码。我用它来截取这段代码:

    void OpenGLscreen::screenshot(Graphics::TBitmap *bmp)
        {
        if (bmp==NULL) return;
        int *dat=new int[xs*ys],x,y,a,*p;
        if (dat==NULL) return;
        bmp->HandleType=bmDIB;
        bmp->PixelFormat=pf32bit;
        if ((bmp->Width!=xs)||(bmp->Height!=ys)) bmp->SetSize(xs,ys);
        if ((bmp->Width==xs)&&(bmp->Height==ys))
            {
            glReadPixels(0,0,xs,ys,GL_BGRA,GL_UNSIGNED_BYTE,dat);
            glFinish();
            for (a=0,y=ys-1;y>=0;y--)
             for (p=(int*)bmp->ScanLine[y],x=0;x<xs;x++,a++)
              p[x]=dat[a];
            }
        delete[] dat;
        }
    

    其中xs,ys是OpenGL窗口分辨率,您可以忽略整个bmp内容(它是我用来存储屏幕截图的VCL位图),也可以忽略for它只是复制从缓冲区到位图的图像。所以重要的是这个:

    int *dat=new int[xs*ys]; // each pixel is 32bit int
    glReadPixels(0,0,xs,ys,GL_BGRA,GL_UNSIGNED_BYTE,dat);
    glFinish();
    

    您需要在渲染完成后执行此代码,否则您将获得未完成或空缓冲区。我在重绘/重绘事件后使用它。如前所述,这将只获得GL渲染的东西,所以如果你的App结合了GDI + OpenGL,最好使用下一种方法。

  2. WinAPI方法

    要获取我写这个类的任何窗口的Canvas图像:

    //---------------------------------------------------------------------------
    //--- screen capture ver: 1.00 ----------------------------------------------
    //---------------------------------------------------------------------------
    class scrcap
        {
    public:
        HWND hnd,hnda;
        TCanvas *scr;
        Graphics::TBitmap *bmp;
        int x0,y0,xs,ys;
        scrcap()
            {
            hnd=NULL;
            hnda=NULL;
            scr=new TCanvas();
            bmp=new Graphics::TBitmap;
            #ifdef _mmap_h
            mmap_new('scrc',scr,sizeof(TCanvas()        ));
            mmap_new('scrc',bmp,sizeof(Graphics::TBitmap));
            #endif
            if (bmp)
                {
                bmp->HandleType=bmDIB;
                bmp->PixelFormat=pf32bit;
                }
            x0=0; y0=0; xs=1; ys=1;
            hnd=GetDesktopWindow();
            }
        ~scrcap()
            {
            #ifdef _mmap_h
            mmap_del('scrc',scr);
            mmap_del('scrc',bmp);
            #endif
            if (scr) delete scr; scr=NULL;
            if (bmp) delete bmp; bmp=NULL;
            }
        void init(HWND _hnd=NULL)
            {
            RECT r;
            if (scr==NULL) return;
            if (bmp==NULL) return;
            bmp->SetSize(1,1);
            if (!IsWindow(_hnd)) _hnd=hnd;
            scr->Handle=GetDC(_hnd);
            hnda=_hnd;
            resize();
            }
        void resize()
            {
            if (!IsWindow(hnda)) return;
            RECT r;
    //      GetWindowRect(hnda,&r);
            GetClientRect(hnda,&r);
            x0=r.left; xs=r.right-x0;
            y0=r.top; ys=r.bottom-y0;
            bmp->SetSize(xs,ys);
            xs=bmp->Width;
            ys=bmp->Height;
            }
        void capture()
            {
            if (scr==NULL) return;
            if (bmp==NULL) return;
            bmp->Canvas->CopyRect(Rect(0,0,xs,ys),scr,TRect(x0,y0,x0+xs,y0+ys));
            }
        };
    //---------------------------------------------------------------------------
    //---------------------------------------------------------------------------
    //---------------------------------------------------------------------------
    

    它再次使用 VCL ,因此将位图bmp和canvas scr重写为您的编程环境样式。还igneore _mmap_h代码块,它们只是用于调试/跟踪内存指针,这些内存指针与我当时面对的一些令人讨厌的编译器错误有关。

    用法很简单:

    // globals
    scrcap cap;
    // init
    cap.init();
    
    // on screenshot
    cap.capture();
    // here use cap.bmp
    

    如果您致电cap.init(),它将锁定整个Windows桌面。如果您致电cap.init(window_handle),它将锁定特定的可视窗口/组件。要从第3个应用程序端获取窗口句柄,请参阅:

    很抱歉它在SE / RE上而不是在SE / SO上,但我在这里的答案已被删除。我用它来进行视频捕捉......我的答案中的所有动画GIF都是由这段代码创建的。另一个例子可以在我的答案的底部看到:

    正如您所看到的,它也适用于具有媒体播放器经典的DirectX覆盖(即使是Windows PrintScreen功能也无法正确执行)。正如我所写,我对此没有任何问题。

    小心视觉内容 WinAPI 调用必须来自APP MAIN THREAD(WNDPROC),否则可能会出现严重问题,从而导致应用程序中任意位置的随机无关WinAPI调用异常。< / p>