可以在iOS和Android中以编程方式识别和识别屏幕上的对象。
使用案例
App 1已打开，其自己的活动区域，按钮或其他目标对象在屏幕上可见。 App 2可以识别屏幕上的内容，并且可能会显示部分覆盖按钮或根据对象的存在或不存在来执行自己的任务吗？
这可以在iOS和/或Android上使用，还是应用程序的会话在一个或两个操作系统上受到保护？
我发现这篇文章Understanding Object Identification in Android Open Applications但不仅仅是我的头脑，我不认为这是我所追求的。
我还发现这个Android: How can I get current opened application name on screen更接近，但仍然没有回答我的问题。
This Gist似乎表明屏幕“状态”实际上可以访问，但屏幕上的对象是否可以被识别并采取行动？