如何检测3d模型特定部分的点击（触摸）？

Question

我需要将3d模型加载到我的应用程序（不是游戏，不是它有任何区别）并检测用户何时触摸此模型的特定部分，以采取不同的操作。

我该怎么做？有可能吗？

Answer 1

我不熟悉Rajawali，但GitHub将其描述为OpenGL ES框架。正如您在上面的评论中所描述的那样，您需要考虑两个基本的用户操作，并且我将添加一个有用的操作：

1. 在某个方向滑过屏幕：在X中更改，在Y中更改。
2. 触摸屏幕上的某个（x，y）点，车辆处于某个方向。
3. （可选）放大/缩小以方便用户选择小镜子等小功能。

根据Rajawali公开的OpenGL ES详细信息，您需要执行以下一项或两项操作：

• 了解确定如何在2D屏幕上渲染3D场景的四个矩阵。
• 使用＆＃34; lookAt＆＃34;等名称查找Rajawali函数。或＆＃34; setViewpoint，＆＃34;并学习如何将屏幕手势信息传递给这些功能。

您可以在其他地方详细了解四个OpenGL矩阵。即使Rajawali稍微简化了编码，您也应该了解一下这些矩阵。虽然你的第一个倾向是改变＆＃34;模型＆＃34;影响对象位置和方向的矩阵，你更有可能操纵＆＃34;视图＆＃34;确定用户看到汽车的空间中的点和方向的矩阵。也就是说，汽车实际上将保持在（0,0,0）的中心，并且用户的滑动，触摸和捏合将改变视点。

限制运动以使车辆始终居中是很好的，因为您的代码可以更简单一些，并且还因为用户不能失去＆＃34;通过将视点滑向一侧太远的汽车。

视点的最简单变化是缩放，在大多数迭代中意味着简单地改变视点矩阵的Z平移。 Rajawali可以通过提供zoomIn（）和zoomOut（）函数使这更简单。否则你需要这样做：

1. 在回调或＆＃34;事件处理程序＆＃34;由Rajawali / Android提供捏合，获得捏合或捏合值。
2. 调用Rajawali zoomIn（）或zoomOut（）函数（如果存在）。您可能需要缩放该值，以便捏合的数量与放大和缩小汽车模型的预期相符。
3. 或者，设置视图矩阵的Z平移组件。

如果Rajawali没有提供类似于＆＃34; screenToWorld＆＃34;之类的适当功能，那么将（x，y）2D屏幕触摸点转换为投射到3D空间的光线可能会非常棘手。接受2D屏幕空间中的点和世界空间中的3D点或3D射线。花时间谷歌搜索＆＃34;光线投射＆＃34;对于Rajawali。以下简要概述了代码需要执行的操作：

1. 将2D触摸点转换为指向屏幕的3D光线。
2. 检查3D光线和各个子对象的交叉点。
3. （可选）更改颜色或突出显示所选对象。

OpenGL不提供光线投射功能，除非您别无选择，否则我不建议您自己实施。包围或补充OpenGL的各种框架可以提供此功能。 OpenGL编码器会因此描述我的错误，但是从内存中可以看出如何将2D接触点转换为指向屏幕的3D射线：

1. 从＆＃34;触摸＆＃34;获取（x，y）2D屏幕触摸点或＆＃34;点击＆＃34; Rajawali或Android中的回调或事件处理程序。
2. 将2D触摸点转换为3D点。如果我记得，这意味着将Z设置为某个值，例如-1,0或1.这是光线的基点。
3. 使用不同的Z值定义第二个3D点。这是射线的远点。
4. 使用屏幕，投影和视图矩阵将3D点转换为＆＃34; world＆＃34;空间。
5. 给定基点和远点的3D世界坐标，使用光线 - 物体交点确定相交的物体。

同样，Rajawali可能会提供一些功能来确定哪些物体与光线相交。如果返回多个对象，则选择最近的对象。由于您的车辆已经细分为多个子对象，因此这不应该太难。实现双指缩放可以使用户更容易选择一个小对象。

Swiping类似于OpenGL的鼠标移动，OpenGL的许多初学者项目描述了如何将鼠标移动转换为旋转。假设模型仅从地面到顶部围绕垂直轴旋转，那么您只需将左/右滑动更改为关于OpenGL通常为Y轴的正/负旋转。

1. 来自Android / Rajawali，处理＆＃34;轻扫＆＃34;事件处理程序或回调。这类似于＆＃34; mouseMove＆＃34;功能
2. 将左/右滑动转换为负值/正值。
3. 调用rotateAboutY（）函数（如果可用），或者将旋转应用于视点矩阵（我在这里不会描述）。

鉴于这一切，我建议采用以下方法：

1. 查看Rajawali是否提供便利功能，将屏幕坐标转换为世界光线，将屏幕滑动转换为旋转，以及测试与一系列物体的光线交叉点。
2. 即使Rajawali提供这些功能，也请阅读下面的低级OpenGL ES以及四个矩阵：屏幕，透视，视点和模型。
3. 如果Rajawali没有提供便利功能，请寻找一个框架，或者查看与Rajawali合作的其他库是否可以提供这些便利功能。
4. 如果您无法更改框架或找到隐藏凌乱细节的框架，请计划花一周或更长时间密切学习OpenGL。您可能不需要了解着色器，纹理等，但您需要了解OpenGL 3D空间，四个矩阵等等。