• WebGL 选中物体


    目录

    前言

    如何实现选中物体

    示例程序(PickObject.js)

    代码详解 

    gl.readPixels()函数规范

    示例效果


    前言

    有些三维应用程序需要允许用户能够交互地操纵三维物体,要这样做首先就得允许用户选中某个物体。对物体进行选中操作的用处很广泛。比如,让用户选中三维用户界面上的一个按钮,或者让用户选中三维场景中的多张照片中的某一张,这些动作都具有实际意义。

    选中三维物体比选中二维物体更加复杂,因为我们需要更多的数学过程来计算鼠标是否悬浮在某个图形上。但是,示例程序PickObject使用了一个简单的技巧解决了这一问题。在本例中,用户可以点击正在旋转的立方体,如果用户点击到了立方体,就显示一则消息,如下图所示。现在,请先在浏览器中运行示例程序,点击立方体试图选中它,直观地了解一下该示例程序的作用。

    上图显示了用户点击立方体时浏览器弹出的消息。这则消息说,“The cube was selected!”(立方体被选中了!)。同样,你也可以试试在黑色背景上点击会不会弹出这则消息。 

    如何实现选中物体

    我们遵循以下步骤,检查鼠标点击是否击中了立方体:

    1. 当鼠标左键按下时,将整个立方体重绘为单一的红色,如下图(中)所示。

    2. 读取鼠标点击处的像素颜色。

    3. 使用立方体原来的颜色对其进行重绘。

    4. 如果第2步读取到的颜色是红色,就显示消息“The cube was selected!”。

    如果不加以处理,那么当立方体被重绘为红色时,就可以看到这个立方体闪烁了一下,而且闪烁的一瞬间是红色的。然后我们读取鼠标点击处的像素在这一瞬间的颜色值,就可以通过判断该颜色是否为红色来确定鼠标是否点击在了立方体上。

    鼠标点击立方体的过程

    为了使用户看不到立方体的这一闪烁过程,我们还得在取出像素颜色之后立即(而不是等到下一帧)将立方体重绘成原来的样子。下面来看一下示例程序代码。 

    示例程序(PickObject.js)

    如下显示了示例程序的代码。实现上述第1步将立方体重绘为红色的过程,发生在顶点着色器中,我们向其中添加了一个u_Clicked变量(第7行),这样就可以在恰当的时候通过该变量通知顶点着色器将立方体绘制成红色。鼠标点击时,JavaScript就会向u_Click变量传入true值,然后顶点着色器经过判断(第11行),将一个固定的颜色值(1.0,0.0,0.0,1.0)即红色,赋值给v_Color变量。如果u_Click为false,那么顶点着色器就照常将立方体原来的颜色a_Color赋值给v_Color。这样一来,鼠标点击时,立方体就被绘制成红色。

    1. var VSHADER_SOURCE =
    2. 'attribute vec4 a_Position;\n' +
    3. 'attribute vec4 a_Color;\n' +
    4. 'uniform mat4 u_MvpMatrix;\n' +
    5. 'uniform bool u_Clicked;\n' + // 按下鼠标
    6. 'varying vec4 v_Color;\n' +
    7. 'void main() {\n' +
    8. ' gl_Position = u_MvpMatrix * a_Position;\n' +
    9. ' if (u_Clicked) {\n' + // 如果按下鼠标,则以红色绘制
    10. ' v_Color = vec4(1.0, 0.0, 0.0, 1.0);\n' +
    11. ' } else {\n' +
    12. ' v_Color = a_Color;\n' +
    13. ' }\n' +
    14. '}\n';
    15. var FSHADER_SOURCE =
    16. '#ifdef GL_ES\n' +
    17. 'precision mediump float;\n' +
    18. '#endif\n' +
    19. 'varying vec4 v_Color;\n' +
    20. 'void main() {\n' +
    21. ' gl_FragColor = v_Color;\n' +
    22. '}\n';
    23. var ANGLE_STEP = 20.0; // 旋转角度(20度/秒)
    24. function main() {
    25. var canvas = document.getElementById('webgl');
    26. var gl = getWebGLContext(canvas);
    27. if (!initShaders(gl, VSHADER_SOURCE, FSHADER_SOURCE)) return
    28. var n = initVertexBuffers(gl);
    29. gl.clearColor(0.0, 0.0, 0.0, 1.0);
    30. gl.enable(gl.DEPTH_TEST);
    31. var u_MvpMatrix = gl.getUniformLocation(gl.program, 'u_MvpMatrix');
    32. var u_Clicked = gl.getUniformLocation(gl.program, 'u_Clicked');
    33. var viewProjMatrix = new Matrix4();
    34. viewProjMatrix.setPerspective(30.0, canvas.width / canvas.height, 1.0, 100.0);
    35. viewProjMatrix.lookAt(0.0, 0.0, 7.0, 0.0, 0.0, 0.0, 0.0, 1.0, 0.0);
    36. gl.uniform1i(u_Clicked, 0); // false传递给uClickd
    37. var currentAngle = 0.0; // 当前旋转角度
    38. canvas.onmousedown = function(ev) { // 按下鼠标
    39. var x = ev.clientX, y = ev.clientY;
    40. var rect = ev.target.getBoundingClientRect();
    41. if (rect.left <= x && x < rect.right && rect.top <= y && y < rect.bottom) {
    42. // 如果按下的位置在<canvas>内,请检查它是否在对象上方
    43. var x_in_canvas = x - rect.left, y_in_canvas = rect.bottom - y;
    44. var picked = check(gl, n, x_in_canvas, y_in_canvas, currentAngle, u_Clicked, viewProjMatrix, u_MvpMatrix);
    45. if (picked) alert('The cube was selected! ');
    46. }
    47. }
    48. var tick = function() { // 开始绘图
    49. currentAngle = animate(currentAngle);
    50. draw(gl, n, currentAngle, viewProjMatrix, u_MvpMatrix);
    51. requestAnimationFrame(tick, canvas);
    52. };
    53. tick();
    54. }
    55. function initVertexBuffers(gl) {
    56. // v6----- v5
    57. // /| /|
    58. // v1------v0|
    59. // | | | |
    60. // | |v7---|-|v4
    61. // |/ |/
    62. // v2------v3
    63. var vertices = new Float32Array([ // Vertex coordinates
    64. 1.0, 1.0, 1.0, -1.0, 1.0, 1.0, -1.0,-1.0, 1.0, 1.0,-1.0, 1.0, // v0-v1-v2-v3 front
    65. 1.0, 1.0, 1.0, 1.0,-1.0, 1.0, 1.0,-1.0,-1.0, 1.0, 1.0,-1.0, // v0-v3-v4-v5 right
    66. 1.0, 1.0, 1.0, 1.0, 1.0,-1.0, -1.0, 1.0,-1.0, -1.0, 1.0, 1.0, // v0-v5-v6-v1 up
    67. -1.0, 1.0, 1.0, -1.0, 1.0,-1.0, -1.0,-1.0,-1.0, -1.0,-1.0, 1.0, // v1-v6-v7-v2 left
    68. -1.0,-1.0,-1.0, 1.0,-1.0,-1.0, 1.0,-1.0, 1.0, -1.0,-1.0, 1.0, // v7-v4-v3-v2 down
    69. 1.0,-1.0,-1.0, -1.0,-1.0,-1.0, -1.0, 1.0,-1.0, 1.0, 1.0,-1.0 // v4-v7-v6-v5 back
    70. ]);
    71. var colors = new Float32Array([ // Colors
    72. 0.2, 0.58, 0.82, 0.2, 0.58, 0.82, 0.2, 0.58, 0.82, 0.2, 0.58, 0.82, // v0-v1-v2-v3 front
    73. 0.5, 0.41, 0.69, 0.5, 0.41, 0.69, 0.5, 0.41, 0.69, 0.5, 0.41, 0.69, // v0-v3-v4-v5 right
    74. 0.0, 0.32, 0.61, 0.0, 0.32, 0.61, 0.0, 0.32, 0.61, 0.0, 0.32, 0.61, // v0-v5-v6-v1 up
    75. 0.78, 0.69, 0.84, 0.78, 0.69, 0.84, 0.78, 0.69, 0.84, 0.78, 0.69, 0.84, // v1-v6-v7-v2 left
    76. 0.32, 0.18, 0.56, 0.32, 0.18, 0.56, 0.32, 0.18, 0.56, 0.32, 0.18, 0.56, // v7-v4-v3-v2 down
    77. 0.73, 0.82, 0.93, 0.73, 0.82, 0.93, 0.73, 0.82, 0.93, 0.73, 0.82, 0.93, // v4-v7-v6-v5 back
    78. ]);
    79. var indices = new Uint8Array([
    80. 0, 1, 2, 0, 2, 3, // front
    81. 4, 5, 6, 4, 6, 7, // right
    82. 8, 9,10, 8,10,11, // up
    83. 12,13,14, 12,14,15, // left
    84. 16,17,18, 16,18,19, // down
    85. 20,21,22, 20,22,23 // back
    86. ]);
    87. if (!initArrayBuffer(gl, vertices, gl.FLOAT, 3, 'a_Position')) return -1; // 坐标信息
    88. if (!initArrayBuffer(gl, colors, gl.FLOAT, 3, 'a_Color')) return -1; // 颜色信息
    89. var indexBuffer = gl.createBuffer();
    90. gl.bindBuffer(gl.ELEMENT_ARRAY_BUFFER, indexBuffer);
    91. gl.bufferData(gl.ELEMENT_ARRAY_BUFFER, indices, gl.STATIC_DRAW);
    92. return indices.length;
    93. }
    94. function check(gl, n, x, y, currentAngle, u_Clicked, viewProjMatrix, u_MvpMatrix) {
    95. var picked = false;
    96. gl.uniform1i(u_Clicked, 1); // 将true传递给uClickd
    97. draw(gl, n, currentAngle, viewProjMatrix, u_MvpMatrix); // 用红色绘制立方体
    98. // 读取点击位置的像素
    99. var pixels = new Uint8Array(4); // 用于存储像素值的数组
    100. gl.readPixels(x, y, 1, 1, gl.RGBA, gl.UNSIGNED_BYTE, pixels);
    101. if (pixels[0] == 255) picked = true;
    102. gl.uniform1i(u_Clicked, 0); // 如果R(像素[0])为255,则鼠标在立方体上
    103. draw(gl, n, currentAngle, viewProjMatrix, u_MvpMatrix); // 绘制立方体
    104. return picked;
    105. }
    106. var g_MvpMatrix = new Matrix4(); // Model view projection matrix
    107. function draw(gl, n, currentAngle, viewProjMatrix, u_MvpMatrix) {
    108. // 校准模型视图投影矩阵并将其传递给u_MvpMatrix
    109. g_MvpMatrix.set(viewProjMatrix);
    110. g_MvpMatrix.rotate(currentAngle, 1.0, 0.0, 0.0); // 适当旋转
    111. g_MvpMatrix.rotate(currentAngle, 0.0, 1.0, 0.0);
    112. g_MvpMatrix.rotate(currentAngle, 0.0, 0.0, 1.0);
    113. gl.uniformMatrix4fv(u_MvpMatrix, false, g_MvpMatrix.elements);
    114. gl.clear(gl.COLOR_BUFFER_BIT | gl.DEPTH_BUFFER_BIT); // 清除颜色和深度缓冲区
    115. gl.drawElements(gl.TRIANGLES, n, gl.UNSIGNED_BYTE, 0); // 最终绘
    116. }
    117. var last = Date.now(); // 上次调用此函数的时间
    118. function animate(angle) {
    119. var now = Date.now(); // 计算运行时间
    120. var elapsed = now - last;
    121. last = now;
    122. // 更新当前旋转角度(根据经过的时间进行调整)
    123. var newAngle = angle + (ANGLE_STEP * elapsed) / 1000.0;
    124. return newAngle % 360;
    125. }
    126. function initArrayBuffer (gl, data, type, num, attribute) {
    127. var buffer = gl.createBuffer();
    128. gl.bindBuffer(gl.ARRAY_BUFFER, buffer);
    129. gl.bufferData(gl.ARRAY_BUFFER, data, gl.STATIC_DRAW);
    130. var a_attribute = gl.getAttribLocation(gl.program, attribute);
    131. gl.vertexAttribPointer(a_attribute, num, type, false, 0, 0);
    132. gl.enableVertexAttribArray(a_attribute);
    133. return true;
    134. }

    代码详解 

    在main()函数中(第25行),我们获取了u_Click变量的存储地址,并将初始值false值传给该变量(第37行)。

    然后,注册事件响应函数,用户点击鼠标后立即调用之(第40行)。事件响应函数首先检查鼠标点击位置是否在<canvas>内(第43行)。如果是,则调用check()函数(第46行)。check()函数的作用是,根据第3个和第4个参数传入的点击位置坐标,判断是否点击在立方体上。如果是,则返回true,并显示消息(第47行)。

    check()函数执行上述的第2步和第3步(第99行):首先将true传给顶点着色器的u_Click变量,以通知顶点着色器鼠标被点击了(第101行);然后根据立方体的当前旋转角度重绘立方体,由于此时u_Click为true,所以立方体是红色的;接着调用gl.readPixels()函数从帧缓冲区中(非颜色缓冲区)读取点击处的像素颜色(第105行)。下面是该函数的规范。

    gl.readPixels()函数规范

    如果一个帧缓冲区对象被绑定在gl.FRAMEBUFFER上,那么这个方法就会去读取帧缓冲区而非颜色缓冲区中的内容 

    读取到的像素颜色值被保存在pixels数组中,它是一个长度为4的数组(第104行),4个元素pixels[0]、pixels[1]、pixels[2]、pixels[3]分别存储了像素的R、G、B、A的值。本例只需要读取一个像素,所以width和height参数都是1,根据这个像素是红色还是黑色,就可以判断出鼠标点击在了立方体上还是背景上。我们检查红色分量pixels[0],如果是1.0,就将picked变量赋值为true。

    然后,将u_Click变量恢复为false(第107行),重新绘制立方体为原始的颜色(第108行)。最后将picked变量返回,check()函数就结束了。

    注意,如果在重绘正常状态的立方体之前,就进行某个会阻塞代码继续运行的操作,如调用alert()函数,那么这时,已经写入颜色缓冲区中的内容就会显示在<canvas>上。比如,如果我们在第106行执行(实际上我们并没有这么做)alert('The cube was displayed!'),那就真的会看到之前绘制的红色立方体了。

    对于具有多个物体的场景,这个简单的方法也能适用,只需要为场景中的每个物体都指定不同的颜色即可。比如场景中有三个物体,那么就可以使用红色、绿色和蓝色三种颜色。如果场景中有更多的物体,那么你可以为每个物体分配一个唯一的颜色值。通常,颜色缓冲区单个像素R、G、B、A每个分量都是8比特,也就是说,仅使用R分量就可以区分255个物体。

    示例效果

  • 相关阅读:
    C语言第二十弹--求最大公因数
    redis活跃非活跃连接数统计及client list说明
    一、用户数据仓库
    MySQL_数据库图形化界面软件_00000_00001
    卡尔曼滤波:The Scaler Kalman Filter常量卡尔曼滤波器
    NLP课程笔记-基于transformers的自然语言处理入门
    葡聚糖-叠氮|Dextran-Azide|叠氮修饰的葡聚糖|Dextran-N3|葡聚糖-聚乙二醇-叠氮
    数据库概述
    利用对话式人工智能简化运营:案例研究
    【error】root - Exception during pool initialization
  • 原文地址:https://blog.csdn.net/dabaooooq/article/details/133150416