adriangbot commented on PR #20481: URL: https://github.com/apache/datafusion/pull/20481#issuecomment-4069106975
๐ค Benchmark completed (GKE) | [trigger](https://github.com/apache/datafusion/pull/20481#issuecomment-4068979599) <details><summary>Details</summary> <p> ``` Comparing HEAD and parquet-morsel-driven-execution-237164415184908839 -------------------- Benchmark clickbench_pushdown.json -------------------- โโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโ โ Query โ HEAD โ parquet-morsel-driven-execution-237164415184908839 โ Change โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ QQuery 0 โ 1.58 / 4.78 ยฑ6.32 / 17.42 ms โ 1.62 / 4.84 ยฑ6.36 / 17.55 ms โ no change โ โ QQuery 1 โ 16.23 / 16.65 ยฑ0.26 / 17.04 ms โ 14.62 / 15.09 ยฑ0.39 / 15.78 ms โ +1.10x faster โ โ QQuery 2 โ 58.07 / 59.30 ยฑ1.22 / 61.58 ms โ 48.57 / 49.48 ยฑ0.72 / 50.45 ms โ +1.20x faster โ โ QQuery 3 โ 51.53 / 52.65 ยฑ0.67 / 53.60 ms โ 42.42 / 44.32 ยฑ1.66 / 47.10 ms โ +1.19x faster โ โ QQuery 4 โ 306.49 / 310.55 ยฑ2.75 / 315.05 ms โ 273.89 / 283.04 ยฑ5.45 / 290.21 ms โ +1.10x faster โ โ QQuery 5 โ 350.15 / 354.36 ยฑ3.68 / 360.13 ms โ 318.56 / 325.01 ยฑ4.35 / 332.08 ms โ +1.09x faster โ โ QQuery 6 โ 11.41 / 11.87 ยฑ0.45 / 12.54 ms โ 9.69 / 10.77 ยฑ1.05 / 12.11 ms โ +1.10x faster โ โ QQuery 7 โ 22.69 / 23.57 ยฑ0.92 / 25.19 ms โ 19.77 / 20.22 ยฑ0.34 / 20.82 ms โ +1.17x faster โ โ QQuery 8 โ 434.81 / 440.78 ยฑ4.10 / 445.21 ms โ 400.63 / 419.12 ยฑ12.02 / 434.14 ms โ no change โ โ QQuery 9 โ 667.83 / 679.13 ยฑ6.51 / 685.78 ms โ 532.15 / 535.49 ยฑ3.18 / 540.96 ms โ +1.27x faster โ โ QQuery 10 โ 121.78 / 125.47 ยฑ3.52 / 131.67 ms โ 102.99 / 106.41 ยฑ4.33 / 114.31 ms โ +1.18x faster โ โ QQuery 11 โ 135.72 / 136.35 ยฑ0.60 / 137.48 ms โ 115.53 / 115.71 ยฑ0.20 / 116.06 ms โ +1.18x faster โ โ QQuery 12 โ 381.12 / 385.44 ยฑ2.45 / 388.36 ms โ 345.06 / 346.97 ยฑ1.33 / 348.62 ms โ +1.11x faster โ โ QQuery 13 โ 496.26 / 511.63 ยฑ18.20 / 545.60 ms โ 455.11 / 489.49 ยฑ27.72 / 530.05 ms โ no change โ โ QQuery 14 โ 394.37 / 397.51 ยฑ1.66 / 399.08 ms โ 358.58 / 360.59 ยฑ2.47 / 365.29 ms โ +1.10x faster โ โ QQuery 15 โ 375.67 / 389.13 ยฑ11.29 / 408.18 ms โ 338.54 / 353.16 ยฑ15.73 / 383.08 ms โ +1.10x faster โ โ QQuery 16 โ 749.54 / 762.51 ยฑ16.00 / 793.46 ms โ 705.17 / 715.04 ยฑ7.01 / 723.97 ms โ +1.07x faster โ โ QQuery 17 โ 747.38 / 799.05 ยฑ31.29 / 845.65 ms โ 701.42 / 707.28 ยฑ4.82 / 715.36 ms โ +1.13x faster โ โ QQuery 18 โ 1478.83 / 1520.54 ยฑ23.82 / 1550.83 ms โ 1333.65 / 1450.60 ยฑ59.56 / 1501.08 ms โ no change โ โ QQuery 19 โ 37.61 / 39.24 ยฑ1.12 / 40.57 ms โ 32.86 / 44.28 ยฑ19.97 / 84.12 ms โ 1.13x slower โ โ QQuery 20 โ 706.92 / 723.81 ยฑ16.43 / 745.82 ms โ 507.37 / 574.89 ยฑ53.85 / 633.69 ms โ +1.26x faster โ โ QQuery 21 โ 738.40 / 746.53 ยฑ6.61 / 756.85 ms โ 586.31 / 611.26 ยฑ18.18 / 638.22 ms โ +1.22x faster โ โ QQuery 22 โ 1180.00 / 1198.03 ยฑ14.75 / 1216.08 ms โ 971.77 / 990.53 ยฑ17.11 / 1015.44 ms โ +1.21x faster โ โ QQuery 23 โ 389.40 / 402.92 ยฑ18.43 / 439.44 ms โ 252.89 / 294.66 ยฑ48.45 / 388.95 ms โ +1.37x faster โ โ QQuery 24 โ 116.50 / 118.25 ยฑ1.65 / 120.95 ms โ 69.34 / 74.84 ยฑ4.49 / 82.87 ms โ +1.58x faster โ โ QQuery 25 โ 190.50 / 195.19 ยฑ3.10 / 200.17 ms โ 156.92 / 159.83 ยฑ2.44 / 163.97 ms โ +1.22x faster โ โ QQuery 26 โ 155.50 / 161.37 ยฑ4.52 / 167.58 ms โ 106.76 / 112.15 ยฑ3.32 / 115.51 ms โ +1.44x faster โ โ QQuery 27 โ 959.52 / 983.36 ยฑ19.90 / 1019.90 ms โ 708.53 / 732.54 ยฑ28.77 / 789.08 ms โ +1.34x faster โ โ QQuery 28 โ 7836.33 / 7912.82 ยฑ47.38 / 7981.55 ms โ 6689.84 / 6822.39 ยฑ103.20 / 6978.24 ms โ +1.16x faster โ โ QQuery 29 โ 331.71 / 336.14 ยฑ6.67 / 349.38 ms โ 282.95 / 295.60 ยฑ20.05 / 335.39 ms โ +1.14x faster โ โ QQuery 30 โ 375.31 / 385.95 ยฑ5.85 / 392.39 ms โ 342.51 / 350.79 ยฑ7.75 / 364.77 ms โ +1.10x faster โ โ QQuery 31 โ 369.28 / 386.85 ยฑ16.44 / 414.10 ms โ 345.57 / 352.50 ยฑ5.61 / 361.41 ms โ +1.10x faster โ โ QQuery 32 โ 1329.16 / 1366.43 ยฑ43.61 / 1437.44 ms โ 1047.60 / 1105.11 ยฑ53.95 / 1184.53 ms โ +1.24x faster โ โ QQuery 33 โ 1610.71 / 1669.07 ยฑ48.35 / 1742.99 ms โ 1536.41 / 1553.61 ยฑ16.93 / 1580.56 ms โ +1.07x faster โ โ QQuery 34 โ 1510.32 / 1569.52 ยฑ36.83 / 1623.42 ms โ 1555.47 / 1565.59 ยฑ11.47 / 1585.47 ms โ no change โ โ QQuery 35 โ 409.06 / 415.43 ยฑ4.39 / 421.28 ms โ 342.24 / 346.76 ยฑ6.65 / 359.96 ms โ +1.20x faster โ โ QQuery 36 โ 102.17 / 111.12 ยฑ6.62 / 119.99 ms โ 76.74 / 80.72 ยฑ2.79 / 83.42 ms โ +1.38x faster โ โ QQuery 37 โ 56.23 / 59.89 ยฑ3.13 / 64.45 ms โ 44.50 / 48.87 ยฑ3.02 / 53.46 ms โ +1.23x faster โ โ QQuery 38 โ 54.39 / 58.83 ยฑ3.37 / 62.07 ms โ 40.36 / 42.92 ยฑ2.21 / 45.77 ms โ +1.37x faster โ โ QQuery 39 โ 182.72 / 190.42 ยฑ5.19 / 198.59 ms โ 121.77 / 129.32 ยฑ6.70 / 141.68 ms โ +1.47x faster โ โ QQuery 40 โ 34.33 / 36.94 ยฑ2.20 / 40.86 ms โ 24.77 / 27.18 ยฑ1.57 / 29.32 ms โ +1.36x faster โ โ QQuery 41 โ 32.03 / 32.80 ยฑ0.96 / 34.43 ms โ 22.05 / 24.20 ยฑ1.90 / 27.30 ms โ +1.36x faster โ โ QQuery 42 โ 24.75 / 25.23 ยฑ0.30 / 25.63 ms โ 18.26 / 18.58 ยฑ0.28 / 19.05 ms โ +1.36x faster โ โโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโ โ Benchmark Summary โ โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ Total Time (HEAD) โ 26107.40ms โ โ Total Time (parquet-morsel-driven-execution-237164415184908839) โ 22711.75ms โ โ Average Time (HEAD) โ 607.15ms โ โ Average Time (parquet-morsel-driven-execution-237164415184908839) โ 528.18ms โ โ Queries Faster โ 37 โ โ Queries Slower โ 1 โ โ Queries with No Change โ 5 โ โ Queries with Failure โ 0 โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโ ``` </p> </details> <details><summary>Resource Usage</summary> **clickbench_pushdown โ base (merge-base)** | Metric | Value | |--------|-------| | Wall time | 131.8s | | Peak memory | 41.4 GiB | | Avg memory | 29.9 GiB | | CPU user | 1180.9s | | CPU sys | 117.8s | | Disk read | 0 B | | Disk write | 2.0 GiB | **clickbench_pushdown โ branch** | Metric | Value | |--------|-------| | Wall time | 114.8s | | Peak memory | 43.2 GiB | | Avg memory | 31.5 GiB | | CPU user | 1185.5s | | CPU sys | 101.9s | | Disk read | 0 B | | Disk write | 116.0 KiB | </details> -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected] --------------------------------------------------------------------- To unsubscribe, e-mail: [email protected] For additional commands, e-mail: [email protected]
