adriangbot commented on PR #20481: URL: https://github.com/apache/datafusion/pull/20481#issuecomment-4069405687
๐ค Benchmark completed (GKE) | [trigger](https://github.com/apache/datafusion/pull/20481#issuecomment-4069123125) <details><summary>Details</summary> <p> ``` Comparing HEAD and parquet-morsel-driven-execution-237164415184908839 -------------------- Benchmark clickbench_pushdown.json -------------------- โโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโโโ โ Query โ HEAD โ parquet-morsel-driven-execution-237164415184908839 โ Change โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ QQuery 0 โ 1.85 / 5.20 ยฑ6.55 / 18.29 ms โ 1.78 / 5.26 ยฑ6.65 / 18.56 ms โ no change โ โ QQuery 1 โ 2051.28 / 2227.71 ยฑ177.13 / 2488.58 ms โ 1822.77 / 1889.26 ยฑ43.42 / 1944.11 ms โ +1.18x faster โ โ QQuery 2 โ 2640.98 / 2939.94 ยฑ233.78 / 3338.32 ms โ 2112.42 / 2179.45 ยฑ56.71 / 2252.02 ms โ +1.35x faster โ โ QQuery 3 โ 2553.63 / 2760.70 ยฑ181.32 / 2982.74 ms โ 2135.32 / 2181.63 ยฑ64.71 / 2308.45 ms โ +1.27x faster โ โ QQuery 4 โ 2836.68 / 2963.97 ยฑ85.52 / 3067.33 ms โ 2284.40 / 2333.57 ยฑ54.99 / 2440.11 ms โ +1.27x faster โ โ QQuery 5 โ 2645.40 / 2915.30 ยฑ176.31 / 3151.48 ms โ 2372.43 / 2434.07 ยฑ73.40 / 2566.37 ms โ +1.20x faster โ โ QQuery 6 โ 634.01 / 749.82 ยฑ110.53 / 937.89 ms โ 474.25 / 507.62 ยฑ25.09 / 546.09 ms โ +1.48x faster โ โ QQuery 7 โ 2226.45 / 2342.47 ยฑ133.03 / 2538.35 ms โ 1851.73 / 1958.87 ยฑ83.32 / 2078.22 ms โ +1.20x faster โ โ QQuery 8 โ 2822.39 / 3060.41 ยฑ172.76 / 3263.01 ms โ 2414.89 / 2522.32 ยฑ120.42 / 2728.31 ms โ +1.21x faster โ โ QQuery 9 โ 3051.46 / 3375.14 ยฑ192.05 / 3579.74 ms โ 2643.39 / 2697.18 ยฑ36.22 / 2756.20 ms โ +1.25x faster โ โ QQuery 10 โ 5175.38 / 5486.33 ยฑ297.08 / 5967.08 ms โ 4291.72 / 4451.46 ยฑ148.62 / 4666.86 ms โ +1.23x faster โ โ QQuery 11 โ 5022.21 / 5236.48 ยฑ172.50 / 5428.36 ms โ 4246.05 / 4465.36 ยฑ183.80 / 4765.16 ms โ +1.17x faster โ โ QQuery 12 โ 2726.59 / 2964.91 ยฑ152.01 / 3195.75 ms โ 2415.08 / 2492.50 ยฑ85.26 / 2639.72 ms โ +1.19x faster โ โ QQuery 13 โ 5602.56 / 5732.70 ยฑ90.60 / 5836.79 ms โ 4619.87 / 4766.15 ยฑ107.41 / 4950.14 ms โ +1.20x faster โ โ QQuery 14 โ 5239.97 / 5543.59 ยฑ152.54 / 5646.53 ms โ 4401.33 / 4558.88 ยฑ114.18 / 4740.10 ms โ +1.22x faster โ โ QQuery 15 โ 2903.57 / 3075.31 ยฑ156.39 / 3290.06 ms โ 2336.51 / 2415.51 ยฑ77.52 / 2558.60 ms โ +1.27x faster โ โ QQuery 16 โ 3108.36 / 3230.98 ยฑ146.02 / 3508.16 ms โ 2774.88 / 2818.70 ยฑ27.66 / 2860.69 ms โ +1.15x faster โ โ QQuery 17 โ 2996.86 / 3249.99 ยฑ145.60 / 3414.53 ms โ 2809.10 / 2828.96 ยฑ22.49 / 2872.18 ms โ +1.15x faster โ โ QQuery 18 โ 3455.81 / 3670.66 ยฑ132.61 / 3845.83 ms โ 3014.70 / 3140.77 ยฑ66.49 / 3192.49 ms โ +1.17x faster โ โ QQuery 19 โ 2178.64 / 2422.30 ยฑ239.43 / 2836.05 ms โ 1680.73 / 1711.87 ยฑ22.73 / 1746.08 ms โ +1.42x faster โ โ QQuery 20 โ 2879.17 / 3144.97 ยฑ182.39 / 3314.36 ms โ 2572.29 / 2727.25 ยฑ108.62 / 2871.43 ms โ +1.15x faster โ โ QQuery 21 โ 5149.42 / 5586.17 ยฑ329.53 / 6009.03 ms โ 4877.62 / 4977.41 ยฑ97.88 / 5105.06 ms โ +1.12x faster โ โ QQuery 22 โ 9707.46 / 9937.73 ยฑ221.73 / 10315.45 ms โ 8687.22 / 8888.12 ยฑ150.87 / 9023.85 ms โ +1.12x faster โ โ QQuery 23 โ 3713.41 / 3949.50 ยฑ168.21 / 4190.39 ms โ 1871.80 / 1959.45 ยฑ66.26 / 2026.87 ms โ +2.02x faster โ โ QQuery 24 โ 2464.74 / 2666.89 ยฑ119.90 / 2825.64 ms โ 1482.20 / 1585.01 ยฑ86.48 / 1736.16 ms โ +1.68x faster โ โ QQuery 25 โ 2522.57 / 2712.88 ยฑ140.15 / 2889.83 ms โ 2253.42 / 2329.99 ยฑ60.54 / 2436.69 ms โ +1.16x faster โ โ QQuery 26 โ 2419.11 / 2680.81 ยฑ174.85 / 2895.44 ms โ 1581.70 / 1730.56 ยฑ111.73 / 1881.88 ms โ +1.55x faster โ โ QQuery 27 โ 5230.25 / 5465.87 ยฑ254.92 / 5942.69 ms โ 4955.57 / 5105.89 ยฑ131.11 / 5339.26 ms โ +1.07x faster โ โ QQuery 28 โ 10150.98 / 10312.83 ยฑ102.55 / 10447.80 ms โ 8958.66 / 9027.47 ยฑ41.36 / 9071.48 ms โ +1.14x faster โ โ QQuery 29 โ 2492.48 / 2649.88 ยฑ143.14 / 2889.53 ms โ 2132.06 / 2214.46 ยฑ57.24 / 2285.01 ms โ +1.20x faster โ โ QQuery 30 โ 5367.93 / 5454.02 ยฑ135.39 / 5721.43 ms โ 4427.04 / 4604.45 ยฑ158.65 / 4823.13 ms โ +1.18x faster โ โ QQuery 31 โ 4979.49 / 5384.49 ยฑ282.74 / 5719.00 ms โ 4568.33 / 4612.85 ยฑ31.07 / 4664.02 ms โ +1.17x faster โ โ QQuery 32 โ 2880.71 / 3153.22 ยฑ178.50 / 3415.00 ms โ 2614.76 / 2657.18 ยฑ30.05 / 2701.67 ms โ +1.19x faster โ โ QQuery 33 โ 3708.92 / 3885.38 ยฑ106.32 / 3978.94 ms โ 3672.47 / 3735.22 ยฑ55.44 / 3810.69 ms โ no change โ โ QQuery 34 โ 3820.11 / 4068.86 ยฑ276.42 / 4592.44 ms โ 3663.35 / 3793.80 ยฑ98.75 / 3894.39 ms โ +1.07x faster โ โ QQuery 35 โ 2818.39 / 2965.07 ยฑ93.25 / 3092.19 ms โ 2364.85 / 2478.73 ยฑ98.30 / 2619.06 ms โ +1.20x faster โ โ QQuery 36 โ 1077.00 / 1158.69 ยฑ67.86 / 1280.83 ms โ 486.87 / 626.51 ยฑ126.51 / 818.18 ms โ +1.85x faster โ โ QQuery 37 โ 1032.10 / 1148.39 ยฑ95.86 / 1290.63 ms โ 709.43 / 710.98 ยฑ0.97 / 712.06 ms โ +1.62x faster โ โ QQuery 38 โ 1238.80 / 1345.21 ยฑ65.85 / 1399.93 ms โ 526.52 / 679.91 ยฑ121.20 / 878.66 ms โ +1.98x faster โ โ QQuery 39 โ 884.73 / 980.28 ยฑ99.41 / 1155.26 ms โ 472.67 / 535.33 ยฑ71.03 / 668.77 ms โ +1.83x faster โ โ QQuery 40 โ 1126.11 / 1310.05 ยฑ162.67 / 1517.45 ms โ 518.06 / 623.58 ยฑ96.91 / 794.00 ms โ +2.10x faster โ โ QQuery 41 โ 1311.22 / 1344.55 ยฑ20.43 / 1370.10 ms โ 718.64 / 936.94 ยฑ140.15 / 1147.76 ms โ +1.44x faster โ โ QQuery 42 โ 946.86 / 1017.07 ยฑ53.65 / 1097.64 ms โ 519.52 / 523.61 ยฑ2.17 / 525.47 ms โ +1.94x faster โ โโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโโโ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโณโโโโโโโโโโโโโโ โ Benchmark Summary โ โ โกโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโฉ โ Total Time (HEAD) โ 146276.69ms โ โ Total Time (parquet-morsel-driven-execution-237164415184908839) โ 119424.10ms โ โ Average Time (HEAD) โ 3401.78ms โ โ Average Time (parquet-morsel-driven-execution-237164415184908839) โ 2777.30ms โ โ Queries Faster โ 41 โ โ Queries Slower โ 0 โ โ Queries with No Change โ 2 โ โ Queries with Failure โ 0 โ โโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโโดโโโโโโโโโโโโโโ ``` </p> </details> <details><summary>Resource Usage</summary> **clickbench_pushdown โ base (merge-base)** | Metric | Value | |--------|-------| | Wall time | 732.7s | | Peak memory | 35.5 GiB | | Avg memory | 27.4 GiB | | CPU user | 1211.5s | | CPU sys | 150.6s | | Disk read | 0 B | | Disk write | 4.0 GiB | **clickbench_pushdown โ branch** | Metric | Value | |--------|-------| | Wall time | 598.4s | | Peak memory | 36.8 GiB | | Avg memory | 28.1 GiB | | CPU user | 1213.4s | | CPU sys | 145.4s | | Disk read | 0 B | | Disk write | 828.0 KiB | </details> -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected] --------------------------------------------------------------------- To unsubscribe, e-mail: [email protected] For additional commands, e-mail: [email protected]
