Skip to content

feat: remove github-action-benchmark workflow from CI#1631

Merged
hsluoyz merged 2 commits intomasterfrom
copilot/remove-benchmark-comment-ci
Dec 31, 2025
Merged

feat: remove github-action-benchmark workflow from CI#1631
hsluoyz merged 2 commits intomasterfrom
copilot/remove-benchmark-comment-ci

Conversation

Copy link
Contributor

Copilot AI commented Dec 31, 2025

fix: #1630

@CLAassistant
Copy link

CLA assistant check
Thank you for your submission! We really appreciate it. Like many open source projects, we ask that you sign our Contributor License Agreement before we can accept your contribution.
You have signed the CLA already but the status is still pending? Let us recheck it.

Co-authored-by: hsluoyz <3787410+hsluoyz@users.noreply.github.com>
Copilot AI changed the title [WIP] Remove benchmark comment from commits Remove github-action-benchmark workflow from CI Dec 31, 2025
Copilot AI requested a review from hsluoyz December 31, 2025 12:47
@hsluoyz hsluoyz marked this pull request as ready for review December 31, 2025 12:52
@hsluoyz hsluoyz changed the title Remove github-action-benchmark workflow from CI feat: remove github-action-benchmark workflow from CI Dec 31, 2025
@hsluoyz hsluoyz merged commit 1e592d1 into master Dec 31, 2025
5 of 7 checks passed
@github-actions
Copy link

🎉 This PR is included in version 3.5.0 🎉

The release is available on GitHub release

Your semantic-release bot 📦🚀

@github-actions
Copy link

Benchmark Comparison

Comparing base branch (0b35dfa)
vs PR branch (9c2787f)

goos: linux
goarch: amd64
pkg: github.com/casbin/casbin/v3
cpu: AMD EPYC 7763 64-Core Processor                
                                                 │ base-bench.txt │             pr-bench.txt             │
                                                 │     sec/op     │    sec/op     vs base                │
CachedRaw-4                                          17.63n ± ∞ ¹   17.61n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedBasicModel-4                                   168.5n ± ∞ ¹   168.9n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModel-4                                    169.5n ± ∞ ¹   167.3n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelSmall-4                               183.5n ± ∞ ¹   179.7n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMedium-4                              184.7n ± ∞ ¹   179.8n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelLarge-4                               161.2n ± ∞ ¹   159.6n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithResourceRoles-4                   169.1n ± ∞ ¹   171.6n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDomains-4                         180.5n ± ∞ ¹   180.8n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedABACModel-4                                    2.860µ ± ∞ ¹   2.851µ ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedKeyMatchModel-4                                186.9n ± ∞ ¹   187.2n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDeny-4                            169.3n ± ∞ ¹   169.2n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedPriorityModel-4                                169.5n ± ∞ ¹   169.5n ± ∞ ¹       ~ (p=1.000 n=1) ³
CachedWithEnforceContext-4                           290.6n ± ∞ ¹   289.4n ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMediumParallel-4                      173.3n ± ∞ ¹   177.0n ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicySmall-4                                     515.2n ± ∞ ¹   513.0n ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyMedium-4                                    541.2n ± ∞ ¹   557.4n ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyLarge-4                                     561.3n ± ∞ ¹   570.2n ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicySmall-4                                     554.8n ± ∞ ¹   560.4n ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyMedium-4                                    604.6n ± ∞ ¹   650.5n ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyLarge-4                                     1.194µ ± ∞ ¹   1.316µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicySmall-4                                  536.0n ± ∞ ¹   511.3n ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyMedium-4                                 589.4n ± ∞ ¹   589.0n ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyLarge-4                                  625.3n ± ∞ ¹   641.0n ± ∞ ¹       ~ (p=1.000 n=1) ²
Raw-4                                                17.55n ± ∞ ¹   17.58n ± ∞ ¹       ~ (p=1.000 n=1) ²
BasicModel-4                                         3.647µ ± ∞ ¹   3.619µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModel-4                                          5.465µ ± ∞ ¹   5.497µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSizes/small-4                               49.00µ ± ∞ ¹   48.60µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSizes/medium-4                              497.0µ ± ∞ ¹   485.2µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSizes/large-4                               5.470m ± ∞ ¹   5.381m ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSmall-4                                     59.54µ ± ∞ ¹   58.80µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelMedium-4                                    582.4µ ± ∞ ¹   552.2µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelLarge-4                                     5.881m ± ∞ ¹   5.873m ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithResourceRoles-4                         5.273µ ± ∞ ¹   5.249µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDomains-4                               5.143µ ± ∞ ¹   5.102µ ± ∞ ¹       ~ (p=1.000 n=1) ²
ABACModel-4                                          2.805µ ± ∞ ¹   2.780µ ± ∞ ¹       ~ (p=1.000 n=1) ²
ABACRuleModel-4                                      4.231m ± ∞ ¹   4.136m ± ∞ ¹       ~ (p=1.000 n=1) ²
KeyMatchModel-4                                      6.214µ ± ∞ ¹   6.127µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDeny-4                                  6.853µ ± ∞ ¹   6.785µ ± ∞ ¹       ~ (p=1.000 n=1) ²
PriorityModel-4                                      4.145µ ± ∞ ¹   4.246µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDomainPatternLarge-4                    13.52µ ± ∞ ¹   13.79µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerSmall-4                                   69.00µ ± ∞ ¹   69.30µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerMedium-4                                  731.4µ ± ∞ ¹   728.0µ ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerLarge-4                                   8.012m ± ∞ ¹   7.919m ± ∞ ¹       ~ (p=1.000 n=1) ²
BuildRoleLinksWithPatternLarge-4                     337.5m ± ∞ ¹   339.0m ± ∞ ¹       ~ (p=1.000 n=1) ²
BuildRoleLinksWithDomainPatternLarge-4               11.97m ± ∞ ¹   12.08m ± ∞ ¹       ~ (p=1.000 n=1) ²
BuildRoleLinksWithPatternAndDomainPatternLarge-4     345.2m ± ∞ ¹   346.7m ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithPatternLarge-4                            1.118µ ± ∞ ¹   1.125µ ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithDomainPatternLarge-4                      481.6n ± ∞ ¹   479.6n ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithPatternAndDomainPatternLarge-4            1.129µ ± ∞ ¹   1.129µ ± ∞ ¹       ~ (p=1.000 n=1) ³
ConcurrentHasLinkWithMatching-4                      1.986µ ± ∞ ¹   1.995µ ± ∞ ¹       ~ (p=1.000 n=1) ²
geomean                                              5.395µ         5.399µ        +0.06%
¹ need >= 6 samples for confidence interval at level 0.95
² need >= 4 samples to detect a difference at alpha level 0.05
³ all samples are equal

                                                 │ base-bench.txt │             pr-bench.txt              │
                                                 │      B/op      │     B/op       vs base                │
CachedRaw-4                                           0.000 ± ∞ ¹     0.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedBasicModel-4                                    104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModel-4                                     104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelSmall-4                                104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMedium-4                               104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelLarge-4                                96.00 ± ∞ ¹     96.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithResourceRoles-4                    104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDomains-4                          120.0 ± ∞ ¹     120.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedABACModel-4                                   1.509Ki ± ∞ ¹   1.509Ki ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedKeyMatchModel-4                                 152.0 ± ∞ ¹     152.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDeny-4                             104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedPriorityModel-4                                 104.0 ± ∞ ¹     104.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedWithEnforceContext-4                            240.0 ± ∞ ¹     240.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMediumParallel-4                       105.0 ± ∞ ¹     105.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicySmall-4                                      150.0 ± ∞ ¹     150.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyMedium-4                                     157.0 ± ∞ ¹     157.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyLarge-4                                      165.0 ± ∞ ¹     165.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicySmall-4                                      152.0 ± ∞ ¹     152.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyMedium-4                                     169.0 ± ∞ ¹     169.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyLarge-4                                      456.0 ± ∞ ¹     455.0 ± ∞ ¹       ~ (p=1.000 n=1) ³
RemovePolicySmall-4                                   166.0 ± ∞ ¹     166.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyMedium-4                                  174.0 ± ∞ ¹     174.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyLarge-4                                   181.0 ± ∞ ¹     181.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
Raw-4                                                 0.000 ± ∞ ¹     0.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
BasicModel-4                                        1.476Ki ± ∞ ¹   1.468Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModel-4                                         2.022Ki ± ∞ ¹   2.013Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSizes/small-4                              19.83Ki ± ∞ ¹   19.76Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSizes/medium-4                             187.3Ki ± ∞ ¹   186.9Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSizes/large-4                              1.812Mi ± ∞ ¹   1.813Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSmall-4                                    19.91Ki ± ∞ ¹   19.82Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelMedium-4                                   190.1Ki ± ∞ ¹   189.7Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelLarge-4                                    1.844Mi ± ∞ ¹   1.844Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelWithResourceRoles-4                        2.677Ki ± ∞ ¹   2.669Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelWithDomains-4                              1.787Ki ± ∞ ¹   1.782Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
ABACModel-4                                         1.503Ki ± ∞ ¹   1.494Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
ABACRuleModel-4                                     1.266Mi ± ∞ ¹   1.255Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
KeyMatchModel-4                                     3.002Ki ± ∞ ¹   2.979Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelWithDeny-4                                 2.428Ki ± ∞ ¹   2.415Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
PriorityModel-4                                     1.724Ki ± ∞ ¹   1.722Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelWithDomainPatternLarge-4                   8.491Ki ± ∞ ¹   8.483Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RoleManagerSmall-4                                  11.67Ki ± ∞ ¹   11.67Ki ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerMedium-4                                 123.0Ki ± ∞ ¹   123.0Ki ± ∞ ¹       ~ (p=1.000 n=1) ³
RoleManagerLarge-4                                  1.287Mi ± ∞ ¹   1.287Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
BuildRoleLinksWithPatternLarge-4                    86.02Mi ± ∞ ¹   86.03Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
BuildRoleLinksWithDomainPatternLarge-4              4.489Mi ± ∞ ¹   4.489Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
BuildRoleLinksWithPatternAndDomainPatternLarge-4    87.75Mi ± ∞ ¹   87.66Mi ± ∞ ¹       ~ (p=1.000 n=1) ³
HasLinkWithPatternLarge-4                             177.0 ± ∞ ¹     177.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithDomainPatternLarge-4                       80.00 ± ∞ ¹     80.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithPatternAndDomainPatternLarge-4             177.0 ± ∞ ¹     177.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
ConcurrentHasLinkWithMatching-4                       622.0 ± ∞ ¹     622.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
geomean                                                         ⁴                  -0.12%               ⁴
¹ need >= 6 samples for confidence interval at level 0.95
² all samples are equal
³ need >= 4 samples to detect a difference at alpha level 0.05
⁴ summaries must be >0 to compute geomean

                                                 │ base-bench.txt │             pr-bench.txt             │
                                                 │   allocs/op    │  allocs/op    vs base                │
CachedRaw-4                                           0.000 ± ∞ ¹    0.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedBasicModel-4                                    4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModel-4                                     4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelSmall-4                                4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMedium-4                               4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelLarge-4                                3.000 ± ∞ ¹    3.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithResourceRoles-4                    4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDomains-4                          4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedABACModel-4                                     18.00 ± ∞ ¹    18.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedKeyMatchModel-4                                 4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelWithDeny-4                             4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedPriorityModel-4                                 4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedWithEnforceContext-4                            5.000 ± ∞ ¹    5.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
CachedRBACModelMediumParallel-4                       4.000 ± ∞ ¹    4.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicySmall-4                                      6.000 ± ∞ ¹    6.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyMedium-4                                     6.000 ± ∞ ¹    6.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasPolicyLarge-4                                      7.000 ± ∞ ¹    7.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicySmall-4                                      6.000 ± ∞ ¹    6.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyMedium-4                                     7.000 ± ∞ ¹    7.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
AddPolicyLarge-4                                      9.000 ± ∞ ¹    9.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicySmall-4                                   7.000 ± ∞ ¹    7.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyMedium-4                                  7.000 ± ∞ ¹    7.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
RemovePolicyLarge-4                                   8.000 ± ∞ ¹    8.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
Raw-4                                                 0.000 ± ∞ ¹    0.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
BasicModel-4                                          17.00 ± ∞ ¹    17.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModel-4                                           35.00 ± ∞ ¹    35.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSizes/small-4                                480.0 ± ∞ ¹    480.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelSizes/medium-4                              4.828k ± ∞ ¹   4.829k ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSizes/large-4                               48.19k ± ∞ ¹   48.20k ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelSmall-4                                      615.0 ± ∞ ¹    615.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelMedium-4                                    6.018k ± ∞ ¹   6.018k ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelLarge-4                                     60.32k ± ∞ ¹   60.31k ± ∞ ¹       ~ (p=1.000 n=1) ³
RBACModelWithResourceRoles-4                          28.00 ± ∞ ¹    28.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDomains-4                                25.00 ± ∞ ¹    25.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
ABACModel-4                                           17.00 ± ∞ ¹    17.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
ABACRuleModel-4                                      40.09k ± ∞ ¹   40.09k ± ∞ ¹       ~ (p=1.000 n=1) ³
KeyMatchModel-4                                       37.00 ± ∞ ¹    37.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDeny-4                                   49.00 ± ∞ ¹    49.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
PriorityModel-4                                       22.00 ± ∞ ¹    22.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RBACModelWithDomainPatternLarge-4                     72.00 ± ∞ ¹    72.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerSmall-4                                    797.0 ± ∞ ¹    797.0 ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerMedium-4                                  8.741k ± ∞ ¹   8.741k ± ∞ ¹       ~ (p=1.000 n=1) ²
RoleManagerLarge-4                                   89.74k ± ∞ ¹   89.74k ± ∞ ¹       ~ (p=1.000 n=1) ²
BuildRoleLinksWithPatternLarge-4                     3.600M ± ∞ ¹   3.600M ± ∞ ¹       ~ (p=1.000 n=1) ³
BuildRoleLinksWithDomainPatternLarge-4               145.2k ± ∞ ¹   145.2k ± ∞ ¹       ~ (p=1.000 n=1) ³
BuildRoleLinksWithPatternAndDomainPatternLarge-4     3.679M ± ∞ ¹   3.679M ± ∞ ¹       ~ (p=1.000 n=1) ³
HasLinkWithPatternLarge-4                             13.00 ± ∞ ¹    13.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithDomainPatternLarge-4                       5.000 ± ∞ ¹    5.000 ± ∞ ¹       ~ (p=1.000 n=1) ²
HasLinkWithPatternAndDomainPatternLarge-4             13.00 ± ∞ ¹    13.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
ConcurrentHasLinkWithMatching-4                       21.00 ± ∞ ¹    21.00 ± ∞ ¹       ~ (p=1.000 n=1) ²
geomean                                                         ⁴                 +0.00%               ⁴
¹ need >= 6 samples for confidence interval at level 0.95
² all samples are equal
³ need >= 4 samples to detect a difference at alpha level 0.05
⁴ summaries must be >0 to compute geomean

🤖 This comment will be automatically updated with the latest benchmark results.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

Projects

None yet

Development

Successfully merging this pull request may close these issues.

[feature] remove the benchmark comment on commits

3 participants