Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

[Perf -26%] System.Collections.CreateAddAndClear<String>.Span #2898

Closed
performanceautofiler bot opened this issue Oct 27, 2020 · 0 comments
Closed

[Perf -26%] System.Collections.CreateAddAndClear<String>.Span #2898

performanceautofiler bot opened this issue Oct 27, 2020 · 0 comments

Comments

@performanceautofiler
Copy link

performanceautofiler bot commented Oct 27, 2020

Run Information

Architecture x64
OS ubuntu 18.04
Baseline 5a4483eb1c0918542298d1864b7233f962952880
Compare a79df14b3cc62ade39382a6e08d3b25871d8ebb6

Regressions in System.Collections.CreateAddAndClear

Benchmark Baseline Test Test/Base Baseline IR Compare IR IR Ratio Baseline ETL Compare ETL
Dictionary 208.85 μs 248.80 μs 1.19
HashSet 191.72 μs 238.74 μs 1.25
LinkedList 63.88 μs 69.52 μs 1.09
Queue 29.77 μs 31.94 μs 1.07
Span 6.05 μs 7.18 μs 1.19
IDictionary 211.33 μs 253.55 μs 1.20
ConcurrentQueue 61.34 μs 68.73 μs 1.12

graph
graph
graph
graph
graph
graph
graph
Historical Data in Reporting System

Repro

git clone https://github.com/dotnet/performance.git
python3 .\performance\scripts\benchmarks_ci.py -f netcoreapp5.0 --filter 'System.Collections.CreateAddAndClear<String>*'

Histogram

System.Collections.CreateAddAndClear.Dictionary(Size: 512)

[198704.649 ; 203787.472) | @@@@@@@@@
[203787.472 ; 209700.283) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[209700.283 ; 215665.924) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[215665.924 ; 222299.336) | @@@@@@@@@@@@@
[222299.336 ; 228670.927) | @@
[228670.927 ; 234583.738) | @@@@@@
[234583.738 ; 241261.873) | 
[241261.873 ; 250736.756) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[250736.756 ; 257528.517) | @@@@@@@@@@@@@@@@@@
[257528.517 ; 263557.501) | @@

System.Collections.CreateAddAndClear.HashSet(Size: 512)

[182738.097 ; 189425.099) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[189425.099 ; 195705.444) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[195705.444 ; 201940.821) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[201940.821 ; 211395.381) | @@@@@@@@@@
[211395.381 ; 217675.726) | @@@
[217675.726 ; 224645.553) | 
[224645.553 ; 234379.731) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[234379.731 ; 240994.237) | @@@@@@@@@@@@@@@@@@@@@@@@@@@
[240994.237 ; 246120.683) | @@@
[246120.683 ; 252583.316) | @

System.Collections.CreateAddAndClear.LinkedList(Size: 512)

[62663.163 ; 64763.713) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[64763.713 ; 67024.088) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[67024.088 ; 68743.469) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[68743.469 ; 71331.052) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[71331.052 ; 73091.918) | @@@@@@@@@@@@
[73091.918 ; 75826.061) | @@@

System.Collections.CreateAddAndClear.Queue(Size: 512)

[29022.146 ; 29945.167) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[29945.167 ; 31090.140) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[31090.140 ; 32330.604) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[32330.604 ; 33630.740) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[33630.740 ; 34736.237) | @@@@@@
[34736.237 ; 35844.296) | 
[35844.296 ; 36952.354) | 
[36952.354 ; 38060.412) | 
[38060.412 ; 39168.470) | 
[39168.470 ; 41025.549) | @

System.Collections.CreateAddAndClear.Span(Size: 512)

[5447.768 ; 5751.252) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[5751.252 ; 6043.263) | @@@@@@@
[6043.263 ; 6240.383) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[6240.383 ; 6407.007) | @@@@@@@@@@@
[6407.007 ; 6604.127) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[6604.127 ; 6816.275) | @@@@
[6816.275 ; 7111.691) | @
[7111.691 ; 7308.811) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[7308.811 ; 7520.939) | @@

System.Collections.CreateAddAndClear.IDictionary(Size: 512)

[204438.925 ; 209621.813) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[209621.813 ; 215500.445) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[215500.445 ; 221473.679) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[221473.679 ; 227376.766) | @@@@@@@@@@
[227376.766 ; 233255.398) | @@@
[233255.398 ; 241070.232) | @@@@
[241070.232 ; 246700.463) | 
[246700.463 ; 252579.095) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[252579.095 ; 260665.649) | @@@@@@@@@@@@@@@@@@@@@
[260665.649 ; 270585.987) | @@@
[270585.987 ; 276464.619) | @

System.Collections.CreateAddAndClear.ConcurrentQueue(Size: 512)

[59722.267 ; 61766.976) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[61766.976 ; 63060.151) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[63060.151 ; 65460.732) | @@@@@@@@@@@@@@@@@@@
[65460.732 ; 68007.492) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[68007.492 ; 70614.079) | @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
[70614.079 ; 72459.257) | @@@@@@@@@
[72459.257 ; 74792.638) | @@
[74792.638 ; 77366.138) | 
[77366.138 ; 79600.138) | @
[79600.138 ; 82173.638) | 
[82173.638 ; 84997.201) | @

Docs

Profiling workflow for dotnet/runtime repository
Benchmarking workflow for dotnet/runtime repository

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Projects
None yet
Development

No branches or pull requests

1 participant