-
Notifications
You must be signed in to change notification settings - Fork 0
Expand file tree
/
Copy pathreinforce_250k_evaluation.txt
More file actions
155 lines (149 loc) · 11.4 KB
/
Copy pathreinforce_250k_evaluation.txt
File metadata and controls
155 lines (149 loc) · 11.4 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
🔨 Building local dev image...
Sending build context to Docker daemon 651.9MB
Step 1/8 : FROM 367942341054.dkr.ecr.us-east-2.amazonaws.com/pape-lab/train:base-latest
---> 6c4d383bd262
Step 2/8 : WORKDIR /workspace
---> Using cache
---> 88770da4b2c3
Step 3/8 : COPY --link requirements.txt .
---> Using cache
---> 702a7073d2ec
Step 4/8 : RUN pip install --no-cache-dir -r requirements.txt
---> Using cache
---> 0e64799070fb
Step 5/8 : COPY --link src ./src
---> Using cache
---> 301c48640d6c
Step 6/8 : COPY --link dp_ideal_baseline.json .
---> Using cache
---> eaf9c9c20461
Step 7/8 : WORKDIR /workspace/src
---> Using cache
---> f59fbe3f1e5f
Step 8/8 : ENTRYPOINT []
---> Using cache
---> 8ebb4606b630
Successfully built 8ebb4606b630
Successfully tagged csml-final-project:latest
✅ Image built successfully: csml-final-project
🚀 Running container...
Running 100000 games...
Category │ Mean σ² │ DP-Mean Diff │ Z p │
────────────────────────────────────────────────────────────────────────────────────────────
Ones │ 0.69 0.55 │ 1.88 -1.19 │ -510.67 0.0000 │ ❌
Twos │ 2.39 2.45 │ 5.28 -2.89 │ -584.45 0.0000 │ ❌
Threes │ 6.36 9.90 │ 8.57 -2.21 │ -221.95 0.0000 │ ❌
Fours │ 9.50 10.44 │ 12.16 -2.65 │ -259.79 0.0000 │ ❌
Fives │ 12.39 13.60 │ 15.69 -3.29 │ -282.43 0.0000 │ ❌
Sixes │ 15.94 25.43 │ 19.19 -3.25 │ -203.81 0.0000 │ ❌
Three of a Kind │ 23.88 12.03 │ 21.66 2.22 │ 202.27 0.0000 │ ⚠️
Four of a Kind │ 19.44 115.78 │ 13.10 6.34 │ 186.45 0.0000 │ ⚠️
Full House │ 22.15 63.12 │ 22.59 -0.44 │ -17.57 0.0000 │ ❌
Small Straight │ 29.49 15.06 │ 29.46 0.03 │ 2.30 0.0216 │ ⚠️
Large Straight │ 22.85 391.88 │ 32.71 -9.86 │ -157.53 0.0000 │ ❌
Yahtzee │ 0.85 41.90 │ 16.87 -16.02 │ -782.44 0.0000 │ ❌
Chance │ 22.86 5.59 │ 22.01 0.85 │ 113.69 0.0000 │ ⚠️
────────────────────────────────────────────────────────────────────────────────────────────
Upper Bonus │ 0.99 33.66 │ 23.84 -22.85 │ -1245.47 0.0000 │ ❌
────────────────────────────────────────────────────────────────────────────────────────────
Final Score │ 189.84 812.24 │ 254.32 -64.47 │ -715.40 0.0000 │ ❌
============================================================
BONUS AND YAHTZEE STATISTICS
============================================================
% of games earning Upper Bonus (≥63): 2.83%
% of games earning a Yahtzee: 1.70%
============================================================
============================================================
MEDIAN TURN NUMBER BY CATEGORY
============================================================
Category │ Median Turn
────────────────────────────────────────────────────────────
Ones │ 7.0
Twos │ 7.0
Threes │ 8.0
Fours │ 6.0
Fives │ 6.0
Sixes │ 9.0
Three of a Kind │ 5.0
Four of a Kind │ 6.0
Full House │ 5.0
Small Straight │ 4.0
Large Straight │ 11.0
Yahtzee │ 11.0
Chance │ 7.0
============================================================
==========================================================================================
TOP 3 CATEGORIES BY TURN
==========================================================================================
Turn │ Category │ Usage % │ Median Score
──────────────────────────────────────────────────────────────────────────────────────────
1 │ Small Straight │ 17.8% │ 30.0
│ Full House │ 14.1% │ 25.0
│ Ones │ 12.8% │ 1.0
──────────────────────────────────────────────────────────────────────────────────────────
2 │ Small Straight │ 16.4% │ 30.0
│ Full House │ 12.9% │ 25.0
│ Three of a Kind │ 11.3% │ 24.0
──────────────────────────────────────────────────────────────────────────────────────────
3 │ Small Straight │ 15.1% │ 30.0
│ Three of a Kind │ 11.4% │ 24.0
│ Full House │ 11.2% │ 25.0
──────────────────────────────────────────────────────────────────────────────────────────
4 │ Small Straight │ 12.8% │ 30.0
│ Fours │ 12.2% │ 8.0
│ Three of a Kind │ 11.0% │ 24.0
──────────────────────────────────────────────────────────────────────────────────────────
5 │ Fours │ 11.1% │ 8.0
│ Three of a Kind │ 10.8% │ 24.0
│ Small Straight │ 10.2% │ 30.0
──────────────────────────────────────────────────────────────────────────────────────────
6 │ Twos │ 10.2% │ 2.0
│ Fours │ 10.0% │ 8.0
│ Three of a Kind │ 10.0% │ 24.0
──────────────────────────────────────────────────────────────────────────────────────────
7 │ Threes │ 11.3% │ 6.0
│ Twos │ 10.2% │ 2.0
│ Fives │ 10.0% │ 10.0
──────────────────────────────────────────────────────────────────────────────────────────
8 │ Threes │ 12.3% │ 6.0
│ Sixes │ 10.8% │ 18.0
│ Twos │ 9.9% │ 2.0
──────────────────────────────────────────────────────────────────────────────────────────
9 │ Sixes │ 12.4% │ 18.0
│ Yahtzee │ 12.2% │ 0.0
│ Threes │ 12.1% │ 6.0
──────────────────────────────────────────────────────────────────────────────────────────
10 │ Yahtzee │ 17.4% │ 0.0
│ Sixes │ 13.5% │ 18.0
│ Threes │ 11.1% │ 6.0
──────────────────────────────────────────────────────────────────────────────────────────
11 │ Yahtzee │ 21.6% │ 0.0
│ Sixes │ 13.4% │ 18.0
│ Threes │ 10.9% │ 3.0
──────────────────────────────────────────────────────────────────────────────────────────
12 │ Yahtzee │ 20.2% │ 0.0
│ Large Straight │ 13.3% │ 0.0
│ Sixes │ 10.9% │ 12.0
──────────────────────────────────────────────────────────────────────────────────────────
13 │ Large Straight │ 33.5% │ 0.0
│ Full House │ 12.0% │ 0.0
│ Yahtzee │ 9.6% │ 0.0
==========================================================================================
==================================================
SCORE DISTRIBUTION
==================================================
n │ P(score ≥ n)
──────────────────────────────────────────────────
50 │ 1.000000
100 │ 0.999710
150 │ 0.915030
200 │ 0.391290
250 │ 0.020610
300 │ 0.000770
400 │ 4.000000e-05
500 │ 0.000000e+00
750 │ 0.000000e+00
1000 │ 0.000000e+00
1250 │ 0.000000e+00
1500 │ 0.000000e+00
==================================================