|
8 | 8 |
|
9 | 9 | A typical example of `Trajectory`: |
10 | 10 |
|
11 | | -``` |
12 | | -╭──── Trajectory ──────────────────────────────────────────────────────────────────────────────────────────────────╮ |
13 | | -│ ╭──── Traces ────────────────────────────────────────────────────────────────────────────────────────────────╮ │ |
14 | | -│ │ ╭──── state: Trac... ────╮╭──── action: Tra... ────╮╭──── reward: Tra... ────╮╭──── terminal: T... ────╮ │ │ |
15 | | -│ │ │ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
16 | | -│ │ │ │ SubArray │ ││ │ 1 │ ││ │ 1.0 │ ││ │ false │ │ │ │ |
17 | | -│ │ │ │ (2,3) │ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
18 | | -│ │ │ ╰──────────────────╯ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
19 | | -│ │ │ ╭──────────────────╮ ││ │ 2 │ ││ │ 2.0 │ ││ │ false │ │ │ │ |
20 | | -│ │ │ │ SubArray │ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
21 | | -│ │ │ │ (2,3) │ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
22 | | -│ │ │ ╰──────────────────╯ ││ │ ... │ ││ │ ... │ ││ │ ... │ │ │ │ |
23 | | -│ │ │ ╭──────────────────╮ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
24 | | -│ │ │ │ ... │ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
25 | | -│ │ │ ╰──────────────────╯ ││ │ 3 │ ││ │ 3.0 │ ││ │ true │ │ │ │ |
26 | | -│ │ │ ╭──────────────────╮ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
27 | | -│ │ │ │ SubArray │ ││ ╭──────────────────╮ │╰───────── size: (4,) ───╯╰───────── size: (4,) ───╯ │ │ |
28 | | -│ │ │ │ (2,3) │ ││ │ 3 │ │ │ │ |
29 | | -│ │ │ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
30 | | -│ │ │ ╭──────────────────╮ │╰───────── size: (5,) ───╯ │ │ |
31 | | -│ │ │ │ SubArray │ │ │ │ |
32 | | -│ │ │ │ (2,3) │ │ │ │ |
33 | | -│ │ │ ╰──────────────────╯ │ │ │ |
34 | | -│ │ ╰──── size: (2, 3, 5) ───╯ │ │ |
35 | | -│ ╰────────────────────────────────────────────────────────────────────────────────────── 4 traces in total ───╯ │ |
36 | | -│ ╭──── sampler ───────────────────────────────────────────────────────╮ │ |
37 | | -│ │ BatchSampler │ │ |
38 | | -│ │ ━━━━━━━━━━━━━━ │ │ |
39 | | -│ │ │ │ │ |
40 | | -│ │ ├── transformer => identity (generic function...: identity │ │ |
41 | | -│ │ ├── rng => Random._GLOBAL_RNG: Random._GLOBAL_RNG() │ │ |
42 | | -│ │ └── batch_size => Int64: 5 │ │ |
43 | | -│ ╰────────────────────────────────────────────────────────────────────╯ │ |
44 | | -│ ╭──── controler ────────────────────────────╮ │ |
45 | | -│ │ InsertSampleRatioControler │ │ |
46 | | -│ │ ━━━━━━━━━━━━━━━━━━━━━━━━━━━━ │ │ |
47 | | -│ │ │ │ │ |
48 | | -│ │ ├── threshold => Int64: 4 │ │ |
49 | | -│ │ ├── n_sampled => Int64: 0 │ │ |
50 | | -│ │ ├── ratio => Float64: 0.25 │ │ |
51 | | -│ │ └── n_inserted => Int64: 4 │ │ |
52 | | -│ ╰───────────────────────────────────────────╯ │ |
53 | | -╰──────────────────────────────────────────────────────────────────────────────────────────────────────────────────╯ |
54 | | -``` |
| 11 | + |
55 | 12 |
|
56 | 13 | Exported APIs are: |
57 | 14 |
|
|
0 commit comments