|
8 | 8 |
|
9 | 9 | A typical example of `Trajectory`:
|
10 | 10 |
|
11 |
| -``` |
12 |
| -╭──── Trajectory ──────────────────────────────────────────────────────────────────────────────────────────────────╮ |
13 |
| -│ ╭──── Traces ────────────────────────────────────────────────────────────────────────────────────────────────╮ │ |
14 |
| -│ │ ╭──── state: Trac... ────╮╭──── action: Tra... ────╮╭──── reward: Tra... ────╮╭──── terminal: T... ────╮ │ │ |
15 |
| -│ │ │ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
16 |
| -│ │ │ │ SubArray │ ││ │ 1 │ ││ │ 1.0 │ ││ │ false │ │ │ │ |
17 |
| -│ │ │ │ (2,3) │ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
18 |
| -│ │ │ ╰──────────────────╯ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
19 |
| -│ │ │ ╭──────────────────╮ ││ │ 2 │ ││ │ 2.0 │ ││ │ false │ │ │ │ |
20 |
| -│ │ │ │ SubArray │ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
21 |
| -│ │ │ │ (2,3) │ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
22 |
| -│ │ │ ╰──────────────────╯ ││ │ ... │ ││ │ ... │ ││ │ ... │ │ │ │ |
23 |
| -│ │ │ ╭──────────────────╮ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
24 |
| -│ │ │ │ ... │ ││ ╭──────────────────╮ ││ ╭──────────────────╮ ││ ╭──────────────────╮ │ │ │ |
25 |
| -│ │ │ ╰──────────────────╯ ││ │ 3 │ ││ │ 3.0 │ ││ │ true │ │ │ │ |
26 |
| -│ │ │ ╭──────────────────╮ ││ ╰──────────────────╯ ││ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
27 |
| -│ │ │ │ SubArray │ ││ ╭──────────────────╮ │╰───────── size: (4,) ───╯╰───────── size: (4,) ───╯ │ │ |
28 |
| -│ │ │ │ (2,3) │ ││ │ 3 │ │ │ │ |
29 |
| -│ │ │ ╰──────────────────╯ ││ ╰──────────────────╯ │ │ │ |
30 |
| -│ │ │ ╭──────────────────╮ │╰───────── size: (5,) ───╯ │ │ |
31 |
| -│ │ │ │ SubArray │ │ │ │ |
32 |
| -│ │ │ │ (2,3) │ │ │ │ |
33 |
| -│ │ │ ╰──────────────────╯ │ │ │ |
34 |
| -│ │ ╰──── size: (2, 3, 5) ───╯ │ │ |
35 |
| -│ ╰────────────────────────────────────────────────────────────────────────────────────── 4 traces in total ───╯ │ |
36 |
| -│ ╭──── sampler ───────────────────────────────────────────────────────╮ │ |
37 |
| -│ │ BatchSampler │ │ |
38 |
| -│ │ ━━━━━━━━━━━━━━ │ │ |
39 |
| -│ │ │ │ │ |
40 |
| -│ │ ├── transformer => identity (generic function...: identity │ │ |
41 |
| -│ │ ├── rng => Random._GLOBAL_RNG: Random._GLOBAL_RNG() │ │ |
42 |
| -│ │ └── batch_size => Int64: 5 │ │ |
43 |
| -│ ╰────────────────────────────────────────────────────────────────────╯ │ |
44 |
| -│ ╭──── controler ────────────────────────────╮ │ |
45 |
| -│ │ InsertSampleRatioControler │ │ |
46 |
| -│ │ ━━━━━━━━━━━━━━━━━━━━━━━━━━━━ │ │ |
47 |
| -│ │ │ │ │ |
48 |
| -│ │ ├── threshold => Int64: 4 │ │ |
49 |
| -│ │ ├── n_sampled => Int64: 0 │ │ |
50 |
| -│ │ ├── ratio => Float64: 0.25 │ │ |
51 |
| -│ │ └── n_inserted => Int64: 4 │ │ |
52 |
| -│ ╰───────────────────────────────────────────╯ │ |
53 |
| -╰──────────────────────────────────────────────────────────────────────────────────────────────────────────────────╯ |
54 |
| -``` |
| 11 | + |
55 | 12 |
|
56 | 13 | Exported APIs are:
|
57 | 14 |
|
|
0 commit comments