inttest.md 3.39 KB
Newer Older
1
2
# CSST集成测试

BO ZHANG's avatar
BO ZHANG committed
3
4
5
6
7
8
9
10
集成测试请各位老师适用 `csst` 账号登录公有云。

登录有问题请查看 https://csst-tb.bao.ac.cn/pipeline/devops/environment/ssh-config.html

有任何登录和使用服务器的问题请联系纪鑫。

以下是各个数据集的集成测试命令。

BO ZHANG's avatar
BO ZHANG committed
11
12
13
14
15
16
### 特殊选项
- `--verbose` : 输出详细的DAG任务消息内容
- `--force` : 生成任务消息,不考虑文件是否到齐
- `--submit` : 提交DAG任务,不带这个选项即不提交


17
18
## MSC

BO ZHANG's avatar
BO ZHANG committed
19
20
21
22
23
24
25
26
27
28
29
30
31
32
### AST

查看数据集
```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-msc-c9-25sqdeg-v3-sso \
    --instrument=MSC \
    --obs-type=WIDE \
    --obs-group=default
```

查看可触发的DAG任务
```bash
BO ZHANG's avatar
BO ZHANG committed
33
34
python -m csst_dag.cli.run \
    --dags csst-msc-l1-ast \
BO ZHANG's avatar
BO ZHANG committed
35
36
37
38
39
40
41
42
    --dataset=csst-msc-c9-25sqdeg-v3-sso \
    --instrument=MSC \
    --obs-type=WIDE \
    --obs-group=default \
    --batch-id=25sqdeg-sso-test-b1 \
    --ref-cat=trilegal_093
```

43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
### MCI

查看数据集
```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-mci-c11-c1 \
    --obs-type=CALS \
    --obs-group=m1
```

```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-mci-c11-c1 \
    --obs-type=EXDF \
    --obs-group=m1
```

查看可触发的DAG任务
```bash
python -m csst_dag.cli.run \
    --dags csst-mci-l1 \
    --dataset=csst-mci-c11-c1 \
    --instrument=MCI \
    --obs-type=EXDF \
    --obs-group=m1 \
    --batch-id=inttest
```

### IFS

查看数据集
```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-ifs-c11-sim-v1 \
    --instrument=IFS  \
    --obs-type=SCI \
    --obs-group=NGC6217-cen
```

查看可触发的DAG任务
```bash
python -m csst_dag.cli.run \
    --dags csst-ifs-l1-rss \
    --dataset=csst-ifs-c11-sim-v1 \
    --instrument=IFS \
    --obs-type=SCI \
    --obs-group=NGC6217-cen \
    --batch-id=inttest
```

BO ZHANG's avatar
BO ZHANG committed
96
97
98
99
100
101
102
103
104
105
106
107
108
109
### OOC

查看数据集
```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-msc-c9-ooc-v1 \
    --instrument=MSC \
    --obs-type=BIAS \
    --obs-group=bias-temperature-var
```

查看可触发的DAG任务
```bash
BO ZHANG's avatar
BO ZHANG committed
110
111
112
python -m csst_dag.cli.run \
    --dags csst-msc-l1-ooc \
    --dataset=csst-msc-c9-ooc-v1 \
BO ZHANG's avatar
BO ZHANG committed
113
    --instrument=MSC \
BO ZHANG's avatar
BO ZHANG committed
114
115
116
    --obs-type=BIAS \
    --obs-group=bias-temperature-var \
    --batch-id=ooc-v1-b1
BO ZHANG's avatar
BO ZHANG committed
117
118
```

BO ZHANG's avatar
BO ZHANG committed
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
## CPIC

查看数据集

```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-cpic-c11-hip71681-v1 \
    --instrument=CPIC \
    --obs-type=SCI \
    --obs-group=hip71681
```

查看可触发的DAG任务
```shell
BO ZHANG's avatar
BO ZHANG committed
134
135
python -m csst_dag.cli.run \
    --dags csst-cpic-l1 \
BO ZHANG's avatar
BO ZHANG committed
136
137
138
139
140
141
142
143
144
    --dataset=csst-cpic-c11-hip71681-v1 \
    --instrument=CPIC \
    --obs-type=SCI \
    --obs-group=hip71681 \
    --batch-id=test-b1
```

提交可触发的DAG任务
```shell
BO ZHANG's avatar
BO ZHANG committed
145
146
python -m csst_dag.cli.run \
    --dags csst-cpic-l1 \
BO ZHANG's avatar
BO ZHANG committed
147
148
149
150
151
152
153
    --dataset=csst-cpic-c11-hip71681-v1 \
    --instrument=CPIC \
    --obs-type=SCI \
    --obs-group=hip71681 \
    --batch-id=test-b1 \
    --submit
```
154
155
156
157
158
159
160
161
162
163
164
165
166
167


## HSTDM

查看数据集
```bash
python -m csst_dag.cli.inspect \
    --level=0 \
    --dataset=csst-hstdm-c11-stare-sis1-v1 \
    --instrument=HSTDM
```

查看可触发的DAG任务
```shell
BO ZHANG's avatar
BO ZHANG committed
168
169
python -m csst_dag.cli.run \
    --dags csst-hstdm-l1 \
170
171
172
173
174
175
176
177
    --dataset=csst-hstdm-c11-stare-sis1-v1 \
    --instrument=HSTDM \
    --obs-type=STARE \
    --obs-group=default \
    --batch-id=test-b1 \
    --force \
    --submit
```