-
Notifications
You must be signed in to change notification settings - Fork 27
/
convert_data_to_s2s.sh
executable file
·46 lines (42 loc) · 1.33 KB
/
convert_data_to_s2s.sh
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
data_dir=data/splits/default
task_dir=data/tasks/
output_dir=data/text2text
python src/convert_data_to_s2s.py \
--data_dir $data_dir \
--task_dir $task_dir \
--max_num_instances_per_task 100 \
--max_num_instances_per_eval_task 100 \
--add_task_name False \
--add_task_definition True \
--num_pos_examples 0 \
--num_neg_examples 0 \
--add_explanation False \
--max_source_length 1024 \
--max_target_length 128 \
--output_dir $output_dir/defintion_only/
python src/convert_data_to_s2s.py \
--data_dir $data_dir \
--task_dir $task_dir \
--max_num_instances_per_task 100 \
--max_num_instances_per_eval_task 100 \
--add_task_name False \
--add_task_definition True \
--num_pos_examples 2 \
--num_neg_examples 0 \
--add_explanation False \
--max_source_length 1024 \
--max_target_length 128 \
--output_dir $output_dir/defintion_pos_2/
python src/convert_data_to_s2s.py \
--data_dir $data_dir \
--task_dir $task_dir \
--max_num_instances_per_task 100 \
--max_num_instances_per_eval_task 100 \
--add_task_name False \
--add_task_definition True \
--num_pos_examples 2 \
--num_neg_examples 2 \
--add_explanation True \
--max_source_length 1024 \
--max_target_length 128 \
--output_dir $output_dir/defintion_pos_2_neg_2_expl/