### 数据预处理
脚本是`examples/data_preprocess/codev.py`，`scripts/preprocess.sh`里面记录了对它的调用，包括原始数据和处理后数据的路径。

### 运行脚本
在`recipe/dapo`里面

### 代码修改
- reward函数在`verl/utils/reward_score/codev.py`，由于加了`continuous_reward`之类的参数，因此在运行脚本里面使用了`custom_reward_function`的方式进行外部调用，并对以下文件进行了修改：
    - 对verl文件夹下面的`main_ppo.py`进行了修改，接了个`functools.partial`传参数到`codev.py`的`compute_score`里面
    - 多进程调用在`verl/workers/reward_manager/prime.py`里面，由于pickle序列化报错把序列化改成了dill
- dapo本身不支持多进程的reward，因此在`verl/workers/reward_manager/prime.py`里面加了相应的代码