deeppavlov classifier

ssh dgx
docker ps | grep dp
docker exec -it a32f19 bash

# если нужно почистить модель, чтобы обучить по-новой
rm ~/.deeppavlov/models/classifiers/rusentiment_bert_v0/model.*
# если количество классов поменялось, удаляю предыдущий словарь
rm ~/.deeppavlov/models/classifiers/rusentiment_bert_v0/classes.dict

cd /data/
python -m deeppavlov train rusentiment_bert > output.txt &
# смотрю закончилось ли обучение через
ps x
# или
cat output.txt

# выхожу из контейнера через
ctrl P + ctrl Q


# юпитер ноутбук доступен по адресу
http://10.32.2.3:8889/tree
# перед обучением подготавливаю файлы train и test в ноутбуке
http://10.32.2.3:8889/notebooks/bert%20classifier/train_test_preparation.ipynb
# после обучения считаю метрики в этом ноутбуке
http://10.32.2.3:8889/notebooks/validation_model_precision_recall_F1.ipynb