mobilebert_add_GLUE_Experiment_logit_kd_pretrain_stsb

This model is a fine-tuned version of gokuls/mobilebert_add_pre-training-complete on the GLUE STSB dataset. It achieves the following results on the evaluation set:

Model description

More information needed

More information needed

More information needed

The following hyperparameters were used during training:

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

加载中…

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan

Epoch	Step	Validation Loss	Mse
1.0	45	nan	nan
2.0	90	nan	nan
3.0	135	nan	nan
4.0	180	nan	nan
5.0	225	nan	nan
6.0	270	nan	nan