mobilebert_add_GLUE_Experiment_logit_kd_pretrain_cola

This model is a fine-tuned version of gokuls/mobilebert_add_pre-training-complete on the GLUE COLA dataset. It achieves the following results on the evaluation set:

Model description

More information needed

More information needed

More information needed

The following hyperparameters were used during training:

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Loading…

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan

Epoch	Step	Validation Loss
1.0	67	nan
2.0	134	nan
3.0	201	nan
4.0	268	nan
5.0	335	nan
6.0	402	nan