Upload logs/f3b3c0cc_sft_sftW2.log with huggingface_hub
Browse files- logs/f3b3c0cc_sft_sftW2.log +98 -0
logs/f3b3c0cc_sft_sftW2.log
CHANGED
|
@@ -3105,3 +3105,101 @@ Consider using tensor.detach() first. (Triggered internally at /pytorch/torch/cs
|
|
| 3105 |
|
| 3106 |
|
| 3107 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB
|
| 3108 |
17:11:45 SAVED sft/sftW2_latest.pt
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 3109 |
/tmp/sftW2.pt : 3%|β | 64.0MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3110 |
/tmp/sftW2.pt : 3%|β | 64.0MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3111 |
/tmp/sftW2.pt : 5%|β | 128MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3112 |
/tmp/sftW2.pt : 7%|β | 184MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3113 |
/tmp/sftW2.pt : 10%|β | 248MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3114 |
/tmp/sftW2.pt : 13%|ββ | 312MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3115 |
/tmp/sftW2.pt : 15%|ββ | 368MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3116 |
/tmp/sftW2.pt : 18%|ββ | 432MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3117 |
/tmp/sftW2.pt : 20%|ββ | 496MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3118 |
/tmp/sftW2.pt : 23%|βββ | 560MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3119 |
/tmp/sftW2.pt : 25%|βββ | 616MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3120 |
/tmp/sftW2.pt : 28%|βββ | 680MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3121 |
/tmp/sftW2.pt : 30%|βββ | 744MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3122 |
/tmp/sftW2.pt : 33%|ββββ | 800MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3123 |
/tmp/sftW2.pt : 35%|ββββ | 864MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3124 |
/tmp/sftW2.pt : 38%|ββββ | 928MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3125 |
/tmp/sftW2.pt : 40%|ββββ | 984MB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3126 |
/tmp/sftW2.pt : 43%|βββββ | 1.05GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3127 |
/tmp/sftW2.pt : 45%|βββββ | 1.11GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3128 |
/tmp/sftW2.pt : 48%|βββββ | 1.17GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3129 |
/tmp/sftW2.pt : 50%|βββββ | 1.22GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3130 |
/tmp/sftW2.pt : 52%|ββββββ | 1.28GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3131 |
/tmp/sftW2.pt : 55%|ββββββ | 1.34GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3132 |
/tmp/sftW2.pt : 57%|ββββββ | 1.41GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3133 |
/tmp/sftW2.pt : 60%|ββββββ | 1.46GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3134 |
/tmp/sftW2.pt : 62%|βββββββ | 1.53GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3135 |
/tmp/sftW2.pt : 65%|βββββββ | 1.59GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3136 |
/tmp/sftW2.pt : 67%|βββββββ | 1.65GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3137 |
/tmp/sftW2.pt : 70%|βββββββ | 1.71GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3138 |
/tmp/sftW2.pt : 72%|ββββββββ | 1.78GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3139 |
/tmp/sftW2.pt : 75%|ββββββββ | 1.83GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3140 |
/tmp/sftW2.pt : 77%|ββββββββ | 1.90GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3141 |
/tmp/sftW2.pt : 80%|ββββββββ | 1.96GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3142 |
/tmp/sftW2.pt : 82%|βββββββββ | 2.02GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3143 |
/tmp/sftW2.pt : 85%|βββββββββ | 2.08GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3144 |
/tmp/sftW2.pt : 87%|βββββββββ | 2.14GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3145 |
/tmp/sftW2.pt : 90%|βββββββββ | 2.21GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3146 |
/tmp/sftW2.pt : 92%|ββββββββββ| 2.26GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3147 |
/tmp/sftW2.pt : 95%|ββββββββββ| 2.33GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3148 |
/tmp/sftW2.pt : 97%|ββββββββββ| 2.39GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3149 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3150 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3151 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3152 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3153 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
|
|
|
|
|
|
| 3154 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB
|
|
|
|
|
|
|
|
|
| 3105 |
|
| 3106 |
|
| 3107 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB
|
| 3108 |
17:11:45 SAVED sft/sftW2_latest.pt
|
| 3109 |
+
17:16:14 EVAL step 2500 gsm8k 0.000 svamp 0.000 heldout_nll 0.2259 reached_####: 0/200 (269s)
|
| 3110 |
+
17:16:14 SAMPLE Total eggs = 16; 16 = 3 * 12 + 4 = 32; 32 = 3 * 12 + 4 = 34; 34 = 3 * 12 + 4 = 36; 36 = 3 * 12 + 4 = 38; 38 = 3 * 12 + 4 = 40; 40 = 3 * 12 + 4 = 44; 44 = 3 * 12 + 4 = 4; 4 = 3 * 12 + 4 = 2; 2 = 3 * 12 + 4 = 2; 2 = 3 * 12 + 4 = 4; 4 = 3 * 12 + 4 = 6; 6 = 3 * 12 + 4 = 8; 8 = 3 * 12 + 4 = 9; 9 = 3 * 12
|
| 3111 |
+
|
| 3112 |
+
|
| 3113 |
+
|
| 3114 |
+
|
| 3115 |
/tmp/sftW2.pt : 3%|β | 64.0MB / 2.45GB [A[A
|
| 3116 |
+
|
| 3117 |
+
|
| 3118 |
/tmp/sftW2.pt : 3%|β | 64.0MB / 2.45GB [A[A
|
| 3119 |
+
|
| 3120 |
+
|
| 3121 |
/tmp/sftW2.pt : 5%|β | 128MB / 2.45GB [A[A
|
| 3122 |
+
|
| 3123 |
+
|
| 3124 |
/tmp/sftW2.pt : 7%|β | 184MB / 2.45GB [A[A
|
| 3125 |
+
|
| 3126 |
+
|
| 3127 |
/tmp/sftW2.pt : 10%|β | 248MB / 2.45GB [A[A
|
| 3128 |
+
|
| 3129 |
+
|
| 3130 |
/tmp/sftW2.pt : 13%|ββ | 312MB / 2.45GB [A[A
|
| 3131 |
+
|
| 3132 |
+
|
| 3133 |
/tmp/sftW2.pt : 15%|ββ | 368MB / 2.45GB [A[A
|
| 3134 |
+
|
| 3135 |
+
|
| 3136 |
/tmp/sftW2.pt : 18%|ββ | 432MB / 2.45GB [A[A
|
| 3137 |
+
|
| 3138 |
+
|
| 3139 |
/tmp/sftW2.pt : 20%|ββ | 496MB / 2.45GB [A[A
|
| 3140 |
+
|
| 3141 |
+
|
| 3142 |
/tmp/sftW2.pt : 23%|βββ | 560MB / 2.45GB [A[A
|
| 3143 |
+
|
| 3144 |
+
|
| 3145 |
/tmp/sftW2.pt : 25%|βββ | 616MB / 2.45GB [A[A
|
| 3146 |
+
|
| 3147 |
+
|
| 3148 |
/tmp/sftW2.pt : 28%|βββ | 680MB / 2.45GB [A[A
|
| 3149 |
+
|
| 3150 |
+
|
| 3151 |
/tmp/sftW2.pt : 30%|βββ | 744MB / 2.45GB [A[A
|
| 3152 |
+
|
| 3153 |
+
|
| 3154 |
/tmp/sftW2.pt : 33%|ββββ | 800MB / 2.45GB [A[A
|
| 3155 |
+
|
| 3156 |
+
|
| 3157 |
/tmp/sftW2.pt : 35%|ββββ | 864MB / 2.45GB [A[A
|
| 3158 |
+
|
| 3159 |
+
|
| 3160 |
/tmp/sftW2.pt : 38%|ββββ | 928MB / 2.45GB [A[A
|
| 3161 |
+
|
| 3162 |
+
|
| 3163 |
/tmp/sftW2.pt : 40%|ββββ | 984MB / 2.45GB [A[A
|
| 3164 |
+
|
| 3165 |
+
|
| 3166 |
/tmp/sftW2.pt : 43%|βββββ | 1.05GB / 2.45GB [A[A
|
| 3167 |
+
|
| 3168 |
+
|
| 3169 |
/tmp/sftW2.pt : 45%|βββββ | 1.11GB / 2.45GB [A[A
|
| 3170 |
+
|
| 3171 |
+
|
| 3172 |
/tmp/sftW2.pt : 48%|βββββ | 1.17GB / 2.45GB [A[A
|
| 3173 |
+
|
| 3174 |
+
|
| 3175 |
/tmp/sftW2.pt : 50%|βββββ | 1.22GB / 2.45GB [A[A
|
| 3176 |
+
|
| 3177 |
+
|
| 3178 |
/tmp/sftW2.pt : 52%|ββββββ | 1.28GB / 2.45GB [A[A
|
| 3179 |
+
|
| 3180 |
+
|
| 3181 |
/tmp/sftW2.pt : 55%|ββββββ | 1.34GB / 2.45GB [A[A
|
| 3182 |
+
|
| 3183 |
+
|
| 3184 |
/tmp/sftW2.pt : 57%|ββββββ | 1.41GB / 2.45GB [A[A
|
| 3185 |
+
|
| 3186 |
+
|
| 3187 |
/tmp/sftW2.pt : 60%|ββββββ | 1.46GB / 2.45GB [A[A
|
| 3188 |
+
|
| 3189 |
+
|
| 3190 |
/tmp/sftW2.pt : 62%|βββββββ | 1.53GB / 2.45GB [A[A
|
| 3191 |
+
|
| 3192 |
+
|
| 3193 |
/tmp/sftW2.pt : 65%|βββββββ | 1.59GB / 2.45GB [A[A
|
| 3194 |
+
|
| 3195 |
+
|
| 3196 |
/tmp/sftW2.pt : 67%|βββββββ | 1.65GB / 2.45GB [A[A
|
| 3197 |
+
|
| 3198 |
+
|
| 3199 |
/tmp/sftW2.pt : 70%|βββββββ | 1.71GB / 2.45GB [A[A
|
| 3200 |
+
|
| 3201 |
+
|
| 3202 |
/tmp/sftW2.pt : 72%|ββββββββ | 1.78GB / 2.45GB [A[A
|
| 3203 |
+
|
| 3204 |
+
|
| 3205 |
/tmp/sftW2.pt : 75%|ββββββββ | 1.83GB / 2.45GB [A[A
|
| 3206 |
+
|
| 3207 |
+
|
| 3208 |
/tmp/sftW2.pt : 77%|ββββββββ | 1.90GB / 2.45GB [A[A
|
| 3209 |
+
|
| 3210 |
+
|
| 3211 |
/tmp/sftW2.pt : 80%|ββββββββ | 1.96GB / 2.45GB [A[A
|
| 3212 |
+
|
| 3213 |
+
|
| 3214 |
/tmp/sftW2.pt : 82%|βββββββββ | 2.02GB / 2.45GB [A[A
|
| 3215 |
+
|
| 3216 |
+
|
| 3217 |
/tmp/sftW2.pt : 85%|βββββββββ | 2.08GB / 2.45GB [A[A
|
| 3218 |
+
|
| 3219 |
+
|
| 3220 |
/tmp/sftW2.pt : 87%|βββββββββ | 2.14GB / 2.45GB [A[A
|
| 3221 |
+
|
| 3222 |
+
|
| 3223 |
/tmp/sftW2.pt : 90%|βββββββββ | 2.21GB / 2.45GB [A[A
|
| 3224 |
+
|
| 3225 |
+
|
| 3226 |
/tmp/sftW2.pt : 92%|ββββββββββ| 2.26GB / 2.45GB [A[A
|
| 3227 |
+
|
| 3228 |
+
|
| 3229 |
/tmp/sftW2.pt : 95%|ββββββββββ| 2.33GB / 2.45GB [A[A
|
| 3230 |
+
|
| 3231 |
+
|
| 3232 |
/tmp/sftW2.pt : 97%|ββββββββββ| 2.39GB / 2.45GB [A[A
|
| 3233 |
+
|
| 3234 |
+
|
| 3235 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
| 3236 |
+
|
| 3237 |
+
|
| 3238 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
| 3239 |
+
|
| 3240 |
+
|
| 3241 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
| 3242 |
+
|
| 3243 |
+
|
| 3244 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
| 3245 |
+
|
| 3246 |
+
|
| 3247 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB [A[A
|
| 3248 |
+
|
| 3249 |
+
|
| 3250 |
/tmp/sftW2.pt : 100%|ββββββββββ| 2.45GB / 2.45GB
|
| 3251 |
+
17:16:22 SAVED sft/sftW2_final.pt
|
| 3252 |
+
17:16:22 SFT DONE
|