five_direct_l3.log

iteration:
    0
    0  1197   bit_w:-1  loss: 2.21607
    1  1184   bit_w:-1  loss: 2.21662
    2  1238   bit_w:-1  loss: 2.21152
    3  1193   bit_w:-1  loss: 2.21115
    4  1266   bit_w:-1  loss: 2.20776
     66   6283    596    681   5538    583    459   6061    999   5497
     -1      1     -1     -1      1     -1     -1      1     -1      1
Train accuarcate: 18.99%
tensor([[1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [2., 1., 2., 2., 1., 2., 2., 1., 2., 1.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.],
        [1., 2., 1., 1., 2., 1., 1., 2., 1., 2.]], device='cuda:0')
Train accuarcate: 19.08%



iteration:
    1
    0  1187   bit_w:-1  loss: 2.12510
    1  1194   bit_w:-1  loss: 2.12460
    2  1233   bit_w:-1  loss: 2.12147
    3  1201   bit_w:-1  loss: 2.12159
    4  1359   bit_w:-1  loss: 2.11899
   5729    367    696   5214    932   4361    354   5708    810   5012
      1     -1     -1      1     -1      1     -1      1     -1      1
Train accuarcate: 32.06%
tensor([[2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [2., 2., 3., 2., 2., 2., 3., 1., 3., 1.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [3., 1., 2., 3., 1., 3., 2., 2., 2., 2.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [3., 1., 2., 3., 1., 3., 2., 2., 2., 2.],
        [2., 2., 3., 2., 2., 2., 3., 1., 3., 1.],
        [2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [3., 1., 2., 3., 1., 3., 2., 2., 2., 2.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [3., 1., 2., 3., 1., 3., 2., 2., 2., 2.],
        [2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [2., 2., 1., 2., 2., 2., 1., 3., 1., 3.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.],
        [1., 3., 2., 1., 3., 1., 2., 2., 2., 2.]], device='cuda:0')
Train accuarcate: 32.31%



iteration:
    2
    0  1186   bit_w:-1  loss: 2.03609
    1  1202   bit_w:-1  loss: 2.03627
    2  1216   bit_w:-1  loss: 2.03210
    3  1231   bit_w:-1  loss: 2.03291
    4   864   bit_w: 1  loss: 2.03017
    436   6566   5515   5515    292    745    285   4919    962    705
     -1      1      1      1     -1     -1     -1      1     -1     -1
Train accuarcate: 60.41%
tensor([[2., 3., 2., 3., 2., 2., 1., 4., 1., 3.],
        [2., 3., 4., 3., 2., 2., 3., 2., 3., 1.],
        [1., 4., 3., 2., 3., 1., 2., 3., 2., 2.],
        [4., 1., 2., 3., 2., 4., 3., 2., 3., 3.],
        [2., 3., 2., 1., 4., 2., 3., 2., 3., 3.],
        [1., 4., 3., 2., 3., 1., 2., 3., 2., 2.],
        [3., 2., 1., 2., 3., 3., 2., 3., 2., 4.],
        [2., 3., 2., 1., 4., 2., 3., 2., 3., 3.],
        [2., 3., 2., 1., 4., 2., 3., 2., 3., 3.],
        [3., 2., 1., 2., 3., 3., 2., 3., 2., 4.],
        [4., 1., 2., 3., 2., 4., 3., 2., 3., 3.],
        [2., 3., 4., 3., 2., 2., 3., 2., 3., 1.],
        [3., 2., 1., 2., 3., 3., 2., 3., 2., 4.],
        [4., 1., 2., 3., 2., 4., 3., 2., 3., 3.],
        [1., 4., 3., 2., 3., 1., 2., 3., 2., 2.],
        [4., 1., 2., 3., 2., 4., 3., 2., 3., 3.],
        [3., 2., 1., 2., 3., 3., 2., 3., 2., 4.],
        [2., 3., 2., 3., 2., 2., 1., 4., 1., 3.],
        [1., 4., 3., 2., 3., 1., 2., 3., 2., 2.],
        [2., 3., 2., 1., 4., 2., 3., 2., 3., 3.]], device='cuda:0')
Train accuarcate: 61.69%



iteration:
    3
    0  1188   bit_w:-1  loss: 1.94998
    1  1192   bit_w:-1  loss: 1.95136
    2  1205   bit_w: 1  loss: 1.94635
    3  1195   bit_w:-1  loss: 1.94778
    4  1348   bit_w: 1  loss: 1.94372
   5666    217   5156    428    431    402   4867   4958    497    352
      1     -1      1     -1     -1     -1      1      1     -1     -1
Train accuarcate: 72.37%
tensor([[3., 3., 3., 3., 2., 2., 2., 5., 1., 3.],
        [3., 3., 5., 3., 2., 2., 4., 3., 3., 1.],
        [1., 5., 3., 3., 4., 2., 2., 3., 3., 3.],
        [5., 1., 3., 3., 2., 4., 4., 3., 3., 3.],
        [2., 4., 2., 2., 5., 3., 3., 2., 4., 4.],
        [1., 5., 3., 3., 4., 2., 2., 3., 3., 3.],
        [3., 3., 1., 3., 4., 4., 2., 3., 3., 5.],
        [2., 4., 2., 2., 5., 3., 3., 2., 4., 4.],
        [3., 3., 3., 1., 4., 2., 4., 3., 3., 3.],
        [3., 3., 1., 3., 4., 4., 2., 3., 3., 5.],
        [5., 1., 3., 3., 2., 4., 4., 3., 3., 3.],
        [3., 3., 5., 3., 2., 2., 4., 3., 3., 1.],
        [3., 3., 1., 3., 4., 4., 2., 3., 3., 5.],
        [5., 1., 3., 3., 2., 4., 4., 3., 3., 3.],
        [1., 5., 3., 3., 4., 2., 2., 3., 3., 3.],
        [4., 2., 2., 4., 3., 5., 3., 2., 4., 4.],
        [3., 3., 1., 3., 4., 4., 2., 3., 3., 5.],
        [3., 3., 3., 3., 2., 2., 2., 5., 1., 3.],
        [1., 5., 3., 3., 4., 2., 2., 3., 3., 3.],
        [2., 4., 2., 2., 5., 3., 3., 2., 4., 4.]], device='cuda:0')
Train accuarcate: 73.16%



iteration:
    4
    0  1185   bit_w:-1  loss: 1.86763
    1   788   bit_w:-1  loss: 1.87199
    2  1225   bit_w:-1  loss: 1.86648
    3  1240   bit_w:-1  loss: 1.86624
    4  1188   bit_w:-1  loss: 1.86141
    995    301   4361    563   5505    731   5150   5877    871   5285
     -1     -1      1     -1      1     -1      1      1     -1      1
Train accuarcate: 73.77%
tensor([[3., 3., 4., 3., 3., 2., 3., 6., 1., 4.],
        [4., 4., 5., 4., 2., 3., 4., 3., 4., 1.],
        [2., 6., 3., 4., 4., 3., 2., 3., 4., 3.],
        [5., 1., 4., 3., 3., 4., 5., 4., 3., 4.],
        [2., 4., 3., 2., 6., 3., 4., 3., 4., 5.],
        [2., 6., 3., 4., 4., 3., 2., 3., 4., 3.],
        [3., 3., 2., 3., 5., 4., 3., 4., 3., 6.],
        [2., 4., 3., 2., 6., 3., 4., 3., 4., 5.],
        [3., 3., 4., 1., 5., 2., 5., 4., 3., 4.],
        [3., 3., 2., 3., 5., 4., 3., 4., 3., 6.],
        [6., 2., 3., 4., 2., 5., 4., 3., 4., 3.],
        [4., 4., 5., 4., 2., 3., 4., 3., 4., 1.],
        [3., 3., 2., 3., 5., 4., 3., 4., 3., 6.],
        [6., 2., 3., 4., 2., 5., 4., 3., 4., 3.],
        [2., 6., 3., 4., 4., 3., 2., 3., 4., 3.],
        [5., 3., 2., 5., 3., 6., 3., 2., 5., 4.],
        [3., 3., 2., 3., 5., 4., 3., 4., 3., 6.],
        [3., 3., 4., 3., 3., 2., 3., 6., 1., 4.],
        [2., 6., 3., 4., 4., 3., 2., 3., 4., 3.],
        [2., 4., 3., 2., 6., 3., 4., 3., 4., 5.]], device='cuda:0')
Train accuarcate: 74.74%



iteration:
    5
    0  1189   bit_w:-1  loss: 1.78665
    1  1205   bit_w:-1  loss: 1.78938
    2  1281   bit_w:-1  loss: 1.78336
    3  1207   bit_w:-1  loss: 1.78568
    4  1223   bit_w:-1  loss: 1.77943
    560    329    638   5369   4919   4799    317   5941   1206   5520
     -1     -1     -1      1      1      1     -1      1     -1      1
Train accuarcate: 75.18%
tensor([[3., 3., 4., 4., 4., 3., 3., 7., 1., 5.],
        [5., 5., 6., 4., 2., 3., 5., 3., 5., 1.],
        [3., 7., 4., 4., 4., 3., 3., 3., 5., 3.],
        [6., 2., 5., 3., 3., 4., 6., 4., 4., 4.],
        [2., 4., 3., 3., 7., 4., 4., 4., 4., 6.],
        [3., 7., 4., 4., 4., 3., 3., 3., 5., 3.],
        [3., 3., 2., 4., 6., 5., 3., 5., 3., 7.],
        [2., 4., 3., 3., 7., 4., 4., 4., 4., 6.],
        [4., 4., 5., 1., 5., 2., 6., 4., 4., 4.],
        [3., 3., 2., 4., 6., 5., 3., 5., 3., 7.],
        [7., 3., 4., 4., 2., 5., 5., 3., 5., 3.],
        [5., 5., 6., 4., 2., 3., 5., 3., 5., 1.],
        [3., 3., 2., 4., 6., 5., 3., 5., 3., 7.],
        [7., 3., 4., 4., 2., 5., 5., 3., 5., 3.],
        [3., 7., 4., 4., 4., 3., 3., 3., 5., 3.],
        [5., 3., 2., 6., 4., 7., 3., 3., 5., 5.],
        [3., 3., 2., 4., 6., 5., 3., 5., 3., 7.],
        [3., 3., 4., 4., 4., 3., 3., 7., 1., 5.],
        [3., 7., 4., 4., 4., 3., 3., 3., 5., 3.],
        [2., 4., 3., 3., 7., 4., 4., 4., 4., 6.]], device='cuda:0')
Train accuarcate: 76.22%



iteration:
    6
    0  1193   bit_w:-1  loss: 1.71012
    1  1197   bit_w:-1  loss: 1.71019
    2  1230   bit_w: 1  loss: 1.70465
    3  1220   bit_w:-1  loss: 1.70439
    4  1225   bit_w:-1  loss: 1.70018
    460   6439   1158    520   5680    874   5288   6001    892   5666
     -1      1     -1     -1      1     -1      1      1     -1      1
Train accuarcate: 76.51%
tensor([[3., 4., 4., 4., 5., 3., 4., 8., 1., 6.],
        [6., 5., 7., 5., 2., 4., 5., 3., 6., 1.],
        [3., 8., 4., 4., 5., 3., 4., 4., 5., 4.],
        [6., 3., 5., 3., 4., 4., 7., 5., 4., 5.],
        [2., 5., 3., 3., 8., 4., 5., 5., 4., 7.],
        [3., 8., 4., 4., 5., 3., 4., 4., 5., 4.],
        [3., 4., 2., 4., 7., 5., 4., 6., 3., 8.],
        [2., 5., 3., 3., 8., 4., 5., 5., 4., 7.],
        [4., 5., 5., 1., 6., 2., 7., 5., 4., 5.],
        [3., 4., 2., 4., 7., 5., 4., 6., 3., 8.],
        [8., 3., 5., 5., 2., 6., 5., 3., 6., 3.],
        [5., 6., 6., 4., 3., 3., 6., 4., 5., 2.],
        [3., 4., 2., 4., 7., 5., 4., 6., 3., 8.],
        [8., 3., 5., 5., 2., 6., 5., 3., 6., 3.],
        [3., 8., 4., 4., 5., 3., 4., 4., 5., 4.],
        [6., 3., 3., 7., 4., 8., 3., 3., 6., 5.],
        [3., 4., 2., 4., 7., 5., 4., 6., 3., 8.],
        [3., 4., 4., 4., 5., 3., 4., 8., 1., 6.],
        [3., 8., 4., 4., 5., 3., 4., 4., 5., 4.],
        [2., 5., 3., 3., 8., 4., 5., 5., 4., 7.]], device='cuda:0')
Train accuarcate: 77.00%



iteration:
    7
    0  1195   bit_w:-1  loss: 1.63201
    1  1186   bit_w:-1  loss: 1.63579
    2   488   bit_w:-1  loss: 1.62858
    3  1202   bit_w:-1  loss: 1.62938
    4  1229   bit_w:-1  loss: 1.62447
   5164   6276   5396   4651    338    595    410   5659    838    658
      1      1      1      1     -1     -1     -1      1     -1     -1
Train accuarcate: 78.11%
tensor([[4., 5., 5., 5., 5., 3., 4., 9., 1., 6.],
        [7., 6., 8., 6., 2., 4., 5., 4., 6., 1.],
        [4., 9., 5., 5., 5., 3., 4., 5., 5., 4.],
        [7., 4., 6., 4., 4., 4., 7., 6., 4., 5.],
        [2., 5., 3., 3., 9., 5., 6., 5., 5., 8.],
        [4., 9., 5., 5., 5., 3., 4., 5., 5., 4.],
        [3., 4., 2., 4., 8., 6., 5., 6., 4., 9.],
        [2., 5., 3., 3., 9., 5., 6., 5., 5., 8.],
        [4., 5., 5., 1., 7., 3., 8., 5., 5., 6.],
        [3., 4., 2., 4., 8., 6., 5., 6., 4., 9.],
        [9., 4., 6., 6., 2., 6., 5., 4., 6., 3.],
        [5., 6., 6., 4., 4., 4., 7., 4., 6., 3.],
        [3., 4., 2., 4., 8., 6., 5., 6., 4., 9.],
        [9., 4., 6., 6., 2., 6., 5., 4., 6., 3.],
        [4., 9., 5., 5., 5., 3., 4., 5., 5., 4.],
        [6., 3., 3., 7., 5., 9., 4., 3., 7., 6.],
        [3., 4., 2., 4., 8., 6., 5., 6., 4., 9.],
        [4., 5., 5., 5., 5., 3., 4., 9., 1., 6.],
        [4., 9., 5., 5., 5., 3., 4., 5., 5., 4.],
        [2., 5., 3., 3., 9., 5., 6., 5., 5., 8.]], device='cuda:0')
Train accuarcate: 78.37%



iteration:
    8
    0  1190   bit_w:-1  loss: 1.55807
    1  1210   bit_w:-1  loss: 1.56029
    2  1288   bit_w: 1  loss: 1.55477
    3  1200   bit_w:-1  loss: 1.55514
    4  1416   bit_w: 1  loss: 1.55046
   5221   6131   1005    828    430   4676   5090    567   1227    339
      1      1     -1     -1     -1      1      1     -1     -1     -1
Train accuarcate: 79.58%
tensor([[ 4.,  5.,  6.,  6.,  6.,  3.,  4., 10.,  2.,  7.],
        [ 8.,  7.,  8.,  6.,  2.,  5.,  6.,  4.,  6.,  1.],
        [ 5., 10.,  5.,  5.,  5.,  4.,  5.,  5.,  5.,  4.],
        [ 8.,  5.,  6.,  4.,  4.,  5.,  8.,  6.,  4.,  5.],
        [ 2.,  5.,  4.,  4., 10.,  5.,  6.,  6.,  6.,  9.],
        [ 5., 10.,  5.,  5.,  5.,  4.,  5.,  5.,  5.,  4.],
        [ 3.,  4.,  3.,  5.,  9.,  6.,  5.,  7.,  5., 10.],
        [ 2.,  5.,  4.,  4., 10.,  5.,  6.,  6.,  6.,  9.],
        [ 5.,  6.,  5.,  1.,  7.,  4.,  9.,  5.,  5.,  6.],
        [ 3.,  4.,  3.,  5.,  9.,  6.,  5.,  7.,  5., 10.],
        [10.,  5.,  6.,  6.,  2.,  7.,  6.,  4.,  6.,  3.],
        [ 5.,  6.,  7.,  5.,  5.,  4.,  7.,  5.,  7.,  4.],
        [ 3.,  4.,  3.,  5.,  9.,  6.,  5.,  7.,  5., 10.],
        [10.,  5.,  6.,  6.,  2.,  7.,  6.,  4.,  6.,  3.],
        [ 5., 10.,  5.,  5.,  5.,  4.,  5.,  5.,  5.,  4.],
        [ 6.,  3.,  4.,  8.,  6.,  9.,  4.,  4.,  8.,  7.],
        [ 3.,  4.,  3.,  5.,  9.,  6.,  5.,  7.,  5., 10.],
        [ 4.,  5.,  6.,  6.,  6.,  3.,  4., 10.,  2.,  7.],
        [ 5., 10.,  5.,  5.,  5.,  4.,  5.,  5.,  5.,  4.],
        [ 2.,  5.,  4.,  4., 10.,  5.,  6.,  6.,  6.,  9.]], device='cuda:0')
Train accuarcate: 80.07%



iteration:
    9
    0  1188   bit_w:-1  loss: 1.48745
    1  1203   bit_w:-1  loss: 1.48800
    2   937   bit_w: 1  loss: 1.48480
    3  1192   bit_w:-1  loss: 1.48594
    4  1268   bit_w:-1  loss: 1.48326
   5660    298   4878    736   4449   1105   5462   5440    620   1214
      1     -1      1     -1      1     -1      1      1     -1     -1
Train accuarcate: 79.48%
tensor([[ 5.,  5.,  7.,  6.,  7.,  3.,  5., 11.,  2.,  7.],
        [ 9.,  7.,  9.,  6.,  3.,  5.,  7.,  5.,  6.,  1.],
        [ 5., 11.,  5.,  6.,  5.,  5.,  5.,  5.,  6.,  5.],
        [ 9.,  5.,  7.,  4.,  5.,  5.,  9.,  7.,  4.,  5.],
        [ 3.,  5.,  5.,  4., 11.,  5.,  7.,  7.,  6.,  9.],
        [ 5., 11.,  5.,  6.,  5.,  5.,  5.,  5.,  6.,  5.],
        [ 3.,  5.,  3.,  6.,  9.,  7.,  5.,  7.,  6., 11.],
        [ 2.,  6.,  4.,  5., 10.,  6.,  6.,  6.,  7., 10.],
        [ 6.,  6.,  6.,  1.,  8.,  4., 10.,  6.,  5.,  6.],
        [ 3.,  5.,  3.,  6.,  9.,  7.,  5.,  7.,  6., 11.],
        [11.,  5.,  7.,  6.,  3.,  7.,  7.,  5.,  6.,  3.],
        [ 6.,  6.,  8.,  5.,  6.,  4.,  8.,  6.,  7.,  4.],
        [ 3.,  5.,  3.,  6.,  9.,  7.,  5.,  7.,  6., 11.],
        [11.,  5.,  7.,  6.,  3.,  7.,  7.,  5.,  6.,  3.],
        [ 5., 11.,  5.,  6.,  5.,  5.,  5.,  5.,  6.,  5.],
        [ 6.,  4.,  4.,  9.,  6., 10.,  4.,  4.,  9.,  8.],
        [ 4.,  4.,  4.,  5., 10.,  6.,  6.,  8.,  5., 10.],
        [ 5.,  5.,  7.,  6.,  7.,  3.,  5., 11.,  2.,  7.],
        [ 5., 11.,  5.,  6.,  5.,  5.,  5.,  5.,  6.,  5.],
        [ 3.,  5.,  5.,  4., 11.,  5.,  7.,  7.,  6.,  9.]], device='cuda:0')
Train accuarcate: 79.93%



iteration:
   10
    0  1187   bit_w:-1  loss: 1.42198
    1  1194   bit_w:-1  loss: 1.42149
    2  1227   bit_w:-1  loss: 1.41889
    3  1233   bit_w:-1  loss: 1.41887
    4  1356   bit_w: 1  loss: 1.41675
   5733    241    849   4965    730   4317    410   5762   1092   5291
      1     -1     -1      1     -1      1     -1      1     -1      1
Train accuarcate: 80.35%
tensor([[ 6.,  5.,  7.,  7.,  7.,  4.,  5., 12.,  2.,  8.],
        [ 9.,  8., 10.,  6.,  4.,  5.,  8.,  5.,  7.,  1.],
        [ 5., 12.,  6.,  6.,  6.,  5.,  6.,  5.,  7.,  5.],
        [10.,  5.,  7.,  5.,  5.,  6.,  9.,  8.,  4.,  6.],
        [ 3.,  6.,  6.,  4., 12.,  5.,  8.,  7.,  7.,  9.],
        [ 5., 12.,  6.,  6.,  6.,  5.,  6.,  5.,  7.,  5.],
        [ 3.,  6.,  4.,  6., 10.,  7.,  6.,  7.,  7., 11.],
        [ 2.,  7.,  5.,  5., 11.,  6.,  7.,  6.,  8., 10.],
        [ 6.,  7.,  7.,  1.,  9.,  4., 11.,  6.,  6.,  6.],
        [ 4.,  5.,  3.,  7.,  9.,  8.,  5.,  8.,  6., 12.],
        [12.,  5.,  7.,  7.,  3.,  8.,  7.,  6.,  6.,  4.],
        [ 6.,  7.,  9.,  5.,  7.,  4.,  9.,  6.,  8.,  4.],
        [ 4.,  5.,  3.,  7.,  9.,  8.,  5.,  8.,  6., 12.],
        [12.,  5.,  7.,  7.,  3.,  8.,  7.,  6.,  6.,  4.],
        [ 5., 12.,  6.,  6.,  6.,  5.,  6.,  5.,  7.,  5.],
        [ 7.,  4.,  4., 10.,  6., 11.,  4.,  5.,  9.,  9.],
        [ 5.,  4.,  4.,  6., 10.,  7.,  6.,  9.,  5., 11.],
        [ 6.,  5.,  7.,  7.,  7.,  4.,  5., 12.,  2.,  8.],
        [ 6., 11.,  5.,  7.,  5.,  6.,  5.,  6.,  6.,  6.],
        [ 3.,  6.,  6.,  4., 12.,  5.,  8.,  7.,  7.,  9.]], device='cuda:0')
Train accuarcate: 81.04%



iteration:
   11
    0  1196   bit_w:-1  loss: 1.35819
    1  1207   bit_w: 1  loss: 1.36157
    2  1231   bit_w:-1  loss: 1.35428
    3  1031   bit_w: 1  loss: 1.35491
    4  1173   bit_w:-1  loss: 1.35113
    405   6589   5498   5268    300   1216   5205    895   1685    168
     -1      1      1      1     -1     -1      1     -1     -1     -1
Train accuarcate: 80.83%
tensor([[ 7.,  5.,  7.,  7.,  8.,  5.,  5., 13.,  3.,  9.],
        [ 9.,  9., 11.,  7.,  4.,  5.,  9.,  5.,  7.,  1.],
        [ 5., 13.,  7.,  7.,  6.,  5.,  7.,  5.,  7.,  5.],
        [11.,  5.,  7.,  5.,  6.,  7.,  9.,  9.,  5.,  7.],
        [ 4.,  6.,  6.,  4., 13.,  6.,  8.,  8.,  8., 10.],
        [ 5., 13.,  7.,  7.,  6.,  5.,  7.,  5.,  7.,  5.],
        [ 4.,  6.,  4.,  6., 11.,  8.,  6.,  8.,  8., 12.],
        [ 3.,  7.,  5.,  5., 12.,  7.,  7.,  7.,  9., 11.],
        [ 7.,  7.,  7.,  1., 10.,  5., 11.,  7.,  7.,  7.],
        [ 5.,  5.,  3.,  7., 10.,  9.,  5.,  9.,  7., 13.],
        [13.,  5.,  7.,  7.,  4.,  9.,  7.,  7.,  7.,  5.],
        [ 6.,  8., 10.,  6.,  7.,  4., 10.,  6.,  8.,  4.],
        [ 5.,  5.,  3.,  7., 10.,  9.,  5.,  9.,  7., 13.],
        [13.,  5.,  7.,  7.,  4.,  9.,  7.,  7.,  7.,  5.],
        [ 5., 13.,  7.,  7.,  6.,  5.,  7.,  5.,  7.,  5.],
        [ 8.,  4.,  4., 10.,  7., 12.,  4.,  6., 10., 10.],
        [ 6.,  4.,  4.,  6., 11.,  8.,  6., 10.,  6., 12.],
        [ 6.,  6.,  8.,  8.,  7.,  4.,  6., 12.,  2.,  8.],
        [ 6., 12.,  6.,  8.,  5.,  6.,  6.,  6.,  6.,  6.],
        [ 4.,  6.,  6.,  4., 13.,  6.,  8.,  8.,  8., 10.]], device='cuda:0')
Train accuarcate: 81.23%



iteration:
   12
    0  1198   bit_w:-1  loss: 1.29502
    1  1215   bit_w:-1  loss: 1.29407
    2  1297   bit_w: 1  loss: 1.29103
    3   799   bit_w: 1  loss: 1.29405
    4   985   bit_w:-1  loss: 1.29066
    243   6466   1394   5319    531   4193    574   5267   4680   1327
     -1      1     -1      1     -1      1     -1      1      1     -1
Train accuarcate: 82.10%
tensor([[ 7.,  6.,  7.,  8.,  8.,  6.,  5., 14.,  4.,  9.],
        [ 9., 10., 11.,  8.,  4.,  6.,  9.,  6.,  8.,  1.],
        [ 5., 14.,  7.,  8.,  6.,  6.,  7.,  6.,  8.,  5.],
        [12.,  5.,  8.,  5.,  7.,  7., 10.,  9.,  5.,  8.],
        [ 5.,  6.,  7.,  4., 14.,  6.,  9.,  8.,  8., 11.],
        [ 5., 14.,  7.,  8.,  6.,  6.,  7.,  6.,  8.,  5.],
        [ 5.,  6.,  5.,  6., 12.,  8.,  7.,  8.,  8., 13.],
        [ 4.,  7.,  6.,  5., 13.,  7.,  8.,  7.,  9., 12.],
        [ 8.,  7.,  8.,  1., 11.,  5., 12.,  7.,  7.,  8.],
        [ 6.,  5.,  4.,  7., 11.,  9.,  6.,  9.,  7., 14.],
        [14.,  5.,  8.,  7.,  5.,  9.,  8.,  7.,  7.,  6.],
        [ 7.,  8., 11.,  6.,  8.,  4., 11.,  6.,  8.,  5.],
        [ 6.,  5.,  4.,  7., 11.,  9.,  6.,  9.,  7., 14.],
        [14.,  5.,  8.,  7.,  5.,  9.,  8.,  7.,  7.,  6.],
        [ 5., 14.,  7.,  8.,  6.,  6.,  7.,  6.,  8.,  5.],
        [ 8.,  5.,  4., 11.,  7., 13.,  4.,  7., 11., 10.],
        [ 7.,  4.,  5.,  6., 12.,  8.,  7., 10.,  6., 13.],
        [ 6.,  7.,  8.,  9.,  7.,  5.,  6., 13.,  3.,  8.],
        [ 7., 12.,  7.,  8.,  6.,  6.,  7.,  6.,  6.,  7.],
        [ 5.,  6.,  7.,  4., 14.,  6.,  9.,  8.,  8., 11.]], device='cuda:0')
Train accuarcate: 82.74%



iteration:
   13
    0  1208   bit_w:-1  loss: 1.23882
    1  1213   bit_w:-1  loss: 1.23941
    2  1224   bit_w:-1  loss: 1.23380
    3  1237   bit_w: 1  loss: 1.23434
    4  1512   bit_w:-1  loss: 1.23021
    729   5861   1075   1208   4968   4735   5670   1130    885   1071
     -1      1     -1     -1      1      1      1     -1     -1     -1
Train accuarcate: 83.84%
tensor([[ 8.,  6.,  8.,  9.,  8.,  6.,  5., 15.,  5., 10.],
        [ 9., 11., 11.,  8.,  5.,  7., 10.,  6.,  8.,  1.],
        [ 5., 15.,  7.,  8.,  7.,  7.,  8.,  6.,  8.,  5.],
        [13.,  5.,  9.,  6.,  7.,  7., 10., 10.,  6.,  9.],
        [ 5.,  7.,  7.,  4., 15.,  7., 10.,  8.,  8., 11.],
        [ 5., 15.,  7.,  8.,  7.,  7.,  8.,  6.,  8.,  5.],
        [ 5.,  7.,  5.,  6., 13.,  9.,  8.,  8.,  8., 13.],
        [ 4.,  8.,  6.,  5., 14.,  8.,  9.,  7.,  9., 12.],
        [ 8.,  8.,  8.,  1., 12.,  6., 13.,  7.,  7.,  8.],
        [ 7.,  5.,  5.,  8., 11.,  9.,  6., 10.,  8., 15.],
        [15.,  5.,  9.,  8.,  5.,  9.,  8.,  8.,  8.,  7.],
        [ 7.,  9., 11.,  6.,  9.,  5., 12.,  6.,  8.,  5.],
        [ 6.,  6.,  4.,  7., 12., 10.,  7.,  9.,  7., 14.],
        [15.,  5.,  9.,  8.,  5.,  9.,  8.,  8.,  8.,  7.],
        [ 5., 15.,  7.,  8.,  7.,  7.,  8.,  6.,  8.,  5.],
        [ 8.,  6.,  4., 11.,  8., 14.,  5.,  7., 11., 10.],
        [ 8.,  4.,  6.,  7., 12.,  8.,  7., 11.,  7., 14.],
        [ 7.,  7.,  9., 10.,  7.,  5.,  6., 14.,  4.,  9.],
        [ 7., 13.,  7.,  8.,  7.,  7.,  8.,  6.,  6.,  7.],
        [ 5.,  7.,  7.,  4., 15.,  7., 10.,  8.,  8., 11.]], device='cuda:0')
Train accuarcate: 84.43%



iteration:
   14
    0  1197   bit_w:-1  loss: 1.17840
    1  1184   bit_w:-1  loss: 1.17868
    2  1238   bit_w:-1  loss: 1.17564
    3  1193   bit_w:-1  loss: 1.17541
    4   928   bit_w: 1  loss: 1.17303
    135   6345    692    686   5561    823    582   6166    984   5612
     -1      1     -1     -1      1     -1     -1      1     -1      1
Train accuarcate: 84.06%
tensor([[ 8.,  7.,  8.,  9.,  9.,  6.,  5., 16.,  5., 11.],
        [10., 11., 12.,  9.,  5.,  8., 11.,  6.,  9.,  1.],
        [ 5., 16.,  7.,  8.,  8.,  7.,  8.,  7.,  8.,  6.],
        [14.,  5., 10.,  7.,  7.,  8., 11., 10.,  7.,  9.],
        [ 5.,  8.,  7.,  4., 16.,  7., 10.,  9.,  8., 12.],
        [ 5., 16.,  7.,  8.,  8.,  7.,  8.,  7.,  8.,  6.],
        [ 5.,  8.,  5.,  6., 14.,  9.,  8.,  9.,  8., 14.],
        [ 4.,  9.,  6.,  5., 15.,  8.,  9.,  8.,  9., 13.],
        [ 8.,  9.,  8.,  1., 13.,  6., 13.,  8.,  7.,  9.],
        [ 7.,  6.,  5.,  8., 12.,  9.,  6., 11.,  8., 16.],
        [16.,  5., 10.,  9.,  5., 10.,  9.,  8.,  9.,  7.],
        [ 8.,  9., 12.,  7.,  9.,  6., 13.,  6.,  9.,  5.],
        [ 6.,  7.,  4.,  7., 13., 10.,  7., 10.,  7., 15.],
        [16.,  5., 10.,  9.,  5., 10.,  9.,  8.,  9.,  7.],
        [ 5., 16.,  7.,  8.,  8.,  7.,  8.,  7.,  8.,  6.],
        [ 9.,  6.,  5., 12.,  8., 15.,  6.,  7., 12., 10.],
        [ 8.,  5.,  6.,  7., 13.,  8.,  7., 12.,  7., 15.],
        [ 7.,  8.,  9., 10.,  8.,  5.,  6., 15.,  4., 10.],
        [ 7., 14.,  7.,  8.,  8.,  7.,  8.,  7.,  6.,  8.],
        [ 5.,  8.,  7.,  4., 16.,  7., 10.,  9.,  8., 12.]], device='cuda:0')
Train accuarcate: 84.60%



iteration:
   15
    0  1195   bit_w:-1  loss: 1.12461
    1  1204   bit_w:-1  loss: 1.12658
    2  1192   bit_w:-1  loss: 1.12290
    3  1216   bit_w:-1  loss: 1.12279
    4  1250   bit_w: 1  loss: 1.12046
   5484   6042   5350   1187    256    604   1089   5405    866    545
      1      1      1     -1     -1     -1     -1      1     -1     -1
Train accuarcate: 83.72%
tensor([[ 9.,  8.,  9.,  9.,  9.,  6.,  5., 17.,  5., 11.],
        [11., 12., 13.,  9.,  5.,  8., 11.,  7.,  9.,  1.],
        [ 6., 17.,  8.,  8.,  8.,  7.,  8.,  8.,  8.,  6.],
        [15.,  6., 11.,  7.,  7.,  8., 11., 11.,  7.,  9.],
        [ 5.,  8.,  7.,  5., 17.,  8., 11.,  9.,  9., 13.],
        [ 6., 17.,  8.,  8.,  8.,  7.,  8.,  8.,  8.,  6.],
        [ 5.,  8.,  5.,  7., 15., 10.,  9.,  9.,  9., 15.],
        [ 4.,  9.,  6.,  6., 16.,  9., 10.,  8., 10., 14.],
        [ 9., 10.,  9.,  1., 13.,  6., 13.,  9.,  7.,  9.],
        [ 7.,  6.,  5.,  9., 13., 10.,  7., 11.,  9., 17.],
        [17.,  6., 11.,  9.,  5., 10.,  9.,  9.,  9.,  7.],
        [ 8.,  9., 12.,  8., 10.,  7., 14.,  6., 10.,  6.],
        [ 6.,  7.,  4.,  8., 14., 11.,  8., 10.,  8., 16.],
        [17.,  6., 11.,  9.,  5., 10.,  9.,  9.,  9.,  7.],
        [ 6., 17.,  8.,  8.,  8.,  7.,  8.,  8.,  8.,  6.],
        [ 9.,  6.,  5., 13.,  9., 16.,  7.,  7., 13., 11.],
        [ 8.,  5.,  6.,  8., 14.,  9.,  8., 12.,  8., 16.],
        [ 8.,  9., 10., 10.,  8.,  5.,  6., 16.,  4., 10.],
        [ 7., 14.,  7.,  9.,  9.,  8.,  9.,  7.,  7.,  9.],
        [ 5.,  8.,  7.,  5., 17.,  8., 11.,  9.,  9., 13.]], device='cuda:0')
Train accuarcate: 84.27%



iteration:
   16
    0  1189   bit_w:-1  loss: 1.07659
    1  1205   bit_w:-1  loss: 1.07676
    2  1222   bit_w:-1  loss: 1.07424
    3   787   bit_w: 1  loss: 1.07400
    4  1348   bit_w:-1  loss: 1.07224
    633   6186    725   5480   5342   4658    345   6096   1027   5718
     -1      1     -1      1      1      1     -1      1     -1      1
Train accuarcate: 84.08%
tensor([[ 9.,  9.,  9., 10., 10.,  7.,  5., 18.,  5., 12.],
        [12., 12., 14.,  9.,  5.,  8., 12.,  7., 10.,  1.],
        [ 6., 18.,  8.,  9.,  9.,  8.,  8.,  9.,  8.,  7.],
        [16.,  6., 12.,  7.,  7.,  8., 12., 11.,  8.,  9.],
        [ 5.,  9.,  7.,  6., 18.,  9., 11., 10.,  9., 14.],
        [ 6., 18.,  8.,  9.,  9.,  8.,  8.,  9.,  8.,  7.],
        [ 5.,  9.,  5.,  8., 16., 11.,  9., 10.,  9., 16.],
        [ 4., 10.,  6.,  7., 17., 10., 10.,  9., 10., 15.],
        [10., 10., 10.,  1., 13.,  6., 14.,  9.,  8.,  9.],
        [ 7.,  7.,  5., 10., 14., 11.,  7., 12.,  9., 18.],
        [18.,  6., 12.,  9.,  5., 10., 10.,  9., 10.,  7.],
        [ 9.,  9., 13.,  8., 10.,  7., 15.,  6., 11.,  6.],
        [ 6.,  8.,  4.,  9., 15., 12.,  8., 11.,  8., 17.],
        [18.,  6., 12.,  9.,  5., 10., 10.,  9., 10.,  7.],
        [ 6., 18.,  8.,  9.,  9.,  8.,  8.,  9.,  8.,  7.],
        [ 9.,  7.,  5., 14., 10., 17.,  7.,  8., 13., 12.],
        [ 8.,  6.,  6.,  9., 15., 10.,  8., 13.,  8., 17.],
        [ 8., 10., 10., 11.,  9.,  6.,  6., 17.,  4., 11.],
        [ 8., 14.,  8.,  9.,  9.,  8., 10.,  7.,  8.,  9.],
        [ 5.,  9.,  7.,  6., 18.,  9., 11., 10.,  9., 14.]], device='cuda:0')
Train accuarcate: 84.45%



iteration:
   17
    0  1191   bit_w:-1  loss: 1.02949
    1  1186   bit_w:-1  loss: 1.02938
    2  1213   bit_w: 1  loss: 1.02428
    3  1221   bit_w:-1  loss: 1.02404
    4   907   bit_w:-1  loss: 1.02182
    275   6661   5437   5145    122    723    244   4989   4249    831
     -1      1      1      1     -1     -1     -1      1      1     -1
Train accuarcate: 84.42%
tensor([[ 9., 10., 10., 11., 10.,  7.,  5., 19.,  6., 12.],
        [12., 13., 15., 10.,  5.,  8., 12.,  8., 11.,  1.],
        [ 6., 19.,  9., 10.,  9.,  8.,  8., 10.,  9.,  7.],
        [17.,  6., 12.,  7.,  8.,  9., 13., 11.,  8., 10.],
        [ 6.,  9.,  7.,  6., 19., 10., 12., 10.,  9., 15.],
        [ 6., 19.,  9., 10.,  9.,  8.,  8., 10.,  9.,  7.],
        [ 6.,  9.,  5.,  8., 17., 12., 10., 10.,  9., 17.],
        [ 5., 10.,  6.,  7., 18., 11., 11.,  9., 10., 16.],
        [11., 10., 10.,  1., 14.,  7., 15.,  9.,  8., 10.],
        [ 8.,  7.,  5., 10., 15., 12.,  8., 12.,  9., 19.],
        [19.,  6., 12.,  9.,  6., 11., 11.,  9., 10.,  8.],
        [10.,  9., 13.,  8., 11.,  8., 16.,  6., 11.,  7.],
        [ 7.,  8.,  4.,  9., 16., 13.,  9., 11.,  8., 18.],
        [19.,  6., 12.,  9.,  6., 11., 11.,  9., 10.,  8.],
        [ 6., 19.,  9., 10.,  9.,  8.,  8., 10.,  9.,  7.],
        [10.,  7.,  5., 14., 11., 18.,  8.,  8., 13., 13.],
        [ 9.,  6.,  6.,  9., 16., 11.,  9., 13.,  8., 18.],
        [ 8., 11., 11., 12.,  9.,  6.,  6., 18.,  5., 11.],
        [ 8., 15.,  9., 10.,  9.,  8., 10.,  8.,  9.,  9.],
        [ 6.,  9.,  7.,  6., 19., 10., 12., 10.,  9., 15.]], device='cuda:0')
Train accuarcate: 84.82%



iteration:
   18
    0  1208   bit_w:-1  loss: 0.98193
    1  1196   bit_w:-1  loss: 0.98301
    2  1200   bit_w:-1  loss: 0.97850
    3  1234   bit_w:-1  loss: 0.97837
    4  1312   bit_w:-1  loss: 0.97575
    826   6499   5278   5271   1071   4285   4730   1060    947    436
     -1      1      1      1     -1      1      1     -1     -1     -1
Train accuarcate: 84.65%
tensor([[10., 10., 10., 11., 11.,  7.,  5., 20.,  7., 13.],
        [12., 14., 16., 11.,  5.,  9., 13.,  8., 11.,  1.],
        [ 6., 20., 10., 11.,  9.,  9.,  9., 10.,  9.,  7.],
        [18.,  6., 12.,  7.,  9.,  9., 13., 12.,  9., 11.],
        [ 7.,  9.,  7.,  6., 20., 10., 12., 11., 10., 16.],
        [ 6., 20., 10., 11.,  9.,  9.,  9., 10.,  9.,  7.],
        [ 6., 10.,  6.,  9., 17., 13., 11., 10.,  9., 17.],
        [ 6., 10.,  6.,  7., 19., 11., 11., 10., 11., 17.],
        [12., 10., 10.,  1., 15.,  7., 15., 10.,  9., 11.],
        [ 9.,  7.,  5., 10., 16., 12.,  8., 13., 10., 20.],
        [20.,  6., 12.,  9.,  7., 11., 11., 10., 11.,  9.],
        [11.,  9., 13.,  8., 12.,  8., 16.,  7., 12.,  8.],
        [ 8.,  8.,  4.,  9., 17., 13.,  9., 12.,  9., 19.],
        [20.,  6., 12.,  9.,  7., 11., 11., 10., 11.,  9.],
        [ 6., 20., 10., 11.,  9.,  9.,  9., 10.,  9.,  7.],
        [10.,  8.,  6., 15., 11., 19.,  9.,  8., 13., 13.],
        [10.,  6.,  6.,  9., 17., 11.,  9., 14.,  9., 19.],
        [ 9., 11., 11., 12., 10.,  6.,  6., 19.,  6., 12.],
        [ 8., 16., 10., 11.,  9.,  9., 11.,  8.,  9.,  9.],
        [ 7.,  9.,  7.,  6., 20., 10., 12., 11., 10., 16.]], device='cuda:0')
Train accuarcate: 84.94%



iteration:
   19
    0  1187   bit_w:-1  loss: 0.93850
    1  1194   bit_w:-1  loss: 0.93814
    2  1258   bit_w:-1  loss: 0.93639
    3  1212   bit_w:-1  loss: 0.93610
    4  1250   bit_w:-1  loss: 0.93431
   5633    312    668   5505    962   4745    608   5559    845   4624
      1     -1     -1      1     -1      1     -1      1     -1      1
Train accuarcate: 84.31%
tensor([[11., 10., 10., 12., 11.,  8.,  5., 21.,  7., 14.],
        [13., 14., 16., 12.,  5., 10., 13.,  9., 11.,  2.],
        [ 6., 21., 11., 11., 10.,  9., 10., 10., 10.,  7.],
        [19.,  6., 12.,  8.,  9., 10., 13., 13.,  9., 12.],
        [ 7., 10.,  8.,  6., 21., 10., 13., 11., 11., 16.],
        [ 6., 21., 11., 11., 10.,  9., 10., 10., 10.,  7.],
        [ 7., 10.,  6., 10., 17., 14., 11., 11.,  9., 18.],
        [ 6., 11.,  7.,  7., 20., 11., 12., 10., 12., 17.],
        [12., 11., 11.,  1., 16.,  7., 16., 10., 10., 11.],
        [10.,  7.,  5., 11., 16., 13.,  8., 14., 10., 21.],
        [21.,  6., 12., 10.,  7., 12., 11., 11., 11., 10.],
        [11., 10., 14.,  8., 13.,  8., 17.,  7., 13.,  8.],
        [ 9.,  8.,  4., 10., 17., 14.,  9., 13.,  9., 20.],
        [21.,  6., 12., 10.,  7., 12., 11., 11., 11., 10.],
        [ 6., 21., 11., 11., 10.,  9., 10., 10., 10.,  7.],
        [11.,  8.,  6., 16., 11., 20.,  9.,  9., 13., 14.],
        [11.,  6.,  6., 10., 17., 12.,  9., 15.,  9., 20.],
        [10., 11., 11., 13., 10.,  7.,  6., 20.,  6., 13.],
        [ 9., 16., 10., 12.,  9., 10., 11.,  9.,  9., 10.],
        [ 7., 10.,  8.,  6., 21., 10., 13., 11., 11., 16.]], device='cuda:0')
Train accuarcate: 84.74%



iteration:
   20
    0  1210   bit_w:-1  loss: 0.89927
    1  1190   bit_w:-1  loss: 0.89978
    2  1257   bit_w: 1  loss: 0.89568
    3  1219   bit_w: 1  loss: 0.89494
    4  1312   bit_w: 1  loss: 0.89248
   5512   5815    618   1033   1606   4847   5137   1210   4940   4262
      1      1     -1     -1     -1      1      1     -1      1      1
Train accuarcate: 84.65%
tensor([[11., 10., 11., 13., 12.,  8.,  5., 22.,  7., 14.],
        [13., 14., 17., 13.,  6., 10., 13., 10., 11.,  2.],
        [ 7., 22., 11., 11., 10., 10., 11., 10., 11.,  8.],
        [20.,  7., 12.,  8.,  9., 11., 14., 13., 10., 13.],
        [ 7., 10.,  9.,  7., 22., 10., 13., 12., 11., 16.],
        [ 6., 21., 12., 12., 11.,  9., 10., 11., 10.,  7.],
        [ 7., 10.,  7., 11., 18., 14., 11., 12.,  9., 18.],
        [ 7., 12.,  7.,  7., 20., 12., 13., 10., 13., 18.],
        [13., 12., 11.,  1., 16.,  8., 17., 10., 11., 12.],
        [10.,  7.,  6., 12., 17., 13.,  8., 15., 10., 21.],
        [22.,  7., 12., 10.,  7., 13., 12., 11., 12., 11.],
        [11., 10., 15.,  9., 14.,  8., 17.,  8., 13.,  8.],
        [10.,  9.,  4., 10., 17., 15., 10., 13., 10., 21.],
        [22.,  7., 12., 10.,  7., 13., 12., 11., 12., 11.],
        [ 7., 22., 11., 11., 10., 10., 11., 10., 11.,  8.],
        [12.,  9.,  6., 16., 11., 21., 10.,  9., 14., 15.],
        [12.,  7.,  6., 10., 17., 13., 10., 15., 10., 21.],
        [10., 11., 12., 14., 11.,  7.,  6., 21.,  6., 13.],
        [ 9., 16., 11., 13., 10., 10., 11., 10.,  9., 10.],
        [ 8., 11.,  8.,  6., 21., 11., 14., 11., 12., 17.]], device='cuda:0')
Train accuarcate: 85.11%



iteration:
   21
    0  1199   bit_w:-1  loss: 0.85970
    1  1224   bit_w:-1  loss: 0.85958
    2  1248   bit_w: 1  loss: 0.85548
    3  1213   bit_w:-1  loss: 0.85642
    4  1232   bit_w: 1  loss: 0.85369
    905   6234   1018   1375   5224   4728   5751   3832    911   1529
     -1      1     -1     -1      1      1      1      1     -1     -1
Train accuarcate: 85.43%
tensor([[11., 11., 11., 13., 13.,  9.,  6., 23.,  7., 14.],
        [13., 15., 17., 13.,  7., 11., 14., 11., 11.,  2.],
        [ 7., 23., 11., 11., 11., 11., 12., 11., 11.,  8.],
        [21.,  7., 13.,  9.,  9., 11., 14., 13., 11., 14.],
        [ 7., 11.,  9.,  7., 23., 11., 14., 13., 11., 16.],
        [ 6., 22., 12., 12., 12., 10., 11., 12., 10.,  7.],
        [ 7., 11.,  7., 11., 19., 15., 12., 13.,  9., 18.],
        [ 7., 13.,  7.,  7., 21., 13., 14., 11., 13., 18.],
        [13., 13., 11.,  1., 17.,  9., 18., 11., 11., 12.],
        [10.,  8.,  6., 12., 18., 14.,  9., 16., 10., 21.],
        [23.,  7., 13., 11.,  7., 13., 12., 11., 13., 12.],
        [11., 11., 15.,  9., 15.,  9., 18.,  9., 13.,  8.],
        [10., 10.,  4., 10., 18., 16., 11., 14., 10., 21.],
        [23.,  7., 13., 11.,  7., 13., 12., 11., 13., 12.],
        [ 7., 23., 11., 11., 11., 11., 12., 11., 11.,  8.],
        [12., 10.,  6., 16., 12., 22., 11., 10., 14., 15.],
        [13.,  7.,  7., 11., 17., 13., 10., 15., 11., 22.],
        [11., 11., 13., 15., 11.,  7.,  6., 21.,  7., 14.],
        [ 9., 17., 11., 13., 11., 11., 12., 11.,  9., 10.],
        [ 8., 12.,  8.,  6., 22., 12., 15., 12., 12., 17.]], device='cuda:0')
Train accuarcate: 85.52%



iteration:
   22
    0  1217   bit_w:-1  loss: 0.82338
    1  1228   bit_w:-1  loss: 0.82374
    2  1232   bit_w:-1  loss: 0.81852
    3  1268   bit_w: 1  loss: 0.81794
    4  1215   bit_w:-1  loss: 0.81460
    733   6473   1107   2183   1094   4266    258   5803   5006   5182
     -1      1     -1     -1     -1      1     -1      1      1      1
Train accuarcate: 86.15%
tensor([[11., 12., 11., 13., 13., 10.,  6., 24.,  8., 15.],
        [14., 15., 18., 14.,  8., 11., 15., 11., 11.,  2.],
        [ 7., 24., 11., 11., 11., 12., 12., 12., 12.,  9.],
        [22.,  7., 14., 10., 10., 11., 15., 13., 11., 14.],
        [ 8., 11., 10.,  8., 24., 11., 15., 13., 11., 16.],
        [ 6., 23., 12., 12., 12., 11., 11., 13., 11.,  8.],
        [ 8., 11.,  8., 12., 20., 15., 13., 13.,  9., 18.],
        [ 7., 14.,  7.,  7., 21., 14., 14., 12., 14., 19.],
        [13., 14., 11.,  1., 17., 10., 18., 12., 12., 13.],
        [10.,  9.,  6., 12., 18., 15.,  9., 17., 11., 22.],
        [24.,  7., 14., 12.,  8., 13., 13., 11., 13., 12.],
        [12., 11., 16., 10., 16.,  9., 19.,  9., 13.,  8.],
        [10., 11.,  4., 10., 18., 17., 11., 15., 11., 22.],
        [24.,  7., 14., 12.,  8., 13., 13., 11., 13., 12.],
        [ 7., 24., 11., 11., 11., 12., 12., 12., 12.,  9.],
        [13., 10.,  7., 17., 13., 22., 12., 10., 14., 15.],
        [13.,  8.,  7., 11., 17., 14., 10., 16., 12., 23.],
        [11., 12., 13., 15., 11.,  8.,  6., 22.,  8., 15.],
        [10., 17., 12., 14., 12., 11., 13., 11.,  9., 10.],
        [ 9., 12.,  9.,  7., 23., 12., 16., 12., 12., 17.]], device='cuda:0')
Train accuarcate: 86.24%



iteration:
   23
    0  1206   bit_w:-1  loss: 0.78561
    1  1212   bit_w:-1  loss: 0.78527
    2  1205   bit_w:-1  loss: 0.78415
    3  1193   bit_w: 1  loss: 0.78291
    4   868   bit_w: 1  loss: 0.78222
   5376    404    996   5423   3528   4648   1004   5498    926   1733
      1     -1     -1      1      1      1     -1      1     -1     -1
Train accuarcate: 86.29%
tensor([[12., 12., 11., 14., 14., 11.,  6., 25.,  8., 15.],
        [14., 16., 19., 14.,  8., 11., 16., 11., 12.,  3.],
        [ 7., 25., 12., 11., 11., 12., 13., 12., 13., 10.],
        [23.,  7., 14., 11., 11., 12., 15., 14., 11., 14.],
        [ 8., 12., 11.,  8., 24., 11., 16., 13., 12., 17.],
        [ 6., 24., 13., 12., 12., 11., 12., 13., 12.,  9.],
        [ 9., 11.,  8., 13., 21., 16., 13., 14.,  9., 18.],
        [ 7., 15.,  8.,  7., 21., 14., 15., 12., 15., 20.],
        [13., 15., 12.,  1., 17., 10., 19., 12., 13., 14.],
        [10., 10.,  7., 12., 18., 15., 10., 17., 12., 23.],
        [25.,  7., 14., 13.,  9., 14., 13., 12., 13., 12.],
        [12., 12., 17., 10., 16.,  9., 20.,  9., 14.,  9.],
        [10., 12.,  5., 10., 18., 17., 12., 15., 12., 23.],
        [25.,  7., 14., 13.,  9., 14., 13., 12., 13., 12.],
        [ 7., 25., 12., 11., 11., 12., 13., 12., 13., 10.],
        [14., 10.,  7., 18., 14., 23., 12., 11., 14., 15.],
        [13.,  9.,  8., 11., 17., 14., 11., 16., 13., 24.],
        [12., 12., 13., 16., 12.,  9.,  6., 23.,  8., 15.],
        [11., 17., 12., 15., 13., 12., 13., 12.,  9., 10.],
        [10., 12.,  9.,  8., 24., 13., 16., 13., 12., 17.]], device='cuda:0')
Train accuarcate: 86.65%



iteration:
   24
    0  1225   bit_w:-1  loss: 0.75532
    1  1185   bit_w:-1  loss: 0.75623
    2   830   bit_w: 1  loss: 0.75240
    3  1193   bit_w:-1  loss: 0.75337
    4  1241   bit_w:-1  loss: 0.75174
    572   6010   4885   1146   3008    493   5300   5853    753   4984
     -1      1      1     -1     -1     -1      1      1     -1      1
Train accuarcate: 86.43%
tensor([[12., 13., 12., 14., 14., 11.,  7., 26.,  8., 16.],
        [14., 17., 20., 14.,  8., 11., 17., 12., 12.,  4.],
        [ 7., 26., 13., 11., 11., 12., 14., 13., 13., 11.],
        [24.,  7., 14., 12., 12., 13., 15., 14., 12., 14.],
        [ 8., 13., 12.,  8., 24., 11., 17., 14., 12., 18.],
        [ 6., 25., 14., 12., 12., 11., 13., 14., 12., 10.],
        [10., 11.,  8., 14., 22., 17., 13., 14., 10., 18.],
        [ 7., 16.,  9.,  7., 21., 14., 16., 13., 15., 21.],
        [13., 16., 13.,  1., 17., 10., 20., 13., 13., 15.],
        [10., 11.,  8., 12., 18., 15., 11., 18., 12., 24.],
        [26.,  7., 14., 14., 10., 15., 13., 12., 14., 12.],
        [12., 13., 18., 10., 16.,  9., 21., 10., 14., 10.],
        [10., 13.,  6., 10., 18., 17., 13., 16., 12., 24.],
        [26.,  7., 14., 14., 10., 15., 13., 12., 14., 12.],
        [ 7., 26., 13., 11., 11., 12., 14., 13., 13., 11.],
        [15., 10.,  7., 19., 15., 24., 12., 11., 15., 15.],
        [13., 10.,  9., 11., 17., 14., 12., 17., 13., 25.],
        [12., 13., 14., 16., 12.,  9.,  7., 24.,  8., 16.],
        [11., 18., 13., 15., 13., 12., 14., 13.,  9., 11.],
        [11., 12.,  9.,  9., 25., 14., 16., 13., 13., 17.]], device='cuda:0')
Train accuarcate: 86.61%



iteration:
   25
    0  1221   bit_w:-1  loss: 0.72694
    1  1191   bit_w:-1  loss: 0.72642
    2  1213   bit_w: 1  loss: 0.72342
    3  1259   bit_w: 1  loss: 0.72379
    4  1341   bit_w: 1  loss: 0.72104
    432   6639   5209   5388    165    854    216   5160   4374   1100
     -1      1      1      1     -1     -1     -1      1      1     -1
Train accuarcate: 86.67%
tensor([[12., 14., 13., 15., 14., 11.,  7., 27.,  9., 16.],
        [14., 18., 21., 15.,  8., 11., 17., 13., 13.,  4.],
        [ 7., 27., 14., 12., 11., 12., 14., 14., 14., 11.],
        [25.,  7., 14., 12., 13., 14., 16., 14., 12., 15.],
        [ 9., 13., 12.,  8., 25., 12., 18., 14., 12., 19.],
        [ 6., 26., 15., 13., 12., 11., 13., 15., 13., 10.],
        [11., 11.,  8., 14., 23., 18., 14., 14., 10., 19.],
        [ 8., 16.,  9.,  7., 22., 15., 17., 13., 15., 22.],
        [14., 16., 13.,  1., 18., 11., 21., 13., 13., 16.],
        [11., 11.,  8., 12., 19., 16., 12., 18., 12., 25.],
        [27.,  7., 14., 14., 11., 16., 14., 12., 14., 13.],
        [13., 13., 18., 10., 17., 10., 22., 10., 14., 11.],
        [11., 13.,  6., 10., 19., 18., 14., 16., 12., 25.],
        [27.,  7., 14., 14., 11., 16., 14., 12., 14., 13.],
        [ 7., 27., 14., 12., 11., 12., 14., 14., 14., 11.],
        [15., 11.,  8., 20., 15., 24., 12., 12., 16., 15.],
        [14., 10.,  9., 11., 18., 15., 13., 17., 13., 26.],
        [12., 14., 15., 17., 12.,  9.,  7., 25.,  9., 16.],
        [11., 19., 14., 16., 13., 12., 14., 14., 10., 11.],
        [12., 12.,  9.,  9., 26., 15., 17., 13., 13., 18.]], device='cuda:0')
Train accuarcate: 86.76%



iteration:
   26
    0  1200   bit_w:-1  loss: 0.69781
    1  1207   bit_w: 1  loss: 0.69855
    2  1252   bit_w:-1  loss: 0.69433
    3  1283   bit_w: 1  loss: 0.69481
    4  1236   bit_w:-1  loss: 0.69254
   5511   5663   5224   5546    337   4547   4858    242   1824    153
      1      1      1      1     -1      1      1     -1     -1     -1
Train accuarcate: 86.72%
tensor([[12., 14., 13., 15., 15., 11.,  7., 28., 10., 17.],
        [15., 19., 22., 16.,  8., 12., 18., 13., 13.,  4.],
        [ 8., 28., 15., 13., 11., 13., 15., 14., 14., 11.],
        [26.,  8., 15., 13., 13., 15., 17., 14., 12., 15.],
        [ 9., 13., 12.,  8., 26., 12., 18., 15., 13., 20.],
        [ 7., 27., 16., 14., 12., 12., 14., 15., 13., 10.],
        [11., 11.,  8., 14., 24., 18., 14., 15., 11., 20.],
        [ 8., 16.,  9.,  7., 23., 15., 17., 14., 16., 23.],
        [15., 17., 14.,  2., 18., 12., 22., 13., 13., 16.],
        [11., 11.,  8., 12., 20., 16., 12., 19., 13., 26.],
        [28.,  8., 15., 15., 11., 17., 15., 12., 14., 13.],
        [14., 14., 19., 11., 17., 11., 23., 10., 14., 11.],
        [11., 13.,  6., 10., 20., 18., 14., 17., 13., 26.],
        [28.,  8., 15., 15., 11., 17., 15., 12., 14., 13.],
        [ 8., 28., 15., 13., 11., 13., 15., 14., 14., 11.],
        [16., 12.,  9., 21., 15., 25., 13., 12., 16., 15.],
        [14., 10.,  9., 11., 19., 15., 13., 18., 14., 27.],
        [12., 14., 15., 17., 13.,  9.,  7., 26., 10., 17.],
        [12., 20., 15., 17., 13., 13., 15., 14., 10., 11.],
        [12., 12.,  9.,  9., 27., 15., 17., 14., 14., 19.]], device='cuda:0')
Train accuarcate: 86.68%



iteration:
   27
    0  1229   bit_w:-1  loss: 0.67030
    1  1188   bit_w:-1  loss: 0.66963
    2  1210   bit_w: 1  loss: 0.66883
    3  1465   bit_w: 1  loss: 0.66887
    4  1422   bit_w:-1  loss: 0.66672
   5366    261   5256    801   4372    582   1230   5557    698   2765
      1     -1      1     -1      1     -1     -1      1     -1      0
Train accuarcate: 87.06%
tensor([[13., 14., 14., 15., 16., 11.,  7., 29., 10., 17.],
        [16., 19., 23., 16.,  9., 12., 18., 14., 13.,  4.],
        [ 8., 29., 15., 14., 11., 14., 16., 14., 15., 11.],
        [27.,  8., 16., 13., 14., 15., 17., 15., 12., 15.],
        [10., 13., 13.,  8., 27., 12., 18., 16., 13., 20.],
        [ 8., 27., 17., 14., 13., 12., 14., 16., 13., 10.],
        [11., 12.,  8., 15., 24., 19., 15., 15., 12., 20.],
        [ 9., 16., 10.,  7., 24., 15., 17., 15., 16., 23.],
        [16., 17., 15.,  2., 19., 12., 22., 14., 13., 16.],
        [11., 12.,  8., 13., 20., 17., 13., 19., 14., 26.],
        [29.,  8., 16., 15., 12., 17., 15., 13., 14., 13.],
        [15., 14., 20., 11., 18., 11., 23., 11., 14., 11.],
        [12., 13.,  7., 10., 21., 18., 14., 18., 13., 26.],
        [29.,  8., 16., 15., 12., 17., 15., 13., 14., 13.],
        [ 8., 29., 15., 14., 11., 14., 16., 14., 15., 11.],
        [16., 13.,  9., 22., 15., 26., 14., 12., 17., 15.],
        [15., 10., 10., 11., 20., 15., 13., 19., 14., 27.],
        [13., 14., 16., 17., 14.,  9.,  7., 27., 10., 17.],
        [12., 21., 15., 18., 13., 14., 16., 14., 11., 11.],
        [12., 13.,  9., 10., 27., 16., 18., 14., 15., 19.]], device='cuda:0')
Train accuarcate: 87.22%



iteration:
   28
    0  1214   bit_w:-1  loss: 0.64670
    1  1195   bit_w:-1  loss: 0.64654
    2  1249   bit_w:-1  loss: 0.64430
    3  1229   bit_w:-1  loss: 0.64367
    4  1378   bit_w:-1  loss: 0.64288
   5492   5911   4622   1102    588   1795    732   5468    565    626
      1      1      1     -1     -1      0     -1      1     -1     -1
Train accuarcate: 87.25%
tensor([[14., 15., 15., 15., 16., 11.,  7., 30., 10., 17.],
        [17., 20., 24., 16.,  9., 12., 18., 15., 13.,  4.],
        [ 9., 30., 16., 14., 11., 14., 16., 15., 15., 11.],
        [28.,  9., 17., 13., 14., 15., 17., 16., 12., 15.],
        [10., 13., 13.,  9., 28., 12., 19., 16., 14., 21.],
        [ 9., 28., 18., 14., 13., 12., 14., 17., 13., 10.],
        [11., 12.,  8., 16., 25., 19., 16., 15., 13., 21.],
        [ 9., 16., 10.,  8., 25., 15., 18., 15., 17., 24.],
        [17., 18., 16.,  2., 19., 12., 22., 15., 13., 16.],
        [11., 12.,  8., 14., 21., 17., 14., 19., 15., 27.],
        [30.,  9., 17., 15., 12., 17., 15., 14., 14., 13.],
        [15., 14., 20., 12., 19., 11., 24., 11., 15., 12.],
        [12., 13.,  7., 11., 22., 18., 15., 18., 14., 27.],
        [30.,  9., 17., 15., 12., 17., 15., 14., 14., 13.],
        [ 9., 30., 16., 14., 11., 14., 16., 15., 15., 11.],
        [16., 13.,  9., 23., 16., 26., 15., 12., 18., 16.],
        [15., 10., 10., 12., 21., 15., 14., 19., 15., 28.],
        [14., 15., 17., 17., 14.,  9.,  7., 28., 10., 17.],
        [12., 21., 15., 19., 14., 14., 17., 14., 12., 12.],
        [12., 13.,  9., 11., 28., 16., 19., 14., 16., 20.]], device='cuda:0')
Train accuarcate: 87.49%



iteration:
   29
    0  1250   bit_w:-1  loss: 0.62365
    1  1238   bit_w:-1  loss: 0.62333
    2  1254   bit_w: 1  loss: 0.62070
    3  1197   bit_w:-1  loss: 0.62058
    4  1226   bit_w: 1  loss: 0.61797
    158   5634    849   4312   5418   1089    518   5912   1259   5528
     -1      1     -1      1      1     -1     -1      1     -1      1
Train accuarcate: 87.48%
tensor([[14., 16., 15., 16., 17., 11.,  7., 31., 10., 18.],
        [18., 20., 25., 16.,  9., 13., 19., 15., 14.,  4.],
        [10., 30., 17., 14., 11., 15., 17., 15., 16., 11.],
        [29.,  9., 18., 13., 14., 16., 18., 16., 13., 15.],
        [10., 14., 13., 10., 29., 12., 19., 17., 14., 22.],
        [ 9., 29., 18., 15., 14., 12., 14., 18., 13., 11.],
        [11., 13.,  8., 17., 26., 19., 16., 16., 13., 22.],
        [ 9., 17., 10.,  9., 26., 15., 18., 16., 17., 25.],
        [18., 18., 17.,  2., 19., 13., 23., 15., 14., 16.],
        [11., 13.,  8., 15., 22., 17., 14., 20., 15., 28.],
        [31.,  9., 18., 15., 12., 18., 16., 14., 15., 13.],
        [16., 14., 21., 12., 19., 12., 25., 11., 16., 12.],
        [12., 14.,  7., 12., 23., 18., 15., 19., 14., 28.],
        [31.,  9., 18., 15., 12., 18., 16., 14., 15., 13.],
        [ 9., 31., 16., 15., 12., 14., 16., 16., 15., 12.],
        [16., 14.,  9., 24., 17., 26., 15., 13., 18., 17.],
        [15., 11., 10., 13., 22., 15., 14., 20., 15., 29.],
        [14., 16., 17., 18., 15.,  9.,  7., 29., 10., 18.],
        [12., 22., 15., 20., 15., 14., 17., 15., 12., 13.],
        [12., 14.,  9., 12., 29., 16., 19., 15., 16., 21.]], device='cuda:0')
Train accuarcate: 87.77%



iteration:
   30
    0  1223   bit_w:-1  loss: 0.59939
    1  1245   bit_w:-1  loss: 0.60028
    2  1275   bit_w: 1  loss: 0.59705
    3  1236   bit_w:-1  loss: 0.59770
    4  1224   bit_w:-1  loss: 0.59550
    829   1629   4850   5565    592   4619   2460   4903   1029   1190
     -1     -1      1      1     -1      1      0      1     -1     -1
Train accuarcate: 87.78%
tensor([[14., 16., 16., 17., 17., 12.,  7., 32., 10., 18.],
        [18., 20., 26., 17.,  9., 14., 19., 16., 14.,  4.],
        [11., 31., 17., 14., 12., 15., 17., 15., 17., 12.],
        [30., 10., 18., 13., 15., 16., 18., 16., 14., 16.],
        [11., 15., 13., 10., 30., 12., 19., 17., 15., 23.],
        [10., 30., 18., 15., 15., 12., 14., 18., 14., 12.],
        [12., 14.,  8., 17., 27., 19., 16., 16., 14., 23.],
        [ 9., 17., 11., 10., 26., 16., 18., 17., 17., 25.],
        [19., 19., 17.,  2., 20., 13., 23., 15., 15., 17.],
        [12., 14.,  8., 15., 23., 17., 14., 20., 16., 29.],
        [32., 10., 18., 15., 13., 18., 16., 14., 16., 14.],
        [17., 15., 21., 12., 20., 12., 25., 11., 17., 13.],
        [13., 15.,  7., 12., 24., 18., 15., 19., 15., 29.],
        [32., 10., 18., 15., 13., 18., 16., 14., 16., 14.],
        [ 9., 31., 17., 16., 12., 15., 16., 17., 15., 12.],
        [16., 14., 10., 25., 17., 27., 15., 14., 18., 17.],
        [16., 12., 10., 13., 23., 15., 14., 20., 16., 30.],
        [14., 16., 18., 19., 15., 10.,  7., 30., 10., 18.],
        [12., 22., 16., 21., 15., 15., 17., 16., 12., 13.],
        [13., 15.,  9., 12., 30., 16., 19., 15., 17., 22.]], device='cuda:0')
Train accuarcate: 87.96%



iteration:
   31
    0  1243   bit_w:-1  loss: 0.57785
    1  1208   bit_w: 1  loss: 0.57760
    2  1322   bit_w: 1  loss: 0.57521
    3  1366   bit_w:-1  loss: 0.57480
    4  1237   bit_w:-1  loss: 0.57257
   5163   1015   4092   4875    581    577    465   5203   4636   4796
      1     -1      1      1     -1     -1     -1      1      1      1
Train accuarcate: 88.03%
tensor([[15., 16., 17., 18., 17., 12.,  7., 33., 11., 19.],
        [18., 21., 26., 17., 10., 15., 20., 16., 14.,  4.],
        [11., 32., 17., 14., 13., 16., 18., 15., 17., 12.],
        [31., 10., 19., 14., 15., 16., 18., 17., 15., 17.],
        [11., 16., 13., 10., 31., 13., 20., 17., 15., 23.],
        [10., 31., 18., 15., 16., 13., 15., 18., 14., 12.],
        [12., 15.,  8., 17., 28., 20., 17., 16., 14., 23.],
        [10., 17., 12., 11., 26., 16., 18., 18., 18., 26.],
        [19., 20., 17.,  2., 21., 14., 24., 15., 15., 17.],
        [13., 14.,  9., 16., 23., 17., 14., 21., 17., 30.],
        [32., 11., 18., 15., 14., 19., 17., 14., 16., 14.],
        [17., 16., 21., 12., 21., 13., 26., 11., 17., 13.],
        [13., 16.,  7., 12., 25., 19., 16., 19., 15., 29.],
        [33., 10., 19., 16., 13., 18., 16., 15., 17., 15.],
        [ 9., 32., 17., 16., 13., 16., 17., 17., 15., 12.],
        [16., 15., 10., 25., 18., 28., 16., 14., 18., 17.],
        [17., 12., 11., 14., 23., 15., 14., 21., 17., 31.],
        [15., 16., 19., 20., 15., 10.,  7., 31., 11., 19.],
        [13., 22., 17., 22., 15., 15., 17., 17., 13., 14.],
        [13., 16.,  9., 12., 31., 17., 20., 15., 17., 22.]], device='cuda:0')
Train accuarcate: 88.13%



iteration:
   32
    0  1209   bit_w:-1  loss: 0.55624
    1  1241   bit_w: 1  loss: 0.55612
    2  1256   bit_w: 1  loss: 0.55397
    3  1277   bit_w:-1  loss: 0.55302
    4  1287   bit_w: 1  loss: 0.55198
   5040   3951    811   1477   4548   4052    729   3777   4765   1136
      1      0     -1     -1      1      1     -1      1      1     -1
Train accuarcate: 88.58%
tensor([[16., 16., 17., 18., 18., 13.,  7., 34., 12., 19.],
        [18., 21., 27., 18., 10., 15., 21., 16., 14.,  5.],
        [12., 32., 17., 14., 14., 17., 18., 16., 18., 12.],
        [31., 10., 20., 15., 15., 16., 19., 17., 15., 18.],
        [12., 16., 13., 10., 32., 14., 20., 18., 16., 23.],
        [11., 31., 18., 15., 17., 14., 15., 19., 15., 12.],
        [13., 15.,  8., 17., 29., 21., 17., 17., 15., 23.],
        [10., 17., 13., 12., 26., 16., 19., 18., 18., 27.],
        [20., 20., 17.,  2., 22., 15., 24., 16., 16., 17.],
        [13., 14., 10., 17., 23., 17., 15., 21., 17., 31.],
        [33., 11., 18., 15., 15., 20., 17., 15., 17., 14.],
        [18., 16., 21., 12., 22., 14., 26., 12., 18., 13.],
        [13., 16.,  8., 13., 25., 19., 17., 19., 15., 30.],
        [34., 10., 19., 16., 14., 19., 16., 16., 18., 15.],
        [ 9., 32., 18., 17., 13., 16., 18., 17., 15., 13.],
        [16., 15., 11., 26., 18., 28., 17., 14., 18., 18.],
        [17., 12., 12., 15., 23., 15., 15., 21., 17., 32.],
        [16., 16., 19., 20., 16., 11.,  7., 32., 12., 19.],
        [13., 22., 18., 23., 15., 15., 18., 17., 13., 15.],
        [14., 16.,  9., 12., 32., 18., 20., 16., 18., 22.]], device='cuda:0')
Train accuarcate: 88.69%



iteration:
   33
    0  1250   bit_w:-1  loss: 0.53738
    1  1201   bit_w:-1  loss: 0.53666
    2  1276   bit_w:-1  loss: 0.53640
    3  1189   bit_w:-1  loss: 0.53547
    4  1245   bit_w:-1  loss: 0.53502
    830   1333   1099   5751   3665   4612    347   5910    803   5503
     -1     -1     -1      1      0      1     -1      1     -1      1
Train accuarcate: 88.65%
tensor([[16., 16., 17., 19., 18., 14.,  7., 35., 12., 20.],
        [19., 22., 28., 18., 10., 15., 22., 16., 15.,  5.],
        [13., 33., 18., 14., 14., 17., 19., 16., 19., 12.],
        [32., 11., 21., 15., 15., 16., 20., 17., 16., 18.],
        [12., 16., 13., 11., 32., 15., 20., 19., 16., 24.],
        [12., 32., 19., 15., 17., 14., 16., 19., 16., 12.],
        [13., 15.,  8., 18., 29., 22., 17., 18., 15., 24.],
        [10., 17., 13., 13., 26., 17., 19., 19., 18., 28.],
        [21., 21., 18.,  2., 22., 15., 25., 16., 17., 17.],
        [13., 14., 10., 18., 23., 18., 15., 22., 17., 32.],
        [34., 12., 19., 15., 15., 20., 18., 15., 18., 14.],
        [19., 17., 22., 12., 22., 14., 27., 12., 19., 13.],
        [13., 16.,  8., 14., 25., 20., 17., 20., 15., 31.],
        [35., 11., 20., 16., 14., 19., 17., 16., 19., 15.],
        [10., 33., 19., 17., 13., 16., 19., 17., 16., 13.],
        [16., 15., 11., 27., 18., 29., 17., 15., 18., 19.],
        [17., 12., 12., 16., 23., 16., 15., 22., 17., 33.],
        [16., 16., 19., 21., 16., 12.,  7., 33., 12., 20.],
        [14., 23., 19., 23., 15., 15., 19., 17., 14., 15.],
        [14., 16.,  9., 13., 32., 19., 20., 17., 18., 23.]], device='cuda:0')
Train accuarcate: 88.77%



iteration:
   34
    0  1262   bit_w:-1  loss: 0.52188
    1  1220   bit_w:-1  loss: 0.52097
    2  1221   bit_w: 1  loss: 0.51839
    3  1253   bit_w: 1  loss: 0.51788
    4  1316   bit_w:-1  loss: 0.51581
   4763    581    881    544   5184   1141   5178   5612    566   5261
      1     -1     -1     -1      1     -1      1      1     -1      1
Train accuarcate: 88.93%
tensor([[17., 16., 17., 19., 19., 14.,  8., 36., 12., 21.],
        [19., 23., 29., 19., 10., 16., 22., 16., 16.,  5.],
        [13., 34., 19., 15., 14., 18., 19., 16., 20., 12.],
        [33., 11., 21., 15., 16., 16., 21., 18., 16., 19.],
        [13., 16., 13., 11., 33., 15., 21., 20., 16., 25.],
        [12., 33., 20., 16., 17., 15., 16., 19., 17., 12.],
        [14., 15.,  8., 18., 30., 22., 18., 19., 15., 25.],
        [11., 17., 13., 13., 27., 17., 20., 20., 18., 29.],
        [22., 21., 18.,  2., 23., 15., 26., 17., 17., 18.],
        [14., 14., 10., 18., 24., 18., 16., 23., 17., 33.],
        [35., 12., 19., 15., 16., 20., 19., 16., 18., 15.],
        [20., 17., 22., 12., 23., 14., 28., 13., 19., 14.],
        [14., 16.,  8., 14., 26., 20., 18., 21., 15., 32.],
        [36., 11., 20., 16., 15., 19., 18., 17., 19., 16.],
        [10., 34., 20., 18., 13., 17., 19., 17., 17., 13.],
        [16., 16., 12., 28., 18., 30., 17., 15., 19., 19.],
        [18., 12., 12., 16., 24., 16., 16., 23., 17., 34.],
        [17., 16., 19., 21., 17., 12.,  8., 34., 12., 21.],
        [15., 23., 19., 23., 16., 15., 20., 18., 14., 16.],
        [15., 16.,  9., 13., 33., 19., 21., 18., 18., 24.]], device='cuda:0')
Train accuarcate: 88.98%



iteration:
   35
    0  1228   bit_w:-1  loss: 0.50367
    1  1211   bit_w: 1  loss: 0.50329
    2  1295   bit_w:-1  loss: 0.50059
    3  1247   bit_w: 1  loss: 0.49957
    4  1103   bit_w:-1  loss: 0.49830
   1953   1787    989   2022   1648   4782   5194   5432   4359   5314
     -1     -1     -1     -1     -1      1      1      1      1      1
Train accuarcate: 89.23%
tensor([[17., 16., 17., 19., 19., 15.,  9., 37., 13., 22.],
        [20., 24., 30., 20., 11., 16., 22., 16., 16.,  5.],
        [14., 35., 20., 16., 15., 18., 19., 16., 20., 12.],
        [33., 11., 21., 15., 16., 17., 22., 19., 17., 20.],
        [14., 17., 14., 12., 34., 15., 21., 20., 16., 25.],
        [13., 34., 21., 17., 18., 15., 16., 19., 17., 12.],
        [14., 15.,  8., 18., 30., 23., 19., 20., 16., 26.],
        [11., 17., 13., 13., 27., 18., 21., 21., 19., 30.],
        [22., 21., 18.,  2., 23., 16., 27., 18., 18., 19.],
        [14., 14., 10., 18., 24., 19., 17., 24., 18., 34.],
        [36., 13., 20., 16., 17., 20., 19., 16., 18., 15.],
        [21., 18., 23., 13., 24., 14., 28., 13., 19., 14.],
        [14., 16.,  8., 14., 26., 21., 19., 22., 16., 33.],
        [37., 12., 21., 17., 16., 19., 18., 17., 19., 16.],
        [11., 35., 21., 19., 14., 17., 19., 17., 17., 13.],
        [17., 17., 13., 29., 19., 30., 17., 15., 19., 19.],
        [18., 12., 12., 16., 24., 17., 17., 24., 18., 35.],
        [18., 17., 20., 22., 18., 12.,  8., 34., 12., 21.],
        [16., 24., 20., 24., 17., 15., 20., 18., 14., 16.],
        [16., 17., 10., 14., 34., 19., 21., 18., 18., 24.]], device='cuda:0')
Train accuarcate: 89.33%



iteration:
   36
    0  1274   bit_w:-1  loss: 0.48609
    1  1192   bit_w:-1  loss: 0.48596
    2  1309   bit_w: 1  loss: 0.48455
    3  1224   bit_w:-1  loss: 0.48372
    4  1353   bit_w: 1  loss: 0.48233
   5581    639   3726   1044    626   3749   5070   4722    520    334
      1     -1      1     -1     -1      1      1      1     -1     -1
Train accuarcate: 89.31%
tensor([[18., 16., 18., 19., 19., 16., 10., 38., 13., 22.],
        [21., 24., 31., 20., 11., 17., 23., 17., 16.,  5.],
        [14., 36., 20., 17., 16., 18., 19., 16., 21., 13.],
        [34., 11., 22., 15., 16., 18., 23., 20., 17., 20.],
        [14., 18., 14., 13., 35., 15., 21., 20., 17., 26.],
        [13., 35., 21., 18., 19., 15., 16., 19., 18., 13.],
        [14., 16.,  8., 19., 31., 23., 19., 20., 17., 27.],
        [11., 18., 13., 14., 28., 18., 21., 21., 20., 31.],
        [23., 21., 19.,  2., 23., 17., 28., 19., 18., 19.],
        [14., 15., 10., 19., 25., 19., 17., 24., 19., 35.],
        [37., 13., 21., 16., 17., 21., 20., 17., 18., 15.],
        [22., 18., 24., 13., 24., 15., 29., 14., 19., 14.],
        [14., 17.,  8., 15., 27., 21., 19., 22., 17., 34.],
        [38., 12., 22., 17., 16., 20., 19., 18., 19., 16.],
        [11., 36., 21., 20., 15., 17., 19., 17., 18., 14.],
        [18., 17., 14., 29., 19., 31., 18., 16., 19., 19.],
        [18., 13., 12., 17., 25., 17., 17., 24., 19., 36.],
        [19., 17., 21., 22., 18., 13.,  9., 35., 12., 21.],
        [16., 25., 20., 25., 18., 15., 20., 18., 15., 17.],
        [16., 18., 10., 15., 35., 19., 21., 18., 19., 25.]], device='cuda:0')
Train accuarcate: 89.40%



iteration:
   37
    0  1242   bit_w:-1  loss: 0.47123
    1  1232   bit_w: 1  loss: 0.47069
    2  1246   bit_w:-1  loss: 0.46729
    3  1273   bit_w:-1  loss: 0.46720
    4  1327   bit_w:-1  loss: 0.46585
   4834   6379   1281   2786   4432    948   4684   5294    779   1477
      1      1     -1      1      1     -1      1      1     -1     -1
Train accuarcate: 89.68%
tensor([[19., 17., 18., 20., 20., 16., 11., 39., 13., 22.],
        [21., 24., 32., 20., 11., 18., 23., 17., 17.,  6.],
        [15., 37., 20., 18., 17., 18., 20., 17., 21., 13.],
        [35., 12., 22., 16., 17., 18., 24., 21., 17., 20.],
        [15., 19., 14., 14., 36., 15., 22., 21., 17., 26.],
        [14., 36., 21., 19., 20., 15., 17., 20., 18., 13.],
        [15., 17.,  8., 20., 32., 23., 20., 21., 17., 27.],
        [11., 18., 14., 14., 28., 19., 21., 21., 21., 32.],
        [23., 21., 20.,  2., 23., 18., 28., 19., 19., 20.],
        [14., 15., 11., 19., 25., 20., 17., 24., 20., 36.],
        [38., 14., 21., 17., 18., 21., 21., 18., 18., 15.],
        [23., 19., 24., 14., 25., 15., 30., 15., 19., 14.],
        [14., 17.,  9., 15., 27., 22., 19., 22., 18., 35.],
        [39., 13., 22., 18., 17., 20., 20., 19., 19., 16.],
        [12., 37., 21., 21., 16., 17., 20., 18., 18., 14.],
        [19., 18., 14., 30., 20., 31., 19., 17., 19., 19.],
        [18., 13., 13., 17., 25., 18., 17., 24., 20., 37.],
        [20., 18., 21., 23., 19., 13., 10., 36., 12., 21.],
        [16., 25., 21., 25., 18., 16., 20., 18., 16., 18.],
        [17., 19., 10., 16., 36., 19., 22., 19., 19., 25.]], device='cuda:0')
Train accuarcate: 89.65%



iteration:
   38
    0  1269   bit_w:-1  loss: 0.45567
    1  1256   bit_w:-1  loss: 0.45423
    2  1270   bit_w: 1  loss: 0.45240
    3  1202   bit_w:-1  loss: 0.45224
    4  1243   bit_w:-1  loss: 0.45174
    761   6565   5529   5294    497    580    323   5720   1631   3256
     -1      1      1      1     -1     -1     -1      1     -1      0
Train accuarcate: 89.77%
tensor([[19., 18., 19., 21., 20., 16., 11., 40., 13., 22.],
        [21., 25., 33., 21., 11., 18., 23., 18., 17.,  6.],
        [15., 38., 21., 19., 17., 18., 20., 18., 21., 13.],
        [35., 13., 23., 17., 17., 18., 24., 22., 17., 20.],
        [16., 19., 14., 14., 37., 16., 23., 21., 18., 26.],
        [14., 37., 22., 20., 20., 15., 17., 21., 18., 13.],
        [16., 17.,  8., 20., 33., 24., 21., 21., 18., 27.],
        [12., 18., 14., 14., 29., 20., 22., 21., 22., 32.],
        [24., 21., 20.,  2., 24., 19., 29., 19., 20., 20.],
        [14., 16., 12., 20., 25., 20., 17., 25., 20., 36.],
        [39., 14., 21., 17., 19., 22., 22., 18., 19., 15.],
        [24., 19., 24., 14., 26., 16., 31., 15., 20., 14.],
        [14., 18., 10., 16., 27., 22., 19., 23., 18., 35.],
        [39., 14., 23., 19., 17., 20., 20., 20., 19., 16.],
        [12., 38., 22., 22., 16., 17., 20., 19., 18., 14.],
        [20., 18., 14., 30., 21., 32., 20., 17., 20., 19.],
        [19., 13., 13., 17., 26., 19., 18., 24., 21., 37.],
        [20., 19., 22., 24., 19., 13., 10., 37., 12., 21.],
        [16., 26., 22., 26., 18., 16., 20., 19., 16., 18.],
        [18., 19., 10., 16., 37., 20., 23., 19., 20., 25.]], device='cuda:0')
Train accuarcate: 89.84%



iteration:
   39
    0  1220   bit_w:-1  loss: 0.44264
    1  1230   bit_w: 1  loss: 0.44242
    2  1223   bit_w: 1  loss: 0.44031
    3  1501   bit_w: 1  loss: 0.43996
    4  1257   bit_w: 1  loss: 0.43854
   3681   6046    684    252   5369    860   5392   1227   1905   5178
      0      1     -1     -1      1     -1      1     -1     -1      1
Train accuarcate: 89.97%
tensor([[19., 18., 20., 22., 20., 17., 11., 41., 14., 22.],
        [21., 25., 34., 22., 11., 19., 23., 19., 18.,  6.],
        [15., 39., 21., 19., 18., 18., 21., 18., 21., 14.],
        [35., 14., 23., 17., 18., 18., 25., 22., 17., 21.],
        [16., 20., 14., 14., 38., 16., 24., 21., 18., 27.],
        [14., 38., 22., 20., 21., 15., 18., 21., 18., 14.],
        [16., 18.,  8., 20., 34., 24., 22., 21., 18., 28.],
        [12., 19., 14., 14., 30., 20., 23., 21., 22., 33.],
        [24., 22., 20.,  2., 25., 19., 30., 19., 20., 21.],
        [14., 17., 12., 20., 26., 20., 18., 25., 20., 37.],
        [39., 14., 22., 18., 19., 23., 22., 19., 20., 15.],
        [24., 20., 24., 14., 27., 16., 32., 15., 20., 15.],
        [14., 19., 10., 16., 28., 22., 20., 23., 18., 36.],
        [39., 15., 23., 19., 18., 20., 21., 20., 19., 17.],
        [12., 39., 22., 22., 17., 17., 21., 19., 18., 15.],
        [20., 19., 14., 30., 22., 32., 21., 17., 20., 20.],
        [19., 14., 13., 17., 27., 19., 19., 24., 21., 38.],
        [20., 19., 23., 25., 19., 14., 10., 38., 13., 21.],
        [16., 26., 23., 27., 18., 17., 20., 20., 17., 18.],
        [18., 20., 10., 16., 38., 20., 24., 19., 20., 26.]], device='cuda:0')
Train accuarcate: 90.12%



iteration:
   40
    0  1227   bit_w:-1  loss: 0.43007
    1  1235   bit_w: 1  loss: 0.42961
    2  1103   bit_w: 1  loss: 0.42859
    3  1238   bit_w:-1  loss: 0.42773
    4  1315   bit_w: 1  loss: 0.42715
   4767   5556   1572   1998   1507    934    230   5946   1381   4801
      1      1     -1     -1     -1     -1     -1      1     -1      1
Train accuarcate: 90.07%
tensor([[20., 19., 20., 22., 20., 17., 11., 42., 14., 23.],
        [21., 25., 35., 23., 12., 20., 24., 19., 19.,  6.],
        [15., 39., 22., 20., 19., 19., 22., 18., 22., 14.],
        [36., 15., 23., 17., 18., 18., 25., 23., 17., 22.],
        [16., 20., 15., 15., 39., 17., 25., 21., 19., 27.],
        [15., 39., 22., 20., 21., 15., 18., 22., 18., 15.],
        [16., 18.,  9., 21., 35., 25., 23., 21., 19., 28.],
        [12., 19., 15., 15., 31., 21., 24., 21., 23., 33.],
        [24., 22., 21.,  3., 26., 20., 31., 19., 21., 21.],
        [15., 18., 12., 20., 26., 20., 18., 26., 20., 38.],
        [40., 15., 22., 18., 19., 23., 22., 20., 20., 16.],
        [24., 20., 25., 15., 28., 17., 33., 15., 21., 15.],
        [15., 20., 10., 16., 28., 22., 20., 24., 18., 37.],
        [39., 15., 24., 20., 19., 21., 22., 20., 20., 17.],
        [13., 40., 22., 22., 17., 17., 21., 20., 18., 16.],
        [21., 20., 14., 30., 22., 32., 21., 18., 20., 21.],
        [20., 15., 13., 17., 27., 19., 19., 25., 21., 39.],
        [21., 20., 23., 25., 19., 14., 10., 39., 13., 22.],
        [17., 27., 23., 27., 18., 17., 20., 21., 17., 19.],
        [18., 20., 11., 17., 39., 21., 25., 19., 21., 26.]], device='cuda:0')
Train accuarcate: 90.09%



iteration:
   41
    0  1234   bit_w:-1  loss: 0.41868
    1  1250   bit_w:-1  loss: 0.41823
    2  1327   bit_w: 1  loss: 0.41649
    3  1553   bit_w: 1  loss: 0.41587
    4   835   bit_w: 1  loss: 0.41479
    242   2191   3595   5360   5352   4679   1914   2172   1103   5299
     -1      0      1      1      1      1     -1     -1     -1      1
Train accuarcate: 90.20%
tensor([[21., 19., 20., 22., 20., 17., 12., 43., 15., 23.],
        [21., 25., 36., 24., 13., 21., 24., 19., 19.,  7.],
        [16., 39., 22., 20., 19., 19., 23., 19., 23., 14.],
        [37., 15., 23., 17., 18., 18., 26., 24., 18., 22.],
        [16., 20., 16., 16., 40., 18., 25., 21., 19., 28.],
        [16., 39., 22., 20., 21., 15., 19., 23., 19., 15.],
        [16., 18., 10., 22., 36., 26., 23., 21., 19., 29.],
        [12., 19., 16., 16., 32., 22., 24., 21., 23., 34.],
        [25., 22., 21.,  3., 26., 20., 32., 20., 22., 21.],
        [15., 18., 13., 21., 27., 21., 18., 26., 20., 39.],
        [41., 15., 22., 18., 19., 23., 23., 21., 21., 16.],
        [25., 20., 25., 15., 28., 17., 34., 16., 22., 15.],
        [15., 20., 11., 17., 29., 23., 20., 24., 18., 38.],
        [40., 15., 24., 20., 19., 21., 23., 21., 21., 17.],
        [13., 40., 23., 23., 18., 18., 21., 20., 18., 17.],
        [21., 20., 15., 31., 23., 33., 21., 18., 20., 22.],
        [20., 15., 14., 18., 28., 20., 19., 25., 21., 40.],
        [22., 20., 23., 25., 19., 14., 11., 40., 14., 22.],
        [17., 27., 24., 28., 19., 18., 20., 21., 17., 20.],
        [18., 20., 12., 18., 40., 22., 25., 19., 21., 27.]], device='cuda:0')
Train accuarcate: 90.35%



iteration:
   42
    0  1217   bit_w:-1  loss: 0.40690
    1  1315   bit_w:-1  loss: 0.40716
    2  1309   bit_w: 1  loss: 0.40606
    3  1236   bit_w: 1  loss: 0.40595
    4  1366   bit_w: 1  loss: 0.40492
   1245   5546    764    624   3674   4348   2423   4485   3700   2562
     -1      1     -1     -1      0      1      0      1      1     -1
Train accuarcate: 90.41%
tensor([[21., 20., 20., 22., 20., 18., 12., 44., 16., 23.],
        [22., 25., 37., 25., 13., 21., 24., 19., 19.,  8.],
        [16., 40., 22., 20., 19., 20., 23., 20., 24., 14.],
        [38., 15., 24., 18., 18., 18., 26., 24., 18., 23.],
        [16., 21., 16., 16., 40., 19., 25., 22., 20., 28.],
        [16., 40., 22., 20., 21., 16., 19., 24., 20., 15.],
        [16., 19., 10., 22., 36., 27., 23., 22., 20., 29.],
        [13., 19., 17., 17., 32., 22., 24., 21., 23., 35.],
        [25., 23., 21.,  3., 26., 21., 32., 21., 23., 21.],
        [16., 18., 14., 22., 27., 21., 18., 26., 20., 40.],
        [42., 15., 23., 19., 19., 23., 23., 21., 21., 17.],
        [25., 21., 25., 15., 28., 18., 34., 17., 23., 15.],
        [15., 21., 11., 17., 29., 24., 20., 25., 19., 38.],
        [40., 16., 24., 20., 19., 22., 23., 22., 22., 17.],
        [13., 41., 23., 23., 18., 19., 21., 21., 19., 17.],
        [21., 21., 15., 31., 23., 34., 21., 19., 21., 22.],
        [21., 15., 15., 19., 28., 20., 19., 25., 21., 41.],
        [23., 20., 24., 26., 19., 14., 11., 40., 14., 23.],
        [18., 27., 25., 29., 19., 18., 20., 21., 17., 21.],
        [19., 20., 13., 19., 40., 22., 25., 19., 21., 28.]], device='cuda:0')
Train accuarcate: 90.61%



iteration:
   43
    0  1219   bit_w:-1  loss: 0.39731
    1  1208   bit_w:-1  loss: 0.39694
    2  1366   bit_w: 1  loss: 0.39619
    3   913   bit_w: 1  loss: 0.39560
    4  1243   bit_w: 1  loss: 0.39511
    690   6235   3780   1043   5254   4693   5644   2203   1046   1064
     -1      1      1     -1      1      1      1      0     -1     -1
Train accuarcate: 90.44%
tensor([[22., 20., 20., 23., 20., 18., 12., 44., 17., 24.],
        [22., 26., 38., 25., 14., 22., 25., 19., 19.,  8.],
        [16., 41., 23., 20., 20., 21., 24., 20., 24., 14.],
        [39., 15., 24., 19., 18., 18., 26., 24., 19., 24.],
        [16., 22., 17., 16., 41., 20., 26., 22., 20., 28.],
        [16., 41., 23., 20., 22., 17., 20., 24., 20., 15.],
        [16., 20., 11., 22., 37., 28., 24., 22., 20., 29.],
        [14., 19., 17., 18., 32., 22., 24., 21., 24., 36.],
        [25., 24., 22.,  3., 27., 22., 33., 21., 23., 21.],
        [17., 18., 14., 23., 27., 21., 18., 26., 21., 41.],
        [43., 15., 23., 20., 19., 23., 23., 21., 22., 18.],
        [25., 22., 26., 15., 29., 19., 35., 17., 23., 15.],
        [16., 21., 11., 18., 29., 24., 20., 25., 20., 39.],
        [41., 16., 24., 21., 19., 22., 23., 22., 23., 18.],
        [13., 42., 24., 23., 19., 20., 22., 21., 19., 17.],
        [21., 22., 16., 31., 24., 35., 22., 19., 21., 22.],
        [22., 15., 15., 20., 28., 20., 19., 25., 22., 42.],
        [24., 20., 24., 27., 19., 14., 11., 40., 15., 24.],
        [18., 28., 26., 29., 20., 19., 21., 21., 17., 21.],
        [19., 21., 14., 19., 41., 23., 26., 19., 21., 28.]], device='cuda:0')
Train accuarcate: 90.80%



iteration:
   44
    0  1260   bit_w:-1  loss: 0.38845
    1  1257   bit_w: 1  loss: 0.38793
    2  1295   bit_w:-1  loss: 0.38485
    3  1270   bit_w:-1  loss: 0.38511
    4  1307   bit_w:-1  loss: 0.38390
   3130   6483   1450   1583   1655   4663   5377   1828   4295   3843
      0      1     -1     -1     -1      1      1     -1      1      1
Train accuarcate: 90.73%
tensor([[22., 20., 21., 24., 21., 18., 12., 45., 17., 24.],
        [22., 26., 39., 26., 15., 22., 25., 20., 19.,  8.],
        [16., 42., 23., 20., 20., 22., 25., 20., 25., 15.],
        [39., 16., 24., 19., 18., 19., 27., 24., 20., 25.],
        [16., 22., 18., 17., 42., 20., 26., 23., 20., 28.],
        [16., 42., 23., 20., 22., 18., 21., 24., 21., 16.],
        [16., 20., 12., 23., 38., 28., 24., 23., 20., 29.],
        [14., 20., 17., 18., 32., 23., 25., 21., 25., 37.],
        [25., 25., 22.,  3., 27., 23., 34., 21., 24., 22.],
        [17., 18., 15., 24., 28., 21., 18., 27., 21., 41.],
        [43., 16., 23., 20., 19., 24., 24., 21., 23., 19.],
        [25., 23., 26., 15., 29., 20., 36., 17., 24., 16.],
        [16., 21., 12., 19., 30., 24., 20., 26., 20., 39.],
        [41., 16., 25., 22., 20., 22., 23., 23., 23., 18.],
        [13., 43., 24., 23., 19., 21., 23., 21., 20., 18.],
        [21., 23., 16., 31., 24., 36., 23., 19., 22., 23.],
        [22., 16., 15., 20., 28., 21., 20., 25., 23., 43.],
        [24., 20., 25., 28., 20., 14., 11., 41., 15., 24.],
        [18., 29., 26., 29., 20., 20., 22., 21., 18., 22.],
        [19., 21., 15., 20., 42., 23., 26., 20., 21., 28.]], device='cuda:0')
Train accuarcate: 90.84%



iteration:
   45
    0  1242   bit_w:-1  loss: 0.37805
    1  1290   bit_w: 1  loss: 0.37722
    2  1253   bit_w: 1  loss: 0.37574
    3  1285   bit_w:-1  loss: 0.37520
    4  1465   bit_w:-1  loss: 0.37479
   5073   1383   1663   4922   1345   2108   5088   4486   1275   2267
      1      0     -1      1     -1     -1      1      1     -1      0
Train accuarcate: 90.86%
tensor([[23., 20., 21., 25., 21., 18., 13., 46., 17., 24.],
        [22., 26., 40., 26., 16., 23., 25., 20., 20.,  8.],
        [16., 42., 24., 20., 21., 23., 25., 20., 26., 15.],
        [40., 16., 24., 20., 18., 19., 28., 25., 20., 25.],
        [17., 22., 18., 18., 42., 20., 27., 24., 20., 28.],
        [16., 42., 24., 20., 23., 19., 21., 24., 22., 16.],
        [16., 20., 13., 23., 39., 29., 24., 23., 21., 29.],
        [14., 20., 18., 18., 33., 24., 25., 21., 26., 37.],
        [25., 25., 23.,  3., 28., 24., 34., 21., 25., 22.],
        [18., 18., 15., 25., 28., 21., 19., 28., 21., 41.],
        [44., 16., 23., 21., 19., 24., 25., 22., 23., 19.],
        [26., 23., 26., 16., 29., 20., 37., 18., 24., 16.],
        [16., 21., 13., 19., 31., 25., 20., 26., 21., 39.],
        [42., 16., 25., 23., 20., 22., 24., 24., 23., 18.],
        [13., 43., 25., 23., 20., 22., 23., 21., 21., 18.],
        [22., 23., 16., 32., 24., 36., 24., 20., 22., 23.],
        [22., 16., 16., 20., 29., 22., 20., 25., 24., 43.],
        [25., 20., 25., 29., 20., 14., 12., 42., 15., 24.],
        [19., 29., 26., 30., 20., 20., 23., 22., 18., 22.],
        [19., 21., 16., 20., 43., 24., 26., 20., 22., 28.]], device='cuda:0')
Train accuarcate: 90.95%



iteration:
   46
    0  1240   bit_w:-1  loss: 0.36787
    1  1264   bit_w:-1  loss: 0.36720
    2  1422   bit_w:-1  loss: 0.36604
    3  1347   bit_w: 1  loss: 0.36591
    4  1267   bit_w: 1  loss: 0.36531
    412   1395   4260    693   5084   1179   2888   5692    942   5106
     -1     -1      1     -1      1      0      0      1     -1      1
Train accuarcate: 91.01%
tensor([[23., 20., 22., 25., 22., 18., 13., 47., 17., 25.],
        [22., 26., 41., 26., 17., 23., 25., 21., 20.,  9.],
        [16., 42., 25., 20., 22., 23., 25., 21., 26., 16.],
        [40., 16., 25., 20., 19., 19., 28., 26., 20., 26.],
        [17., 22., 19., 18., 43., 20., 27., 25., 20., 29.],
        [16., 42., 25., 20., 24., 19., 21., 25., 22., 17.],
        [17., 21., 13., 24., 39., 29., 24., 23., 22., 29.],
        [14., 20., 19., 18., 34., 24., 25., 22., 26., 38.],
        [25., 25., 24.,  3., 29., 24., 34., 22., 25., 23.],
        [18., 18., 16., 25., 29., 21., 19., 29., 21., 42.],
        [45., 17., 23., 22., 19., 24., 25., 22., 24., 19.],
        [26., 23., 27., 16., 30., 20., 37., 19., 24., 17.],
        [16., 21., 14., 19., 32., 25., 20., 27., 21., 40.],
        [43., 17., 25., 24., 20., 22., 24., 24., 24., 18.],
        [14., 44., 25., 24., 20., 22., 23., 21., 22., 18.],
        [23., 24., 16., 33., 24., 36., 24., 20., 23., 23.],
        [22., 16., 17., 20., 30., 22., 20., 26., 24., 44.],
        [25., 20., 26., 29., 21., 14., 12., 43., 15., 25.],
        [19., 29., 27., 30., 21., 20., 23., 23., 18., 23.],
        [19., 21., 17., 20., 44., 24., 26., 21., 22., 29.]], device='cuda:0')
Train accuarcate: 91.17%



iteration:
   47
    0  1271   bit_w:-1  loss: 0.35998
    1  1207   bit_w:-1  loss: 0.35946
    2  1449   bit_w: 1  loss: 0.35855
    3   849   bit_w: 1  loss: 0.35798
    4  1305   bit_w:-1  loss: 0.35747
    916   2306   1263   4027   1521   4195   1212   5444   4443   5573
     -1     -1     -1      0     -1      1     -1      1      1      1
Train accuarcate: 91.12%
tensor([[23., 20., 22., 25., 22., 19., 13., 48., 18., 26.],
        [22., 26., 41., 26., 17., 24., 25., 22., 21., 10.],
        [16., 42., 25., 20., 22., 24., 25., 22., 27., 17.],
        [41., 17., 26., 20., 20., 19., 29., 26., 20., 26.],
        [18., 23., 20., 18., 44., 20., 28., 25., 20., 29.],
        [17., 43., 26., 20., 25., 19., 22., 25., 22., 17.],
        [17., 21., 13., 24., 39., 30., 24., 24., 23., 30.],
        [14., 20., 19., 18., 34., 25., 25., 23., 27., 39.],
        [25., 25., 24.,  3., 29., 25., 34., 23., 26., 24.],
        [18., 18., 16., 25., 29., 22., 19., 30., 22., 43.],
        [45., 17., 23., 22., 19., 25., 25., 23., 25., 20.],
        [27., 24., 28., 16., 31., 20., 38., 19., 24., 17.],
        [16., 21., 14., 19., 32., 26., 20., 28., 22., 41.],
        [44., 18., 26., 24., 21., 22., 25., 24., 24., 18.],
        [14., 44., 25., 24., 20., 23., 23., 22., 23., 19.],
        [24., 25., 17., 33., 25., 36., 25., 20., 23., 23.],
        [22., 16., 17., 20., 30., 23., 20., 27., 25., 45.],
        [25., 20., 26., 29., 21., 15., 12., 44., 16., 26.],
        [19., 29., 27., 30., 21., 21., 23., 24., 19., 24.],
        [19., 21., 17., 20., 44., 25., 26., 22., 23., 30.]], device='cuda:0')
Train accuarcate: 91.14%



iteration:
   48
    0  1301   bit_w:-1  loss: 0.35238
    1  1239   bit_w: 1  loss: 0.35130
    2  1382   bit_w:-1  loss: 0.35028
    3  1366   bit_w: 1  loss: 0.34965
    4  1075   bit_w: 1  loss: 0.34898
   4668   2988   1757   1241    875   4499   4501   4534   1414    914
      1      0     -1     -1     -1      1      1      1     -1     -1
Train accuarcate: 91.24%
tensor([[24., 20., 22., 25., 22., 20., 14., 49., 18., 26.],
        [22., 26., 42., 27., 18., 24., 25., 22., 22., 11.],
        [16., 42., 26., 21., 23., 24., 25., 22., 28., 18.],
        [42., 17., 26., 20., 20., 20., 30., 27., 20., 26.],
        [18., 23., 21., 19., 45., 20., 28., 25., 21., 30.],
        [17., 43., 27., 21., 26., 19., 22., 25., 23., 18.],
        [17., 21., 14., 25., 40., 30., 24., 24., 24., 31.],
        [14., 20., 20., 19., 35., 25., 25., 23., 28., 40.],
        [26., 25., 24.,  3., 29., 26., 35., 24., 26., 24.],
        [18., 18., 17., 26., 30., 22., 19., 30., 23., 44.],
        [46., 17., 23., 22., 19., 26., 26., 24., 25., 20.],
        [28., 24., 28., 16., 31., 21., 39., 20., 24., 17.],
        [16., 21., 15., 20., 33., 26., 20., 28., 23., 42.],
        [44., 18., 27., 25., 22., 22., 25., 24., 25., 19.],
        [14., 44., 26., 25., 21., 23., 23., 22., 24., 20.],
        [25., 25., 17., 33., 25., 37., 26., 21., 23., 23.],
        [22., 16., 18., 21., 31., 23., 20., 27., 26., 46.],
        [26., 20., 26., 29., 21., 16., 13., 45., 16., 26.],
        [19., 29., 28., 31., 22., 21., 23., 24., 20., 25.],
        [19., 21., 18., 21., 45., 25., 26., 22., 24., 31.]], device='cuda:0')
Train accuarcate: 91.23%



iteration:
   49
    0  1278   bit_w:-1  loss: 0.34409
    1  1267   bit_w: 1  loss: 0.34344
    2  1352   bit_w: 1  loss: 0.34273
    3  1234   bit_w: 1  loss: 0.34165
    4  1071   bit_w: 1  loss: 0.34139
   4798   2988   4795   1048   3427   1192   4929   5766   4905   2872
      0     -1      1     -1     -1     -1      1      1      1     -1
Train accuarcate: 91.43%
tensor([[24., 20., 23., 25., 22., 20., 15., 50., 19., 26.],
        [22., 27., 42., 28., 19., 25., 25., 22., 22., 12.],
        [16., 42., 27., 21., 23., 24., 26., 23., 29., 18.],
        [42., 17., 27., 20., 20., 20., 31., 28., 21., 26.],
        [18., 23., 22., 19., 45., 20., 29., 26., 22., 30.],
        [17., 43., 28., 21., 26., 19., 23., 26., 24., 18.],
        [17., 22., 14., 26., 41., 31., 24., 24., 24., 32.],
        [14., 21., 20., 20., 36., 26., 25., 23., 28., 41.],
        [26., 25., 25.,  3., 29., 26., 36., 25., 27., 24.],
        [18., 18., 18., 26., 30., 22., 20., 31., 24., 44.],
        [46., 17., 24., 22., 19., 26., 27., 25., 26., 20.],
        [28., 24., 29., 16., 31., 21., 40., 21., 25., 17.],
        [16., 22., 15., 21., 34., 27., 20., 28., 23., 43.],
        [44., 18., 28., 25., 22., 22., 26., 25., 26., 19.],
        [14., 45., 26., 26., 22., 24., 23., 22., 24., 21.],
        [25., 25., 18., 33., 25., 37., 27., 22., 24., 23.],
        [22., 16., 19., 21., 31., 23., 21., 28., 27., 46.],
        [26., 20., 27., 29., 21., 16., 14., 46., 17., 26.],
        [19., 29., 29., 31., 22., 21., 24., 25., 21., 25.],
        [19., 22., 18., 22., 46., 26., 26., 22., 24., 32.]], device='cuda:0')
Train accuarcate: 91.34%



iteration:
   50
    0  1246   bit_w:-1  loss: 0.33682
    1  1248   bit_w: 1  loss: 0.33563
    2  1333   bit_w: 1  loss: 0.33540
    3  1374   bit_w:-1  loss: 0.33433
    4  1421   bit_w: 1  loss: 0.33431
    456   6266   1443    840   4685    856   2404   4529   1821   1736
     -1      1      0     -1      1     -1      0      1      0     -1
Train accuarcate: 91.52%
tensor([[24., 21., 23., 25., 23., 20., 15., 51., 19., 26.],
        [23., 27., 42., 29., 19., 26., 25., 22., 22., 13.],
        [16., 43., 27., 21., 24., 24., 26., 24., 29., 18.],
        [43., 17., 27., 21., 20., 21., 31., 28., 21., 27.],
        [19., 23., 22., 20., 45., 21., 29., 26., 22., 31.],
        [17., 44., 28., 21., 27., 19., 23., 27., 24., 18.],
        [17., 23., 14., 26., 42., 31., 24., 25., 24., 32.],
        [15., 21., 20., 21., 36., 27., 25., 23., 28., 42.],
        [27., 25., 25.,  4., 29., 27., 36., 25., 27., 25.],
        [18., 19., 18., 26., 31., 22., 20., 32., 24., 44.],
        [47., 17., 24., 23., 19., 27., 27., 25., 26., 21.],
        [28., 25., 29., 16., 32., 21., 40., 22., 25., 17.],
        [17., 22., 15., 22., 34., 28., 20., 28., 23., 44.],
        [45., 18., 28., 26., 22., 23., 26., 25., 26., 20.],
        [14., 46., 26., 26., 23., 24., 23., 23., 24., 21.],
        [26., 25., 18., 34., 25., 38., 27., 22., 24., 24.],
        [23., 16., 19., 22., 31., 24., 21., 28., 27., 47.],
        [27., 20., 27., 30., 21., 17., 14., 46., 17., 27.],
        [20., 29., 29., 32., 22., 22., 24., 25., 21., 26.],
        [19., 23., 18., 22., 47., 26., 26., 23., 24., 32.]], device='cuda:0')
Train accuarcate: 91.55%



iteration:
   51
    0  1244   bit_w:-1  loss: 0.32960
    1  1212   bit_w:-1  loss: 0.32940
    2  1323   bit_w: 1  loss: 0.32846
    3  1290   bit_w: 1  loss: 0.32794
    4  1400   bit_w:-1  loss: 0.32729
   5132     89   1395   4494   2877   4215   4322   5448   1138   1673
      1     -1     -1      1      0      1      1      1     -1     -1
Train accuarcate: 91.65%
tensor([[25., 21., 23., 26., 23., 21., 16., 52., 19., 26.],
        [23., 28., 43., 29., 19., 26., 25., 22., 23., 14.],
        [16., 44., 28., 21., 24., 24., 26., 24., 30., 19.],
        [44., 17., 27., 22., 20., 22., 32., 29., 21., 27.],
        [19., 24., 23., 20., 45., 21., 29., 26., 23., 32.],
        [17., 45., 29., 21., 27., 19., 23., 27., 25., 19.],
        [17., 24., 15., 26., 42., 31., 24., 25., 25., 33.],
        [15., 22., 21., 21., 36., 27., 25., 23., 29., 43.],
        [27., 26., 26.,  4., 29., 27., 36., 25., 28., 26.],
        [19., 19., 18., 27., 31., 23., 21., 33., 24., 44.],
        [48., 17., 24., 24., 19., 28., 28., 26., 26., 21.],
        [29., 25., 29., 17., 32., 22., 41., 23., 25., 17.],
        [17., 23., 16., 22., 34., 28., 20., 28., 24., 45.],
        [46., 18., 28., 27., 22., 24., 27., 26., 26., 20.],
        [14., 47., 27., 26., 23., 24., 23., 23., 25., 22.],
        [27., 25., 18., 35., 25., 39., 28., 23., 24., 24.],
        [23., 17., 20., 22., 31., 24., 21., 28., 28., 48.],
        [28., 20., 27., 31., 21., 18., 15., 47., 17., 27.],
        [21., 29., 29., 33., 22., 23., 25., 26., 21., 26.],
        [19., 24., 19., 22., 47., 26., 26., 23., 25., 33.]], device='cuda:0')
Train accuarcate: 91.56%



iteration:
   52
    0  1284   bit_w:-1  loss: 0.32289
    1  1247   bit_w:-1  loss: 0.32231
    2  1261   bit_w:-1  loss: 0.32120
    3  1470   bit_w:-1  loss: 0.32067
    4  1235   bit_w: 1  loss: 0.32011
   5072   6023   4694   3141   5021   1461    945   4523   2873   3336
      1      1      1     -1      1     -1     -1      0     -1     -1
Train accuarcate: 91.79%
tensor([[26., 22., 24., 26., 24., 21., 16., 52., 19., 26.],
        [23., 28., 43., 30., 19., 27., 26., 22., 24., 15.],
        [17., 45., 29., 21., 25., 24., 26., 24., 30., 19.],
        [45., 18., 28., 22., 21., 22., 32., 29., 21., 27.],
        [20., 25., 24., 20., 46., 21., 29., 26., 23., 32.],
        [18., 46., 30., 21., 28., 19., 23., 27., 25., 19.],
        [18., 25., 16., 26., 43., 31., 24., 25., 25., 33.],
        [15., 22., 21., 22., 36., 28., 26., 23., 30., 44.],
        [27., 26., 26.,  5., 29., 28., 37., 25., 29., 27.],
        [20., 20., 19., 27., 32., 23., 21., 33., 24., 44.],
        [49., 18., 25., 24., 20., 28., 28., 26., 26., 21.],
        [29., 25., 29., 18., 32., 23., 42., 23., 26., 18.],
        [18., 24., 17., 22., 35., 28., 20., 28., 24., 45.],
        [47., 19., 29., 27., 23., 24., 27., 26., 26., 20.],
        [15., 48., 28., 26., 24., 24., 23., 23., 25., 22.],
        [27., 25., 18., 36., 25., 40., 29., 23., 25., 25.],
        [23., 17., 20., 23., 31., 25., 22., 28., 29., 49.],
        [29., 21., 28., 31., 22., 18., 15., 47., 17., 27.],
        [21., 29., 29., 34., 22., 24., 26., 26., 22., 27.],
        [20., 25., 20., 22., 48., 26., 26., 23., 25., 33.]], device='cuda:0')
Train accuarcate: 91.68%



iteration:
   53
    0  1293   bit_w:-1  loss: 0.31605
    1  1218   bit_w:-1  loss: 0.31493
    2  1317   bit_w: 1  loss: 0.31406
    3  1266   bit_w: 1  loss: 0.31335
    4  1412   bit_w: 1  loss: 0.31271
   5056   1957   4845   1572    628   4073   5696    483   4506    316
      0     -1      1     -1     -1      1      1     -1      1     -1
Train accuarcate: 91.94%
tensor([[26., 23., 24., 27., 25., 21., 16., 53., 19., 27.],
        [23., 28., 44., 30., 19., 28., 27., 22., 25., 15.],
        [17., 45., 30., 21., 25., 25., 27., 24., 31., 19.],
        [45., 18., 29., 22., 21., 23., 33., 29., 22., 27.],
        [20., 26., 24., 21., 47., 21., 29., 27., 23., 33.],
        [18., 47., 30., 22., 29., 19., 23., 28., 25., 20.],
        [18., 26., 16., 27., 44., 31., 24., 26., 25., 34.],
        [15., 23., 21., 23., 37., 28., 26., 24., 30., 45.],
        [27., 26., 27.,  5., 29., 29., 38., 25., 30., 27.],
        [20., 21., 19., 28., 33., 23., 21., 34., 24., 45.],
        [49., 18., 26., 24., 20., 29., 29., 26., 27., 21.],
        [29., 25., 30., 18., 32., 24., 43., 23., 27., 18.],
        [18., 25., 17., 23., 36., 28., 20., 29., 24., 46.],
        [47., 19., 30., 27., 23., 25., 28., 26., 27., 20.],
        [15., 49., 28., 27., 25., 24., 23., 24., 25., 23.],
        [27., 25., 19., 36., 25., 41., 30., 23., 26., 25.],
        [23., 18., 20., 24., 32., 25., 22., 29., 29., 50.],
        [29., 21., 29., 31., 22., 19., 16., 47., 18., 27.],
        [21., 29., 30., 34., 22., 25., 27., 26., 23., 27.],
        [20., 26., 20., 23., 49., 26., 26., 24., 25., 34.]], device='cuda:0')
Train accuarcate: 91.91%



iteration:
   54
    0  1299   bit_w:-1  loss: 0.30922
    1  1265   bit_w:-1  loss: 0.30844
    2  1251   bit_w:-1  loss: 0.30710
    3  1252   bit_w: 1  loss: 0.30637
    4  1263   bit_w: 1  loss: 0.30571
   4579    430   3432   1606    850    395    773   4949   3211   4030
      1     -1      1     -1     -1     -1     -1      1      1      1
Train accuarcate: 92.12%
tensor([[27., 23., 25., 27., 25., 21., 16., 54., 20., 28.],
        [24., 28., 45., 30., 19., 28., 27., 23., 26., 16.],
        [17., 46., 30., 22., 26., 26., 28., 24., 31., 19.],
        [46., 18., 30., 22., 21., 23., 33., 30., 23., 28.],
        [20., 27., 24., 22., 48., 22., 30., 27., 23., 33.],
        [18., 48., 30., 23., 30., 20., 24., 28., 25., 20.],
        [18., 27., 16., 28., 45., 32., 25., 26., 25., 34.],
        [16., 23., 22., 23., 37., 28., 26., 25., 31., 46.],
        [27., 27., 27.,  6., 30., 30., 39., 25., 30., 27.],
        [21., 21., 20., 28., 33., 23., 21., 35., 25., 46.],
        [49., 19., 26., 25., 21., 30., 30., 26., 27., 21.],
        [29., 26., 30., 19., 33., 25., 44., 23., 27., 18.],
        [19., 25., 18., 23., 36., 28., 20., 30., 25., 47.],
        [48., 19., 31., 27., 23., 25., 28., 27., 28., 21.],
        [15., 50., 28., 28., 26., 25., 24., 24., 25., 23.],
        [27., 26., 19., 37., 26., 42., 31., 23., 26., 25.],
        [24., 18., 21., 24., 32., 25., 22., 30., 30., 51.],
        [30., 21., 30., 31., 22., 19., 16., 48., 19., 28.],
        [22., 29., 31., 34., 22., 25., 27., 27., 24., 28.],
        [20., 27., 20., 24., 50., 27., 27., 24., 25., 34.]], device='cuda:0')
Train accuarcate: 92.04%



iteration:
   55
    0  1439   bit_w:-1  loss: 0.30228
    1  1257   bit_w:-1  loss: 0.30143
    2  1309   bit_w: 1  loss: 0.30100
    3  1279   bit_w: 1  loss: 0.30013
    4  1256   bit_w:-1  loss: 0.29963
   1915   6336   5490   5090    548   1559   1850   4926   1152    682
     -1      1      1      1     -1      0      0      1     -1     -1
Train accuarcate: 92.19%
tensor([[27., 24., 26., 28., 25., 21., 16., 55., 20., 28.],
        [24., 29., 46., 31., 19., 28., 27., 24., 26., 16.],
        [17., 47., 31., 23., 26., 26., 28., 25., 31., 19.],
        [46., 19., 31., 23., 21., 23., 33., 31., 23., 28.],
        [21., 27., 24., 22., 49., 22., 30., 27., 24., 34.],
        [18., 49., 31., 24., 30., 20., 24., 29., 25., 20.],
        [19., 27., 16., 28., 46., 32., 25., 26., 26., 35.],
        [17., 23., 22., 23., 38., 28., 26., 25., 32., 47.],
        [28., 27., 27.,  6., 31., 30., 39., 25., 31., 28.],
        [22., 21., 20., 28., 34., 23., 21., 35., 26., 47.],
        [50., 19., 26., 25., 22., 30., 30., 26., 28., 22.],
        [30., 26., 30., 19., 34., 25., 44., 23., 28., 19.],
        [20., 25., 18., 23., 37., 28., 20., 30., 26., 48.],
        [49., 19., 31., 27., 24., 25., 28., 27., 29., 22.],
        [15., 51., 29., 29., 26., 25., 24., 25., 25., 23.],
        [28., 26., 19., 37., 27., 42., 31., 23., 27., 26.],
        [25., 18., 21., 24., 33., 25., 22., 30., 31., 52.],
        [30., 22., 31., 32., 22., 19., 16., 49., 19., 28.],
        [22., 30., 32., 35., 22., 25., 27., 28., 24., 28.],
        [21., 27., 20., 24., 51., 27., 27., 24., 26., 35.]], device='cuda:0')
Train accuarcate: 92.12%



iteration:
   56
    0  1217   bit_w:-1  loss: 0.29630
    1  1209   bit_w:-1  loss: 0.29608
    2  1497   bit_w:-1  loss: 0.29554
    3  1319   bit_w:-1  loss: 0.29518
    4   969   bit_w:-1  loss: 0.29464
   4728   5991    861   2227   2780   4511    496   4989   4565   1681
      1      0     -1     -1      0      1     -1      1      1     -1
Train accuarcate: 92.35%
tensor([[28., 24., 26., 28., 25., 22., 16., 56., 21., 28.],
        [24., 29., 47., 32., 19., 28., 28., 24., 26., 17.],
        [18., 47., 31., 23., 26., 27., 28., 26., 32., 19.],
        [46., 19., 32., 24., 21., 23., 34., 31., 23., 29.],
        [22., 27., 24., 22., 49., 23., 30., 28., 25., 34.],
        [19., 49., 31., 24., 30., 21., 24., 30., 26., 20.],
        [20., 27., 16., 28., 46., 33., 25., 27., 27., 35.],
        [17., 23., 23., 24., 38., 28., 27., 25., 32., 48.],
        [29., 27., 27.,  6., 31., 31., 39., 26., 32., 28.],
        [22., 21., 21., 29., 34., 23., 22., 35., 26., 48.],
        [51., 19., 26., 25., 22., 31., 30., 27., 29., 22.],
        [30., 26., 31., 20., 34., 25., 45., 23., 28., 20.],
        [20., 25., 19., 24., 37., 28., 21., 30., 26., 49.],
        [50., 19., 31., 27., 24., 26., 28., 28., 30., 22.],
        [16., 51., 29., 29., 26., 26., 24., 26., 26., 23.],
        [29., 26., 19., 37., 27., 43., 31., 24., 28., 26.],
        [26., 18., 21., 24., 33., 26., 22., 31., 32., 52.],
        [31., 22., 31., 32., 22., 20., 16., 50., 20., 28.],
        [23., 30., 32., 35., 22., 26., 27., 29., 25., 28.],
        [21., 27., 21., 25., 51., 27., 28., 24., 26., 36.]], device='cuda:0')
Train accuarcate: 92.25%



iteration:
   57
    0  1214   bit_w:-1  loss: 0.29152
    1  1249   bit_w:-1  loss: 0.29094
    2  1493   bit_w: 1  loss: 0.29042
    3  1330   bit_w:-1  loss: 0.28986
    4  1254   bit_w:-1  loss: 0.28918
   5403   5402   3867   1651   1047   4257   2105   1598   1865   1690
      1      1      1     -1     -1      1     -1     -1     -1      1
Train accuarcate: 92.40%
tensor([[28., 24., 26., 29., 26., 22., 17., 57., 22., 28.],
        [25., 30., 48., 32., 19., 29., 28., 24., 26., 18.],
        [19., 48., 32., 23., 26., 28., 28., 26., 32., 20.],
        [47., 20., 33., 24., 21., 24., 34., 31., 23., 30.],
        [22., 27., 24., 23., 50., 23., 31., 29., 26., 34.],
        [20., 50., 32., 24., 30., 22., 24., 30., 26., 21.],
        [20., 27., 16., 29., 47., 33., 26., 28., 28., 35.],
        [17., 23., 23., 25., 39., 28., 28., 26., 33., 48.],
        [30., 28., 28.,  6., 31., 32., 39., 26., 32., 29.],
        [22., 21., 21., 30., 35., 23., 23., 36., 27., 48.],
        [52., 20., 27., 25., 22., 32., 30., 27., 29., 23.],
        [31., 27., 32., 20., 34., 26., 45., 23., 28., 21.],
        [20., 25., 19., 25., 38., 28., 22., 31., 27., 49.],
        [51., 20., 32., 27., 24., 27., 28., 28., 30., 23.],
        [17., 52., 30., 29., 26., 27., 24., 26., 26., 24.],
        [30., 27., 20., 37., 27., 44., 31., 24., 28., 27.],
        [26., 18., 21., 25., 34., 26., 23., 32., 33., 52.],
        [31., 22., 31., 33., 23., 20., 17., 51., 21., 28.],
        [24., 31., 33., 35., 22., 27., 27., 29., 25., 29.],
        [22., 28., 22., 25., 51., 28., 28., 24., 26., 37.]], device='cuda:0')
Train accuarcate: 92.28%



iteration:
   58
    0  1288   bit_w:-1  loss: 0.28646
    1  1224   bit_w: 1  loss: 0.28563
    2  1382   bit_w: 1  loss: 0.28465
    3  1225   bit_w: 1  loss: 0.28369
    4  1313   bit_w: 1  loss: 0.28283
   4673    870   4842   5099   4647   1812    526   1262   4864   2810
      1     -1      1      1      1     -1     -1     -1      1     -1
Train accuarcate: 92.57%
tensor([[28., 25., 26., 29., 26., 23., 18., 58., 22., 29.],
        [26., 30., 49., 33., 20., 29., 28., 24., 27., 18.],
        [19., 49., 32., 23., 26., 29., 29., 27., 32., 21.],
        [47., 21., 33., 24., 21., 25., 35., 32., 23., 31.],
        [23., 27., 25., 24., 51., 23., 31., 29., 27., 34.],
        [20., 51., 32., 24., 30., 23., 25., 31., 26., 22.],
        [21., 27., 17., 30., 48., 33., 26., 28., 29., 35.],
        [18., 23., 24., 26., 40., 28., 28., 26., 34., 48.],
        [30., 29., 28.,  6., 31., 33., 40., 27., 32., 30.],
        [23., 21., 22., 31., 36., 23., 23., 36., 28., 48.],
        [53., 20., 28., 26., 23., 32., 30., 27., 30., 23.],
        [32., 27., 33., 21., 35., 26., 45., 23., 29., 21.],
        [20., 26., 19., 25., 38., 29., 23., 32., 27., 50.],
        [52., 20., 33., 28., 25., 27., 28., 28., 31., 23.],
        [17., 53., 30., 29., 26., 28., 25., 27., 26., 25.],
        [30., 28., 20., 37., 27., 45., 32., 25., 28., 28.],
        [27., 18., 22., 26., 35., 26., 23., 32., 34., 52.],
        [32., 22., 32., 34., 24., 20., 17., 51., 22., 28.],
        [24., 32., 33., 35., 22., 28., 28., 30., 25., 30.],
        [23., 28., 23., 26., 52., 28., 28., 24., 27., 37.]], device='cuda:0')
Train accuarcate: 92.34%



iteration:
   59
    0  1289   bit_w:-1  loss: 0.28018
    1  1326   bit_w:-1  loss: 0.27955
    2  1527   bit_w:-1  loss: 0.27878
    3  1211   bit_w:-1  loss: 0.27841
    4  1096   bit_w:-1  loss: 0.27817
   1633   3518   4959   4782   4913    826    780   4421   3404   2407
     -1      0      1      1      1     -1     -1      1      1     -1
Train accuarcate: 92.56%
tensor([[29., 25., 26., 29., 26., 24., 19., 58., 22., 30.],
        [26., 30., 50., 34., 21., 29., 28., 25., 28., 18.],
        [20., 49., 32., 23., 26., 30., 30., 27., 32., 22.],
        [48., 21., 33., 24., 21., 26., 36., 32., 23., 32.],
        [24., 27., 25., 24., 51., 24., 32., 29., 27., 35.],
        [21., 51., 32., 24., 30., 24., 26., 31., 26., 23.],
        [21., 27., 18., 31., 49., 33., 26., 29., 30., 35.],
        [19., 23., 24., 26., 40., 29., 29., 26., 34., 49.],
        [31., 29., 28.,  6., 31., 34., 41., 27., 32., 31.],
        [23., 21., 23., 32., 37., 23., 23., 37., 29., 48.],
        [53., 20., 29., 27., 24., 32., 30., 28., 31., 23.],
        [32., 27., 34., 22., 36., 26., 45., 24., 30., 21.],
        [21., 26., 19., 25., 38., 30., 24., 32., 27., 51.],
        [52., 20., 34., 29., 26., 27., 28., 29., 32., 23.],
        [18., 53., 30., 29., 26., 29., 26., 27., 26., 26.],
        [31., 28., 20., 37., 27., 46., 33., 25., 28., 29.],
        [27., 18., 23., 27., 36., 26., 23., 33., 35., 52.],
        [33., 22., 32., 34., 24., 21., 18., 51., 22., 29.],
        [24., 32., 34., 36., 23., 28., 28., 31., 26., 30.],
        [23., 28., 24., 27., 53., 28., 28., 25., 28., 37.]], device='cuda:0')
Train accuarcate: 92.43%



iteration:
   60
    0  1240   bit_w:-1  loss: 0.27543
    1  1306   bit_w:-1  loss: 0.27475
    2  1316   bit_w:-1  loss: 0.27390
    3  1292   bit_w:-1  loss: 0.27359
    4   919   bit_w:-1  loss: 0.27321
   3742    559   3981    797   5458    984   4215   5654   1130   5246
      0     -1      1     -1      1     -1      0      1     -1      1
Train accuarcate: 92.66%
tensor([[29., 25., 27., 29., 27., 24., 19., 59., 22., 31.],
        [26., 31., 50., 35., 21., 30., 28., 25., 29., 18.],
        [20., 49., 33., 23., 27., 30., 30., 28., 32., 23.],
        [48., 21., 34., 24., 22., 26., 36., 33., 23., 33.],
        [24., 27., 26., 24., 52., 24., 32., 30., 27., 36.],
        [21., 52., 32., 25., 30., 25., 26., 31., 27., 23.],
        [21., 27., 19., 31., 50., 33., 26., 30., 30., 36.],
        [19., 23., 25., 26., 41., 29., 29., 27., 34., 50.],
        [31., 29., 29.,  6., 32., 34., 41., 28., 32., 32.],
        [23., 21., 24., 32., 38., 23., 23., 38., 29., 49.],
        [53., 20., 30., 27., 25., 32., 30., 29., 31., 24.],
        [32., 27., 35., 22., 37., 26., 45., 25., 30., 22.],
        [21., 26., 20., 25., 39., 30., 24., 33., 27., 52.],
        [52., 21., 34., 30., 26., 28., 28., 29., 33., 23.],
        [18., 54., 30., 30., 26., 30., 26., 27., 27., 26.],
        [31., 29., 20., 38., 27., 47., 33., 25., 29., 29.],
        [27., 18., 24., 27., 37., 26., 23., 34., 35., 53.],
        [33., 22., 33., 34., 25., 21., 18., 52., 22., 30.],
        [24., 33., 34., 37., 23., 29., 28., 31., 27., 30.],
        [23., 28., 25., 27., 54., 28., 28., 26., 28., 38.]], device='cuda:0')
Train accuarcate: 92.58%



iteration:
   61
    0  1294   bit_w:-1  loss: 0.27047
    1  1260   bit_w:-1  loss: 0.26984
    2  1462   bit_w:-1  loss: 0.26936
    3  1439   bit_w: 1  loss: 0.26892
    4  1247   bit_w: 1  loss: 0.26874
   1938   5614   1600   2444   2014   4018   2266   2783   4786   4586
     -1      1     -1     -1     -1      1     -1     -1      1      1
Train accuarcate: 92.68%
tensor([[30., 25., 28., 30., 28., 24., 20., 60., 22., 31.],
        [26., 32., 50., 35., 21., 31., 28., 25., 30., 19.],
        [20., 50., 33., 23., 27., 31., 30., 28., 33., 24.],
        [49., 21., 35., 25., 23., 26., 37., 34., 23., 33.],
        [24., 28., 26., 24., 52., 25., 32., 30., 28., 37.],
        [21., 53., 32., 25., 30., 26., 26., 31., 28., 24.],
        [21., 28., 19., 31., 50., 34., 26., 30., 31., 37.],
        [19., 24., 25., 26., 41., 30., 29., 27., 35., 51.],
        [31., 30., 29.,  6., 32., 35., 41., 28., 33., 33.],
        [23., 22., 24., 32., 38., 24., 23., 38., 30., 50.],
        [54., 20., 31., 28., 26., 32., 31., 30., 31., 24.],
        [33., 27., 36., 23., 38., 26., 46., 26., 30., 22.],
        [22., 26., 21., 26., 40., 30., 25., 34., 27., 52.],
        [52., 22., 34., 30., 26., 29., 28., 29., 34., 24.],
        [18., 55., 30., 30., 26., 31., 26., 27., 28., 27.],
        [31., 30., 20., 38., 27., 48., 33., 25., 30., 30.],
        [27., 19., 24., 27., 37., 27., 23., 34., 36., 54.],
        [33., 23., 33., 34., 25., 22., 18., 52., 23., 31.],
        [24., 34., 34., 37., 23., 30., 28., 31., 28., 31.],
        [24., 28., 26., 28., 55., 28., 29., 27., 28., 38.]], device='cuda:0')
Train accuarcate: 92.66%



iteration:
   62
    0  1269   bit_w:-1  loss: 0.26632
    1  1303   bit_w:-1  loss: 0.26535
    2  1412   bit_w:-1  loss: 0.26537
    3  1243   bit_w:-1  loss: 0.26464
    4  1329   bit_w:-1  loss: 0.26422
   1133   6129   4524   4768   1331    743    268   6067   2941   4364
     -1      1      1      1     -1     -1     -1      1      0      1
Train accuarcate: 92.81%
tensor([[30., 26., 29., 31., 28., 24., 20., 61., 22., 32.],
        [26., 33., 51., 36., 21., 31., 28., 26., 30., 20.],
        [20., 51., 34., 24., 27., 31., 30., 29., 33., 25.],
        [50., 21., 35., 25., 24., 27., 38., 34., 23., 33.],
        [25., 28., 26., 24., 53., 26., 33., 30., 28., 37.],
        [21., 54., 33., 26., 30., 26., 26., 32., 28., 25.],
        [22., 28., 19., 31., 51., 35., 27., 30., 31., 37.],
        [19., 25., 26., 27., 41., 30., 29., 28., 35., 52.],
        [32., 30., 29.,  6., 33., 36., 42., 28., 33., 33.],
        [23., 23., 25., 33., 38., 24., 23., 39., 30., 51.],
        [55., 20., 31., 28., 27., 33., 32., 30., 31., 24.],
        [34., 27., 36., 23., 39., 27., 47., 26., 30., 22.],
        [22., 27., 22., 27., 40., 30., 25., 35., 27., 53.],
        [52., 23., 35., 31., 26., 29., 28., 30., 34., 25.],
        [18., 56., 31., 31., 26., 31., 26., 28., 28., 28.],
        [32., 30., 20., 38., 28., 49., 34., 25., 30., 30.],
        [27., 20., 25., 28., 37., 27., 23., 35., 36., 55.],
        [33., 24., 34., 35., 25., 22., 18., 53., 23., 32.],
        [24., 35., 35., 38., 23., 30., 28., 32., 28., 32.],
        [25., 28., 26., 28., 56., 29., 30., 27., 28., 38.]], device='cuda:0')
Train accuarcate: 92.72%



iteration:
   63
    0  1293   bit_w:-1  loss: 0.26156
    1  1335   bit_w:-1  loss: 0.26077
    2  1359   bit_w: 1  loss: 0.26023
    3  1333   bit_w: 1  loss: 0.25988
    4  1544   bit_w:-1  loss: 0.25922
   1372   5808   4591   1059   3909   1492   4372   1448   4517   1485
     -1      1      1     -1      1     -1      1      0      1     -1
Train accuarcate: 92.93%
tensor([[30., 27., 30., 31., 29., 24., 21., 61., 23., 32.],
        [26., 34., 52., 36., 22., 31., 29., 26., 31., 20.],
        [20., 52., 35., 24., 28., 31., 31., 29., 34., 25.],
        [50., 22., 36., 25., 25., 27., 39., 34., 24., 33.],
        [25., 29., 27., 24., 54., 26., 34., 30., 29., 37.],
        [21., 55., 34., 26., 31., 26., 27., 32., 29., 25.],
        [22., 29., 20., 31., 52., 35., 28., 30., 32., 37.],
        [20., 25., 26., 28., 41., 31., 29., 28., 35., 53.],
        [32., 31., 30.,  6., 34., 36., 43., 28., 34., 33.],
        [23., 24., 26., 33., 39., 24., 24., 39., 31., 51.],
        [56., 20., 31., 29., 27., 34., 32., 30., 31., 25.],
        [34., 28., 37., 23., 40., 27., 48., 26., 31., 22.],
        [23., 27., 22., 28., 40., 31., 25., 35., 27., 54.],
        [53., 23., 35., 32., 26., 30., 28., 30., 34., 26.],
        [18., 57., 32., 31., 27., 31., 27., 28., 29., 28.],
        [33., 30., 20., 39., 28., 50., 34., 25., 30., 31.],
        [28., 20., 25., 29., 37., 28., 23., 35., 36., 56.],
        [33., 25., 35., 35., 26., 22., 19., 53., 24., 32.],
        [24., 36., 36., 38., 24., 30., 29., 32., 29., 32.],
        [25., 29., 27., 28., 57., 29., 31., 27., 29., 38.]], device='cuda:0')
Train accuarcate: 92.89%



iteration:
   64
    0  1394   bit_w:-1  loss: 0.25697
    1  1372   bit_w: 1  loss: 0.25672
    2  1369   bit_w: 1  loss: 0.25618
    3  1266   bit_w: 1  loss: 0.25552
    4  1127   bit_w:-1  loss: 0.25563
   4850   2943   4954   4224    757   3868   5529   1686   2936    789
      1      0      1      1     -1      0      1     -1     -1     -1
Train accuarcate: 92.98%
tensor([[30., 27., 30., 31., 30., 24., 21., 62., 24., 33.],
        [27., 34., 53., 37., 22., 31., 30., 26., 31., 20.],
        [21., 52., 36., 25., 28., 31., 32., 29., 34., 25.],
        [51., 22., 37., 26., 25., 27., 40., 34., 24., 33.],
        [25., 29., 27., 24., 55., 26., 34., 31., 30., 38.],
        [21., 55., 34., 26., 32., 26., 27., 33., 30., 26.],
        [22., 29., 20., 31., 53., 35., 28., 31., 33., 38.],
        [20., 25., 26., 28., 42., 31., 29., 29., 36., 54.],
        [32., 31., 30.,  6., 35., 36., 43., 29., 35., 34.],
        [23., 24., 26., 33., 40., 24., 24., 40., 32., 52.],
        [56., 20., 31., 29., 28., 34., 32., 31., 32., 26.],
        [35., 28., 38., 24., 40., 27., 49., 26., 31., 22.],
        [23., 27., 22., 28., 41., 31., 25., 36., 28., 55.],
        [54., 23., 36., 33., 26., 30., 29., 30., 34., 26.],
        [18., 57., 32., 31., 28., 31., 27., 29., 30., 29.],
        [34., 30., 21., 40., 28., 50., 35., 25., 30., 31.],
        [28., 20., 25., 29., 38., 28., 23., 36., 37., 57.],
        [34., 25., 36., 36., 26., 22., 20., 53., 24., 32.],
        [25., 36., 37., 39., 24., 30., 30., 32., 29., 32.],
        [25., 29., 27., 28., 58., 29., 31., 28., 30., 39.]], device='cuda:0')
Train accuarcate: 93.04%



iteration:
   65
    0  1281   bit_w:-1  loss: 0.25346
    1  1223   bit_w:-1  loss: 0.25287
    2  1264   bit_w:-1  loss: 0.25264
    3  1389   bit_w: 1  loss: 0.25222
    4  1275   bit_w: 1  loss: 0.25207
    526    134   3568   4862   1247   3521    812   5027   1268   2258
     -1     -1      1      1      0      1     -1      1     -1      0
Train accuarcate: 93.06%
tensor([[30., 27., 31., 32., 30., 25., 21., 63., 24., 33.],
        [28., 35., 53., 37., 22., 31., 31., 26., 32., 20.],
        [22., 53., 36., 25., 28., 31., 33., 29., 35., 25.],
        [52., 23., 37., 26., 25., 27., 41., 34., 25., 33.],
        [26., 30., 27., 24., 55., 26., 35., 31., 31., 38.],
        [22., 56., 34., 26., 32., 26., 28., 33., 31., 26.],
        [23., 30., 20., 31., 53., 35., 29., 31., 34., 38.],
        [20., 25., 27., 29., 42., 32., 29., 30., 36., 54.],
        [33., 32., 30.,  6., 35., 36., 44., 29., 36., 34.],
        [23., 24., 27., 34., 40., 25., 24., 41., 32., 52.],
        [57., 21., 31., 29., 28., 34., 33., 31., 33., 26.],
        [36., 29., 38., 24., 40., 27., 50., 26., 32., 22.],
        [23., 27., 23., 29., 41., 32., 25., 37., 28., 55.],
        [55., 24., 36., 33., 26., 30., 30., 30., 35., 26.],
        [19., 58., 32., 31., 28., 31., 28., 29., 31., 29.],
        [34., 30., 22., 41., 28., 51., 35., 26., 30., 31.],
        [28., 20., 26., 30., 38., 29., 23., 37., 37., 57.],
        [34., 25., 37., 37., 26., 23., 20., 54., 24., 32.],
        [25., 36., 38., 40., 24., 31., 30., 33., 29., 32.],
        [26., 30., 27., 28., 58., 29., 32., 28., 31., 39.]], device='cuda:0')
Train accuarcate: 93.05%



iteration:
   66
    0  1277   bit_w:-1  loss: 0.25009
    1  1300   bit_w: 1  loss: 0.24955
    2  1255   bit_w: 1  loss: 0.24908
    3  1337   bit_w: 1  loss: 0.24879
    4  1227   bit_w: 1  loss: 0.24847
   1088   5209   2714   3960   4970   4503   3985   2431   4171   1236
     -1      1     -1      0      1      1      0     -1      1     -1
Train accuarcate: 93.11%
tensor([[30., 28., 31., 32., 31., 26., 21., 63., 25., 33.],
        [28., 36., 53., 37., 23., 32., 31., 26., 33., 20.],
        [22., 54., 36., 25., 29., 32., 33., 29., 36., 25.],
        [53., 23., 38., 26., 25., 27., 41., 35., 25., 34.],
        [26., 31., 27., 24., 56., 27., 35., 31., 32., 38.],
        [22., 57., 34., 26., 33., 27., 28., 33., 32., 26.],
        [23., 31., 20., 31., 54., 36., 29., 31., 35., 38.],
        [21., 25., 28., 29., 42., 32., 29., 31., 36., 55.],
        [33., 33., 30.,  6., 36., 37., 44., 29., 37., 34.],
        [24., 24., 28., 34., 40., 25., 24., 42., 32., 53.],
        [58., 21., 32., 29., 28., 34., 33., 32., 33., 27.],
        [36., 30., 38., 24., 41., 28., 50., 26., 33., 22.],
        [24., 27., 24., 29., 41., 32., 25., 38., 28., 56.],
        [55., 25., 36., 33., 27., 31., 30., 30., 36., 26.],
        [19., 59., 32., 31., 29., 32., 28., 29., 32., 29.],
        [34., 31., 22., 41., 29., 52., 35., 26., 31., 31.],
        [29., 20., 27., 30., 38., 29., 23., 38., 37., 58.],
        [35., 25., 38., 37., 26., 23., 20., 55., 24., 33.],
        [25., 37., 38., 40., 25., 32., 30., 33., 30., 32.],
        [26., 31., 27., 28., 59., 30., 32., 28., 32., 39.]], device='cuda:0')
Train accuarcate: 92.99%



iteration:
   67
    0  1286   bit_w:-1  loss: 0.24688
    1   854   bit_w:-1  loss: 0.24610
    2  1066   bit_w: 1  loss: 0.24627
    3  1284   bit_w: 1  loss: 0.24522
    4  1381   bit_w: 1  loss: 0.24526
   2672   1524   3860   3814    418   3857   4454    830   4193    754
      0     -1      0      1     -1      1      1     -1      1     -1
Train accuarcate: 93.19%
tensor([[30., 29., 31., 32., 32., 26., 21., 64., 25., 34.],
        [28., 36., 53., 38., 23., 33., 32., 26., 34., 20.],
        [22., 55., 36., 25., 30., 32., 33., 30., 36., 26.],
        [53., 24., 38., 26., 26., 27., 41., 36., 25., 35.],
        [26., 32., 27., 24., 57., 27., 35., 32., 32., 39.],
        [22., 58., 34., 26., 34., 27., 28., 34., 32., 27.],
        [23., 32., 20., 31., 55., 36., 29., 32., 35., 39.],
        [21., 25., 28., 30., 42., 33., 30., 31., 37., 55.],
        [33., 34., 30.,  6., 37., 37., 44., 30., 37., 35.],
        [24., 25., 28., 34., 41., 25., 24., 43., 32., 54.],
        [58., 22., 32., 29., 29., 34., 33., 33., 33., 28.],
        [36., 30., 38., 25., 41., 29., 51., 26., 34., 22.],
        [24., 28., 24., 29., 42., 32., 25., 39., 28., 57.],
        [55., 25., 36., 34., 27., 32., 31., 30., 37., 26.],
        [19., 60., 32., 31., 30., 32., 28., 30., 32., 30.],
        [34., 31., 22., 42., 29., 53., 36., 26., 32., 31.],
        [29., 21., 27., 30., 39., 29., 23., 39., 37., 59.],
        [35., 26., 38., 37., 27., 23., 20., 56., 24., 34.],
        [25., 37., 38., 41., 25., 33., 31., 33., 31., 32.],
        [26., 32., 27., 28., 60., 30., 32., 29., 32., 40.]], device='cuda:0')
Train accuarcate: 93.14%



iteration:
   68
    0  1331   bit_w:-1  loss: 0.24334
    1  1302   bit_w: 1  loss: 0.24279
    2  1356   bit_w:-1  loss: 0.24208
    3  1426   bit_w: 1  loss: 0.24178
    4  1401   bit_w: 1  loss: 0.24136
   4173   2182   1228    505   4288   1487   4069   1964   3136   1907
      1      0     -1     -1      0     -1      1      1      1     -1
Train accuarcate: 93.33%
tensor([[30., 29., 32., 33., 32., 27., 21., 64., 25., 35.],
        [28., 36., 54., 39., 23., 34., 32., 26., 34., 21.],
        [22., 55., 37., 26., 30., 33., 33., 30., 36., 27.],
        [54., 24., 38., 26., 26., 27., 42., 37., 26., 35.],
        [27., 32., 27., 24., 57., 27., 36., 33., 33., 39.],
        [23., 58., 34., 26., 34., 27., 29., 35., 33., 27.],
        [23., 32., 21., 32., 55., 37., 29., 32., 35., 40.],
        [21., 25., 29., 31., 42., 34., 30., 31., 37., 56.],
        [34., 34., 30.,  6., 37., 37., 45., 31., 38., 35.],
        [25., 25., 28., 34., 41., 25., 25., 44., 33., 54.],
        [58., 22., 33., 30., 29., 35., 33., 33., 33., 29.],
        [37., 30., 38., 25., 41., 29., 52., 27., 35., 22.],
        [25., 28., 24., 29., 42., 32., 26., 40., 29., 57.],
        [56., 25., 36., 34., 27., 32., 32., 31., 38., 26.],
        [20., 60., 32., 31., 30., 32., 29., 31., 33., 30.],
        [34., 31., 23., 43., 29., 54., 36., 26., 32., 32.],
        [30., 21., 27., 30., 39., 29., 24., 40., 38., 59.],
        [35., 26., 39., 38., 27., 24., 20., 56., 24., 35.],
        [25., 37., 39., 42., 25., 34., 31., 33., 31., 33.],
        [27., 32., 27., 28., 60., 30., 33., 30., 33., 40.]], device='cuda:0')
Train accuarcate: 93.16%



iteration:
   69
    0  1299   bit_w:-1  loss: 0.23963
    1  1230   bit_w:-1  loss: 0.23919
    2  1495   bit_w:-1  loss: 0.23889
    3  1254   bit_w:-1  loss: 0.23876
    4  1336   bit_w: 1  loss: 0.23862
   2537   1733   4260   3250   1871   3290   1271   5754   4538   4194
     -1     -1      1     -1     -1      0     -1      1      1      0
Train accuarcate: 93.41%
tensor([[30., 29., 33., 33., 32., 27., 21., 65., 26., 35.],
        [29., 37., 54., 40., 24., 34., 33., 26., 34., 21.],
        [23., 56., 37., 27., 31., 33., 34., 30., 36., 27.],
        [54., 24., 39., 26., 26., 27., 42., 38., 27., 35.],
        [28., 33., 27., 25., 58., 27., 37., 33., 33., 39.],
        [24., 59., 34., 27., 35., 27., 30., 35., 33., 27.],
        [24., 33., 21., 33., 56., 37., 30., 32., 35., 40.],
        [22., 26., 29., 32., 43., 34., 31., 31., 37., 56.],
        [35., 35., 30.,  7., 38., 37., 46., 31., 38., 35.],
        [26., 26., 28., 35., 42., 25., 26., 44., 33., 54.],
        [59., 23., 33., 31., 30., 35., 34., 33., 33., 29.],
        [38., 31., 38., 26., 42., 29., 53., 27., 35., 22.],
        [26., 29., 24., 30., 43., 32., 27., 40., 29., 57.],
        [56., 25., 37., 34., 27., 32., 32., 32., 39., 26.],
        [21., 61., 32., 32., 31., 32., 30., 31., 33., 30.],
        [34., 31., 24., 43., 29., 54., 36., 27., 33., 32.],
        [31., 22., 27., 31., 40., 29., 25., 40., 38., 59.],
        [36., 27., 39., 39., 28., 24., 21., 56., 24., 35.],
        [25., 37., 40., 42., 25., 34., 31., 34., 32., 33.],
        [27., 32., 28., 28., 60., 30., 33., 31., 34., 40.]], device='cuda:0')
Train accuarcate: 93.36%



iteration:
   70
    0  1276   bit_w:-1  loss: 0.23696
    1  1354   bit_w:-1  loss: 0.23647
    2  1224   bit_w:-1  loss: 0.23580
    3  1278   bit_w: 1  loss: 0.23552
    4  1371   bit_w: 1  loss: 0.23522
   1309   4619   1707   5269   2979   4875   4531   4638   1296   4517
     -1      1     -1      1     -1      1      0      0     -1      1
Train accuarcate: 93.43%
tensor([[31., 29., 34., 33., 33., 27., 21., 65., 27., 35.],
        [30., 37., 55., 40., 25., 34., 33., 26., 35., 21.],
        [24., 56., 38., 27., 32., 33., 34., 30., 37., 27.],
        [55., 24., 40., 26., 27., 27., 42., 38., 28., 35.],
        [29., 33., 28., 25., 59., 27., 37., 33., 34., 39.],
        [25., 59., 35., 27., 36., 27., 30., 35., 34., 27.],
        [24., 34., 21., 34., 56., 38., 30., 32., 35., 41.],
        [22., 27., 29., 33., 43., 35., 31., 31., 37., 57.],
        [35., 36., 30.,  8., 38., 38., 46., 31., 38., 36.],
        [27., 26., 29., 35., 43., 25., 26., 44., 34., 54.],
        [60., 23., 34., 31., 31., 35., 34., 33., 34., 29.],
        [39., 31., 39., 26., 43., 29., 53., 27., 36., 22.],
        [27., 29., 25., 30., 44., 32., 27., 40., 30., 57.],
        [57., 25., 38., 34., 28., 32., 32., 32., 40., 26.],
        [21., 62., 32., 33., 31., 33., 30., 31., 33., 31.],
        [34., 32., 24., 44., 29., 55., 36., 27., 33., 33.],
        [31., 23., 27., 32., 40., 30., 25., 40., 38., 60.],
        [37., 27., 40., 39., 29., 24., 21., 56., 25., 35.],
        [26., 37., 41., 42., 26., 34., 31., 34., 33., 33.],
        [27., 33., 28., 29., 60., 31., 33., 31., 34., 41.]], device='cuda:0')
Train accuarcate: 93.28%



iteration:
   71
    0  1282   bit_w:-1  loss: 0.23374
    1  1238   bit_w: 1  loss: 0.23311
    2  1346   bit_w: 1  loss: 0.23320
    3  1519   bit_w:-1  loss: 0.23258
    4  1341   bit_w: 1  loss: 0.23260
   4150   1206   4388   1184    802   4446   5522    559   3266    903
      0      0      1     -1     -1      1      1     -1      0      0
Train accuarcate: 93.59%
tensor([[31., 29., 34., 34., 34., 27., 21., 66., 27., 35.],
        [30., 37., 56., 40., 25., 35., 34., 26., 35., 21.],
        [24., 56., 38., 28., 33., 33., 34., 31., 37., 27.],
        [55., 24., 40., 27., 28., 27., 42., 39., 28., 35.],
        [29., 33., 28., 26., 60., 27., 37., 34., 34., 39.],
        [25., 59., 35., 28., 37., 27., 30., 36., 34., 27.],
        [24., 34., 21., 35., 57., 38., 30., 33., 35., 41.],
        [22., 27., 29., 34., 44., 35., 31., 32., 37., 57.],
        [35., 36., 31.,  8., 38., 39., 47., 31., 38., 36.],
        [27., 26., 29., 36., 44., 25., 26., 45., 34., 54.],
        [60., 23., 34., 32., 32., 35., 34., 34., 34., 29.],
        [39., 31., 40., 26., 43., 30., 54., 27., 36., 22.],
        [27., 29., 25., 31., 45., 32., 27., 41., 30., 57.],
        [57., 25., 38., 35., 29., 32., 32., 33., 40., 26.],
        [21., 62., 32., 34., 32., 33., 30., 32., 33., 31.],
        [34., 32., 25., 44., 29., 56., 37., 27., 33., 33.],
        [31., 23., 27., 33., 41., 30., 25., 41., 38., 60.],
        [37., 27., 40., 40., 30., 24., 21., 57., 25., 35.],
        [26., 37., 41., 43., 27., 34., 31., 35., 33., 33.],
        [27., 33., 28., 30., 61., 31., 33., 32., 34., 41.]], device='cuda:0')
Train accuarcate: 93.33%



iteration:
   72
    0  1279   bit_w:-1  loss: 0.23058
    1  1356   bit_w: 1  loss: 0.23014
    2  1422   bit_w: 1  loss: 0.22998
    3  1491   bit_w: 1  loss: 0.22939
    4  1273   bit_w: 1  loss: 0.22905
   4385    206   2428   3548   2229   4068   1435   2371   3971   4123
      1     -1     -1      0     -1      1     -1     -1      1      1
Train accuarcate: 93.60%
tensor([[32., 29., 34., 34., 34., 28., 21., 66., 28., 36.],
        [30., 38., 57., 40., 26., 35., 35., 27., 35., 21.],
        [24., 57., 39., 28., 34., 33., 35., 32., 37., 27.],
        [55., 25., 41., 27., 29., 27., 43., 40., 28., 35.],
        [29., 34., 29., 26., 61., 27., 38., 35., 34., 39.],
        [25., 60., 36., 28., 38., 27., 31., 37., 34., 27.],
        [25., 34., 21., 35., 57., 39., 30., 33., 36., 42.],
        [22., 28., 30., 34., 45., 35., 32., 33., 37., 57.],
        [35., 37., 32.,  8., 39., 39., 48., 32., 38., 36.],
        [28., 26., 29., 36., 44., 26., 26., 45., 35., 55.],
        [61., 23., 34., 32., 32., 36., 34., 34., 35., 30.],
        [39., 32., 41., 26., 44., 30., 55., 28., 36., 22.],
        [28., 29., 25., 31., 45., 33., 27., 41., 31., 58.],
        [58., 25., 38., 35., 29., 33., 32., 33., 41., 27.],
        [21., 63., 33., 34., 33., 33., 31., 33., 33., 31.],
        [34., 33., 26., 44., 30., 56., 38., 28., 33., 33.],
        [31., 24., 28., 33., 42., 30., 26., 42., 38., 60.],
        [38., 27., 40., 40., 30., 25., 21., 57., 26., 36.],
        [27., 37., 41., 43., 27., 35., 31., 35., 34., 34.],
        [27., 34., 29., 30., 62., 31., 34., 33., 34., 41.]], device='cuda:0')
Train accuarcate: 93.50%



iteration:
   73
    0  1444   bit_w:-1  loss: 0.22751
    1  1483   bit_w:-1  loss: 0.22709
    2  1338   bit_w: 1  loss: 0.22684
    3  1477   bit_w:-1  loss: 0.22643
    4  1526   bit_w:-1  loss: 0.22633
   4819   5775   3835    504   2663    738   2883   3095   3632   1042
      1      1      1     -1      0      0      0      0      1     -1
Train accuarcate: 93.64%
tensor([[32., 29., 34., 35., 34., 28., 21., 66., 28., 37.],
        [31., 39., 58., 40., 26., 35., 35., 27., 36., 21.],
        [25., 58., 40., 28., 34., 33., 35., 32., 38., 27.],
        [56., 26., 42., 27., 29., 27., 43., 40., 29., 35.],
        [29., 34., 29., 27., 61., 27., 38., 35., 34., 40.],
        [26., 61., 37., 28., 38., 27., 31., 37., 35., 27.],
        [25., 34., 21., 36., 57., 39., 30., 33., 36., 43.],
        [23., 29., 31., 34., 45., 35., 32., 33., 38., 57.],
        [36., 38., 33.,  8., 39., 39., 48., 32., 39., 36.],
        [28., 26., 29., 37., 44., 26., 26., 45., 35., 56.],
        [62., 24., 35., 32., 32., 36., 34., 34., 36., 30.],
        [40., 33., 42., 26., 44., 30., 55., 28., 37., 22.],
        [28., 29., 25., 32., 45., 33., 27., 41., 31., 59.],
        [59., 26., 39., 35., 29., 33., 32., 33., 42., 27.],
        [22., 64., 34., 34., 33., 33., 31., 33., 34., 31.],
        [34., 33., 26., 45., 30., 56., 38., 28., 33., 34.],
        [31., 24., 28., 34., 42., 30., 26., 42., 38., 61.],
        [38., 27., 40., 41., 30., 25., 21., 57., 26., 37.],
        [27., 37., 41., 44., 27., 35., 31., 35., 34., 35.],
        [28., 35., 30., 30., 62., 31., 34., 33., 35., 41.]], device='cuda:0')
Train accuarcate: 93.51%



iteration:
   74
    0   967   bit_w:-1  loss: 0.22461
    1   840   bit_w:-1  loss: 0.22428
    2  1216   bit_w: 1  loss: 0.22391
    3   845   bit_w:-1  loss: 0.22380
    4  1312   bit_w: 1  loss: 0.22373
    436   4000   1378   1752   4807   3120   5315    676   5312   4658
     -1      0      0      0      1     -1      1     -1      1      0
Train accuarcate: 93.69%
tensor([[33., 29., 34., 35., 34., 29., 21., 67., 28., 37.],
        [32., 39., 58., 40., 26., 36., 35., 28., 36., 21.],
        [26., 58., 40., 28., 34., 34., 35., 33., 38., 27.],
        [57., 26., 42., 27., 29., 28., 43., 41., 29., 35.],
        [29., 34., 29., 27., 62., 27., 39., 35., 35., 40.],
        [26., 61., 37., 28., 39., 27., 32., 37., 36., 27.],
        [25., 34., 21., 36., 58., 39., 31., 33., 37., 43.],
        [23., 29., 31., 34., 46., 35., 33., 33., 39., 57.],
        [36., 38., 33.,  8., 40., 39., 49., 32., 40., 36.],
        [28., 26., 29., 37., 45., 26., 27., 45., 36., 56.],
        [63., 24., 35., 32., 32., 37., 34., 35., 36., 30.],
        [40., 33., 42., 26., 45., 30., 56., 28., 38., 22.],
        [28., 29., 25., 32., 46., 33., 28., 41., 32., 59.],
        [60., 26., 39., 35., 29., 34., 32., 34., 42., 27.],
        [22., 64., 34., 34., 34., 33., 32., 33., 35., 31.],
        [35., 33., 26., 45., 30., 57., 38., 29., 33., 34.],
        [31., 24., 28., 34., 43., 30., 27., 42., 39., 61.],
        [39., 27., 40., 41., 30., 26., 21., 58., 26., 37.],
        [27., 37., 41., 44., 28., 35., 32., 35., 35., 35.],
        [28., 35., 30., 30., 63., 31., 35., 33., 36., 41.]], device='cuda:0')
Train accuarcate: 93.44%



iteration:
   75
    0  1315   bit_w:-1  loss: 0.22233
    1  1263   bit_w:-1  loss: 0.22176
    2  1421   bit_w: 1  loss: 0.22137
    3  1213   bit_w:-1  loss: 0.22108
    4  1373   bit_w: 1  loss: 0.22095
   1147   2496    540    920   4411   4559   4966    583   1487    854
      0      0     -1     -1      1      1      1      0      0     -1
Train accuarcate: 93.82%
tensor([[33., 29., 35., 36., 34., 29., 21., 67., 28., 38.],
        [32., 39., 58., 40., 27., 37., 36., 28., 36., 21.],
        [26., 58., 41., 29., 34., 34., 35., 33., 38., 28.],
        [57., 26., 43., 28., 29., 28., 43., 41., 29., 36.],
        [29., 34., 29., 27., 63., 28., 40., 35., 35., 40.],
        [26., 61., 38., 29., 39., 27., 32., 37., 36., 28.],
        [25., 34., 21., 36., 59., 40., 32., 33., 37., 43.],
        [23., 29., 32., 35., 46., 35., 33., 33., 39., 58.],
        [36., 38., 33.,  8., 41., 40., 50., 32., 40., 36.],
        [28., 26., 30., 38., 45., 26., 27., 45., 36., 57.],
        [63., 24., 36., 33., 32., 37., 34., 35., 36., 31.],
        [40., 33., 42., 26., 46., 31., 57., 28., 38., 22.],
        [28., 29., 26., 33., 46., 33., 28., 41., 32., 60.],
        [60., 26., 40., 36., 29., 34., 32., 34., 42., 28.],
        [22., 64., 34., 34., 35., 34., 33., 33., 35., 31.],
        [35., 33., 26., 45., 31., 58., 39., 29., 33., 34.],
        [31., 24., 29., 35., 43., 30., 27., 42., 39., 62.],
        [39., 27., 41., 42., 30., 26., 21., 58., 26., 38.],
        [27., 37., 41., 44., 29., 36., 33., 35., 35., 35.],
        [28., 35., 30., 30., 64., 32., 36., 33., 36., 41.]], device='cuda:0')
Train accuarcate: 93.48%



iteration:
   76
    0  1355   bit_w:-1  loss: 0.21931
    1  1248   bit_w: 1  loss: 0.21905
    2  1491   bit_w:-1  loss: 0.21873
    3  1535   bit_w:-1  loss: 0.21840
    4  1378   bit_w:-1  loss: 0.21840
   2535   6461   3951   2034   4372   1904   2478   5968   1184   2113
     -1      1      0      0      0      0      0      1     -1     -1
Train accuarcate: 93.84%
tensor([[33., 30., 35., 36., 34., 29., 21., 68., 28., 38.],
        [32., 40., 58., 40., 27., 37., 36., 29., 36., 21.],
        [26., 59., 41., 29., 34., 34., 35., 34., 38., 28.],
        [57., 27., 43., 28., 29., 28., 43., 42., 29., 36.],
        [29., 35., 29., 27., 63., 28., 40., 36., 35., 40.],
        [26., 62., 38., 29., 39., 27., 32., 38., 36., 28.],
        [26., 34., 21., 36., 59., 40., 32., 33., 38., 44.],
        [24., 29., 32., 35., 46., 35., 33., 33., 40., 59.],
        [37., 38., 33.,  8., 41., 40., 50., 32., 41., 37.],
        [28., 27., 30., 38., 45., 26., 27., 46., 36., 57.],
        [64., 24., 36., 33., 32., 37., 34., 35., 37., 32.],
        [41., 33., 42., 26., 46., 31., 57., 28., 39., 23.],
        [28., 30., 26., 33., 46., 33., 28., 42., 32., 60.],
        [60., 27., 40., 36., 29., 34., 32., 35., 42., 28.],
        [22., 65., 34., 34., 35., 34., 33., 34., 35., 31.],
        [36., 33., 26., 45., 31., 58., 39., 29., 34., 35.],
        [32., 24., 29., 35., 43., 30., 27., 42., 40., 63.],
        [39., 28., 41., 42., 30., 26., 21., 59., 26., 38.],
        [28., 37., 41., 44., 29., 36., 33., 35., 36., 36.],
        [29., 35., 30., 30., 64., 32., 36., 33., 37., 42.]], device='cuda:0')
Train accuarcate: 93.48%



iteration:
   77
    0  1297   bit_w:-1  loss: 0.21708
    1  1425   bit_w:-1  loss: 0.21665
    2  1389   bit_w:-1  loss: 0.21629
    3  1294   bit_w: 1  loss: 0.21592
    4  1374   bit_w:-1  loss: 0.21570
   5175   5737   3882    901   4035   1280   4954   3326   1792   2373
      1      1      1     -1      1     -1      1      0     -1      0
Train accuarcate: 93.89%
tensor([[33., 30., 35., 37., 34., 30., 21., 68., 29., 38.],
        [32., 40., 58., 41., 27., 38., 36., 29., 37., 21.],
        [27., 60., 42., 29., 35., 34., 36., 34., 38., 28.],
        [57., 27., 43., 29., 29., 29., 43., 42., 30., 36.],
        [30., 36., 30., 27., 64., 28., 41., 36., 35., 40.],
        [27., 63., 39., 29., 40., 27., 33., 38., 36., 28.],
        [26., 34., 21., 37., 59., 41., 32., 33., 39., 44.],
        [24., 29., 32., 36., 46., 36., 33., 33., 41., 59.],
        [38., 39., 34.,  8., 42., 40., 51., 32., 41., 37.],
        [29., 28., 31., 38., 46., 26., 28., 46., 36., 57.],
        [65., 25., 37., 33., 33., 37., 35., 35., 37., 32.],
        [42., 34., 43., 26., 47., 31., 58., 28., 39., 23.],
        [28., 30., 26., 34., 46., 34., 28., 42., 33., 60.],
        [60., 27., 40., 37., 29., 35., 32., 35., 43., 28.],
        [23., 66., 35., 34., 36., 34., 34., 34., 35., 31.],
        [36., 33., 26., 46., 31., 59., 39., 29., 35., 35.],
        [32., 24., 29., 36., 43., 31., 27., 42., 41., 63.],
        [39., 28., 41., 43., 30., 27., 21., 59., 27., 38.],
        [29., 38., 42., 44., 30., 36., 34., 35., 36., 36.],
        [30., 36., 31., 30., 65., 32., 37., 33., 37., 42.]], device='cuda:0')
Train accuarcate: 93.63%



iteration:
   78
    0  1291   bit_w:-1  loss: 0.21451
    1  1385   bit_w:-1  loss: 0.21387
    2  1443   bit_w: 1  loss: 0.21383
    3  1352   bit_w:-1  loss: 0.21337
    4  1418   bit_w: 1  loss: 0.21337
   3133   4073   3827   2447   4062   3076   1955    866   3002   4051
      0      1      1     -1      1      0      0     -1     -1      1
Train accuarcate: 93.92%
tensor([[33., 30., 35., 38., 34., 30., 21., 69., 30., 38.],
        [32., 40., 58., 42., 27., 38., 36., 30., 38., 21.],
        [27., 61., 43., 29., 36., 34., 36., 34., 38., 29.],
        [57., 27., 43., 30., 29., 29., 43., 43., 31., 36.],
        [30., 37., 31., 27., 65., 28., 41., 36., 35., 41.],
        [27., 63., 39., 30., 40., 27., 33., 39., 37., 28.],
        [26., 34., 21., 38., 59., 41., 32., 34., 40., 44.],
        [24., 30., 33., 36., 47., 36., 33., 33., 41., 60.],
        [38., 39., 34.,  9., 42., 40., 51., 33., 42., 37.],
        [29., 29., 32., 38., 47., 26., 28., 46., 36., 58.],
        [65., 26., 38., 33., 34., 37., 35., 35., 37., 33.],
        [42., 35., 44., 26., 48., 31., 58., 28., 39., 24.],
        [28., 31., 27., 34., 47., 34., 28., 42., 33., 61.],
        [60., 27., 40., 38., 29., 35., 32., 36., 44., 28.],
        [23., 67., 36., 34., 37., 34., 34., 34., 35., 32.],
        [36., 34., 27., 46., 32., 59., 39., 29., 35., 36.],
        [32., 25., 30., 36., 44., 31., 27., 42., 41., 64.],
        [39., 28., 41., 44., 30., 27., 21., 60., 28., 38.],
        [29., 38., 42., 45., 30., 36., 34., 36., 37., 36.],
        [30., 37., 32., 30., 66., 32., 37., 33., 37., 43.]], device='cuda:0')
Train accuarcate: 93.59%



iteration:
   79
    0  1526   bit_w:-1  loss: 0.21205
    1  1258   bit_w: 1  loss: 0.21171
    2  1360   bit_w: 1  loss: 0.21129
    3  1359   bit_w: 1  loss: 0.21085
    4  1528   bit_w: 1  loss: 0.21095
    916   1911   4407   2158   1768    568   3727    557   2978    739
     -1     -1      1      1      0     -1      1      0      1     -1
Train accuarcate: 93.96%
tensor([[34., 31., 35., 38., 34., 31., 21., 69., 30., 39.],
        [33., 41., 58., 42., 27., 39., 36., 30., 38., 22.],
        [27., 61., 44., 30., 36., 34., 37., 34., 39., 29.],
        [58., 28., 43., 30., 29., 30., 43., 43., 31., 37.],
        [31., 38., 31., 27., 65., 29., 41., 36., 35., 42.],
        [28., 64., 39., 30., 40., 28., 33., 39., 37., 29.],
        [27., 35., 21., 38., 59., 42., 32., 34., 40., 45.],
        [25., 31., 33., 36., 47., 37., 33., 33., 41., 61.],
        [38., 39., 35., 10., 42., 40., 52., 33., 43., 37.],
        [30., 30., 32., 38., 47., 27., 28., 46., 36., 59.],
        [65., 26., 39., 34., 34., 37., 36., 35., 38., 33.],
        [42., 35., 45., 27., 48., 31., 59., 28., 40., 24.],
        [29., 32., 27., 34., 47., 35., 28., 42., 33., 62.],
        [61., 28., 40., 38., 29., 36., 32., 36., 44., 29.],
        [24., 68., 36., 34., 37., 35., 34., 34., 35., 33.],
        [37., 35., 27., 46., 32., 60., 39., 29., 35., 37.],
        [33., 26., 30., 36., 44., 32., 27., 42., 41., 65.],
        [40., 29., 41., 44., 30., 28., 21., 60., 28., 39.],
        [29., 38., 43., 46., 30., 36., 35., 36., 38., 36.],
        [30., 37., 33., 31., 66., 32., 38., 33., 38., 43.]], device='cuda:0')
Train accuarcate: 93.57%



iteration:
   80
    0  1298   bit_w:-1  loss: 0.20964
    1  1311   bit_w: 1  loss: 0.20921
    2  1288   bit_w:-1  loss: 0.20909
    3  1369   bit_w:-1  loss: 0.20871
    4  1463   bit_w: 1  loss: 0.20888
   3981   5019   3870   2671   5419    951    664   5222   4398   5070
      0      0      0     -1      1     -1     -1      1      0      0
Train accuarcate: 94.02%
tensor([[34., 31., 35., 38., 35., 31., 21., 70., 30., 39.],
        [33., 41., 58., 43., 27., 40., 37., 30., 38., 22.],
        [27., 61., 44., 30., 37., 34., 37., 35., 39., 29.],
        [58., 28., 43., 31., 29., 31., 44., 43., 31., 37.],
        [31., 38., 31., 27., 66., 29., 41., 37., 35., 42.],
        [28., 64., 39., 30., 41., 28., 33., 40., 37., 29.],
        [27., 35., 21., 38., 60., 42., 32., 35., 40., 45.],
        [25., 31., 33., 36., 48., 37., 33., 34., 41., 61.],
        [38., 39., 35., 11., 42., 41., 53., 33., 43., 37.],
        [30., 30., 32., 38., 48., 27., 28., 47., 36., 59.],
        [65., 26., 39., 34., 35., 37., 36., 36., 38., 33.],
        [42., 35., 45., 27., 49., 31., 59., 29., 40., 24.],
        [29., 32., 27., 34., 48., 35., 28., 43., 33., 62.],
        [61., 28., 40., 38., 30., 36., 32., 37., 44., 29.],
        [24., 68., 36., 34., 38., 35., 34., 35., 35., 33.],
        [37., 35., 27., 47., 32., 61., 40., 29., 35., 37.],
        [33., 26., 30., 36., 45., 32., 27., 43., 41., 65.],
        [40., 29., 41., 45., 30., 29., 22., 60., 28., 39.],
        [29., 38., 43., 46., 31., 36., 35., 37., 38., 36.],
        [30., 37., 33., 31., 67., 32., 38., 34., 38., 43.]], device='cuda:0')
Train accuarcate: 93.68%



iteration:
   81
    0  1296   bit_w:-1  loss: 0.20756
    1  1334   bit_w: 1  loss: 0.20717
    2   323   bit_w:-1  loss: 0.20709
    3  1376   bit_w: 1  loss: 0.20680
    4  1477   bit_w:-1  loss: 0.20684
   4581   1850   4176    719   3327   2208   4687    468   4320   2424
      1     -1      1     -1      0      0      1     -1      1     -1
Train accuarcate: 94.06%
tensor([[34., 32., 35., 39., 35., 31., 21., 71., 30., 40.],
        [34., 41., 59., 43., 27., 40., 38., 30., 39., 22.],
        [27., 62., 44., 31., 37., 34., 37., 36., 39., 30.],
        [59., 28., 44., 31., 29., 31., 45., 43., 32., 37.],
        [31., 39., 31., 28., 66., 29., 41., 38., 35., 43.],
        [28., 65., 39., 31., 41., 28., 33., 41., 37., 30.],
        [27., 36., 21., 39., 60., 42., 32., 36., 40., 46.],
        [25., 32., 33., 37., 48., 37., 33., 35., 41., 62.],
        [38., 40., 35., 12., 42., 41., 53., 34., 43., 38.],
        [31., 30., 33., 38., 48., 27., 29., 47., 37., 59.],
        [66., 26., 40., 34., 35., 37., 37., 36., 39., 33.],
        [43., 35., 46., 27., 49., 31., 60., 29., 41., 24.],
        [30., 32., 28., 34., 48., 35., 29., 43., 34., 62.],
        [62., 28., 41., 38., 30., 36., 33., 37., 45., 29.],
        [24., 69., 36., 35., 38., 35., 34., 36., 35., 34.],
        [37., 36., 27., 48., 32., 61., 40., 30., 35., 38.],
        [33., 27., 30., 37., 45., 32., 27., 44., 41., 66.],
        [40., 30., 41., 46., 30., 29., 22., 61., 28., 40.],
        [29., 39., 43., 47., 31., 36., 35., 38., 38., 37.],
        [31., 37., 34., 31., 67., 32., 39., 34., 39., 43.]], device='cuda:0')
Train accuarcate: 93.62%



iteration:
   82
    0  1345   bit_w:-1  loss: 0.20547
    1  1472   bit_w: 1  loss: 0.20518
    2  1400   bit_w:-1  loss: 0.20481
    3  1244   bit_w:-1  loss: 0.20456
    4  1314   bit_w: 1  loss: 0.20432
   2180    662   1666   2959   4398   3557   4446   3943   1460   2590
     -1     -1     -1      0      1      1      0      1     -1     -1
Train accuarcate: 94.11%
tensor([[34., 32., 35., 39., 36., 32., 21., 72., 30., 40.],
        [35., 42., 60., 43., 27., 40., 38., 30., 40., 23.],
        [28., 63., 45., 31., 37., 34., 37., 36., 40., 31.],
        [60., 29., 45., 31., 29., 31., 45., 43., 33., 38.],
        [31., 39., 31., 28., 67., 30., 41., 39., 35., 43.],
        [29., 66., 40., 31., 41., 28., 33., 41., 38., 31.],
        [28., 37., 22., 39., 60., 42., 32., 36., 41., 47.],
        [25., 32., 33., 37., 49., 38., 33., 36., 41., 62.],
        [39., 41., 36., 12., 42., 41., 53., 34., 44., 39.],
        [31., 30., 33., 38., 49., 28., 29., 48., 37., 59.],
        [67., 27., 41., 34., 35., 37., 37., 36., 40., 34.],
        [43., 35., 46., 27., 50., 32., 60., 30., 41., 24.],
        [31., 33., 29., 34., 48., 35., 29., 43., 35., 63.],
        [63., 29., 42., 38., 30., 36., 33., 37., 46., 30.],
        [25., 70., 37., 35., 38., 35., 34., 36., 36., 35.],
        [38., 37., 28., 48., 32., 61., 40., 30., 36., 39.],
        [34., 28., 31., 37., 45., 32., 27., 44., 42., 67.],
        [40., 30., 41., 46., 31., 30., 22., 62., 28., 40.],
        [29., 39., 43., 47., 32., 37., 35., 39., 38., 37.],
        [32., 38., 35., 31., 67., 32., 39., 34., 40., 44.]], device='cuda:0')
Train accuarcate: 93.78%



iteration:
   83
    0  1268   bit_w:-1  loss: 0.20329
    1  1324   bit_w: 1  loss: 0.20285
    2  1386   bit_w: 1  loss: 0.20260
    3  1375   bit_w:-1  loss: 0.20203
    4  1312   bit_w:-1  loss: 0.20179
   1100   3918   4976   5021   3968   1727   3830   2824   2488   1555
     -1      0      1      1      1     -1      1      0     -1     -1
Train accuarcate: 94.16%
tensor([[34., 32., 36., 40., 37., 32., 22., 72., 30., 40.],
        [35., 42., 61., 44., 28., 40., 39., 30., 40., 23.],
        [28., 63., 46., 32., 38., 34., 38., 36., 40., 31.],
        [60., 29., 46., 32., 30., 31., 46., 43., 33., 38.],
        [31., 39., 32., 29., 68., 30., 42., 39., 35., 43.],
        [29., 66., 41., 32., 42., 28., 34., 41., 38., 31.],
        [28., 37., 23., 40., 61., 42., 33., 36., 41., 47.],
        [26., 32., 33., 37., 49., 39., 33., 36., 42., 63.],
        [40., 41., 36., 12., 42., 42., 53., 34., 45., 40.],
        [32., 30., 33., 38., 49., 29., 29., 48., 38., 60.],
        [68., 27., 41., 34., 35., 38., 37., 36., 41., 35.],
        [44., 35., 46., 27., 50., 33., 60., 30., 42., 25.],
        [31., 33., 30., 35., 49., 35., 30., 43., 35., 63.],
        [63., 29., 43., 39., 31., 36., 34., 37., 46., 30.],
        [26., 70., 37., 35., 38., 36., 34., 36., 37., 36.],
        [39., 37., 28., 48., 32., 62., 40., 30., 37., 40.],
        [35., 28., 31., 37., 45., 33., 27., 44., 43., 68.],
        [40., 30., 42., 47., 32., 30., 23., 62., 28., 40.],
        [29., 39., 44., 48., 33., 37., 36., 39., 38., 37.],
        [32., 38., 36., 32., 68., 32., 40., 34., 40., 44.]], device='cuda:0')
Train accuarcate: 93.81%



iteration:
   84
    0  1380   bit_w:-1  loss: 0.20085
    1  1392   bit_w:-1  loss: 0.20037
    2  1538   bit_w: 1  loss: 0.20028
    3  1398   bit_w:-1  loss: 0.19973
    4   801   bit_w:-1  loss: 0.19985
   2487   1240   3657   3222   2279   1524   4970   3497   3317   3289
      0     -1      0      0     -1     -1      1      1     -1      1
Train accuarcate: 94.22%
tensor([[34., 32., 36., 40., 37., 32., 23., 73., 30., 41.],
        [35., 42., 61., 44., 28., 40., 40., 31., 40., 24.],
        [28., 63., 46., 32., 38., 34., 39., 37., 40., 32.],
        [60., 29., 46., 32., 30., 31., 47., 44., 33., 39.],
        [31., 40., 32., 29., 69., 31., 42., 39., 36., 43.],
        [29., 67., 41., 32., 43., 29., 34., 41., 39., 31.],
        [28., 38., 23., 40., 62., 43., 33., 36., 42., 47.],
        [26., 32., 33., 37., 49., 39., 34., 37., 42., 64.],
        [40., 42., 36., 12., 43., 43., 53., 34., 46., 40.],
        [32., 30., 33., 38., 49., 29., 30., 49., 38., 61.],
        [68., 27., 41., 34., 35., 38., 38., 37., 41., 36.],
        [44., 35., 46., 27., 50., 33., 61., 31., 42., 26.],
        [31., 34., 30., 35., 50., 36., 30., 43., 36., 63.],
        [63., 29., 43., 39., 31., 36., 35., 38., 46., 31.],
        [26., 71., 37., 35., 39., 37., 34., 36., 38., 36.],
        [39., 37., 28., 48., 32., 62., 41., 31., 37., 41.],
        [35., 29., 31., 37., 46., 34., 27., 44., 44., 68.],
        [40., 30., 42., 47., 32., 30., 24., 63., 28., 41.],
        [29., 40., 44., 48., 34., 38., 36., 39., 39., 37.],
        [32., 38., 36., 32., 68., 32., 41., 35., 40., 45.]], device='cuda:0')
Train accuarcate: 93.92%



iteration:
   85
    0  1332   bit_w:-1  loss: 0.19874
    1  1310   bit_w:-1  loss: 0.19845
    2   998   bit_w:-1  loss: 0.19817
    3  1280   bit_w:-1  loss: 0.19782
    4  1510   bit_w:-1  loss: 0.19769
   5502   1305   5034   4502   3335   4179   2545   4223   3232   3464
      1     -1      1      1      0      1     -1     -1     -1      0
Train accuarcate: 94.28%
tensor([[35., 32., 37., 41., 37., 33., 23., 73., 30., 41.],
        [36., 42., 62., 45., 28., 41., 40., 31., 40., 24.],
        [28., 64., 46., 32., 38., 34., 40., 38., 41., 32.],
        [61., 29., 47., 33., 30., 32., 47., 44., 33., 39.],
        [32., 40., 33., 30., 69., 32., 42., 39., 36., 43.],
        [29., 68., 41., 32., 43., 29., 35., 42., 40., 31.],
        [28., 39., 23., 40., 62., 43., 34., 37., 43., 47.],
        [27., 32., 34., 38., 49., 40., 34., 37., 42., 64.],
        [40., 43., 36., 12., 43., 43., 54., 35., 47., 40.],
        [32., 31., 33., 38., 49., 29., 31., 50., 39., 61.],
        [69., 27., 42., 35., 35., 39., 38., 37., 41., 36.],
        [45., 35., 47., 28., 50., 34., 61., 31., 42., 26.],
        [32., 34., 31., 36., 50., 37., 30., 43., 36., 63.],
        [64., 29., 44., 40., 31., 37., 35., 38., 46., 31.],
        [26., 72., 37., 35., 39., 37., 35., 37., 39., 36.],
        [40., 37., 29., 49., 32., 63., 41., 31., 37., 41.],
        [36., 29., 32., 38., 46., 35., 27., 44., 44., 68.],
        [41., 30., 43., 48., 32., 31., 24., 63., 28., 41.],
        [30., 40., 45., 49., 34., 39., 36., 39., 39., 37.],
        [33., 38., 37., 33., 68., 33., 41., 35., 40., 45.]], device='cuda:0')
Train accuarcate: 93.86%



iteration:
   86
    0  1283   bit_w:-1  loss: 0.19655
    1  1394   bit_w: 1  loss: 0.19601
    2  1395   bit_w: 1  loss: 0.19589
    3   911   bit_w: 1  loss: 0.19563
    4  1339   bit_w:-1  loss: 0.19565
   2521   2732   1436   1911   5513   2410   4529   5933   3808   5615
     -1     -1     -1     -1      1      0      0      1     -1      1
Train accuarcate: 94.31%
tensor([[35., 32., 37., 41., 38., 33., 23., 74., 30., 42.],
        [37., 43., 63., 46., 28., 41., 40., 31., 41., 24.],
        [29., 65., 47., 33., 38., 34., 40., 38., 42., 32.],
        [61., 29., 47., 33., 31., 32., 47., 45., 33., 40.],
        [33., 41., 34., 31., 69., 32., 42., 39., 37., 43.],
        [30., 69., 42., 33., 43., 29., 35., 42., 41., 31.],
        [28., 39., 23., 40., 63., 43., 34., 38., 43., 48.],
        [27., 32., 34., 38., 50., 40., 34., 38., 42., 65.],
        [40., 43., 36., 12., 44., 43., 54., 36., 47., 41.],
        [32., 31., 33., 38., 50., 29., 31., 51., 39., 62.],
        [69., 27., 42., 35., 36., 39., 38., 38., 41., 37.],
        [46., 36., 48., 29., 50., 34., 61., 31., 43., 26.],
        [32., 34., 31., 36., 51., 37., 30., 44., 36., 64.],
        [65., 30., 45., 41., 31., 37., 35., 38., 47., 31.],
        [27., 73., 38., 36., 39., 37., 35., 37., 40., 36.],
        [41., 38., 30., 50., 32., 63., 41., 31., 38., 41.],
        [36., 29., 32., 38., 47., 35., 27., 45., 44., 69.],
        [41., 30., 43., 48., 33., 31., 24., 64., 28., 42.],
        [31., 41., 46., 50., 34., 39., 36., 39., 40., 37.],
        [33., 38., 37., 33., 69., 33., 41., 36., 40., 46.]], device='cuda:0')
Train accuarcate: 94.00%



iteration:
   87
    0  1295   bit_w:-1  loss: 0.19479
    1  1419   bit_w: 1  loss: 0.19423
    2  1272   bit_w: 1  loss: 0.19423
    3  1323   bit_w: 1  loss: 0.19391
    4  1508   bit_w: 1  loss: 0.19370
   1508   2043   1451   3079   1796   4250   3735   4359   2150   2989
     -1      0     -1      1     -1      1      1      1     -1      0
Train accuarcate: 94.35%
tensor([[35., 32., 37., 42., 38., 34., 24., 75., 30., 42.],
        [38., 43., 64., 46., 29., 41., 40., 31., 42., 24.],
        [30., 65., 48., 33., 39., 34., 40., 38., 43., 32.],
        [62., 29., 48., 33., 32., 32., 47., 45., 34., 40.],
        [34., 41., 35., 31., 70., 32., 42., 39., 38., 43.],
        [31., 69., 43., 33., 44., 29., 35., 42., 42., 31.],
        [29., 39., 24., 40., 64., 43., 34., 38., 44., 48.],
        [28., 32., 35., 38., 51., 40., 34., 38., 43., 65.],
        [40., 43., 36., 13., 44., 44., 55., 37., 47., 41.],
        [33., 31., 34., 38., 51., 29., 31., 51., 40., 62.],
        [69., 27., 42., 36., 36., 40., 39., 39., 41., 37.],
        [46., 36., 48., 30., 50., 35., 62., 32., 43., 26.],
        [33., 34., 32., 36., 52., 37., 30., 44., 37., 64.],
        [65., 30., 45., 42., 31., 38., 36., 39., 47., 31.],
        [28., 73., 39., 36., 40., 37., 35., 37., 41., 36.],
        [42., 38., 31., 50., 33., 63., 41., 31., 39., 41.],
        [37., 29., 33., 38., 48., 35., 27., 45., 45., 69.],
        [41., 30., 43., 49., 33., 32., 25., 65., 28., 42.],
        [32., 41., 47., 50., 35., 39., 36., 39., 41., 37.],
        [33., 38., 37., 34., 69., 34., 42., 37., 40., 46.]], device='cuda:0')
Train accuarcate: 94.03%



iteration:
   88
    0  1307   bit_w:-1  loss: 0.19252
    1  1289   bit_w: 1  loss: 0.19212
    2  1364   bit_w: 1  loss: 0.19195
    3  1326   bit_w: 1  loss: 0.19154
    4  1324   bit_w:-1  loss: 0.19114
   5115   4683   2664   2402   3131   4280   4721   3020   3302   4924
      0      1     -1     -1     -1      1      1     -1     -1      1
Train accuarcate: 94.42%
tensor([[35., 32., 38., 43., 39., 34., 24., 76., 31., 42.],
        [38., 43., 65., 47., 30., 41., 40., 32., 43., 24.],
        [30., 66., 48., 33., 39., 35., 41., 38., 43., 33.],
        [62., 30., 48., 33., 32., 33., 48., 45., 34., 41.],
        [34., 42., 35., 31., 70., 33., 43., 39., 38., 44.],
        [31., 70., 43., 33., 44., 30., 36., 42., 42., 32.],
        [29., 39., 25., 41., 65., 43., 34., 39., 45., 48.],
        [28., 33., 35., 38., 51., 41., 35., 38., 43., 66.],
        [40., 44., 36., 13., 44., 45., 56., 37., 47., 42.],
        [33., 31., 35., 39., 52., 29., 31., 52., 41., 62.],
        [69., 28., 42., 36., 36., 41., 40., 39., 41., 38.],
        [46., 37., 48., 30., 50., 36., 63., 32., 43., 27.],
        [33., 35., 32., 36., 52., 38., 31., 44., 37., 65.],
        [65., 30., 46., 43., 32., 38., 36., 40., 48., 31.],
        [28., 74., 39., 36., 40., 38., 36., 37., 41., 37.],
        [42., 39., 31., 50., 33., 64., 42., 31., 39., 42.],
        [37., 30., 33., 38., 48., 36., 28., 45., 45., 70.],
        [41., 31., 43., 49., 33., 33., 26., 65., 28., 43.],
        [32., 42., 47., 50., 35., 40., 37., 39., 41., 38.],
        [33., 38., 38., 35., 70., 34., 42., 38., 41., 46.]], device='cuda:0')
Train accuarcate: 94.02%



iteration:
   89
    0  1311   bit_w:-1  loss: 0.19026
    1  1267   bit_w: 1  loss: 0.18995
    2   974   bit_w:-1  loss: 0.18985
    3  1300   bit_w: 1  loss: 0.18956
    4  1408   bit_w: 1  loss: 0.18935
    272   2284   2706    566   2603   3721   5114   2035   2143   1789
     -1     -1      0     -1      0      1      1      0      1     -1
Train accuarcate: 94.41%
tensor([[36., 33., 38., 44., 39., 34., 24., 76., 31., 43.],
        [39., 44., 65., 48., 30., 41., 40., 32., 43., 25.],
        [30., 66., 48., 33., 39., 36., 42., 38., 44., 33.],
        [63., 31., 48., 34., 32., 33., 48., 45., 34., 42.],
        [35., 43., 35., 32., 70., 33., 43., 39., 38., 45.],
        [31., 70., 43., 33., 44., 31., 37., 42., 43., 32.],
        [29., 39., 25., 41., 65., 44., 35., 39., 46., 48.],
        [29., 34., 35., 39., 51., 41., 35., 38., 43., 67.],
        [40., 44., 36., 13., 44., 46., 57., 37., 48., 42.],
        [34., 32., 35., 40., 52., 29., 31., 52., 41., 63.],
        [70., 29., 42., 37., 36., 41., 40., 39., 41., 39.],
        [46., 37., 48., 30., 50., 37., 64., 32., 44., 27.],
        [34., 36., 32., 37., 52., 38., 31., 44., 37., 66.],
        [66., 31., 46., 44., 32., 38., 36., 40., 48., 32.],
        [29., 75., 39., 37., 40., 38., 36., 37., 41., 38.],
        [42., 39., 31., 50., 33., 65., 43., 31., 40., 42.],
        [37., 30., 33., 38., 48., 37., 29., 45., 46., 70.],
        [42., 32., 43., 50., 33., 33., 26., 65., 28., 44.],
        [33., 43., 47., 51., 35., 40., 37., 39., 41., 39.],
        [34., 39., 38., 36., 70., 34., 42., 38., 41., 47.]], device='cuda:0')
Train accuarcate: 94.07%



iteration:
   90
    0  1355   bit_w:-1  loss: 0.18837
    1  1445   bit_w:-1  loss: 0.18800
    2  1271   bit_w: 1  loss: 0.18757
    3  1261   bit_w:-1  loss: 0.18738
    4  1102   bit_w: 1  loss: 0.18742
   4820   6362   4624   1453   4683   1906   4604   4651   2019   2915
      0      1      1      0      1     -1      0      1     -1     -1
Train accuarcate: 94.47%
tensor([[36., 34., 39., 44., 40., 34., 24., 77., 31., 43.],
        [39., 45., 66., 48., 31., 41., 40., 33., 43., 25.],
        [30., 67., 49., 33., 40., 36., 42., 39., 44., 33.],
        [63., 32., 49., 34., 33., 33., 48., 46., 34., 42.],
        [35., 44., 36., 32., 71., 33., 43., 40., 38., 45.],
        [31., 71., 44., 33., 45., 31., 37., 43., 43., 32.],
        [29., 39., 25., 41., 65., 45., 35., 39., 47., 49.],
        [29., 35., 36., 39., 52., 41., 35., 39., 43., 67.],
        [40., 45., 37., 13., 45., 46., 57., 38., 48., 42.],
        [34., 32., 35., 40., 52., 30., 31., 52., 42., 64.],
        [70., 29., 42., 37., 36., 42., 40., 39., 42., 40.],
        [46., 38., 49., 30., 51., 37., 64., 33., 44., 27.],
        [34., 37., 33., 37., 53., 38., 31., 45., 37., 66.],
        [66., 32., 47., 44., 33., 38., 36., 41., 48., 32.],
        [29., 76., 40., 37., 41., 38., 36., 38., 41., 38.],
        [42., 40., 32., 50., 34., 65., 43., 32., 40., 42.],
        [37., 30., 33., 38., 48., 38., 29., 45., 47., 71.],
        [42., 33., 44., 50., 34., 33., 26., 66., 28., 44.],
        [33., 43., 47., 51., 35., 41., 37., 39., 42., 40.],
        [34., 40., 39., 36., 71., 34., 42., 39., 41., 47.]], device='cuda:0')
Train accuarcate: 94.26%



iteration:
   91
    0  1327   bit_w:-1  loss: 0.18647
    1  1456   bit_w: 1  loss: 0.18609
    2  1345   bit_w: 1  loss: 0.18607
    3  1475   bit_w:-1  loss: 0.18574
    4  1397   bit_w: 1  loss: 0.18572
   5465   5423   2760   1201   1752   2108   3612   3538   4337   1580
      1      0     -1     -1     -1      0      1      1      1      0
Train accuarcate: 94.50%
tensor([[36., 34., 40., 45., 41., 34., 24., 77., 31., 43.],
        [39., 45., 67., 49., 32., 41., 40., 33., 43., 25.],
        [31., 67., 49., 33., 40., 36., 43., 40., 45., 33.],
        [64., 32., 49., 34., 33., 33., 49., 47., 35., 42.],
        [36., 44., 36., 32., 71., 33., 44., 41., 39., 45.],
        [32., 71., 44., 33., 45., 31., 38., 44., 44., 32.],
        [29., 39., 26., 42., 66., 45., 35., 39., 47., 49.],
        [30., 35., 36., 39., 52., 41., 36., 40., 44., 67.],
        [41., 45., 37., 13., 45., 46., 58., 39., 49., 42.],
        [34., 32., 36., 41., 53., 30., 31., 52., 42., 64.],
        [71., 29., 42., 37., 36., 42., 41., 40., 43., 40.],
        [47., 38., 49., 30., 51., 37., 65., 34., 45., 27.],
        [34., 37., 34., 38., 54., 38., 31., 45., 37., 66.],
        [67., 32., 47., 44., 33., 38., 37., 42., 49., 32.],
        [30., 76., 40., 37., 41., 38., 37., 39., 42., 38.],
        [43., 40., 32., 50., 34., 65., 44., 33., 41., 42.],
        [38., 30., 33., 38., 48., 38., 30., 46., 48., 71.],
        [42., 33., 45., 51., 35., 33., 26., 66., 28., 44.],
        [33., 43., 48., 52., 36., 41., 37., 39., 42., 40.],
        [34., 40., 40., 37., 72., 34., 42., 39., 41., 47.]], device='cuda:0')
Train accuarcate: 94.23%



iteration:
   92
    0  1301   bit_w:-1  loss: 0.18493
    1  1367   bit_w: 1  loss: 0.18442
    2  1379   bit_w:-1  loss: 0.18433
    3   803   bit_w: 1  loss: 0.18401
    4  1331   bit_w:-1  loss: 0.18396
   5309   2919   1506   1609   2497   2954   4635   3529   1802   1305
      1      1     -1     -1      0      1      1      1      0     -1
Train accuarcate: 94.60%
tensor([[37., 35., 40., 45., 41., 35., 25., 78., 31., 43.],
        [40., 46., 67., 49., 32., 42., 41., 34., 43., 25.],
        [31., 67., 50., 34., 40., 36., 43., 40., 45., 34.],
        [65., 33., 49., 34., 33., 34., 50., 48., 35., 42.],
        [36., 44., 37., 33., 71., 33., 44., 41., 39., 46.],
        [32., 71., 45., 34., 45., 31., 38., 44., 44., 33.],
        [29., 39., 27., 43., 66., 45., 35., 39., 47., 50.],
        [30., 35., 37., 40., 52., 41., 36., 40., 44., 68.],
        [41., 45., 38., 14., 45., 46., 58., 39., 49., 43.],
        [34., 32., 37., 42., 53., 30., 31., 52., 42., 65.],
        [72., 30., 42., 37., 36., 43., 42., 41., 43., 40.],
        [48., 39., 49., 30., 51., 38., 66., 35., 45., 27.],
        [34., 37., 35., 39., 54., 38., 31., 45., 37., 67.],
        [68., 33., 47., 44., 33., 39., 38., 43., 49., 32.],
        [30., 76., 41., 38., 41., 38., 37., 39., 42., 39.],
        [44., 41., 32., 50., 34., 66., 45., 34., 41., 42.],
        [39., 31., 33., 38., 48., 39., 31., 47., 48., 71.],
        [43., 34., 45., 51., 35., 34., 27., 67., 28., 44.],
        [34., 44., 48., 52., 36., 42., 38., 40., 42., 40.],
        [34., 40., 41., 38., 72., 34., 42., 39., 41., 48.]], device='cuda:0')
Train accuarcate: 94.22%



iteration:
   93
    0  1328   bit_w:-1  loss: 0.18317
    1  1451   bit_w:-1  loss: 0.18276
    2  1460   bit_w: 1  loss: 0.18289
    3  1572   bit_w:-1  loss: 0.18248
    4  1525   bit_w: 1  loss: 0.18264
   5015   4709   4272   4316   1954   1551   1567   4834   2878   3605
      1      1      1      0     -1     -1     -1      0     -1      0
Train accuarcate: 94.60%
tensor([[38., 36., 41., 45., 41., 35., 25., 78., 31., 43.],
        [40., 46., 67., 49., 33., 43., 42., 34., 44., 25.],
        [32., 68., 51., 34., 40., 36., 43., 40., 45., 34.],
        [66., 34., 50., 34., 33., 34., 50., 48., 35., 42.],
        [36., 44., 37., 33., 72., 34., 45., 41., 40., 46.],
        [33., 72., 46., 34., 45., 31., 38., 44., 44., 33.],
        [30., 40., 28., 43., 66., 45., 35., 39., 47., 50.],
        [31., 36., 38., 40., 52., 41., 36., 40., 44., 68.],
        [42., 46., 39., 14., 45., 46., 58., 39., 49., 43.],
        [34., 32., 37., 42., 54., 31., 32., 52., 43., 65.],
        [73., 31., 43., 37., 36., 43., 42., 41., 43., 40.],
        [48., 39., 49., 30., 52., 39., 67., 35., 46., 27.],
        [34., 37., 35., 39., 55., 39., 32., 45., 38., 67.],
        [68., 33., 47., 44., 34., 40., 39., 43., 50., 32.],
        [30., 76., 41., 38., 42., 39., 38., 39., 43., 39.],
        [45., 42., 33., 50., 34., 66., 45., 34., 41., 42.],
        [39., 31., 33., 38., 49., 40., 32., 47., 49., 71.],
        [44., 35., 46., 51., 35., 34., 27., 67., 28., 44.],
        [35., 45., 49., 52., 36., 42., 38., 40., 42., 40.],
        [34., 40., 41., 38., 73., 35., 43., 39., 42., 48.]], device='cuda:0')
Train accuarcate: 94.23%



iteration:
   94
    0  1286   bit_w:-1  loss: 0.18145
    1  1370   bit_w: 1  loss: 0.18124
    2   412   bit_w:-1  loss: 0.18083
    3  1348   bit_w: 1  loss: 0.18075
    4   789   bit_w: 1  loss: 0.18046
   1585   4601   4187   3458    291   1223   3304    709   4053    278
      0      1      0      1     -1      0      1     -1      1     -1
Train accuarcate: 94.64%
tensor([[38., 36., 41., 45., 42., 35., 25., 79., 31., 44.],
        [40., 47., 67., 50., 33., 43., 43., 34., 45., 25.],
        [32., 69., 51., 35., 40., 36., 44., 40., 46., 34.],
        [66., 34., 50., 34., 34., 34., 50., 49., 35., 43.],
        [36., 44., 37., 33., 73., 34., 45., 42., 40., 47.],
        [33., 72., 46., 34., 46., 31., 38., 45., 44., 34.],
        [30., 40., 28., 43., 67., 45., 35., 40., 47., 51.],
        [31., 36., 38., 40., 53., 41., 36., 41., 44., 69.],
        [42., 47., 39., 15., 45., 46., 59., 39., 50., 43.],
        [34., 32., 37., 42., 55., 31., 32., 53., 43., 66.],
        [73., 32., 43., 38., 36., 43., 43., 41., 44., 40.],
        [48., 40., 49., 31., 52., 39., 68., 35., 47., 27.],
        [34., 37., 35., 39., 56., 39., 32., 46., 38., 68.],
        [68., 33., 47., 44., 35., 40., 39., 44., 50., 33.],
        [30., 77., 41., 39., 42., 39., 39., 39., 44., 39.],
        [45., 42., 33., 50., 35., 66., 45., 35., 41., 43.],
        [39., 31., 33., 38., 50., 40., 32., 48., 49., 72.],
        [44., 35., 46., 51., 36., 34., 27., 68., 28., 45.],
        [35., 45., 49., 52., 37., 42., 38., 41., 42., 41.],
        [34., 40., 41., 38., 74., 35., 43., 40., 42., 49.]], device='cuda:0')
Train accuarcate: 94.23%



iteration:
   95
    0  1361   bit_w:-1  loss: 0.17953
    1  1532   bit_w:-1  loss: 0.17924
    2   895   bit_w: 1  loss: 0.17892
    3  1373   bit_w:-1  loss: 0.17860
    4  1459   bit_w:-1  loss: 0.17849
    722   2601   3670   4048   2051    943   1051   4571   1030   1159
     -1      0      1      1      0     -1      0      1     -1     -1
Train accuarcate: 94.66%
tensor([[38., 36., 42., 46., 42., 35., 25., 80., 31., 44.],
        [41., 47., 67., 50., 33., 44., 43., 34., 46., 26.],
        [33., 69., 51., 35., 40., 37., 44., 40., 47., 35.],
        [67., 34., 50., 34., 34., 35., 50., 49., 36., 44.],
        [37., 44., 37., 33., 73., 35., 45., 42., 41., 48.],
        [34., 72., 46., 34., 46., 32., 38., 45., 45., 35.],
        [30., 40., 29., 44., 67., 45., 35., 41., 47., 51.],
        [32., 36., 38., 40., 53., 42., 36., 41., 45., 70.],
        [43., 47., 39., 15., 45., 47., 59., 39., 51., 44.],
        [35., 32., 37., 42., 55., 32., 32., 53., 44., 67.],
        [74., 32., 43., 38., 36., 44., 43., 41., 45., 41.],
        [49., 40., 49., 31., 52., 40., 68., 35., 48., 28.],
        [35., 37., 35., 39., 56., 40., 32., 46., 39., 69.],
        [68., 33., 48., 45., 35., 40., 39., 45., 50., 33.],
        [31., 77., 41., 39., 42., 40., 39., 39., 45., 40.],
        [45., 42., 34., 51., 35., 66., 45., 36., 41., 43.],
        [40., 31., 33., 38., 50., 41., 32., 48., 50., 73.],
        [44., 35., 47., 52., 36., 34., 27., 69., 28., 45.],
        [35., 45., 50., 53., 37., 42., 38., 42., 42., 41.],
        [34., 40., 42., 39., 74., 35., 43., 41., 42., 49.]], device='cuda:0')
Train accuarcate: 94.32%



iteration:
   96
    0  1430   bit_w:-1  loss: 0.17760
    1  1556   bit_w: 1  loss: 0.17724
    2  1330   bit_w: 1  loss: 0.17713
    3  1390   bit_w: 1  loss: 0.17682
    4  1282   bit_w: 1  loss: 0.17661
   2741   4905   2372   4929   4021   1956    884   4846   2802   2956
      0      1     -1      1      1     -1     -1      0      1     -1
Train accuarcate: 94.72%
tensor([[38., 36., 43., 46., 42., 36., 26., 80., 31., 45.],
        [41., 47., 68., 50., 33., 45., 44., 34., 46., 27.],
        [33., 70., 51., 36., 41., 37., 44., 40., 48., 35.],
        [67., 35., 50., 35., 35., 35., 50., 49., 37., 44.],
        [37., 44., 38., 33., 73., 36., 46., 42., 41., 49.],
        [34., 73., 46., 35., 47., 32., 38., 45., 46., 35.],
        [30., 41., 29., 45., 68., 45., 35., 41., 48., 51.],
        [32., 36., 39., 40., 53., 43., 37., 41., 45., 71.],
        [43., 47., 40., 15., 45., 48., 60., 39., 51., 45.],
        [35., 33., 37., 43., 56., 32., 32., 53., 45., 67.],
        [74., 33., 43., 39., 37., 44., 43., 41., 46., 41.],
        [49., 40., 50., 31., 52., 41., 69., 35., 48., 29.],
        [35., 37., 36., 39., 56., 41., 33., 46., 39., 70.],
        [68., 33., 49., 45., 35., 41., 40., 45., 50., 34.],
        [31., 77., 42., 39., 42., 41., 40., 39., 45., 41.],
        [45., 42., 35., 51., 35., 67., 46., 36., 41., 44.],
        [40., 32., 33., 39., 51., 41., 32., 48., 51., 73.],
        [44., 36., 47., 53., 37., 34., 27., 69., 29., 45.],
        [35., 46., 50., 54., 38., 42., 38., 42., 43., 41.],
        [34., 41., 42., 40., 75., 35., 43., 41., 43., 49.]], device='cuda:0')
Train accuarcate: 94.29%



iteration:
   97
    0  1389   bit_w:-1  loss: 0.17598
    1  1447   bit_w: 1  loss: 0.17549
    2  1416   bit_w: 1  loss: 0.17576
    3  1381   bit_w:-1  loss: 0.17515
    4  1072   bit_w:-1  loss: 0.17546
   2869   4736   1565    968   2742   1334   4300    359   1038    312
      1      1      0      0      1      0      1     -1     -1      0
Train accuarcate: 94.74%
tensor([[38., 36., 43., 46., 42., 36., 26., 81., 32., 45.],
        [41., 47., 68., 50., 33., 45., 44., 35., 47., 27.],
        [34., 71., 51., 36., 42., 37., 45., 40., 48., 35.],
        [68., 36., 50., 35., 36., 35., 51., 49., 37., 44.],
        [38., 45., 38., 33., 74., 36., 47., 42., 41., 49.],
        [35., 74., 46., 35., 48., 32., 39., 45., 46., 35.],
        [31., 42., 29., 45., 69., 45., 36., 41., 48., 51.],
        [32., 36., 39., 40., 53., 43., 37., 42., 46., 71.],
        [44., 48., 40., 15., 46., 48., 61., 39., 51., 45.],
        [35., 33., 37., 43., 56., 32., 32., 54., 46., 67.],
        [74., 33., 43., 39., 37., 44., 43., 42., 47., 41.],
        [50., 41., 50., 31., 53., 41., 70., 35., 48., 29.],
        [35., 37., 36., 39., 56., 41., 33., 47., 40., 70.],
        [68., 33., 49., 45., 35., 41., 40., 46., 51., 34.],
        [31., 77., 42., 39., 42., 41., 40., 40., 46., 41.],
        [45., 42., 35., 51., 35., 67., 46., 37., 42., 44.],
        [40., 32., 33., 39., 51., 41., 32., 49., 52., 73.],
        [44., 36., 47., 53., 37., 34., 27., 70., 30., 45.],
        [36., 47., 50., 54., 39., 42., 39., 42., 43., 41.],
        [35., 42., 42., 40., 76., 35., 44., 41., 43., 49.]], device='cuda:0')
Train accuarcate: 94.33%



iteration:
   98
    0  1406   bit_w:-1  loss: 0.17441
    1  1292   bit_w:-1  loss: 0.17416
    2  1389   bit_w:-1  loss: 0.17396
    3   630   bit_w:-1  loss: 0.17371
    4   577   bit_w: 1  loss: 0.17371
   2206   2343   4110   1064   5009   1120   4695   2957   2311   3780
     -1      0      1     -1      1     -1      0      0      0      1
Train accuarcate: 94.78%
tensor([[39., 36., 43., 47., 42., 37., 26., 81., 32., 45.],
        [42., 47., 68., 51., 33., 46., 44., 35., 47., 27.],
        [34., 71., 52., 36., 43., 37., 45., 40., 48., 36.],
        [69., 36., 50., 36., 36., 36., 51., 49., 37., 44.],
        [38., 45., 39., 33., 75., 36., 47., 42., 41., 50.],
        [35., 74., 47., 35., 49., 32., 39., 45., 46., 36.],
        [31., 42., 30., 45., 70., 45., 36., 41., 48., 52.],
        [32., 36., 40., 40., 54., 43., 37., 42., 46., 72.],
        [44., 48., 41., 15., 47., 48., 61., 39., 51., 46.],
        [35., 33., 38., 43., 57., 32., 32., 54., 46., 68.],
        [75., 33., 43., 40., 37., 45., 43., 42., 47., 41.],
        [50., 41., 51., 31., 54., 41., 70., 35., 48., 30.],
        [36., 37., 36., 40., 56., 42., 33., 47., 40., 70.],
        [69., 33., 49., 46., 35., 42., 40., 46., 51., 34.],
        [32., 77., 42., 40., 42., 42., 40., 40., 46., 41.],
        [46., 42., 35., 52., 35., 68., 46., 37., 42., 44.],
        [40., 32., 34., 39., 52., 41., 32., 49., 52., 74.],
        [45., 36., 47., 54., 37., 35., 27., 70., 30., 45.],
        [37., 47., 50., 55., 39., 43., 39., 42., 43., 41.],
        [35., 42., 43., 40., 77., 35., 44., 41., 43., 50.]], device='cuda:0')
Train accuarcate: 94.34%



iteration:
   99
    0  1334   bit_w:-1  loss: 0.17298
    1  1483   bit_w: 1  loss: 0.17266
    2  1343   bit_w:-1  loss: 0.17261
    3  1308   bit_w:-1  loss: 0.17212
    4  1341   bit_w:-1  loss: 0.17199
   3697   5231   2734   5123   2984   4208   2309   2853   2449   4388
      0      1     -1      1      0      1     -1     -1     -1      1
Train accuarcate: 94.87%
tensor([[39., 36., 44., 47., 42., 37., 27., 82., 33., 45.],
        [42., 47., 69., 51., 33., 46., 45., 36., 48., 27.],
        [34., 72., 52., 37., 43., 38., 45., 40., 48., 37.],
        [69., 37., 50., 37., 36., 37., 51., 49., 37., 45.],
        [38., 46., 39., 34., 75., 37., 47., 42., 41., 51.],
        [35., 75., 47., 36., 49., 33., 39., 45., 46., 37.],
        [31., 42., 31., 45., 70., 45., 37., 42., 49., 52.],
        [32., 37., 40., 41., 54., 44., 37., 42., 46., 73.],
        [44., 48., 42., 15., 47., 48., 62., 40., 52., 46.],
        [35., 34., 38., 44., 57., 33., 32., 54., 46., 69.],
        [75., 34., 43., 41., 37., 46., 43., 42., 47., 42.],
        [50., 42., 51., 32., 54., 42., 70., 35., 48., 31.],
        [36., 38., 36., 41., 56., 43., 33., 47., 40., 71.],
        [69., 34., 49., 47., 35., 43., 40., 46., 51., 35.],
        [32., 78., 42., 41., 42., 43., 40., 40., 46., 42.],
        [46., 43., 35., 53., 35., 69., 46., 37., 42., 45.],
        [40., 33., 34., 40., 52., 42., 32., 49., 52., 75.],
        [45., 36., 48., 54., 37., 35., 28., 71., 31., 45.],
        [37., 48., 50., 56., 39., 44., 39., 42., 43., 42.],
        [35., 42., 44., 40., 77., 35., 45., 42., 44., 50.]], device='cuda:0')
Train accuarcate: 94.51%



iteration:
  100
    0  1345   bit_w:-1  loss: 0.17133
    1  1464   bit_w: 1  loss: 0.17104
    2  1377   bit_w:-1  loss: 0.17076
    3  1458   bit_w:-1  loss: 0.17045
    4  1354   bit_w:-1  loss: 0.17042
    791   5568   2744   4801   4595   3614   1604   5613   2593   5232
     -1      1     -1      0      1      1     -1      1     -1      0
Train accuarcate: 94.91%
tensor([[39., 37., 44., 47., 43., 38., 27., 83., 33., 45.],
        [43., 47., 70., 51., 33., 46., 46., 36., 49., 27.],
        [34., 73., 52., 37., 44., 39., 45., 41., 48., 37.],
        [70., 37., 51., 37., 36., 37., 52., 49., 38., 45.],
        [38., 47., 39., 34., 76., 38., 47., 43., 41., 51.],
        [35., 76., 47., 36., 50., 34., 39., 46., 46., 37.],
        [31., 43., 31., 45., 71., 46., 37., 43., 49., 52.],
        [32., 38., 40., 41., 55., 45., 37., 43., 46., 73.],
        [45., 48., 43., 15., 47., 48., 63., 40., 53., 46.],
        [36., 34., 39., 44., 57., 33., 33., 54., 47., 69.],
        [76., 34., 44., 41., 37., 46., 44., 42., 48., 42.],
        [50., 43., 51., 32., 55., 43., 70., 36., 48., 31.],
        [36., 39., 36., 41., 57., 44., 33., 48., 40., 71.],
        [70., 34., 50., 47., 35., 43., 41., 46., 52., 35.],
        [32., 79., 42., 41., 43., 44., 40., 41., 46., 42.],
        [46., 44., 35., 53., 36., 70., 46., 38., 42., 45.],
        [40., 34., 34., 40., 53., 43., 32., 50., 52., 75.],
        [45., 37., 48., 54., 38., 36., 28., 72., 31., 45.],
        [38., 48., 51., 56., 39., 44., 40., 42., 44., 42.],
        [35., 43., 44., 40., 78., 36., 45., 43., 44., 50.]], device='cuda:0')
Train accuarcate: 94.60%



iteration:
  101
    0  1494   bit_w:-1  loss: 0.16978
    1  1348   bit_w: 1  loss: 0.16929
    2  1362   bit_w: 1  loss: 0.16928
    3   856   bit_w: 1  loss: 0.16873
    4  1288   bit_w: 1  loss: 0.16866
   4751   3347   2892    809    580   3209   4748   2786   1058    717
      1      1      1     -1     -1      1      1      0     -1     -1
Train accuarcate: 94.92%
tensor([[40., 38., 45., 47., 43., 39., 28., 83., 33., 45.],
        [44., 48., 71., 51., 33., 47., 47., 36., 49., 27.],
        [35., 74., 53., 37., 44., 40., 46., 41., 48., 37.],
        [71., 38., 52., 37., 36., 38., 53., 49., 38., 45.],
        [38., 47., 39., 35., 77., 38., 47., 43., 42., 52.],
        [35., 76., 47., 37., 51., 34., 39., 46., 47., 38.],
        [31., 43., 31., 46., 72., 46., 37., 43., 50., 53.],
        [32., 38., 40., 42., 56., 45., 37., 43., 47., 74.],
        [46., 49., 44., 15., 47., 49., 64., 40., 53., 46.],
        [36., 34., 39., 45., 58., 33., 33., 54., 48., 70.],
        [77., 35., 45., 41., 37., 47., 45., 42., 48., 42.],
        [50., 43., 51., 33., 56., 43., 70., 36., 49., 32.],
        [36., 39., 36., 42., 58., 44., 33., 48., 41., 72.],
        [71., 35., 51., 47., 35., 44., 42., 46., 52., 35.],
        [33., 80., 43., 41., 43., 45., 41., 41., 46., 42.],
        [46., 44., 35., 54., 37., 70., 46., 38., 43., 46.],
        [40., 34., 34., 41., 54., 43., 32., 50., 53., 76.],
        [46., 38., 49., 54., 38., 37., 29., 72., 31., 45.],
        [38., 48., 51., 57., 40., 44., 40., 42., 45., 43.],
        [35., 43., 44., 41., 79., 36., 45., 43., 45., 51.]], device='cuda:0')
Train accuarcate: 94.64%



iteration:
  102
    0  1342   bit_w:-1  loss: 0.16798
    1  1244   bit_w: 1  loss: 0.16769
    2  1453   bit_w:-1  loss: 0.16763
    3  1547   bit_w:-1  loss: 0.16727
    4  1363   bit_w:-1  loss: 0.16721
   2496   4222   3888   3114   2577   2847   1766   1290   2914   3553
     -1      1      1     -1      0      0      0     -1      0      1
Train accuarcate: 94.97%
tensor([[41., 38., 45., 48., 43., 39., 28., 84., 33., 45.],
        [44., 49., 72., 51., 33., 47., 47., 36., 49., 28.],
        [35., 75., 54., 37., 44., 40., 46., 41., 48., 38.],
        [71., 39., 53., 37., 36., 38., 53., 49., 38., 46.],
        [39., 47., 39., 36., 77., 38., 47., 44., 42., 52.],
        [35., 77., 48., 37., 51., 34., 39., 46., 47., 39.],
        [32., 43., 31., 47., 72., 46., 37., 44., 50., 53.],
        [32., 39., 41., 42., 56., 45., 37., 43., 47., 75.],
        [47., 49., 44., 16., 47., 49., 64., 41., 53., 46.],
        [37., 34., 39., 46., 58., 33., 33., 55., 48., 70.],
        [78., 35., 45., 42., 37., 47., 45., 43., 48., 42.],
        [50., 44., 52., 33., 56., 43., 70., 36., 49., 33.],
        [36., 40., 37., 42., 58., 44., 33., 48., 41., 73.],
        [71., 36., 52., 47., 35., 44., 42., 46., 52., 36.],
        [33., 81., 44., 41., 43., 45., 41., 41., 46., 43.],
        [46., 45., 36., 54., 37., 70., 46., 38., 43., 47.],
        [41., 34., 34., 42., 54., 43., 32., 51., 53., 76.],
        [46., 39., 50., 54., 38., 37., 29., 72., 31., 46.],
        [39., 48., 51., 58., 40., 44., 40., 43., 45., 43.],
        [36., 43., 44., 42., 79., 36., 45., 44., 45., 51.]], device='cuda:0')
Train accuarcate: 94.62%



iteration:
  103
    0  1285   bit_w:-1  loss: 0.16661
    1  1377   bit_w: 1  loss: 0.16619
    2  1333   bit_w: 1  loss: 0.16628
    3  1451   bit_w:-1  loss: 0.16599
    4  1291   bit_w: 1  loss: 0.16600
   3140   3880   2804   2241   1322    976   2025   4457   2371   1048
      0      0      1      0     -1     -1      1      1      0     -1
Train accuarcate: 95.04%
tensor([[41., 38., 46., 48., 43., 39., 29., 85., 33., 45.],
        [44., 49., 73., 51., 33., 47., 48., 37., 49., 28.],
        [35., 75., 54., 37., 45., 41., 46., 41., 48., 39.],
        [71., 39., 54., 37., 36., 38., 54., 50., 38., 46.],
        [39., 47., 39., 36., 78., 39., 47., 44., 42., 53.],
        [35., 77., 49., 37., 51., 34., 40., 47., 47., 39.],
        [32., 43., 32., 47., 72., 46., 38., 45., 50., 53.],
        [32., 39., 41., 42., 57., 46., 37., 43., 47., 76.],
        [47., 49., 45., 16., 47., 49., 65., 42., 53., 46.],
        [37., 34., 39., 46., 59., 34., 33., 55., 48., 71.],
        [78., 35., 45., 42., 38., 48., 45., 43., 48., 43.],
        [50., 44., 53., 33., 56., 43., 71., 37., 49., 33.],
        [36., 40., 37., 42., 59., 45., 33., 48., 41., 74.],
        [71., 36., 52., 47., 36., 45., 42., 46., 52., 37.],
        [33., 81., 45., 41., 43., 45., 42., 42., 46., 43.],
        [46., 45., 36., 54., 38., 71., 46., 38., 43., 48.],
        [41., 34., 34., 42., 55., 44., 32., 51., 53., 77.],
        [46., 39., 51., 54., 38., 37., 30., 73., 31., 46.],
        [39., 48., 52., 58., 40., 44., 41., 44., 45., 43.],
        [36., 43., 44., 42., 80., 37., 45., 44., 45., 52.]], device='cuda:0')
Train accuarcate: 94.68%



iteration:
  104
    0  1358   bit_w:-1  loss: 0.16525
    1  1230   bit_w: 1  loss: 0.16493
    2  1429   bit_w: 1  loss: 0.16499
    3  1427   bit_w:-1  loss: 0.16467
    4  1359   bit_w:-1  loss: 0.16469
   5060   1806   2706   1652   1870   2080   3983   2163   1453   2420
      1      1      0     -1      0      0      1      0     -1      1
Train accuarcate: 95.06%
tensor([[41., 38., 46., 49., 43., 39., 29., 85., 34., 45.],
        [44., 49., 73., 52., 33., 47., 48., 37., 50., 28.],
        [35., 75., 54., 38., 45., 41., 46., 41., 49., 39.],
        [72., 40., 54., 37., 36., 38., 55., 50., 38., 47.],
        [39., 47., 39., 37., 78., 39., 47., 44., 43., 53.],
        [35., 77., 49., 38., 51., 34., 40., 47., 48., 39.],
        [32., 43., 32., 48., 72., 46., 38., 45., 51., 53.],
        [33., 40., 41., 42., 57., 46., 38., 43., 47., 77.],
        [47., 49., 45., 17., 47., 49., 65., 42., 54., 46.],
        [37., 34., 39., 47., 59., 34., 33., 55., 49., 71.],
        [78., 35., 45., 43., 38., 48., 45., 43., 49., 43.],
        [50., 44., 53., 34., 56., 43., 71., 37., 50., 33.],
        [36., 40., 37., 43., 59., 45., 33., 48., 42., 74.],
        [72., 37., 52., 47., 36., 45., 43., 46., 52., 38.],
        [33., 81., 45., 42., 43., 45., 42., 42., 47., 43.],
        [47., 46., 36., 54., 38., 71., 47., 38., 43., 49.],
        [41., 34., 34., 43., 55., 44., 32., 51., 54., 77.],
        [47., 40., 51., 54., 38., 37., 31., 73., 31., 47.],
        [39., 48., 52., 59., 40., 44., 41., 44., 46., 43.],
        [36., 43., 44., 43., 80., 37., 45., 44., 46., 52.]], device='cuda:0')
Train accuarcate: 94.68%



iteration:
  105
    0  1368   bit_w:-1  loss: 0.16395
    1  1480   bit_w: 1  loss: 0.16369
    2  1379   bit_w:-1  loss: 0.16348
    3  1576   bit_w: 1  loss: 0.16328
    4  1407   bit_w:-1  loss: 0.16315
   4839   3979   1788   2093   1030   1095   2055   5338   1206   1575
      1      1     -1      0     -1     -1      0      1     -1      0
Train accuarcate: 95.03%
tensor([[42., 39., 46., 49., 43., 39., 29., 86., 34., 45.],
        [44., 49., 74., 52., 34., 48., 48., 37., 51., 28.],
        [36., 76., 54., 38., 45., 41., 46., 42., 49., 39.],
        [73., 41., 54., 37., 36., 38., 55., 51., 38., 47.],
        [39., 47., 40., 37., 79., 40., 47., 44., 44., 53.],
        [36., 78., 49., 38., 51., 34., 40., 48., 48., 39.],
        [32., 43., 33., 48., 73., 47., 38., 45., 52., 53.],
        [33., 40., 42., 42., 58., 47., 38., 43., 48., 77.],
        [47., 49., 46., 17., 48., 50., 65., 42., 55., 46.],
        [38., 35., 39., 47., 59., 34., 33., 56., 49., 71.],
        [79., 36., 45., 43., 38., 48., 45., 44., 49., 43.],
        [51., 45., 53., 34., 56., 43., 71., 38., 50., 33.],
        [36., 40., 38., 43., 60., 46., 33., 48., 43., 74.],
        [73., 38., 52., 47., 36., 45., 43., 47., 52., 38.],
        [34., 82., 45., 42., 43., 45., 42., 43., 47., 43.],
        [48., 47., 36., 54., 38., 71., 47., 39., 43., 49.],
        [41., 34., 35., 43., 56., 45., 32., 51., 55., 77.],
        [48., 41., 51., 54., 38., 37., 31., 74., 31., 47.],
        [40., 49., 52., 59., 40., 44., 41., 45., 46., 43.],
        [36., 43., 45., 43., 81., 38., 45., 44., 47., 52.]], device='cuda:0')
Train accuarcate: 94.65%



iteration:
  106
    0  1299   bit_w:-1  loss: 0.16246
    1  1294   bit_w:-1  loss: 0.16210
    2  1360   bit_w: 1  loss: 0.16212
    3  1567   bit_w:-1  loss: 0.16177
    4  1275   bit_w: 1  loss: 0.16181
   2145    423   4149   3492    588   2448   1154   3354   3043   3416
      0     -1      1      1     -1      0     -1      0      1      1
Train accuarcate: 95.09%
tensor([[42., 40., 46., 49., 44., 39., 30., 86., 34., 45.],
        [44., 49., 75., 53., 34., 48., 48., 37., 52., 29.],
        [36., 77., 54., 38., 46., 41., 47., 42., 49., 39.],
        [73., 41., 55., 38., 36., 38., 55., 51., 39., 48.],
        [39., 48., 40., 37., 80., 40., 48., 44., 44., 53.],
        [36., 79., 49., 38., 52., 34., 41., 48., 48., 39.],
        [32., 44., 33., 48., 74., 47., 39., 45., 52., 53.],
        [33., 40., 43., 43., 58., 47., 38., 43., 49., 78.],
        [47., 50., 46., 17., 49., 50., 66., 42., 55., 46.],
        [38., 35., 40., 48., 59., 34., 33., 56., 50., 72.],
        [79., 37., 45., 43., 39., 48., 46., 44., 49., 43.],
        [51., 46., 53., 34., 57., 43., 72., 38., 50., 33.],
        [36., 41., 38., 43., 61., 46., 34., 48., 43., 74.],
        [73., 38., 53., 48., 36., 45., 43., 47., 53., 39.],
        [34., 83., 45., 42., 44., 45., 43., 43., 47., 43.],
        [48., 47., 37., 55., 38., 71., 47., 39., 44., 50.],
        [41., 35., 35., 43., 57., 45., 33., 51., 55., 77.],
        [48., 41., 52., 55., 38., 37., 31., 74., 32., 48.],
        [40., 50., 52., 59., 41., 44., 42., 45., 46., 43.],
        [36., 44., 45., 43., 82., 38., 46., 44., 47., 52.]], device='cuda:0')
Train accuarcate: 94.63%



iteration:
  107
    0  1252   bit_w:-1  loss: 0.16109
    1  1347   bit_w:-1  loss: 0.16077
    2  1581   bit_w: 1  loss: 0.16071
    3  1468   bit_w: 1  loss: 0.16039
    4  1383   bit_w: 1  loss: 0.16035
   2507   3424   2166   5133   2276   4169   3844   1308   3392   1438
      0      0     -1      1      0      1      0     -1      1     -1
Train accuarcate: 95.13%
tensor([[42., 40., 47., 49., 44., 39., 30., 87., 34., 46.],
        [44., 49., 76., 53., 34., 48., 48., 38., 52., 30.],
        [36., 77., 54., 39., 46., 42., 47., 42., 50., 39.],
        [73., 41., 55., 39., 36., 39., 55., 51., 40., 48.],
        [39., 48., 40., 38., 80., 41., 48., 44., 45., 53.],
        [36., 79., 50., 38., 52., 34., 41., 49., 48., 40.],
        [32., 44., 33., 49., 74., 48., 39., 45., 53., 53.],
        [33., 40., 44., 43., 58., 47., 38., 44., 49., 79.],
        [47., 50., 46., 18., 49., 51., 66., 42., 56., 46.],
        [38., 35., 41., 48., 59., 34., 33., 57., 50., 73.],
        [79., 37., 45., 44., 39., 49., 46., 44., 50., 43.],
        [51., 46., 54., 34., 57., 43., 72., 39., 50., 34.],
        [36., 41., 39., 43., 61., 46., 34., 49., 43., 75.],
        [73., 38., 54., 48., 36., 45., 43., 48., 53., 40.],
        [34., 83., 45., 43., 44., 46., 43., 43., 48., 43.],
        [48., 47., 37., 56., 38., 72., 47., 39., 45., 50.],
        [41., 35., 36., 43., 57., 45., 33., 52., 55., 78.],
        [48., 41., 53., 55., 38., 37., 31., 75., 32., 49.],
        [40., 50., 52., 60., 41., 45., 42., 45., 47., 43.],
        [36., 44., 45., 44., 82., 39., 46., 44., 48., 52.]], device='cuda:0')
Train accuarcate: 94.68%



iteration:
  108
    0  1415   bit_w:-1  loss: 0.15978
    1  1540   bit_w:-1  loss: 0.15936
    2  1445   bit_w: 1  loss: 0.15938
    3  1583   bit_w: 1  loss: 0.15905
    4  1368   bit_w: 1  loss: 0.15897
    685    794   3351   3083   1736   3178    397   1634   2164   2664
     -1     -1      1      1      0      1     -1     -1      0      1
Train accuarcate: 95.19%
tensor([[43., 41., 47., 49., 44., 39., 31., 88., 34., 46.],
        [44., 49., 77., 54., 34., 49., 48., 38., 52., 31.],
        [37., 78., 54., 39., 46., 42., 48., 43., 50., 39.],
        [74., 42., 55., 39., 36., 39., 56., 52., 40., 48.],
        [40., 49., 40., 38., 80., 41., 49., 45., 45., 53.],
        [37., 80., 50., 38., 52., 34., 42., 50., 48., 40.],
        [32., 44., 34., 50., 74., 49., 39., 45., 53., 54.],
        [33., 40., 45., 44., 58., 48., 38., 44., 49., 80.],
        [47., 50., 47., 19., 49., 52., 66., 42., 56., 47.],
        [38., 35., 42., 49., 59., 35., 33., 57., 50., 74.],
        [80., 38., 45., 44., 39., 49., 47., 45., 50., 43.],
        [51., 46., 55., 35., 57., 44., 72., 39., 50., 35.],
        [37., 42., 39., 43., 61., 46., 35., 50., 43., 75.],
        [74., 39., 54., 48., 36., 45., 44., 49., 53., 40.],
        [35., 84., 45., 43., 44., 46., 44., 44., 48., 43.],
        [49., 48., 37., 56., 38., 72., 48., 40., 45., 50.],
        [42., 36., 36., 43., 57., 45., 34., 53., 55., 78.],
        [49., 42., 53., 55., 38., 37., 32., 76., 32., 49.],
        [40., 50., 53., 61., 41., 46., 42., 45., 47., 44.],
        [37., 45., 45., 44., 82., 39., 47., 45., 48., 52.]], device='cuda:0')
Train accuarcate: 94.68%



iteration:
  109
    0  1306   bit_w:-1  loss: 0.15835
    1  1305   bit_w: 1  loss: 0.15808
    2  1512   bit_w:-1  loss: 0.15803
    3  1499   bit_w:-1  loss: 0.15771
    4  1430   bit_w: 1  loss: 0.15775
   3468   2017   3418    403   4679   1900   4739   1601   1841   2048
      1      0      1     -1      1     -1      1      0     -1      0
Train accuarcate: 95.24%
tensor([[43., 41., 47., 50., 44., 40., 31., 88., 35., 46.],
        [45., 49., 78., 54., 35., 49., 49., 38., 52., 31.],
        [38., 78., 55., 39., 47., 42., 49., 43., 50., 39.],
        [74., 42., 55., 40., 36., 40., 56., 52., 41., 48.],
        [41., 49., 41., 38., 81., 41., 50., 45., 45., 53.],
        [37., 80., 50., 39., 52., 35., 42., 50., 49., 40.],
        [33., 44., 35., 50., 75., 49., 40., 45., 53., 54.],
        [34., 40., 46., 44., 59., 48., 39., 44., 49., 80.],
        [48., 50., 48., 19., 50., 52., 67., 42., 56., 47.],
        [39., 35., 43., 49., 60., 35., 34., 57., 50., 74.],
        [80., 38., 45., 45., 39., 50., 47., 45., 51., 43.],
        [52., 46., 56., 35., 58., 44., 73., 39., 50., 35.],
        [38., 42., 40., 43., 62., 46., 36., 50., 43., 75.],
        [75., 39., 55., 48., 37., 45., 45., 49., 53., 40.],
        [35., 84., 45., 44., 44., 47., 44., 44., 49., 43.],
        [49., 48., 37., 57., 38., 73., 48., 40., 46., 50.],
        [42., 36., 36., 44., 57., 46., 34., 53., 56., 78.],
        [49., 42., 53., 56., 38., 38., 32., 76., 33., 49.],
        [40., 50., 53., 62., 41., 47., 42., 45., 48., 44.],
        [37., 45., 45., 45., 82., 40., 47., 45., 49., 52.]], device='cuda:0')
Train accuarcate: 94.74%



iteration:
  110
    0  1335   bit_w:-1  loss: 0.15713
    1  1277   bit_w:-1  loss: 0.15691
    2  1325   bit_w: 1  loss: 0.15679
    3  1510   bit_w:-1  loss: 0.15651
    4  1470   bit_w:-1  loss: 0.15648
   4300   5814   4319   3247   5007   3579   4686   1762   4097   1604
      0      1      0      0      1     -1      0     -1      1     -1
Train accuarcate: 95.27%
tensor([[43., 42., 47., 50., 45., 40., 31., 88., 36., 46.],
        [45., 49., 78., 54., 35., 50., 49., 39., 52., 32.],
        [38., 79., 55., 39., 48., 42., 49., 43., 51., 39.],
        [74., 43., 55., 40., 37., 40., 56., 52., 42., 48.],
        [41., 50., 41., 38., 82., 41., 50., 45., 46., 53.],
        [37., 81., 50., 39., 53., 35., 42., 50., 50., 40.],
        [33., 45., 35., 50., 76., 49., 40., 45., 54., 54.],
        [34., 40., 46., 44., 59., 49., 39., 45., 49., 81.],
        [48., 51., 48., 19., 51., 52., 67., 42., 57., 47.],
        [39., 35., 43., 49., 60., 36., 34., 58., 50., 75.],
        [80., 39., 45., 45., 40., 50., 47., 45., 52., 43.],
        [52., 46., 56., 35., 58., 45., 73., 40., 50., 36.],
        [38., 42., 40., 43., 62., 47., 36., 51., 43., 76.],
        [75., 40., 55., 48., 38., 45., 45., 49., 54., 40.],
        [35., 85., 45., 44., 45., 47., 44., 44., 50., 43.],
        [49., 49., 37., 57., 39., 73., 48., 40., 47., 50.],
        [42., 36., 36., 44., 57., 47., 34., 54., 56., 79.],
        [49., 43., 53., 56., 39., 38., 32., 76., 34., 49.],
        [40., 51., 53., 62., 42., 47., 42., 45., 49., 44.],
        [37., 46., 45., 45., 83., 40., 47., 45., 50., 52.]], device='cuda:0')
Train accuarcate: 94.72%



iteration:
  111
    0  1311   bit_w:-1  loss: 0.15595
    1  1560   bit_w: 1  loss: 0.15551
    2  1519   bit_w:-1  loss: 0.15537
    3  1474   bit_w: 1  loss: 0.15511
    4   872   bit_w:-1  loss: 0.15506
   2887    599    502    971   3230   4339   4271   1643   1761   3843
     -1     -1     -1     -1      0      1      1     -1      0      1
Train accuarcate: 95.29%
tensor([[44., 43., 48., 51., 45., 40., 31., 89., 36., 46.],
        [46., 50., 79., 55., 35., 50., 49., 40., 52., 32.],
        [39., 80., 56., 40., 48., 42., 49., 44., 51., 39.],
        [74., 43., 55., 40., 37., 41., 57., 52., 42., 49.],
        [42., 51., 42., 39., 82., 41., 50., 46., 46., 53.],
        [38., 82., 51., 40., 53., 35., 42., 51., 50., 40.],
        [33., 45., 35., 50., 76., 50., 41., 45., 54., 55.],
        [35., 41., 47., 45., 59., 49., 39., 46., 49., 81.],
        [48., 51., 48., 19., 51., 53., 68., 42., 57., 48.],
        [40., 36., 44., 50., 60., 36., 34., 59., 50., 75.],
        [81., 40., 46., 46., 40., 50., 47., 46., 52., 43.],
        [53., 47., 57., 36., 58., 45., 73., 41., 50., 36.],
        [38., 42., 40., 43., 62., 48., 37., 51., 43., 77.],
        [75., 40., 55., 48., 38., 46., 46., 49., 54., 41.],
        [36., 86., 46., 45., 45., 47., 44., 45., 50., 43.],
        [49., 49., 37., 57., 39., 74., 49., 40., 47., 51.],
        [43., 37., 37., 45., 57., 47., 34., 55., 56., 79.],
        [50., 44., 54., 57., 39., 38., 32., 77., 34., 49.],
        [41., 52., 54., 63., 42., 47., 42., 46., 49., 44.],
        [38., 47., 46., 46., 83., 40., 47., 46., 50., 52.]], device='cuda:0')
Train accuarcate: 94.66%



iteration:
  112
    0  1321   bit_w:-1  loss: 0.15449
    1  1357   bit_w:-1  loss: 0.15425
    2  1228   bit_w: 1  loss: 0.15410
    3  1273   bit_w:-1  loss: 0.15391
    4  1393   bit_w: 1  loss: 0.15391
    775   1392   2267   2230   4877   1729   4960   1609   1356   1661
     -1      0      0      0      1      0      1      0     -1     -1
Train accuarcate: 95.32%
tensor([[45., 43., 48., 51., 45., 40., 31., 89., 37., 47.],
        [47., 50., 79., 55., 35., 50., 49., 40., 53., 33.],
        [40., 80., 56., 40., 48., 42., 49., 44., 52., 40.],
        [75., 43., 55., 40., 37., 41., 57., 52., 43., 50.],
        [42., 51., 42., 39., 83., 41., 51., 46., 46., 53.],
        [39., 82., 51., 40., 53., 35., 42., 51., 51., 41.],
        [33., 45., 35., 50., 77., 50., 42., 45., 54., 55.],
        [36., 41., 47., 45., 59., 49., 39., 46., 50., 82.],
        [48., 51., 48., 19., 52., 53., 69., 42., 57., 48.],
        [41., 36., 44., 50., 60., 36., 34., 59., 51., 76.],
        [82., 40., 46., 46., 40., 50., 47., 46., 53., 44.],
        [53., 47., 57., 36., 59., 45., 74., 41., 50., 36.],
        [39., 42., 40., 43., 62., 48., 37., 51., 44., 78.],
        [76., 40., 55., 48., 38., 46., 46., 49., 55., 42.],
        [37., 86., 46., 45., 45., 47., 44., 45., 51., 44.],
        [50., 49., 37., 57., 39., 74., 49., 40., 48., 52.],
        [44., 37., 37., 45., 57., 47., 34., 55., 57., 80.],
        [50., 44., 54., 57., 40., 38., 33., 77., 34., 49.],
        [42., 52., 54., 63., 42., 47., 42., 46., 50., 45.],
        [38., 47., 46., 46., 84., 40., 48., 46., 50., 52.]], device='cuda:0')
Train accuarcate: 94.67%



iteration:
  113
    0  1315   bit_w:-1  loss: 0.15329
    1  1397   bit_w:-1  loss: 0.15302
    2  1352   bit_w:-1  loss: 0.15290
    3  1344   bit_w: 1  loss: 0.15268
    4  1436   bit_w: 1  loss: 0.15259
   2622   1492    597   1135   5063   4371   3250   1182   2598   4698
      0      0     -1     -1      1      1      0     -1      0      0
Train accuarcate: 95.35%
tensor([[45., 43., 49., 52., 45., 40., 31., 90., 37., 47.],
        [47., 50., 80., 56., 35., 50., 49., 41., 53., 33.],
        [40., 80., 57., 41., 48., 42., 49., 45., 52., 40.],
        [75., 43., 56., 41., 37., 41., 57., 53., 43., 50.],
        [42., 51., 42., 39., 84., 42., 51., 46., 46., 53.],
        [39., 82., 52., 41., 53., 35., 42., 52., 51., 41.],
        [33., 45., 36., 51., 77., 50., 42., 46., 54., 55.],
        [36., 41., 48., 46., 59., 49., 39., 47., 50., 82.],
        [48., 51., 48., 19., 53., 54., 69., 42., 57., 48.],
        [41., 36., 44., 50., 61., 37., 34., 59., 51., 76.],
        [82., 40., 46., 46., 41., 51., 47., 46., 53., 44.],
        [53., 47., 57., 36., 60., 46., 74., 41., 50., 36.],
        [39., 42., 40., 43., 63., 49., 37., 51., 44., 78.],
        [76., 40., 56., 49., 38., 46., 46., 50., 55., 42.],
        [37., 86., 47., 46., 45., 47., 44., 46., 51., 44.],
        [50., 49., 38., 58., 39., 74., 49., 41., 48., 52.],
        [44., 37., 37., 45., 58., 48., 34., 55., 57., 80.],
        [50., 44., 55., 58., 40., 38., 33., 78., 34., 49.],
        [42., 52., 55., 64., 42., 47., 42., 47., 50., 45.],
        [38., 47., 46., 46., 85., 41., 48., 46., 50., 52.]], device='cuda:0')
Train accuarcate: 94.70%



iteration:
  114
    0  1482   bit_w:-1  loss: 0.15211
    1  1452   bit_w: 1  loss: 0.15175
    2  1339   bit_w:-1  loss: 0.15164
    3  1532   bit_w:-1  loss: 0.15148
    4  1296   bit_w:-1  loss: 0.15150
   3990    674   4611   2642   2405   2477   4919    362   2413   1124
      1     -1      0      1      0      0      1     -1     -1     -1
Train accuarcate: 95.38%
tensor([[45., 44., 49., 52., 45., 40., 31., 91., 38., 48.],
        [48., 50., 80., 57., 35., 50., 50., 41., 53., 33.],
        [40., 81., 57., 41., 48., 42., 49., 46., 53., 41.],
        [76., 43., 56., 42., 37., 41., 58., 53., 43., 50.],
        [42., 52., 42., 39., 84., 42., 51., 47., 47., 54.],
        [39., 83., 52., 41., 53., 35., 42., 53., 52., 42.],
        [33., 46., 36., 51., 77., 50., 42., 47., 55., 56.],
        [36., 42., 48., 46., 59., 49., 39., 48., 51., 83.],
        [48., 52., 48., 19., 53., 54., 69., 43., 58., 49.],
        [41., 37., 44., 50., 61., 37., 34., 60., 52., 77.],
        [82., 41., 46., 46., 41., 51., 47., 47., 54., 45.],
        [54., 47., 57., 37., 60., 46., 75., 41., 50., 36.],
        [39., 43., 40., 43., 63., 49., 37., 52., 45., 79.],
        [77., 40., 56., 50., 38., 46., 47., 50., 55., 42.],
        [37., 87., 47., 46., 45., 47., 44., 47., 52., 45.],
        [50., 50., 38., 58., 39., 74., 49., 42., 49., 53.],
        [44., 38., 37., 45., 58., 48., 34., 56., 58., 81.],
        [50., 45., 55., 58., 40., 38., 33., 79., 35., 50.],
        [43., 52., 55., 65., 42., 47., 43., 47., 50., 45.],
        [38., 48., 46., 46., 85., 41., 48., 47., 51., 53.]], device='cuda:0')
Train accuarcate: 94.79%



iteration:
  115
    0  1404   bit_w:-1  loss: 0.15092
    1  1233   bit_w: 1  loss: 0.15066
    2  1340   bit_w: 1  loss: 0.15068
    3  1276   bit_w: 1  loss: 0.15041
    4   403   bit_w:-1  loss: 0.15039
   2423   3822   3985   1681   3166   1461   2313   3588   4015   2132
     -1      0      1     -1     -1     -1      0      0      1      0
Train accuarcate: 95.42%
tensor([[45., 44., 50., 52., 45., 40., 31., 91., 39., 48.],
        [48., 50., 81., 57., 35., 50., 50., 41., 54., 33.],
        [40., 81., 58., 41., 48., 42., 49., 46., 54., 41.],
        [76., 43., 57., 42., 37., 41., 58., 53., 44., 50.],
        [42., 52., 43., 39., 84., 42., 51., 47., 48., 54.],
        [39., 83., 53., 41., 53., 35., 42., 53., 53., 42.],
        [34., 46., 36., 52., 78., 51., 42., 47., 55., 56.],
        [36., 42., 49., 46., 59., 49., 39., 48., 52., 83.],
        [48., 52., 49., 19., 53., 54., 69., 43., 59., 49.],
        [42., 37., 44., 51., 62., 38., 34., 60., 52., 77.],
        [83., 41., 46., 47., 42., 52., 47., 47., 54., 45.],
        [54., 47., 58., 37., 60., 46., 75., 41., 51., 36.],
        [40., 43., 40., 44., 64., 50., 37., 52., 45., 79.],
        [77., 40., 57., 50., 38., 46., 47., 50., 56., 42.],
        [37., 87., 48., 46., 45., 47., 44., 47., 53., 45.],
        [50., 50., 39., 58., 39., 74., 49., 42., 50., 53.],
        [44., 38., 38., 45., 58., 48., 34., 56., 59., 81.],
        [50., 45., 56., 58., 40., 38., 33., 79., 36., 50.],
        [43., 52., 56., 65., 42., 47., 43., 47., 51., 45.],
        [39., 48., 46., 47., 86., 42., 48., 47., 51., 53.]], device='cuda:0')
Train accuarcate: 94.70%



iteration:
  116
    0  1318   bit_w:-1  loss: 0.14991
    1  1348   bit_w: 1  loss: 0.14968
    2  1414   bit_w:-1  loss: 0.14953
    3  1302   bit_w:-1  loss: 0.14926
    4  1320   bit_w:-1  loss: 0.14929
   3637   3777   4390   4126   3436   1463   3374   3357   2972   3822
      0      1      1      0      0     -1     -1     -1     -1      1
Train accuarcate: 95.48%
tensor([[45., 44., 50., 52., 45., 41., 32., 92., 40., 48.],
        [48., 51., 82., 57., 35., 50., 50., 41., 54., 34.],
        [40., 81., 58., 41., 48., 43., 50., 47., 55., 41.],
        [76., 43., 57., 42., 37., 42., 59., 54., 45., 50.],
        [42., 53., 44., 39., 84., 42., 51., 47., 48., 55.],
        [39., 83., 53., 41., 53., 36., 43., 54., 54., 42.],
        [34., 46., 36., 52., 78., 52., 43., 48., 56., 56.],
        [36., 43., 50., 46., 59., 49., 39., 48., 52., 84.],
        [48., 52., 49., 19., 53., 55., 70., 44., 60., 49.],
        [42., 38., 45., 51., 62., 38., 34., 60., 52., 78.],
        [83., 42., 47., 47., 42., 52., 47., 47., 54., 46.],
        [54., 48., 59., 37., 60., 46., 75., 41., 51., 37.],
        [40., 44., 41., 44., 64., 50., 37., 52., 45., 80.],
        [77., 40., 57., 50., 38., 47., 48., 51., 57., 42.],
        [37., 87., 48., 46., 45., 48., 45., 48., 54., 45.],
        [50., 51., 40., 58., 39., 74., 49., 42., 50., 54.],
        [44., 38., 38., 45., 58., 49., 35., 57., 60., 81.],
        [50., 46., 57., 58., 40., 38., 33., 79., 36., 51.],
        [43., 52., 56., 65., 42., 48., 44., 48., 52., 45.],
        [39., 49., 47., 47., 86., 42., 48., 47., 51., 54.]], device='cuda:0')
Train accuarcate: 94.74%



iteration:
  117
    0  1350   bit_w:-1  loss: 0.14876
    1  1341   bit_w: 1  loss: 0.14848
    2  1070   bit_w: 1  loss: 0.14832
    3  1566   bit_w: 1  loss: 0.14819
    4  1417   bit_w:-1  loss: 0.14821
    878   1460   4190   2613   1110   2197   2871   1637   4126   1179
     -1      1      1     -1     -1      0      1     -1      1      0
Train accuarcate: 95.45%
tensor([[46., 44., 50., 53., 46., 41., 32., 93., 40., 48.],
        [48., 52., 83., 57., 35., 50., 51., 41., 55., 34.],
        [41., 81., 58., 42., 49., 43., 50., 48., 55., 41.],
        [77., 43., 57., 43., 38., 42., 59., 55., 45., 50.],
        [43., 53., 44., 40., 85., 42., 51., 48., 48., 55.],
        [40., 83., 53., 42., 54., 36., 43., 55., 54., 42.],
        [35., 46., 36., 53., 79., 52., 43., 49., 56., 56.],
        [37., 43., 50., 47., 60., 49., 39., 49., 52., 84.],
        [48., 53., 50., 19., 53., 55., 71., 44., 61., 49.],
        [43., 38., 45., 52., 63., 38., 34., 61., 52., 78.],
        [84., 42., 47., 48., 43., 52., 47., 48., 54., 46.],
        [54., 49., 60., 37., 60., 46., 76., 41., 52., 37.],
        [41., 44., 41., 45., 65., 50., 37., 53., 45., 80.],
        [78., 40., 57., 51., 39., 47., 48., 52., 57., 42.],
        [38., 87., 48., 47., 46., 48., 45., 49., 54., 45.],
        [51., 51., 40., 59., 40., 74., 49., 43., 50., 54.],
        [45., 38., 38., 46., 59., 49., 35., 58., 60., 81.],
        [51., 46., 57., 59., 41., 38., 33., 80., 36., 51.],
        [43., 53., 57., 65., 42., 48., 45., 48., 53., 45.],
        [39., 50., 48., 47., 86., 42., 49., 47., 52., 54.]], device='cuda:0')
Train accuarcate: 94.82%



iteration:
  118
    0  1346   bit_w:-1  loss: 0.14772
    1  1317   bit_w:-1  loss: 0.14748
    2  1488   bit_w: 1  loss: 0.14736
    3  1416   bit_w:-1  loss: 0.14717
    4  1382   bit_w: 1  loss: 0.14717
   2991   3617   3161   4762   3239   1719    473   3979   3102   4242
      0      1      0      1      0     -1     -1      0      0      1
Train accuarcate: 95.51%
tensor([[46., 45., 50., 54., 46., 41., 32., 93., 40., 49.],
        [48., 52., 83., 57., 35., 51., 52., 41., 55., 34.],
        [41., 81., 58., 42., 49., 44., 51., 48., 55., 41.],
        [77., 44., 57., 44., 38., 42., 59., 55., 45., 51.],
        [43., 54., 44., 41., 85., 42., 51., 48., 48., 56.],
        [40., 83., 53., 42., 54., 37., 44., 55., 54., 42.],
        [35., 47., 36., 54., 79., 52., 43., 49., 56., 57.],
        [37., 44., 50., 48., 60., 49., 39., 49., 52., 85.],
        [48., 53., 50., 19., 53., 56., 72., 44., 61., 49.],
        [43., 38., 45., 52., 63., 39., 35., 61., 52., 78.],
        [84., 43., 47., 49., 43., 52., 47., 48., 54., 47.],
        [54., 49., 60., 37., 60., 47., 77., 41., 52., 37.],
        [41., 45., 41., 46., 65., 50., 37., 53., 45., 81.],
        [78., 41., 57., 52., 39., 47., 48., 52., 57., 43.],
        [38., 88., 48., 48., 46., 48., 45., 49., 54., 46.],
        [51., 51., 40., 59., 40., 75., 50., 43., 50., 54.],
        [45., 39., 38., 47., 59., 49., 35., 58., 60., 82.],
        [51., 47., 57., 60., 41., 38., 33., 80., 36., 52.],
        [43., 53., 57., 65., 42., 49., 46., 48., 53., 45.],
        [39., 50., 48., 47., 86., 43., 50., 47., 52., 54.]], device='cuda:0')
Train accuarcate: 94.77%



iteration:
  119
    0  1435   bit_w:-1  loss: 0.14672
    1  1307   bit_w: 1  loss: 0.14643
    2  1471   bit_w:-1  loss: 0.14644
    3  1314   bit_w: 1  loss: 0.14618
    4  1404   bit_w:-1  loss: 0.14615
   2636   1556   2354   3017   4395   2253   2518   3874   3164   3995
     -1     -1      1      0      1     -1      0      1      1     -1
Train accuarcate: 95.53%
tensor([[46., 45., 51., 54., 47., 41., 32., 94., 41., 49.],
        [49., 53., 83., 57., 35., 52., 52., 41., 55., 35.],
        [42., 82., 58., 42., 49., 45., 51., 48., 55., 42.],
        [78., 45., 57., 44., 38., 43., 59., 55., 45., 52.],
        [43., 54., 45., 41., 86., 42., 51., 49., 49., 56.],
        [41., 84., 53., 42., 54., 38., 44., 55., 54., 43.],
        [35., 47., 37., 54., 80., 52., 43., 50., 57., 57.],
        [37., 44., 51., 48., 61., 49., 39., 50., 53., 85.],
        [49., 54., 50., 19., 53., 57., 72., 44., 61., 50.],
        [43., 38., 46., 52., 64., 39., 35., 62., 53., 78.],
        [85., 44., 47., 49., 43., 53., 47., 48., 54., 48.],
        [54., 49., 61., 37., 61., 47., 77., 42., 53., 37.],
        [42., 46., 41., 46., 65., 51., 37., 53., 45., 82.],
        [78., 41., 58., 52., 40., 47., 48., 53., 58., 43.],
        [39., 89., 48., 48., 46., 49., 45., 49., 54., 47.],
        [52., 52., 40., 59., 40., 76., 50., 43., 50., 55.],
        [45., 39., 39., 47., 60., 49., 35., 59., 61., 82.],
        [52., 48., 57., 60., 41., 39., 33., 80., 36., 53.],
        [44., 54., 57., 65., 42., 50., 46., 48., 53., 46.],
        [40., 51., 48., 47., 86., 44., 50., 47., 52., 55.]], device='cuda:0')
Train accuarcate: 94.83%



iteration:
  120
    0  1568   bit_w:-1  loss: 0.14574
    1  1572   bit_w: 1  loss: 0.14541
    2  1269   bit_w: 1  loss: 0.14532
    3  1388   bit_w: 1  loss: 0.14506
    4  1491   bit_w: 1  loss: 0.14503
   1984    419   1455   1908   4419   2976   4228    922   2624   3615
      0      0     -1     -1      1      0      1      0      1      1
Train accuarcate: 95.55%
tensor([[46., 45., 51., 54., 48., 41., 33., 94., 42., 50.],
        [49., 53., 84., 58., 35., 52., 52., 41., 55., 35.],
        [42., 82., 59., 43., 49., 45., 51., 48., 55., 42.],
        [78., 45., 58., 45., 38., 43., 59., 55., 45., 52.],
        [43., 54., 45., 41., 87., 42., 52., 49., 50., 57.],
        [41., 84., 54., 43., 54., 38., 44., 55., 54., 43.],
        [35., 47., 37., 54., 81., 52., 44., 50., 58., 58.],
        [37., 44., 52., 49., 61., 49., 39., 50., 53., 85.],
        [49., 54., 51., 20., 53., 57., 72., 44., 61., 50.],
        [43., 38., 46., 52., 65., 39., 36., 62., 54., 79.],
        [85., 44., 48., 50., 43., 53., 47., 48., 54., 48.],
        [54., 49., 61., 37., 62., 47., 78., 42., 54., 38.],
        [42., 46., 41., 46., 66., 51., 38., 53., 46., 83.],
        [78., 41., 59., 53., 40., 47., 48., 53., 58., 43.],
        [39., 89., 49., 49., 46., 49., 45., 49., 54., 47.],
        [52., 52., 40., 59., 41., 76., 51., 43., 51., 56.],
        [45., 39., 39., 47., 61., 49., 36., 59., 62., 83.],
        [52., 48., 58., 61., 41., 39., 33., 80., 36., 53.],
        [44., 54., 57., 65., 43., 50., 47., 48., 54., 47.],
        [40., 51., 48., 47., 87., 44., 51., 47., 53., 56.]], device='cuda:0')
Train accuarcate: 94.92%



iteration:
  121
    0  1424   bit_w:-1  loss: 0.14459
    1  1568   bit_w: 1  loss: 0.14434
    2  1480   bit_w: 1  loss: 0.14428
    3  1465   bit_w: 1  loss: 0.14388
    4   806   bit_w: 1  loss: 0.14386
   5654   5663   3500   3494   2469   4102   2685   5075   1895   3078
      1      1      0     -1      0      1      0      1     -1     -1
Train accuarcate: 95.58%
tensor([[47., 46., 51., 54., 48., 42., 33., 95., 42., 50.],
        [50., 54., 84., 58., 35., 53., 52., 42., 55., 35.],
        [43., 83., 59., 43., 49., 46., 51., 49., 55., 42.],
        [79., 46., 58., 45., 38., 44., 59., 56., 45., 52.],
        [44., 55., 45., 41., 87., 43., 52., 50., 50., 57.],
        [42., 85., 54., 43., 54., 39., 44., 56., 54., 43.],
        [35., 47., 37., 55., 81., 52., 44., 50., 59., 59.],
        [38., 45., 52., 49., 61., 50., 39., 51., 53., 85.],
        [50., 55., 51., 20., 53., 58., 72., 45., 61., 50.],
        [44., 39., 46., 52., 65., 40., 36., 63., 54., 79.],
        [86., 45., 48., 50., 43., 54., 47., 49., 54., 48.],
        [54., 49., 61., 38., 62., 47., 78., 42., 55., 39.],
        [43., 47., 41., 46., 66., 52., 38., 54., 46., 83.],
        [79., 42., 59., 53., 40., 48., 48., 54., 58., 43.],
        [40., 90., 49., 49., 46., 50., 45., 50., 54., 47.],
        [52., 52., 40., 60., 41., 76., 51., 43., 52., 57.],
        [46., 40., 39., 47., 61., 50., 36., 60., 62., 83.],
        [53., 49., 58., 61., 41., 40., 33., 81., 36., 53.],
        [44., 54., 57., 66., 43., 50., 47., 48., 55., 48.],
        [40., 51., 48., 48., 87., 44., 51., 47., 54., 57.]], device='cuda:0')
Train accuarcate: 94.93%



iteration:
  122
    0  1438   bit_w:-1  loss: 0.14337
    1  1529   bit_w:-1  loss: 0.14314
    2  1486   bit_w:-1  loss: 0.14321
    3  1017   bit_w: 1  loss: 0.14285
    4  1583   bit_w: 1  loss: 0.14304
   2431   4008   4178   4721   2308   4480   2700   3180   4338   3841
      0     -1      1      0     -1      1     -1     -1      0      0
Train accuarcate: 95.61%
tensor([[47., 47., 51., 54., 49., 42., 34., 96., 42., 50.],
        [50., 55., 84., 58., 36., 53., 53., 43., 55., 35.],
        [43., 83., 60., 43., 49., 47., 51., 49., 55., 42.],
        [79., 46., 59., 45., 38., 45., 59., 56., 45., 52.],
        [44., 56., 45., 41., 88., 43., 53., 51., 50., 57.],
        [42., 85., 55., 43., 54., 40., 44., 56., 54., 43.],
        [35., 48., 37., 55., 82., 52., 45., 51., 59., 59.],
        [38., 45., 53., 49., 61., 51., 39., 51., 53., 85.],
        [50., 55., 52., 20., 53., 59., 72., 45., 61., 50.],
        [44., 40., 46., 52., 66., 40., 37., 64., 54., 79.],
        [86., 45., 49., 50., 43., 55., 47., 49., 54., 48.],
        [54., 50., 61., 38., 63., 47., 79., 43., 55., 39.],
        [43., 48., 41., 46., 67., 52., 39., 55., 46., 83.],
        [79., 42., 60., 53., 40., 49., 48., 54., 58., 43.],
        [40., 91., 49., 49., 47., 50., 46., 51., 54., 47.],
        [52., 52., 41., 60., 41., 77., 51., 43., 52., 57.],
        [46., 40., 40., 47., 61., 51., 36., 60., 62., 83.],
        [53., 50., 58., 61., 42., 40., 34., 82., 36., 53.],
        [44., 55., 57., 66., 44., 50., 48., 49., 55., 48.],
        [40., 51., 49., 48., 87., 45., 51., 47., 54., 57.]], device='cuda:0')
Train accuarcate: 95.01%



iteration:
  123
    0  1546   bit_w:-1  loss: 0.14250
    1   830   bit_w:-1  loss: 0.14227
    2  1109   bit_w:-1  loss: 0.14219
    3  1517   bit_w:-1  loss: 0.14208
    4  1314   bit_w:-1  loss: 0.14206
   4159   1489   2642   2658   4203   2970   2147   2118   3235   4755
      1      0      0     -1      1      0     -1     -1      1      1
Train accuarcate: 95.64%
tensor([[47., 47., 51., 55., 49., 42., 35., 97., 42., 50.],
        [51., 55., 84., 58., 37., 53., 53., 43., 56., 36.],
        [43., 83., 60., 44., 49., 47., 52., 50., 55., 42.],
        [80., 46., 59., 45., 39., 45., 59., 56., 46., 53.],
        [45., 56., 45., 41., 89., 43., 53., 51., 51., 58.],
        [42., 85., 55., 44., 54., 40., 45., 57., 54., 43.],
        [35., 48., 37., 56., 82., 52., 46., 52., 59., 59.],
        [38., 45., 53., 50., 61., 51., 40., 52., 53., 85.],
        [51., 55., 52., 20., 54., 59., 72., 45., 62., 51.],
        [44., 40., 46., 53., 66., 40., 38., 65., 54., 79.],
        [87., 45., 49., 50., 44., 55., 47., 49., 55., 49.],
        [54., 50., 61., 39., 63., 47., 80., 44., 55., 39.],
        [44., 48., 41., 46., 68., 52., 39., 55., 47., 84.],
        [80., 42., 60., 53., 41., 49., 48., 54., 59., 44.],
        [41., 91., 49., 49., 48., 50., 46., 51., 55., 48.],
        [53., 52., 41., 60., 42., 77., 51., 43., 53., 58.],
        [46., 40., 40., 48., 61., 51., 37., 61., 62., 83.],
        [54., 50., 58., 61., 43., 40., 34., 82., 37., 54.],
        [45., 55., 57., 66., 45., 50., 48., 49., 56., 49.],
        [41., 51., 49., 48., 88., 45., 51., 47., 55., 58.]], device='cuda:0')
Train accuarcate: 94.98%



iteration:
  124
    0  1526   bit_w:-1  loss: 0.14169
    1  1553   bit_w:-1  loss: 0.14138
    2   976   bit_w: 1  loss: 0.14137
    3   905   bit_w: 1  loss: 0.14106
    4  1501   bit_w:-1  loss: 0.14101
   4472   4749   3870   1497   1299   1486   4277   3957   4941   1139
      0      0      1     -1     -1     -1      1      0      1     -1
Train accuarcate: 95.68%
tensor([[47., 47., 52., 55., 49., 42., 36., 97., 43., 50.],
        [51., 55., 84., 59., 38., 54., 53., 43., 56., 37.],
        [43., 83., 60., 45., 50., 48., 52., 50., 55., 43.],
        [80., 46., 60., 45., 39., 45., 60., 56., 47., 53.],
        [45., 56., 45., 42., 90., 44., 53., 51., 51., 59.],
        [42., 85., 56., 44., 54., 40., 46., 57., 55., 43.],
        [35., 48., 37., 57., 83., 53., 46., 52., 59., 60.],
        [38., 45., 54., 50., 61., 51., 41., 52., 54., 85.],
        [51., 55., 52., 21., 55., 60., 72., 45., 62., 52.],
        [44., 40., 46., 54., 67., 41., 38., 65., 54., 80.],
        [87., 45., 50., 50., 44., 55., 48., 49., 56., 49.],
        [54., 50., 61., 40., 64., 48., 80., 44., 55., 40.],
        [44., 48., 41., 47., 69., 53., 39., 55., 47., 85.],
        [80., 42., 61., 53., 41., 49., 49., 54., 60., 44.],
        [41., 91., 49., 50., 49., 51., 46., 51., 55., 49.],
        [53., 52., 41., 61., 43., 78., 51., 43., 53., 59.],
        [46., 40., 40., 49., 62., 52., 37., 61., 62., 84.],
        [54., 50., 59., 61., 43., 40., 35., 82., 38., 54.],
        [45., 55., 57., 67., 46., 51., 48., 49., 56., 50.],
        [41., 51., 50., 48., 88., 45., 52., 47., 56., 58.]], device='cuda:0')
Train accuarcate: 94.99%



iteration:
  125
    0  1446   bit_w:-1  loss: 0.14054
    1  1334   bit_w: 1  loss: 0.14033
    2  1448   bit_w: 1  loss: 0.14036
    3  1519   bit_w:-1  loss: 0.13998
    4   938   bit_w: 1  loss: 0.14015
   5208   1941   2348   1625   1849   1045   3564   1933   2813   2875
      1     -1      1      0     -1     -1      0     -1      0      1
Train accuarcate: 95.69%
tensor([[47., 48., 52., 55., 50., 43., 36., 98., 43., 50.],
        [52., 55., 85., 59., 38., 54., 53., 43., 56., 38.],
        [43., 84., 60., 45., 51., 49., 52., 51., 55., 43.],
        [81., 46., 61., 45., 39., 45., 60., 56., 47., 54.],
        [45., 57., 45., 42., 91., 45., 53., 52., 51., 59.],
        [42., 86., 56., 44., 55., 41., 46., 58., 55., 43.],
        [36., 48., 38., 57., 83., 53., 46., 52., 59., 61.],
        [39., 45., 55., 50., 61., 51., 41., 52., 54., 86.],
        [51., 56., 52., 21., 56., 61., 72., 46., 62., 52.],
        [44., 41., 46., 54., 68., 42., 38., 66., 54., 80.],
        [88., 45., 51., 50., 44., 55., 48., 49., 56., 50.],
        [55., 50., 62., 40., 64., 48., 80., 44., 55., 41.],
        [44., 49., 41., 47., 70., 54., 39., 56., 47., 85.],
        [81., 42., 62., 53., 41., 49., 49., 54., 60., 45.],
        [41., 92., 49., 50., 50., 52., 46., 52., 55., 49.],
        [53., 53., 41., 61., 44., 79., 51., 44., 53., 59.],
        [46., 41., 40., 49., 63., 53., 37., 62., 62., 84.],
        [55., 50., 60., 61., 43., 40., 35., 82., 38., 55.],
        [45., 56., 57., 67., 47., 52., 48., 50., 56., 50.],
        [41., 52., 50., 48., 89., 46., 52., 48., 56., 58.]], device='cuda:0')
Train accuarcate: 94.98%



iteration:
  126
    0  1344   bit_w:-1  loss: 0.13959
    1  1426   bit_w:-1  loss: 0.13949
    2   626   bit_w:-1  loss: 0.13944
    3  1170   bit_w:-1  loss: 0.13936
    4  1443   bit_w:-1  loss: 0.13926
   2256   3898   3676   4906   1709   2795   2592   4188   2020   3226
     -1      1      0      1      0      0     -1      0     -1      0
Train accuarcate: 95.75%
tensor([[47., 49., 52., 56., 50., 43., 36., 98., 43., 50.],
        [52., 56., 85., 60., 38., 54., 53., 43., 56., 38.],
        [43., 85., 60., 46., 51., 49., 52., 51., 55., 43.],
        [81., 47., 61., 46., 39., 45., 60., 56., 47., 54.],
        [46., 57., 45., 42., 91., 45., 54., 52., 52., 59.],
        [42., 87., 56., 45., 55., 41., 46., 58., 55., 43.],
        [36., 49., 38., 58., 83., 53., 46., 52., 59., 61.],
        [39., 46., 55., 51., 61., 51., 41., 52., 54., 86.],
        [52., 56., 52., 21., 56., 61., 73., 46., 63., 52.],
        [45., 41., 46., 54., 68., 42., 39., 66., 55., 80.],
        [89., 45., 51., 50., 44., 55., 49., 49., 57., 50.],
        [56., 50., 62., 40., 64., 48., 81., 44., 56., 41.],
        [44., 50., 41., 48., 70., 54., 39., 56., 47., 85.],
        [81., 43., 62., 54., 41., 49., 49., 54., 60., 45.],
        [42., 92., 49., 50., 50., 52., 47., 52., 56., 49.],
        [54., 53., 41., 61., 44., 79., 52., 44., 54., 59.],
        [47., 41., 40., 49., 63., 53., 38., 62., 63., 84.],
        [55., 51., 60., 62., 43., 40., 35., 82., 38., 55.],
        [45., 57., 57., 68., 47., 52., 48., 50., 56., 50.],
        [42., 52., 50., 48., 89., 46., 53., 48., 57., 58.]], device='cuda:0')
Train accuarcate: 94.98%



iteration:
  127
    0  1511   bit_w:-1  loss: 0.13889
    1  1475   bit_w:-1  loss: 0.13855
    2  1462   bit_w:-1  loss: 0.13851
    3  1395   bit_w: 1  loss: 0.13828
    4  1422   bit_w: 1  loss: 0.13820
   3101   5311   1873   1987   3073   3082   2638   5329   3918   4760
      0      0     -1     -1     -1      1      0      0      1      1
Train accuarcate: 95.78%
tensor([[47., 49., 52., 56., 50., 44., 36., 98., 44., 51.],
        [52., 56., 86., 61., 39., 54., 53., 43., 56., 38.],
        [43., 85., 60., 46., 51., 50., 52., 51., 56., 44.],
        [81., 47., 61., 46., 39., 46., 60., 56., 48., 55.],
        [46., 57., 45., 42., 91., 46., 54., 52., 53., 60.],
        [42., 87., 56., 45., 55., 42., 46., 58., 56., 44.],
        [36., 49., 38., 58., 83., 54., 46., 52., 60., 62.],
        [39., 46., 56., 52., 62., 51., 41., 52., 54., 86.],
        [52., 56., 53., 22., 57., 61., 73., 46., 63., 52.],
        [45., 41., 46., 54., 68., 43., 39., 66., 56., 81.],
        [89., 45., 52., 51., 45., 55., 49., 49., 57., 50.],
        [56., 50., 63., 41., 65., 48., 81., 44., 56., 41.],
        [44., 50., 41., 48., 70., 55., 39., 56., 48., 86.],
        [81., 43., 62., 54., 41., 50., 49., 54., 61., 46.],
        [42., 92., 49., 50., 50., 53., 47., 52., 57., 50.],
        [54., 53., 41., 61., 44., 80., 52., 44., 55., 60.],
        [47., 41., 40., 49., 63., 54., 38., 62., 64., 85.],
        [55., 51., 60., 62., 43., 41., 35., 82., 39., 56.],
        [45., 57., 57., 68., 47., 53., 48., 50., 57., 51.],
        [42., 52., 51., 49., 90., 46., 53., 48., 57., 58.]], device='cuda:0')
Train accuarcate: 94.97%



iteration:
  128
    0   898   bit_w:-1  loss: 0.13771
    1  1391   bit_w: 1  loss: 0.13760
    2  1378   bit_w: 1  loss: 0.13752
    3  1457   bit_w:-1  loss: 0.13745
    4   269   bit_w: 1  loss: 0.13735
   1685   1474   1938   3240   5278   1789   2387   4785   2791   4351
     -1     -1     -1      0      1      0     -1      1      0      0
Train accuarcate: 95.78%
tensor([[47., 49., 52., 56., 51., 44., 36., 99., 44., 51.],
        [53., 57., 87., 61., 39., 54., 54., 43., 56., 38.],
        [44., 86., 61., 46., 51., 50., 53., 51., 56., 44.],
        [82., 48., 62., 46., 39., 46., 61., 56., 48., 55.],
        [47., 58., 46., 42., 91., 46., 55., 52., 53., 60.],
        [43., 88., 57., 45., 55., 42., 47., 58., 56., 44.],
        [36., 49., 38., 58., 84., 54., 46., 53., 60., 62.],
        [40., 47., 57., 52., 62., 51., 42., 52., 54., 86.],
        [52., 56., 53., 22., 58., 61., 73., 47., 63., 52.],
        [45., 41., 46., 54., 69., 43., 39., 67., 56., 81.],
        [90., 46., 53., 51., 45., 55., 50., 49., 57., 50.],
        [56., 50., 63., 41., 66., 48., 81., 45., 56., 41.],
        [44., 50., 41., 48., 71., 55., 39., 57., 48., 86.],
        [82., 44., 63., 54., 41., 50., 50., 54., 61., 46.],
        [43., 93., 50., 50., 50., 53., 48., 52., 57., 50.],
        [55., 54., 42., 61., 44., 80., 53., 44., 55., 60.],
        [47., 41., 40., 49., 64., 54., 38., 63., 64., 85.],
        [55., 51., 60., 62., 44., 41., 35., 83., 39., 56.],
        [45., 57., 57., 68., 48., 53., 48., 51., 57., 51.],
        [42., 52., 51., 49., 91., 46., 53., 49., 57., 58.]], device='cuda:0')
Train accuarcate: 94.97%



iteration:
  129
    0  1396   bit_w:-1  loss: 0.13697
    1  1478   bit_w:-1  loss: 0.13670
    2  1392   bit_w: 1  loss: 0.13667
    3  1547   bit_w: 1  loss: 0.13646
    4  1536   bit_w: 1  loss: 0.13650
   3913   1201   2698   3142   2119   3645   1313   3973   3137    885
      1      0      0     -1      0      1     -1      1      0     -1
Train accuarcate: 95.82%
tensor([[ 48.,  49.,  52.,  56.,  51.,  45.,  36., 100.,  44.,  51.],
        [ 53.,  57.,  87.,  62.,  39.,  54.,  55.,  43.,  56.,  39.],
        [ 44.,  86.,  61.,  47.,  51.,  50.,  54.,  51.,  56.,  45.],
        [ 83.,  48.,  62.,  46.,  39.,  47.,  61.,  57.,  48.,  55.],
        [ 47.,  58.,  46.,  43.,  91.,  46.,  56.,  52.,  53.,  61.],
        [ 43.,  88.,  57.,  46.,  55.,  42.,  48.,  58.,  56.,  45.],
        [ 36.,  49.,  38.,  59.,  84.,  54.,  47.,  53.,  60.,  63.],
        [ 41.,  47.,  57.,  52.,  62.,  52.,  42.,  53.,  54.,  86.],
        [ 52.,  56.,  53.,  23.,  58.,  61.,  74.,  47.,  63.,  53.],
        [ 45.,  41.,  46.,  55.,  69.,  43.,  40.,  67.,  56.,  82.],
        [ 91.,  46.,  53.,  51.,  45.,  56.,  50.,  50.,  57.,  50.],
        [ 56.,  50.,  63.,  42.,  66.,  48.,  82.,  45.,  56.,  42.],
        [ 44.,  50.,  41.,  49.,  71.,  55.,  40.,  57.,  48.,  87.],
        [ 82.,  44.,  63.,  55.,  41.,  50.,  51.,  54.,  61.,  47.],
        [ 43.,  93.,  50.,  51.,  50.,  53.,  49.,  52.,  57.,  51.],
        [ 55.,  54.,  42.,  62.,  44.,  80.,  54.,  44.,  55.,  61.],
        [ 47.,  41.,  40.,  50.,  64.,  54.,  39.,  63.,  64.,  86.],
        [ 55.,  51.,  60.,  63.,  44.,  41.,  36.,  83.,  39.,  57.],
        [ 45.,  57.,  57.,  69.,  48.,  53.,  49.,  51.,  57.,  52.],
        [ 43.,  52.,  51.,  49.,  91.,  47.,  53.,  50.,  57.,  58.]],
       device='cuda:0')
Train accuarcate: 95.11%



iteration:
  130
    0  1432   bit_w:-1  loss: 0.13611
    1  1522   bit_w:-1  loss: 0.13585
    2   495   bit_w: 1  loss: 0.13582
    3  1581   bit_w: 1  loss: 0.13557
    4  1472   bit_w: 1  loss: 0.13557
   4098    116   1231   3556   2601   1731   3469   1752   1325   2345
      1     -1     -1      1      0      0      0      1     -1      0
Train accuarcate: 95.85%
tensor([[ 48.,  50.,  53.,  56.,  51.,  45.,  36., 100.,  45.,  51.],
        [ 53.,  58.,  88.,  62.,  39.,  54.,  55.,  43.,  57.,  39.],
        [ 44.,  87.,  62.,  47.,  51.,  50.,  54.,  51.,  57.,  45.],
        [ 84.,  48.,  62.,  47.,  39.,  47.,  61.,  58.,  48.,  55.],
        [ 47.,  59.,  47.,  43.,  91.,  46.,  56.,  52.,  54.,  61.],
        [ 43.,  89.,  58.,  46.,  55.,  42.,  48.,  58.,  57.,  45.],
        [ 36.,  50.,  39.,  59.,  84.,  54.,  47.,  53.,  61.,  63.],
        [ 41.,  48.,  58.,  52.,  62.,  52.,  42.,  53.,  55.,  86.],
        [ 52.,  57.,  54.,  23.,  58.,  61.,  74.,  47.,  64.,  53.],
        [ 45.,  42.,  47.,  55.,  69.,  43.,  40.,  67.,  57.,  82.],
        [ 92.,  46.,  53.,  52.,  45.,  56.,  50.,  51.,  57.,  50.],
        [ 56.,  51.,  64.,  42.,  66.,  48.,  82.,  45.,  57.,  42.],
        [ 45.,  50.,  41.,  50.,  71.,  55.,  40.,  58.,  48.,  87.],
        [ 82.,  45.,  64.,  55.,  41.,  50.,  51.,  54.,  62.,  47.],
        [ 43.,  94.,  51.,  51.,  50.,  53.,  49.,  52.,  58.,  51.],
        [ 56.,  54.,  42.,  63.,  44.,  80.,  54.,  45.,  55.,  61.],
        [ 47.,  42.,  41.,  50.,  64.,  54.,  39.,  63.,  65.,  86.],
        [ 55.,  52.,  61.,  63.,  44.,  41.,  36.,  83.,  40.,  57.],
        [ 45.,  58.,  58.,  69.,  48.,  53.,  49.,  51.,  58.,  52.],
        [ 44.,  52.,  51.,  50.,  91.,  47.,  53.,  51.,  57.,  58.]],
       device='cuda:0')
Train accuarcate: 95.09%



iteration:
  131
    0  1420   bit_w:-1  loss: 0.13526
    1  1496   bit_w:-1  loss: 0.13499
    2  1381   bit_w: 1  loss: 0.13510
    3  1266   bit_w: 1  loss: 0.13473
    4   805   bit_w: 1  loss: 0.13475
   2243   2829   2007   3763    950   4300   2283   3587   3657   1674
      0      0      0      1     -1      1      0      0      1     -1
Train accuarcate: 95.83%
tensor([[ 48.,  50.,  53.,  57.,  51.,  46.,  36., 100.,  46.,  51.],
        [ 53.,  58.,  88.,  63.,  39.,  55.,  55.,  43.,  58.,  39.],
        [ 44.,  87.,  62.,  48.,  51.,  51.,  54.,  51.,  58.,  45.],
        [ 84.,  48.,  62.,  47.,  40.,  47.,  61.,  58.,  48.,  56.],
        [ 47.,  59.,  47.,  43.,  92.,  46.,  56.,  52.,  54.,  62.],
        [ 43.,  89.,  58.,  46.,  56.,  42.,  48.,  58.,  57.,  46.],
        [ 36.,  50.,  39.,  59.,  85.,  54.,  47.,  53.,  61.,  64.],
        [ 41.,  48.,  58.,  52.,  63.,  52.,  42.,  53.,  55.,  87.],
        [ 52.,  57.,  54.,  24.,  58.,  62.,  74.,  47.,  65.,  53.],
        [ 45.,  42.,  47.,  55.,  70.,  43.,  40.,  67.,  57.,  83.],
        [ 92.,  46.,  53.,  53.,  45.,  57.,  50.,  51.,  58.,  50.],
        [ 56.,  51.,  64.,  43.,  66.,  49.,  82.,  45.,  58.,  42.],
        [ 45.,  50.,  41.,  50.,  72.,  55.,  40.,  58.,  48.,  88.],
        [ 82.,  45.,  64.,  56.,  41.,  51.,  51.,  54.,  63.,  47.],
        [ 43.,  94.,  51.,  51.,  51.,  53.,  49.,  52.,  58.,  52.],
        [ 56.,  54.,  42.,  64.,  44.,  81.,  54.,  45.,  56.,  61.],
        [ 47.,  42.,  41.,  50.,  65.,  54.,  39.,  63.,  65.,  87.],
        [ 55.,  52.,  61.,  64.,  44.,  42.,  36.,  83.,  41.,  57.],
        [ 45.,  58.,  58.,  70.,  48.,  54.,  49.,  51.,  59.,  52.],
        [ 44.,  52.,  51.,  50.,  92.,  47.,  53.,  51.,  57.,  59.]],
       device='cuda:0')
Train accuarcate: 95.09%



iteration:
  132
    0  1534   bit_w:-1  loss: 0.13435
    1  1337   bit_w: 1  loss: 0.13413
    2  1286   bit_w:-1  loss: 0.13411
    3   912   bit_w: 1  loss: 0.13396
    4  1373   bit_w:-1  loss: 0.13394
   3991   6181   4686   3408   4334   2874   5136   1437   4335   2594
     -1      1     -1      0      0     -1      1     -1      0      0
Train accuarcate: 95.89%
tensor([[ 49.,  50.,  54.,  57.,  51.,  47.,  36., 101.,  46.,  51.],
        [ 53.,  59.,  88.,  63.,  39.,  55.,  56.,  43.,  58.,  39.],
        [ 44.,  88.,  62.,  48.,  51.,  51.,  55.,  51.,  58.,  45.],
        [ 84.,  49.,  62.,  47.,  40.,  47.,  62.,  58.,  48.,  56.],
        [ 47.,  60.,  47.,  43.,  92.,  46.,  57.,  52.,  54.,  62.],
        [ 43.,  90.,  58.,  46.,  56.,  42.,  49.,  58.,  57.,  46.],
        [ 36.,  51.,  39.,  59.,  85.,  54.,  48.,  53.,  61.,  64.],
        [ 42.,  48.,  59.,  52.,  63.,  53.,  42.,  54.,  55.,  87.],
        [ 52.,  58.,  54.,  24.,  58.,  62.,  75.,  47.,  65.,  53.],
        [ 46.,  42.,  48.,  55.,  70.,  44.,  40.,  68.,  57.,  83.],
        [ 92.,  47.,  53.,  53.,  45.,  57.,  51.,  51.,  58.,  50.],
        [ 56.,  52.,  64.,  43.,  66.,  49.,  83.,  45.,  58.,  42.],
        [ 46.,  50.,  42.,  50.,  72.,  56.,  40.,  59.,  48.,  88.],
        [ 82.,  46.,  64.,  56.,  41.,  51.,  52.,  54.,  63.,  47.],
        [ 43.,  95.,  51.,  51.,  51.,  53.,  50.,  52.,  58.,  52.],
        [ 56.,  55.,  42.,  64.,  44.,  81.,  55.,  45.,  56.,  61.],
        [ 48.,  42.,  42.,  50.,  65.,  55.,  39.,  64.,  65.,  87.],
        [ 56.,  52.,  62.,  64.,  44.,  43.,  36.,  84.,  41.,  57.],
        [ 46.,  58.,  59.,  70.,  48.,  55.,  49.,  52.,  59.,  52.],
        [ 44.,  53.,  51.,  50.,  92.,  47.,  54.,  51.,  57.,  59.]],
       device='cuda:0')
Train accuarcate: 95.16%



iteration:
  133
    0  1528   bit_w:-1  loss: 0.13358
    1  1457   bit_w:-1  loss: 0.13339
    2  1431   bit_w:-1  loss: 0.13336
    3  1508   bit_w: 1  loss: 0.13312
    4  1095   bit_w: 1  loss: 0.13316
   3053   6351   1793   1532   4980   4080   4952   3094   3560   3035
     -1      0     -1     -1      1      0      0      1      0     -1
Train accuarcate: 95.92%
tensor([[ 50.,  50.,  55.,  58.,  51.,  47.,  36., 101.,  46.,  52.],
        [ 54.,  59.,  89.,  64.,  39.,  55.,  56.,  43.,  58.,  40.],
        [ 44.,  88.,  62.,  48.,  52.,  51.,  55.,  52.,  58.,  45.],
        [ 85.,  49.,  63.,  48.,  40.,  47.,  62.,  58.,  48.,  57.],
        [ 48.,  60.,  48.,  44.,  92.,  46.,  57.,  52.,  54.,  63.],
        [ 43.,  90.,  58.,  46.,  57.,  42.,  49.,  59.,  57.,  46.],
        [ 36.,  51.,  39.,  59.,  86.,  54.,  48.,  54.,  61.,  64.],
        [ 43.,  48.,  60.,  53.,  63.,  53.,  42.,  54.,  55.,  88.],
        [ 52.,  58.,  54.,  24.,  59.,  62.,  75.,  48.,  65.,  53.],
        [ 46.,  42.,  48.,  55.,  71.,  44.,  40.,  69.,  57.,  83.],
        [ 92.,  47.,  53.,  53.,  46.,  57.,  51.,  52.,  58.,  50.],
        [ 56.,  52.,  64.,  43.,  67.,  49.,  83.,  46.,  58.,  42.],
        [ 47.,  50.,  43.,  51.,  72.,  56.,  40.,  59.,  48.,  89.],
        [ 82.,  46.,  64.,  56.,  42.,  51.,  52.,  55.,  63.,  47.],
        [ 43.,  95.,  51.,  51.,  52.,  53.,  50.,  53.,  58.,  52.],
        [ 57.,  55.,  43.,  65.,  44.,  81.,  55.,  45.,  56.,  62.],
        [ 49.,  42.,  43.,  51.,  65.,  55.,  39.,  64.,  65.,  88.],
        [ 57.,  52.,  63.,  65.,  44.,  43.,  36.,  84.,  41.,  58.],
        [ 47.,  58.,  60.,  71.,  48.,  55.,  49.,  52.,  59.,  53.],
        [ 44.,  53.,  51.,  50.,  93.,  47.,  54.,  52.,  57.,  59.]],
       device='cuda:0')
Train accuarcate: 95.09%



iteration:
  134
    0  1430   bit_w:-1  loss: 0.13275
    1  1433   bit_w:-1  loss: 0.13250
    2  1340   bit_w:-1  loss: 0.13251
    3  1551   bit_w:-1  loss: 0.13234
    4  1427   bit_w:-1  loss: 0.13235
   3642   4500   1923   5025   2432   2719   1029   2760   1908   3887
      0      0     -1      0      0     -1     -1      0     -1      1
Train accuarcate: 95.97%
tensor([[ 50.,  50.,  56.,  58.,  51.,  48.,  37., 101.,  47.,  52.],
        [ 54.,  59.,  90.,  64.,  39.,  56.,  57.,  43.,  59.,  40.],
        [ 44.,  88.,  62.,  48.,  52.,  51.,  55.,  52.,  58.,  46.],
        [ 85.,  49.,  63.,  48.,  40.,  47.,  62.,  58.,  48.,  58.],
        [ 48.,  60.,  49.,  44.,  92.,  47.,  58.,  52.,  55.,  63.],
        [ 43.,  90.,  58.,  46.,  57.,  42.,  49.,  59.,  57.,  47.],
        [ 36.,  51.,  39.,  59.,  86.,  54.,  48.,  54.,  61.,  65.],
        [ 43.,  48.,  60.,  53.,  63.,  53.,  42.,  54.,  55.,  89.],
        [ 52.,  58.,  55.,  24.,  59.,  63.,  76.,  48.,  66.,  53.],
        [ 46.,  42.,  49.,  55.,  71.,  45.,  41.,  69.,  58.,  83.],
        [ 92.,  47.,  53.,  53.,  46.,  57.,  51.,  52.,  58.,  51.],
        [ 56.,  52.,  64.,  43.,  67.,  49.,  83.,  46.,  58.,  43.],
        [ 47.,  50.,  43.,  51.,  72.,  56.,  40.,  59.,  48.,  90.],
        [ 82.,  46.,  65.,  56.,  42.,  52.,  53.,  55.,  64.,  47.],
        [ 43.,  95.,  51.,  51.,  52.,  53.,  50.,  53.,  58.,  53.],
        [ 57.,  55.,  44.,  65.,  44.,  82.,  56.,  45.,  57.,  62.],
        [ 49.,  42.,  44.,  51.,  65.,  56.,  40.,  64.,  66.,  88.],
        [ 57.,  52.,  63.,  65.,  44.,  43.,  36.,  84.,  41.,  59.],
        [ 47.,  58.,  61.,  71.,  48.,  56.,  50.,  52.,  60.,  53.],
        [ 44.,  53.,  52.,  50.,  93.,  48.,  55.,  52.,  58.,  59.]],
       device='cuda:0')
Train accuarcate: 95.08%



iteration:
  135
    0  1434   bit_w:-1  loss: 0.13201
    1  1572   bit_w:-1  loss: 0.13178
    2   941   bit_w: 1  loss: 0.13180
    3  1413   bit_w: 1  loss: 0.13153
    4  1362   bit_w:-1  loss: 0.13146
   5254   1470   2125   1536   3448   2026   2272   2962    931   3348
      1     -1      0     -1      1      0      0      1     -1      1
Train accuarcate: 95.97%
tensor([[ 50.,  51.,  56.,  59.,  51.,  48.,  37., 101.,  48.,  52.],
        [ 55.,  59.,  90.,  64.,  40.,  56.,  57.,  44.,  59.,  41.],
        [ 44.,  89.,  62.,  49.,  52.,  51.,  55.,  52.,  59.,  46.],
        [ 86.,  49.,  63.,  48.,  41.,  47.,  62.,  59.,  48.,  59.],
        [ 49.,  60.,  49.,  44.,  93.,  47.,  58.,  53.,  55.,  64.],
        [ 44.,  90.,  58.,  46.,  58.,  42.,  49.,  60.,  57.,  48.],
        [ 36.,  52.,  39.,  60.,  86.,  54.,  48.,  54.,  62.,  65.],
        [ 43.,  49.,  60.,  54.,  63.,  53.,  42.,  54.,  56.,  89.],
        [ 53.,  58.,  55.,  24.,  60.,  63.,  76.,  49.,  66.,  54.],
        [ 47.,  42.,  49.,  55.,  72.,  45.,  41.,  70.,  58.,  84.],
        [ 93.,  47.,  53.,  53.,  47.,  57.,  51.,  53.,  58.,  52.],
        [ 56.,  53.,  64.,  44.,  67.,  49.,  83.,  46.,  59.,  43.],
        [ 48.,  50.,  43.,  51.,  73.,  56.,  40.,  60.,  48.,  91.],
        [ 83.,  46.,  65.,  56.,  43.,  52.,  53.,  56.,  64.,  48.],
        [ 43.,  96.,  51.,  52.,  52.,  53.,  50.,  53.,  59.,  53.],
        [ 57.,  56.,  44.,  66.,  44.,  82.,  56.,  45.,  58.,  62.],
        [ 50.,  42.,  44.,  51.,  66.,  56.,  40.,  65.,  66.,  89.],
        [ 58.,  52.,  63.,  65.,  45.,  43.,  36.,  85.,  41.,  60.],
        [ 47.,  59.,  61.,  72.,  48.,  56.,  50.,  52.,  61.,  53.],
        [ 45.,  53.,  52.,  50.,  94.,  48.,  55.,  53.,  58.,  60.]],
       device='cuda:0')
Train accuarcate: 95.03%



iteration:
  136
    0  1387   bit_w:-1  loss: 0.13105
    1  1437   bit_w:-1  loss: 0.13077
    2  1349   bit_w: 1  loss: 0.13074
    3  1315   bit_w:-1  loss: 0.13061
    4  1521   bit_w:-1  loss: 0.13060
   3332   3720   3498   2953   4820   4719   5648   2544   3309   3082
      0      0     -1      0      0      1      1      0     -1      0
Train accuarcate: 96.02%
tensor([[ 50.,  51.,  57.,  59.,  51.,  48.,  37., 101.,  49.,  52.],
        [ 55.,  59.,  91.,  64.,  40.,  56.,  57.,  44.,  60.,  41.],
        [ 44.,  89.,  63.,  49.,  52.,  51.,  55.,  52.,  60.,  46.],
        [ 86.,  49.,  63.,  48.,  41.,  48.,  63.,  59.,  48.,  59.],
        [ 49.,  60.,  49.,  44.,  93.,  48.,  59.,  53.,  55.,  64.],
        [ 44.,  90.,  58.,  46.,  58.,  43.,  50.,  60.,  57.,  48.],
        [ 36.,  52.,  40.,  60.,  86.,  54.,  48.,  54.,  63.,  65.],
        [ 43.,  49.,  60.,  54.,  63.,  54.,  43.,  54.,  56.,  89.],
        [ 53.,  58.,  55.,  24.,  60.,  64.,  77.,  49.,  66.,  54.],
        [ 47.,  42.,  50.,  55.,  72.,  45.,  41.,  70.,  59.,  84.],
        [ 93.,  47.,  54.,  53.,  47.,  57.,  51.,  53.,  59.,  52.],
        [ 56.,  53.,  64.,  44.,  67.,  50.,  84.,  46.,  59.,  43.],
        [ 48.,  50.,  43.,  51.,  73.,  57.,  41.,  60.,  48.,  91.],
        [ 83.,  46.,  65.,  56.,  43.,  53.,  54.,  56.,  64.,  48.],
        [ 43.,  96.,  52.,  52.,  52.,  53.,  50.,  53.,  60.,  53.],
        [ 57.,  56.,  44.,  66.,  44.,  83.,  57.,  45.,  58.,  62.],
        [ 50.,  42.,  45.,  51.,  66.,  56.,  40.,  65.,  67.,  89.],
        [ 58.,  52.,  64.,  65.,  45.,  43.,  36.,  85.,  42.,  60.],
        [ 47.,  59.,  61.,  72.,  48.,  57.,  51.,  52.,  61.,  53.],
        [ 45.,  53.,  52.,  50.,  94.,  49.,  56.,  53.,  58.,  60.]],
       device='cuda:0')
Train accuarcate: 95.07%



iteration:
  137
    0  1449   bit_w:-1  loss: 0.13025
    1  1417   bit_w:-1  loss: 0.13009
    2  1380   bit_w: 1  loss: 0.13007
    3  1428   bit_w:-1  loss: 0.12990
    4  1440   bit_w:-1  loss: 0.12977
   4073   4860   3649   3347   3246   2803   3324   1986   2824   2116
      1      1      0      0      1     -1      0     -1      0     -1
Train accuarcate: 96.05%
tensor([[ 50.,  51.,  57.,  59.,  51.,  49.,  37., 102.,  49.,  53.],
        [ 56.,  60.,  91.,  64.,  41.,  56.,  57.,  44.,  60.,  41.],
        [ 45.,  90.,  63.,  49.,  53.,  51.,  55.,  52.,  60.,  46.],
        [ 87.,  50.,  63.,  48.,  42.,  48.,  63.,  59.,  48.,  59.],
        [ 50.,  61.,  49.,  44.,  94.,  48.,  59.,  53.,  55.,  64.],
        [ 45.,  91.,  58.,  46.,  59.,  43.,  50.,  60.,  57.,  48.],
        [ 37.,  53.,  40.,  60.,  87.,  54.,  48.,  54.,  63.,  65.],
        [ 43.,  49.,  60.,  54.,  63.,  55.,  43.,  55.,  56.,  90.],
        [ 53.,  58.,  55.,  24.,  60.,  65.,  77.,  50.,  66.,  55.],
        [ 48.,  43.,  50.,  55.,  73.,  45.,  41.,  70.,  59.,  84.],
        [ 93.,  47.,  54.,  53.,  47.,  58.,  51.,  54.,  59.,  53.],
        [ 57.,  54.,  64.,  44.,  68.,  50.,  84.,  46.,  59.,  43.],
        [ 49.,  51.,  43.,  51.,  74.,  57.,  41.,  60.,  48.,  91.],
        [ 84.,  47.,  65.,  56.,  44.,  53.,  54.,  56.,  64.,  48.],
        [ 44.,  97.,  52.,  52.,  53.,  53.,  50.,  53.,  60.,  53.],
        [ 57.,  56.,  44.,  66.,  44.,  84.,  57.,  46.,  58.,  63.],
        [ 51.,  43.,  45.,  51.,  67.,  56.,  40.,  65.,  67.,  89.],
        [ 58.,  52.,  64.,  65.,  45.,  44.,  36.,  86.,  42.,  61.],
        [ 47.,  59.,  61.,  72.,  48.,  58.,  51.,  53.,  61.,  54.],
        [ 45.,  53.,  52.,  50.,  94.,  50.,  56.,  54.,  58.,  61.]],
       device='cuda:0')
Train accuarcate: 95.07%



iteration:
  138
    0  1535   bit_w:-1  loss: 0.12932
    1  1264   bit_w:-1  loss: 0.12913
    2  1476   bit_w: 1  loss: 0.12906
    3  1470   bit_w:-1  loss: 0.12884
    4  1464   bit_w: 1  loss: 0.12888
    779   2824   4166   1588   4072    642   1820   4170   1529   2448
      0      1      1     -1      1      0     -1      1      0      0
Train accuarcate: 96.07%
tensor([[ 50.,  51.,  57.,  60.,  51.,  49.,  38., 102.,  49.,  53.],
        [ 56.,  61.,  92.,  64.,  42.,  56.,  57.,  45.,  60.,  41.],
        [ 45.,  90.,  63.,  50.,  53.,  51.,  56.,  52.,  60.,  46.],
        [ 87.,  51.,  64.,  48.,  43.,  48.,  63.,  60.,  48.,  59.],
        [ 50.,  62.,  50.,  44.,  95.,  48.,  59.,  54.,  55.,  64.],
        [ 45.,  92.,  59.,  46.,  60.,  43.,  50.,  61.,  57.,  48.],
        [ 37.,  53.,  40.,  61.,  87.,  54.,  49.,  54.,  63.,  65.],
        [ 43.,  49.,  60.,  55.,  63.,  55.,  44.,  55.,  56.,  90.],
        [ 53.,  59.,  56.,  24.,  61.,  65.,  77.,  51.,  66.,  55.],
        [ 48.,  44.,  51.,  55.,  74.,  45.,  41.,  71.,  59.,  84.],
        [ 93.,  47.,  54.,  54.,  47.,  58.,  52.,  54.,  59.,  53.],
        [ 57.,  54.,  64.,  45.,  68.,  50.,  85.,  46.,  59.,  43.],
        [ 49.,  52.,  44.,  51.,  75.,  57.,  41.,  61.,  48.,  91.],
        [ 84.,  48.,  66.,  56.,  45.,  53.,  54.,  57.,  64.,  48.],
        [ 44.,  98.,  53.,  52.,  54.,  53.,  50.,  54.,  60.,  53.],
        [ 57.,  56.,  44.,  67.,  44.,  84.,  58.,  46.,  58.,  63.],
        [ 51.,  43.,  45.,  52.,  67.,  56.,  41.,  65.,  67.,  89.],
        [ 58.,  52.,  64.,  66.,  45.,  44.,  37.,  86.,  42.,  61.],
        [ 47.,  59.,  61.,  73.,  48.,  58.,  52.,  53.,  61.,  54.],
        [ 45.,  54.,  53.,  50.,  95.,  50.,  56.,  55.,  58.,  61.]],
       device='cuda:0')
Train accuarcate: 95.19%



iteration:
  139
    0  1563   bit_w:-1  loss: 0.12851
    1  1436   bit_w: 1  loss: 0.12831
    2  1386   bit_w:-1  loss: 0.12830
    3  1439   bit_w: 1  loss: 0.12800
    4  1358   bit_w:-1  loss: 0.12808
   3965   1905   2298   1738   2632   3720   3513   1309   3833   2906
      1      0      0     -1      0      1      0     -1      1      1
Train accuarcate: 96.07%
tensor([[ 50.,  51.,  57.,  61.,  51.,  49.,  38., 103.,  49.,  53.],
        [ 57.,  61.,  92.,  64.,  42.,  57.,  57.,  45.,  61.,  42.],
        [ 45.,  90.,  63.,  51.,  53.,  51.,  56.,  53.,  60.,  46.],
        [ 88.,  51.,  64.,  48.,  43.,  49.,  63.,  60.,  49.,  60.],
        [ 51.,  62.,  50.,  44.,  95.,  49.,  59.,  54.,  56.,  65.],
        [ 45.,  92.,  59.,  47.,  60.,  43.,  50.,  62.,  57.,  48.],
        [ 37.,  53.,  40.,  62.,  87.,  54.,  49.,  55.,  63.,  65.],
        [ 44.,  49.,  60.,  55.,  63.,  56.,  44.,  55.,  57.,  91.],
        [ 54.,  59.,  56.,  24.,  61.,  66.,  77.,  51.,  67.,  56.],
        [ 48.,  44.,  51.,  56.,  74.,  45.,  41.,  72.,  59.,  84.],
        [ 94.,  47.,  54.,  54.,  47.,  59.,  52.,  54.,  60.,  54.],
        [ 57.,  54.,  64.,  46.,  68.,  50.,  85.,  47.,  59.,  43.],
        [ 49.,  52.,  44.,  52.,  75.,  57.,  41.,  62.,  48.,  91.],
        [ 85.,  48.,  66.,  56.,  45.,  54.,  54.,  57.,  65.,  49.],
        [ 44.,  98.,  53.,  53.,  54.,  53.,  50.,  55.,  60.,  53.],
        [ 58.,  56.,  44.,  67.,  44.,  85.,  58.,  46.,  59.,  64.],
        [ 51.,  43.,  45.,  53.,  67.,  56.,  41.,  66.,  67.,  89.],
        [ 58.,  52.,  64.,  67.,  45.,  44.,  37.,  87.,  42.,  61.],
        [ 48.,  59.,  61.,  73.,  48.,  59.,  52.,  53.,  62.,  55.],
        [ 45.,  54.,  53.,  51.,  95.,  50.,  56.,  56.,  58.,  61.]],
       device='cuda:0')
Train accuarcate: 95.17%



iteration:
  140
    0  1525   bit_w:-1  loss: 0.12756
    1  1410   bit_w: 1  loss: 0.12754
    2  1549   bit_w: 1  loss: 0.12742
    3  1530   bit_w: 1  loss: 0.12728
    4  1458   bit_w:-1  loss: 0.12713
    996   3014    754    903   4267   3446   4379   2401   1293   1670
      0      1     -1      0      1      1      1      0      1     -1
Train accuarcate: 96.13%
tensor([[ 50.,  52.,  57.,  61.,  52.,  50.,  39., 103.,  50.,  53.],
        [ 57.,  62.,  92.,  64.,  43.,  58.,  58.,  45.,  62.,  42.],
        [ 45.,  91.,  63.,  51.,  54.,  52.,  57.,  53.,  61.,  46.],
        [ 88.,  51.,  65.,  48.,  43.,  49.,  63.,  60.,  49.,  61.],
        [ 51.,  63.,  50.,  44.,  96.,  50.,  60.,  54.,  57.,  65.],
        [ 45.,  93.,  59.,  47.,  61.,  44.,  51.,  62.,  58.,  48.],
        [ 37.,  54.,  40.,  62.,  88.,  55.,  50.,  55.,  64.,  65.],
        [ 44.,  49.,  61.,  55.,  63.,  56.,  44.,  55.,  57.,  92.],
        [ 54.,  60.,  56.,  24.,  62.,  67.,  78.,  51.,  68.,  56.],
        [ 48.,  45.,  51.,  56.,  75.,  46.,  42.,  72.,  60.,  84.],
        [ 94.,  47.,  55.,  54.,  47.,  59.,  52.,  54.,  60.,  55.],
        [ 57.,  55.,  64.,  46.,  69.,  51.,  86.,  47.,  60.,  43.],
        [ 49.,  52.,  45.,  52.,  75.,  57.,  41.,  62.,  48.,  92.],
        [ 85.,  48.,  67.,  56.,  45.,  54.,  54.,  57.,  65.,  50.],
        [ 44.,  98.,  54.,  53.,  54.,  53.,  50.,  55.,  60.,  54.],
        [ 58.,  57.,  44.,  67.,  45.,  86.,  59.,  46.,  60.,  64.],
        [ 51.,  43.,  46.,  53.,  67.,  56.,  41.,  66.,  67.,  90.],
        [ 58.,  52.,  65.,  67.,  45.,  44.,  37.,  87.,  42.,  62.],
        [ 48.,  59.,  62.,  73.,  48.,  59.,  52.,  53.,  62.,  56.],
        [ 45.,  55.,  53.,  51.,  96.,  51.,  57.,  56.,  59.,  61.]],
       device='cuda:0')
Train accuarcate: 95.12%



iteration:
  141
    0  1419   bit_w:-1  loss: 0.12678
    1  1505   bit_w:-1  loss: 0.12653
    2   945   bit_w:-1  loss: 0.12656
    3  1553   bit_w:-1  loss: 0.12636
    4  1552   bit_w: 1  loss: 0.12646
   3435   3756   4196   1459   3277    829   3603   1673   3079   1932
      1      0      1     -1      1      0      0     -1      1      0
Train accuarcate: 96.14%
tensor([[ 50.,  52.,  57.,  62.,  52.,  50.,  39., 104.,  50.,  53.],
        [ 58.,  62.,  93.,  64.,  44.,  58.,  58.,  45.,  63.,  42.],
        [ 46.,  91.,  64.,  51.,  55.,  52.,  57.,  53.,  62.,  46.],
        [ 89.,  51.,  66.,  48.,  44.,  49.,  63.,  60.,  50.,  61.],
        [ 52.,  63.,  51.,  44.,  97.,  50.,  60.,  54.,  58.,  65.],
        [ 46.,  93.,  60.,  47.,  62.,  44.,  51.,  62.,  59.,  48.],
        [ 38.,  54.,  41.,  62.,  89.,  55.,  50.,  55.,  65.,  65.],
        [ 44.,  49.,  61.,  56.,  63.,  56.,  44.,  56.,  57.,  92.],
        [ 54.,  60.,  56.,  25.,  62.,  67.,  78.,  52.,  68.,  56.],
        [ 49.,  45.,  52.,  56.,  76.,  46.,  42.,  72.,  61.,  84.],
        [ 95.,  47.,  56.,  54.,  48.,  59.,  52.,  54.,  61.,  55.],
        [ 57.,  55.,  64.,  47.,  69.,  51.,  86.,  48.,  60.,  43.],
        [ 50.,  52.,  46.,  52.,  76.,  57.,  41.,  62.,  49.,  92.],
        [ 85.,  48.,  67.,  57.,  45.,  54.,  54.,  58.,  65.,  50.],
        [ 44.,  98.,  54.,  54.,  54.,  53.,  50.,  56.,  60.,  54.],
        [ 58.,  57.,  44.,  68.,  45.,  86.,  59.,  47.,  60.,  64.],
        [ 52.,  43.,  47.,  53.,  68.,  56.,  41.,  66.,  68.,  90.],
        [ 58.,  52.,  65.,  68.,  45.,  44.,  37.,  88.,  42.,  62.],
        [ 49.,  59.,  63.,  73.,  49.,  59.,  52.,  53.,  63.,  56.],
        [ 45.,  55.,  53.,  52.,  96.,  51.,  57.,  57.,  59.,  61.]],
       device='cuda:0')
Train accuarcate: 95.23%



iteration:
  142
    0  1474   bit_w:-1  loss: 0.12614
    1  1503   bit_w: 1  loss: 0.12593
    2  1408   bit_w:-1  loss: 0.12604
    3  1537   bit_w:-1  loss: 0.12577
    4  1479   bit_w:-1  loss: 0.12584
   4579   2213   3953   2413   4170   1723    952   2810   3948   2891
      1      1      0      0      1     -1     -1      0      1      0
Train accuarcate: 96.16%
tensor([[ 50.,  52.,  57.,  62.,  52.,  51.,  40., 104.,  50.,  53.],
        [ 59.,  63.,  93.,  64.,  45.,  58.,  58.,  45.,  64.,  42.],
        [ 47.,  92.,  64.,  51.,  56.,  52.,  57.,  53.,  63.,  46.],
        [ 89.,  51.,  66.,  48.,  44.,  50.,  64.,  60.,  50.,  61.],
        [ 53.,  64.,  51.,  44.,  98.,  50.,  60.,  54.,  59.,  65.],
        [ 47.,  94.,  60.,  47.,  63.,  44.,  51.,  62.,  60.,  48.],
        [ 38.,  54.,  41.,  62.,  89.,  56.,  51.,  55.,  65.,  65.],
        [ 45.,  50.,  61.,  56.,  64.,  56.,  44.,  56.,  58.,  92.],
        [ 54.,  60.,  56.,  25.,  62.,  68.,  79.,  52.,  68.,  56.],
        [ 49.,  45.,  52.,  56.,  76.,  47.,  43.,  72.,  61.,  84.],
        [ 96.,  48.,  56.,  54.,  49.,  59.,  52.,  54.,  62.,  55.],
        [ 57.,  55.,  64.,  47.,  69.,  52.,  87.,  48.,  60.,  43.],
        [ 50.,  52.,  46.,  52.,  76.,  58.,  42.,  62.,  49.,  92.],
        [ 86.,  49.,  67.,  57.,  46.,  54.,  54.,  58.,  66.,  50.],
        [ 44.,  98.,  54.,  54.,  54.,  54.,  51.,  56.,  60.,  54.],
        [ 58.,  57.,  44.,  68.,  45.,  87.,  60.,  47.,  60.,  64.],
        [ 52.,  43.,  47.,  53.,  68.,  57.,  42.,  66.,  68.,  90.],
        [ 58.,  52.,  65.,  68.,  45.,  45.,  38.,  88.,  42.,  62.],
        [ 50.,  60.,  63.,  73.,  50.,  59.,  52.,  53.,  64.,  56.],
        [ 46.,  56.,  53.,  52.,  97.,  51.,  57.,  57.,  60.,  61.]],
       device='cuda:0')
Train accuarcate: 95.16%



iteration:
  143
    0  1502   bit_w:-1  loss: 0.12541
    1  1511   bit_w:-1  loss: 0.12527
    2  1571   bit_w:-1  loss: 0.12525
    3  1510   bit_w: 1  loss: 0.12503
    4  1576   bit_w: 1  loss: 0.12510
   2475   1718   1376   1606   2148    943    404   5280   2423   3696
      0     -1     -1     -1      0      0      0      1      0      1
Train accuarcate: 96.19%
tensor([[ 50.,  52.,  57.,  62.,  52.,  51.,  40., 105.,  50.,  54.],
        [ 59.,  64.,  94.,  65.,  45.,  58.,  58.,  45.,  64.,  42.],
        [ 47.,  92.,  64.,  51.,  56.,  52.,  57.,  54.,  63.,  47.],
        [ 89.,  52.,  67.,  49.,  44.,  50.,  64.,  60.,  50.,  61.],
        [ 53.,  64.,  51.,  44.,  98.,  50.,  60.,  55.,  59.,  66.],
        [ 47.,  94.,  60.,  47.,  63.,  44.,  51.,  63.,  60.,  49.],
        [ 38.,  55.,  42.,  63.,  89.,  56.,  51.,  55.,  65.,  65.],
        [ 45.,  50.,  61.,  56.,  64.,  56.,  44.,  57.,  58.,  93.],
        [ 54.,  61.,  57.,  26.,  62.,  68.,  79.,  52.,  68.,  56.],
        [ 49.,  45.,  52.,  56.,  76.,  47.,  43.,  73.,  61.,  85.],
        [ 96.,  49.,  57.,  55.,  49.,  59.,  52.,  54.,  62.,  55.],
        [ 57.,  55.,  64.,  47.,  69.,  52.,  87.,  49.,  60.,  44.],
        [ 50.,  52.,  46.,  52.,  76.,  58.,  42.,  63.,  49.,  93.],
        [ 86.,  49.,  67.,  57.,  46.,  54.,  54.,  59.,  66.,  51.],
        [ 44.,  99.,  55.,  55.,  54.,  54.,  51.,  56.,  60.,  54.],
        [ 58.,  57.,  44.,  68.,  45.,  87.,  60.,  48.,  60.,  65.],
        [ 52.,  43.,  47.,  53.,  68.,  57.,  42.,  67.,  68.,  91.],
        [ 58.,  52.,  65.,  68.,  45.,  45.,  38.,  89.,  42.,  63.],
        [ 50.,  60.,  63.,  73.,  50.,  59.,  52.,  54.,  64.,  57.],
        [ 46.,  56.,  53.,  52.,  97.,  51.,  57.,  58.,  60.,  62.]],
       device='cuda:0')
Train accuarcate: 95.19%



iteration:
  144
    0  1557   bit_w:-1  loss: 0.12482
    1  1309   bit_w: 1  loss: 0.12457
    2  1392   bit_w: 1  loss: 0.12466
    3   981   bit_w: 1  loss: 0.12431
    4  1498   bit_w:-1  loss: 0.12450
   3535   6640   4426   3580   1283   4662   1813   3715   4758   1395
     -1      0      0      0     -1      1     -1      0      1     -1
Train accuarcate: 96.17%
tensor([[ 51.,  52.,  57.,  62.,  53.,  51.,  41., 105.,  50.,  55.],
        [ 59.,  64.,  94.,  65.,  45.,  59.,  58.,  45.,  65.,  42.],
        [ 47.,  92.,  64.,  51.,  56.,  53.,  57.,  54.,  64.,  47.],
        [ 90.,  52.,  67.,  49.,  45.,  50.,  65.,  60.,  50.,  62.],
        [ 54.,  64.,  51.,  44.,  99.,  50.,  61.,  55.,  59.,  67.],
        [ 47.,  94.,  60.,  47.,  63.,  45.,  51.,  63.,  61.,  49.],
        [ 39.,  55.,  42.,  63.,  90.,  56.,  52.,  55.,  65.,  66.],
        [ 46.,  50.,  61.,  56.,  65.,  56.,  45.,  57.,  58.,  94.],
        [ 55.,  61.,  57.,  26.,  63.,  68.,  80.,  52.,  68.,  57.],
        [ 50.,  45.,  52.,  56.,  77.,  47.,  44.,  73.,  61.,  86.],
        [ 97.,  49.,  57.,  55.,  50.,  59.,  53.,  54.,  62.,  56.],
        [ 58.,  55.,  64.,  47.,  70.,  52.,  88.,  49.,  60.,  45.],
        [ 51.,  52.,  46.,  52.,  77.,  58.,  43.,  63.,  49.,  94.],
        [ 87.,  49.,  67.,  57.,  47.,  54.,  55.,  59.,  66.,  52.],
        [ 44.,  99.,  55.,  55.,  54.,  55.,  51.,  56.,  61.,  54.],
        [ 58.,  57.,  44.,  68.,  45.,  88.,  60.,  48.,  61.,  65.],
        [ 53.,  43.,  47.,  53.,  69.,  57.,  43.,  67.,  68.,  92.],
        [ 58.,  52.,  65.,  68.,  45.,  46.,  38.,  89.,  43.,  63.],
        [ 50.,  60.,  63.,  73.,  50.,  60.,  52.,  54.,  65.,  57.],
        [ 47.,  56.,  53.,  52.,  98.,  51.,  58.,  58.,  60.,  63.]],
       device='cuda:0')
Train accuarcate: 95.21%



iteration:
  145
    0  1489   bit_w:-1  loss: 0.12422
    1  1493   bit_w:-1  loss: 0.12397
    2   854   bit_w: 1  loss: 0.12390
    3  1352   bit_w: 1  loss: 0.12376
    4  1574   bit_w: 1  loss: 0.12379
   1484   3215   1585   2695   1889   1685   2492   4947   1867   1629
     -1      1     -1      1      0      0      1      1      0     -1
Train accuarcate: 96.20%
tensor([[ 51.,  53.,  57.,  63.,  53.,  51.,  42., 106.,  50.,  55.],
        [ 60.,  64.,  95.,  65.,  45.,  59.,  58.,  45.,  65.,  43.],
        [ 48.,  92.,  65.,  51.,  56.,  53.,  57.,  54.,  64.,  48.],
        [ 91.,  52.,  68.,  49.,  45.,  50.,  65.,  60.,  50.,  63.],
        [ 55.,  64.,  52.,  44.,  99.,  50.,  61.,  55.,  59.,  68.],
        [ 47.,  95.,  60.,  48.,  63.,  45.,  52.,  64.,  61.,  49.],
        [ 39.,  56.,  42.,  64.,  90.,  56.,  53.,  56.,  65.,  66.],
        [ 47.,  50.,  62.,  56.,  65.,  56.,  45.,  57.,  58.,  95.],
        [ 55.,  62.,  57.,  27.,  63.,  68.,  81.,  53.,  68.,  57.],
        [ 51.,  45.,  53.,  56.,  77.,  47.,  44.,  73.,  61.,  87.],
        [ 98.,  49.,  58.,  55.,  50.,  59.,  53.,  54.,  62.,  57.],
        [ 59.,  55.,  65.,  47.,  70.,  52.,  88.,  49.,  60.,  46.],
        [ 52.,  52.,  47.,  52.,  77.,  58.,  43.,  63.,  49.,  95.],
        [ 87.,  50.,  67.,  58.,  47.,  54.,  56.,  60.,  66.,  52.],
        [ 45.,  99.,  56.,  55.,  54.,  55.,  51.,  56.,  61.,  55.],
        [ 59.,  57.,  45.,  68.,  45.,  88.,  60.,  48.,  61.,  66.],
        [ 54.,  43.,  48.,  53.,  69.,  57.,  43.,  67.,  68.,  93.],
        [ 58.,  53.,  65.,  69.,  45.,  46.,  39.,  90.,  43.,  63.],
        [ 51.,  60.,  64.,  73.,  50.,  60.,  52.,  54.,  65.,  58.],
        [ 48.,  56.,  54.,  52.,  98.,  51.,  58.,  58.,  60.,  64.]],
       device='cuda:0')
Train accuarcate: 95.25%



iteration:
  146
    0  1120   bit_w:-1  loss: 0.12352
    1  1502   bit_w: 1  loss: 0.12330
    2  1127   bit_w: 1  loss: 0.12324
    3  1014   bit_w: 1  loss: 0.12307
    4  1415   bit_w:-1  loss: 0.12312
   3163   5104   4406   3143   2493   3331   3361   2638   1942   2660
      0      0      1      1     -1      1      0      0     -1      0
Train accuarcate: 96.20%
tensor([[ 51.,  53.,  57.,  63.,  54.,  51.,  42., 106.,  51.,  55.],
        [ 60.,  64.,  96.,  66.,  45.,  60.,  58.,  45.,  65.,  43.],
        [ 48.,  92.,  66.,  52.,  56.,  54.,  57.,  54.,  64.,  48.],
        [ 91.,  52.,  68.,  49.,  46.,  50.,  65.,  60.,  51.,  63.],
        [ 55.,  64.,  53.,  45.,  99.,  51.,  61.,  55.,  59.,  68.],
        [ 47.,  95.,  61.,  49.,  63.,  46.,  52.,  64.,  61.,  49.],
        [ 39.,  56.,  42.,  64.,  91.,  56.,  53.,  56.,  66.,  66.],
        [ 47.,  50.,  63.,  57.,  65.,  57.,  45.,  57.,  58.,  95.],
        [ 55.,  62.,  58.,  28.,  63.,  69.,  81.,  53.,  68.,  57.],
        [ 51.,  45.,  54.,  57.,  77.,  48.,  44.,  73.,  61.,  87.],
        [ 98.,  49.,  59.,  56.,  50.,  60.,  53.,  54.,  62.,  57.],
        [ 59.,  55.,  66.,  48.,  70.,  53.,  88.,  49.,  60.,  46.],
        [ 52.,  52.,  47.,  52.,  78.,  58.,  43.,  63.,  50.,  95.],
        [ 87.,  50.,  67.,  58.,  48.,  54.,  56.,  60.,  67.,  52.],
        [ 45.,  99.,  57.,  56.,  54.,  56.,  51.,  56.,  61.,  55.],
        [ 59.,  57.,  45.,  68.,  46.,  88.,  60.,  48.,  62.,  66.],
        [ 54.,  43.,  49.,  54.,  69.,  58.,  43.,  67.,  68.,  93.],
        [ 58.,  53.,  65.,  69.,  46.,  46.,  39.,  90.,  44.,  63.],
        [ 51.,  60.,  64.,  73.,  51.,  60.,  52.,  54.,  66.,  58.],
        [ 48.,  56.,  55.,  53.,  98.,  52.,  58.,  58.,  60.,  64.]],
       device='cuda:0')
Train accuarcate: 95.24%



iteration:
  147
    0  1420   bit_w:-1  loss: 0.12273
    1  1272   bit_w: 1  loss: 0.12262
    2   912   bit_w:-1  loss: 0.12261
    3  1370   bit_w:-1  loss: 0.12243
    4   850   bit_w:-1  loss: 0.12241
   2653    599    983   4354   3121   3494    360   5070   2186   3813
      1     -1      0      0      0      1     -1      0      1      1
Train accuarcate: 96.25%
tensor([[ 52.,  53.,  57.,  63.,  54.,  52.,  42., 106.,  52.,  56.],
        [ 60.,  65.,  96.,  66.,  45.,  60.,  59.,  45.,  65.,  43.],
        [ 48.,  93.,  66.,  52.,  56.,  54.,  58.,  54.,  64.,  48.],
        [ 91.,  53.,  68.,  49.,  46.,  50.,  66.,  60.,  51.,  63.],
        [ 55.,  65.,  53.,  45.,  99.,  51.,  62.,  55.,  59.,  68.],
        [ 47.,  96.,  61.,  49.,  63.,  46.,  53.,  64.,  61.,  49.],
        [ 39.,  57.,  42.,  64.,  91.,  56.,  54.,  56.,  66.,  66.],
        [ 48.,  50.,  63.,  57.,  65.,  58.,  45.,  57.,  59.,  96.],
        [ 55.,  63.,  58.,  28.,  63.,  69.,  82.,  53.,  68.,  57.],
        [ 52.,  45.,  54.,  57.,  77.,  49.,  44.,  73.,  62.,  88.],
        [ 99.,  49.,  59.,  56.,  50.,  61.,  53.,  54.,  63.,  58.],
        [ 59.,  56.,  66.,  48.,  70.,  53.,  89.,  49.,  60.,  46.],
        [ 53.,  52.,  47.,  52.,  78.,  59.,  43.,  63.,  51.,  96.],
        [ 87.,  51.,  67.,  58.,  48.,  54.,  57.,  60.,  67.,  52.],
        [ 45., 100.,  57.,  56.,  54.,  56.,  52.,  56.,  61.,  55.],
        [ 60.,  57.,  45.,  68.,  46.,  89.,  60.,  48.,  63.,  67.],
        [ 55.,  43.,  49.,  54.,  69.,  59.,  43.,  67.,  69.,  94.],
        [ 59.,  53.,  65.,  69.,  46.,  47.,  39.,  90.,  45.,  64.],
        [ 51.,  61.,  64.,  73.,  51.,  60.,  53.,  54.,  66.,  58.],
        [ 49.,  56.,  55.,  53.,  98.,  53.,  58.,  58.,  61.,  65.]],
       device='cuda:0')
Train accuarcate: 95.23%



iteration:
  148
    0  1360   bit_w:-1  loss: 0.12200
    1  1219   bit_w:-1  loss: 0.12184
    2  1476   bit_w: 1  loss: 0.12180
    3  1322   bit_w:-1  loss: 0.12167
    4  1287   bit_w: 1  loss: 0.12171
   3198   6402   2845   1434   4397   1839   2567   5463   2608   2445
      0      1      0     -1      1      0      0      1      0      0
Train accuarcate: 96.25%
tensor([[ 52.,  54.,  57.,  63.,  55.,  52.,  42., 107.,  52.,  56.],
        [ 60.,  66.,  96.,  66.,  46.,  60.,  59.,  46.,  65.,  43.],
        [ 48.,  94.,  66.,  52.,  57.,  54.,  58.,  55.,  64.,  48.],
        [ 91.,  53.,  68.,  50.,  46.,  50.,  66.,  60.,  51.,  63.],
        [ 55.,  66.,  53.,  45., 100.,  51.,  62.,  56.,  59.,  68.],
        [ 47.,  97.,  61.,  49.,  64.,  46.,  53.,  65.,  61.,  49.],
        [ 39.,  58.,  42.,  64.,  92.,  56.,  54.,  57.,  66.,  66.],
        [ 48.,  50.,  63.,  58.,  65.,  58.,  45.,  57.,  59.,  96.],
        [ 55.,  64.,  58.,  28.,  64.,  69.,  82.,  54.,  68.,  57.],
        [ 52.,  46.,  54.,  57.,  78.,  49.,  44.,  74.,  62.,  88.],
        [ 99.,  50.,  59.,  56.,  51.,  61.,  53.,  55.,  63.,  58.],
        [ 59.,  57.,  66.,  48.,  71.,  53.,  89.,  50.,  60.,  46.],
        [ 53.,  53.,  47.,  52.,  79.,  59.,  43.,  64.,  51.,  96.],
        [ 87.,  52.,  67.,  58.,  49.,  54.,  57.,  61.,  67.,  52.],
        [ 45., 101.,  57.,  56.,  55.,  56.,  52.,  57.,  61.,  55.],
        [ 60.,  57.,  45.,  69.,  46.,  89.,  60.,  48.,  63.,  67.],
        [ 55.,  44.,  49.,  54.,  70.,  59.,  43.,  68.,  69.,  94.],
        [ 59.,  54.,  65.,  69.,  47.,  47.,  39.,  91.,  45.,  64.],
        [ 51.,  61.,  64.,  74.,  51.,  60.,  53.,  54.,  66.,  58.],
        [ 49.,  57.,  55.,  53.,  99.,  53.,  58.,  59.,  61.,  65.]],
       device='cuda:0')
Train accuarcate: 95.26%



iteration:
  149
    0  1526   bit_w:-1  loss: 0.12140
    1  1414   bit_w:-1  loss: 0.12122
    2  1267   bit_w: 1  loss: 0.12129
    3  1303   bit_w:-1  loss: 0.12110
    4  1422   bit_w:-1  loss: 0.12107
   1697   3238   4089    919   1760    510    884   3968   2913   1148
      0      0      1      0      0      0      0      1      1     -1
Train accuarcate: 96.29%
tensor([[ 52.,  54.,  57.,  63.,  55.,  52.,  42., 107.,  52.,  57.],
        [ 60.,  66.,  97.,  66.,  46.,  60.,  59.,  47.,  66.,  43.],
        [ 48.,  94.,  67.,  52.,  57.,  54.,  58.,  56.,  65.,  48.],
        [ 91.,  53.,  68.,  50.,  46.,  50.,  66.,  60.,  51.,  64.],
        [ 55.,  66.,  54.,  45., 100.,  51.,  62.,  57.,  60.,  68.],
        [ 47.,  97.,  62.,  49.,  64.,  46.,  53.,  66.,  62.,  49.],
        [ 39.,  58.,  42.,  64.,  92.,  56.,  54.,  57.,  66.,  67.],
        [ 48.,  50.,  63.,  58.,  65.,  58.,  45.,  57.,  59.,  97.],
        [ 55.,  64.,  59.,  28.,  64.,  69.,  82.,  55.,  69.,  57.],
        [ 52.,  46.,  54.,  57.,  78.,  49.,  44.,  74.,  62.,  89.],
        [ 99.,  50.,  60.,  56.,  51.,  61.,  53.,  56.,  64.,  58.],
        [ 59.,  57.,  67.,  48.,  71.,  53.,  89.,  51.,  61.,  46.],
        [ 53.,  53.,  47.,  52.,  79.,  59.,  43.,  64.,  51.,  97.],
        [ 87.,  52.,  67.,  58.,  49.,  54.,  57.,  61.,  67.,  53.],
        [ 45., 101.,  57.,  56.,  55.,  56.,  52.,  57.,  61.,  56.],
        [ 60.,  57.,  46.,  69.,  46.,  89.,  60.,  49.,  64.,  67.],
        [ 55.,  44.,  50.,  54.,  70.,  59.,  43.,  69.,  70.,  94.],
        [ 59.,  54.,  65.,  69.,  47.,  47.,  39.,  91.,  45.,  65.],
        [ 51.,  61.,  64.,  74.,  51.,  60.,  53.,  54.,  66.,  59.],
        [ 49.,  57.,  56.,  53.,  99.,  53.,  58.,  60.,  62.,  65.]],
       device='cuda:0')
Train accuarcate: 95.32%



iteration:
  150
    0  1301   bit_w:-1  loss: 0.12078
    1  1435   bit_w: 1  loss: 0.12059
    2  1539   bit_w:-1  loss: 0.12042
    3  1239   bit_w: 1  loss: 0.12034
    4  1311   bit_w:-1  loss: 0.12036
   3765   3054   1916   1684    448   4279   4996   2193   1764    748
      1      0      0     -1     -1      1      1      0      0      0
Train accuarcate: 96.30%
tensor([[ 52.,  54.,  57.,  64.,  56.,  52.,  42., 107.,  52.,  57.],
        [ 61.,  66.,  97.,  66.,  46.,  61.,  60.,  47.,  66.,  43.],
        [ 48.,  94.,  67.,  53.,  58.,  54.,  58.,  56.,  65.,  48.],
        [ 92.,  53.,  68.,  50.,  46.,  51.,  67.,  60.,  51.,  64.],
        [ 55.,  66.,  54.,  46., 101.,  51.,  62.,  57.,  60.,  68.],
        [ 47.,  97.,  62.,  50.,  65.,  46.,  53.,  66.,  62.,  49.],
        [ 39.,  58.,  42.,  65.,  93.,  56.,  54.,  57.,  66.,  67.],
        [ 48.,  50.,  63.,  59.,  66.,  58.,  45.,  57.,  59.,  97.],
        [ 56.,  64.,  59.,  28.,  64.,  70.,  83.,  55.,  69.,  57.],
        [ 52.,  46.,  54.,  58.,  79.,  49.,  44.,  74.,  62.,  89.],
        [100.,  50.,  60.,  56.,  51.,  62.,  54.,  56.,  64.,  58.],
        [ 60.,  57.,  67.,  48.,  71.,  54.,  90.,  51.,  61.,  46.],
        [ 53.,  53.,  47.,  53.,  80.,  59.,  43.,  64.,  51.,  97.],
        [ 87.,  52.,  67.,  59.,  50.,  54.,  57.,  61.,  67.,  53.],
        [ 45., 101.,  57.,  57.,  56.,  56.,  52.,  57.,  61.,  56.],
        [ 61.,  57.,  46.,  69.,  46.,  90.,  61.,  49.,  64.,  67.],
        [ 55.,  44.,  50.,  55.,  71.,  59.,  43.,  69.,  70.,  94.],
        [ 60.,  54.,  65.,  69.,  47.,  48.,  40.,  91.,  45.,  65.],
        [ 51.,  61.,  64.,  75.,  52.,  60.,  53.,  54.,  66.,  59.],
        [ 49.,  57.,  56.,  54., 100.,  53.,  58.,  60.,  62.,  65.]],
       device='cuda:0')
Train accuarcate: 95.29%



iteration:
  151
    0   862   bit_w:-1  loss: 0.12003
    1   877   bit_w: 1  loss: 0.11991
    2   347   bit_w: 1  loss: 0.11985
    3  1390   bit_w: 1  loss: 0.11972
    4   979   bit_w: 1  loss: 0.11968
    462   4046   1221   4580   3816   2871   2894   3647   4425   3952
     -1      1     -1      0      0      0      0      1      1      0
Train accuarcate: 96.33%
tensor([[ 53.,  54.,  58.,  64.,  56.,  52.,  42., 107.,  52.,  57.],
        [ 62.,  66.,  98.,  66.,  46.,  61.,  60.,  47.,  66.,  43.],
        [ 49.,  94.,  68.,  53.,  58.,  54.,  58.,  56.,  65.,  48.],
        [ 92.,  54.,  68.,  50.,  46.,  51.,  67.,  61.,  52.,  64.],
        [ 55.,  67.,  54.,  46., 101.,  51.,  62.,  58.,  61.,  68.],
        [ 47.,  98.,  62.,  50.,  65.,  46.,  53.,  67.,  63.,  49.],
        [ 39.,  59.,  42.,  65.,  93.,  56.,  54.,  58.,  67.,  67.],
        [ 49.,  50.,  64.,  59.,  66.,  58.,  45.,  57.,  59.,  97.],
        [ 57.,  64.,  60.,  28.,  64.,  70.,  83.,  55.,  69.,  57.],
        [ 52.,  47.,  54.,  58.,  79.,  49.,  44.,  75.,  63.,  89.],
        [101.,  50.,  61.,  56.,  51.,  62.,  54.,  56.,  64.,  58.],
        [ 61.,  57.,  68.,  48.,  71.,  54.,  90.,  51.,  61.,  46.],
        [ 54.,  53.,  48.,  53.,  80.,  59.,  43.,  64.,  51.,  97.],
        [ 88.,  52.,  68.,  59.,  50.,  54.,  57.,  61.,  67.,  53.],
        [ 45., 102.,  57.,  57.,  56.,  56.,  52.,  58.,  62.,  56.],
        [ 61.,  58.,  46.,  69.,  46.,  90.,  61.,  50.,  65.,  67.],
        [ 55.,  45.,  50.,  55.,  71.,  59.,  43.,  70.,  71.,  94.],
        [ 61.,  54.,  66.,  69.,  47.,  48.,  40.,  91.,  45.,  65.],
        [ 51.,  62.,  64.,  75.,  52.,  60.,  53.,  55.,  67.,  59.],
        [ 50.,  57.,  57.,  54., 100.,  53.,  58.,  60.,  62.,  65.]],
       device='cuda:0')
Train accuarcate: 95.34%



iteration:
  152
    0  1495   bit_w:-1  loss: 0.11943
    1  1026   bit_w:-1  loss: 0.11926
    2  1360   bit_w:-1  loss: 0.11927
    3  1443   bit_w: 1  loss: 0.11908
    4  1168   bit_w:-1  loss: 0.11915
   3841   5004   2032   2359   4313   3551   3433   2269   3723   4433
      0      0      0     -1      1      0      1     -1      0      1
Train accuarcate: 96.36%
tensor([[ 53.,  54.,  58.,  65.,  56.,  52.,  42., 108.,  52.,  57.],
        [ 62.,  66.,  98.,  66.,  47.,  61.,  61.,  47.,  66.,  44.],
        [ 49.,  94.,  68.,  54.,  58.,  54.,  58.,  57.,  65.,  48.],
        [ 92.,  54.,  68.,  50.,  47.,  51.,  68.,  61.,  52.,  65.],
        [ 55.,  67.,  54.,  47., 101.,  51.,  62.,  59.,  61.,  68.],
        [ 47.,  98.,  62.,  50.,  66.,  46.,  54.,  67.,  63.,  50.],
        [ 39.,  59.,  42.,  65.,  94.,  56.,  55.,  58.,  67.,  68.],
        [ 49.,  50.,  64.,  60.,  66.,  58.,  45.,  58.,  59.,  97.],
        [ 57.,  64.,  60.,  28.,  65.,  70.,  84.,  55.,  69.,  58.],
        [ 52.,  47.,  54.,  58.,  80.,  49.,  45.,  75.,  63.,  90.],
        [101.,  50.,  61.,  56.,  52.,  62.,  55.,  56.,  64.,  59.],
        [ 61.,  57.,  68.,  48.,  72.,  54.,  91.,  51.,  61.,  47.],
        [ 54.,  53.,  48.,  53.,  81.,  59.,  44.,  64.,  51.,  98.],
        [ 88.,  52.,  68.,  60.,  50.,  54.,  57.,  62.,  67.,  53.],
        [ 45., 102.,  57.,  57.,  57.,  56.,  53.,  58.,  62.,  57.],
        [ 61.,  58.,  46.,  69.,  47.,  90.,  62.,  50.,  65.,  68.],
        [ 55.,  45.,  50.,  55.,  72.,  59.,  44.,  70.,  71.,  95.],
        [ 61.,  54.,  66.,  70.,  47.,  48.,  40.,  92.,  45.,  65.],
        [ 51.,  62.,  64.,  76.,  52.,  60.,  53.,  56.,  67.,  59.],
        [ 50.,  57.,  57.,  55., 100.,  53.,  58.,  61.,  62.,  65.]],
       device='cuda:0')
Train accuarcate: 95.39%



iteration:
  153
    0  1432   bit_w:-1  loss: 0.11884
    1  1517   bit_w: 1  loss: 0.11873
    2   992   bit_w: 1  loss: 0.11870
    3  1487   bit_w:-1  loss: 0.11857
    4  1489   bit_w:-1  loss: 0.11862
   3878   1415    973   2265   1960   1228   3259   2522   1613   1679
      1      0     -1      0      0     -1      1      1     -1      0
Train accuarcate: 96.36%
tensor([[ 53.,  54.,  59.,  65.,  56.,  53.,  42., 108.,  53.,  57.],
        [ 62.,  66.,  99.,  66.,  47.,  62.,  61.,  47.,  67.,  44.],
        [ 49.,  94.,  69.,  54.,  58.,  55.,  58.,  57.,  66.,  48.],
        [ 93.,  54.,  68.,  50.,  47.,  51.,  69.,  62.,  52.,  65.],
        [ 55.,  67.,  55.,  47., 101.,  52.,  62.,  59.,  62.,  68.],
        [ 47.,  98.,  63.,  50.,  66.,  47.,  54.,  67.,  64.,  50.],
        [ 40.,  59.,  42.,  65.,  94.,  56.,  56.,  59.,  67.,  68.],
        [ 49.,  50.,  65.,  60.,  66.,  59.,  45.,  58.,  60.,  97.],
        [ 58.,  64.,  60.,  28.,  65.,  70.,  85.,  56.,  69.,  58.],
        [ 52.,  47.,  55.,  58.,  80.,  50.,  45.,  75.,  64.,  90.],
        [102.,  50.,  61.,  56.,  52.,  62.,  56.,  57.,  64.,  59.],
        [ 62.,  57.,  68.,  48.,  72.,  54.,  92.,  52.,  61.,  47.],
        [ 54.,  53.,  49.,  53.,  81.,  60.,  44.,  64.,  52.,  98.],
        [ 89.,  52.,  68.,  60.,  50.,  54.,  58.,  63.,  67.,  53.],
        [ 45., 102.,  58.,  57.,  57.,  57.,  53.,  58.,  63.,  57.],
        [ 62.,  58.,  46.,  69.,  47.,  90.,  63.,  51.,  65.,  68.],
        [ 55.,  45.,  51.,  55.,  72.,  60.,  44.,  70.,  72.,  95.],
        [ 61.,  54.,  67.,  70.,  47.,  49.,  40.,  92.,  46.,  65.],
        [ 52.,  62.,  64.,  76.,  52.,  60.,  54.,  57.,  67.,  59.],
        [ 51.,  57.,  57.,  55., 100.,  53.,  59.,  62.,  62.,  65.]],
       device='cuda:0')
Train accuarcate: 95.37%



iteration:
  154
    0  1351   bit_w:-1  loss: 0.11821
    1   602   bit_w:-1  loss: 0.11809
    2   934   bit_w: 1  loss: 0.11816
    3  1268   bit_w: 1  loss: 0.11803
    4  1396   bit_w:-1  loss: 0.11802
   3648   5624   3068   1684   2071   2683   1181   4512   3244   3868
      0      1      0     -1     -1     -1      0      0      0      1
Train accuarcate: 96.38%
tensor([[ 53.,  54.,  59.,  66.,  57.,  54.,  42., 108.,  53.,  57.],
        [ 62.,  66.,  99.,  67.,  48.,  63.,  61.,  47.,  67.,  44.],
        [ 49.,  94.,  69.,  55.,  59.,  56.,  58.,  57.,  66.,  48.],
        [ 93.,  55.,  68.,  50.,  47.,  51.,  69.,  62.,  52.,  66.],
        [ 55.,  68.,  55.,  47., 101.,  52.,  62.,  59.,  62.,  69.],
        [ 47.,  99.,  63.,  50.,  66.,  47.,  54.,  67.,  64.,  51.],
        [ 40.,  59.,  42.,  66.,  95.,  57.,  56.,  59.,  67.,  68.],
        [ 49.,  51.,  65.,  60.,  66.,  59.,  45.,  58.,  60.,  98.],
        [ 58.,  64.,  60.,  29.,  66.,  71.,  85.,  56.,  69.,  58.],
        [ 52.,  47.,  55.,  59.,  81.,  51.,  45.,  75.,  64.,  90.],
        [102.,  51.,  61.,  56.,  52.,  62.,  56.,  57.,  64.,  60.],
        [ 62.,  57.,  68.,  49.,  73.,  55.,  92.,  52.,  61.,  47.],
        [ 54.,  53.,  49.,  54.,  82.,  61.,  44.,  64.,  52.,  98.],
        [ 89.,  53.,  68.,  60.,  50.,  54.,  58.,  63.,  67.,  54.],
        [ 45., 103.,  58.,  57.,  57.,  57.,  53.,  58.,  63.,  58.],
        [ 62.,  59.,  46.,  69.,  47.,  90.,  63.,  51.,  65.,  69.],
        [ 55.,  46.,  51.,  55.,  72.,  60.,  44.,  70.,  72.,  96.],
        [ 61.,  55.,  67.,  70.,  47.,  49.,  40.,  92.,  46.,  66.],
        [ 52.,  62.,  64.,  77.,  53.,  61.,  54.,  57.,  67.,  59.],
        [ 51.,  58.,  57.,  55., 100.,  53.,  59.,  62.,  62.,  66.]],
       device='cuda:0')
Train accuarcate: 95.38%



iteration:
  155
    0  1541   bit_w:-1  loss: 0.11778
    1  1486   bit_w:-1  loss: 0.11758
    2  1455   bit_w: 1  loss: 0.11770
    3  1069   bit_w: 1  loss: 0.11743
    4  1343   bit_w:-1  loss: 0.11755
   1932   4822   3488   4464   2356   3076   1708   2743   2658   2697
     -1      0      1      0      0      0     -1      0     -1      0
Train accuarcate: 96.40%
tensor([[ 54.,  54.,  59.,  66.,  57.,  54.,  43., 108.,  54.,  57.],
        [ 62.,  66., 100.,  67.,  48.,  63.,  61.,  47.,  67.,  44.],
        [ 49.,  94.,  70.,  55.,  59.,  56.,  58.,  57.,  66.,  48.],
        [ 93.,  55.,  69.,  50.,  47.,  51.,  69.,  62.,  52.,  66.],
        [ 56.,  68.,  55.,  47., 101.,  52.,  63.,  59.,  63.,  69.],
        [ 47.,  99.,  64.,  50.,  66.,  47.,  54.,  67.,  64.,  51.],
        [ 40.,  59.,  43.,  66.,  95.,  57.,  56.,  59.,  67.,  68.],
        [ 49.,  51.,  66.,  60.,  66.,  59.,  45.,  58.,  60.,  98.],
        [ 59.,  64.,  60.,  29.,  66.,  71.,  86.,  56.,  70.,  58.],
        [ 53.,  47.,  55.,  59.,  81.,  51.,  46.,  75.,  65.,  90.],
        [103.,  51.,  61.,  56.,  52.,  62.,  57.,  57.,  65.,  60.],
        [ 63.,  57.,  68.,  49.,  73.,  55.,  93.,  52.,  62.,  47.],
        [ 54.,  53.,  50.,  54.,  82.,  61.,  44.,  64.,  52.,  98.],
        [ 89.,  53.,  69.,  60.,  50.,  54.,  58.,  63.,  67.,  54.],
        [ 45., 103.,  59.,  57.,  57.,  57.,  53.,  58.,  63.,  58.],
        [ 62.,  59.,  47.,  69.,  47.,  90.,  63.,  51.,  65.,  69.],
        [ 56.,  46.,  51.,  55.,  72.,  60.,  45.,  70.,  73.,  96.],
        [ 61.,  55.,  68.,  70.,  47.,  49.,  40.,  92.,  46.,  66.],
        [ 52.,  62.,  65.,  77.,  53.,  61.,  54.,  57.,  67.,  59.],
        [ 51.,  58.,  58.,  55., 100.,  53.,  59.,  62.,  62.,  66.]],
       device='cuda:0')
Train accuarcate: 95.34%



iteration:
  156
    0  1477   bit_w:-1  loss: 0.11726
    1  1448   bit_w: 1  loss: 0.11707
    2  1573   bit_w:-1  loss: 0.11711
    3  1411   bit_w: 1  loss: 0.11690
    4  1463   bit_w: 1  loss: 0.11705
   3592    802   1351    528   2060   1389   1926   2293   2882   3196
      0     -1      1     -1      0     -1      0      0      1      1
Train accuarcate: 96.38%
tensor([[ 54.,  55.,  59.,  67.,  57.,  55.,  43., 108.,  54.,  57.],
        [ 62.,  67., 100.,  68.,  48.,  64.,  61.,  47.,  67.,  44.],
        [ 49.,  95.,  70.,  56.,  59.,  57.,  58.,  57.,  66.,  48.],
        [ 93.,  56.,  69.,  51.,  47.,  52.,  69.,  62.,  52.,  66.],
        [ 56.,  69.,  55.,  48., 101.,  53.,  63.,  59.,  63.,  69.],
        [ 47., 100.,  64.,  51.,  66.,  48.,  54.,  67.,  64.,  51.],
        [ 40.,  60.,  43.,  67.,  95.,  58.,  56.,  59.,  67.,  68.],
        [ 49.,  51.,  67.,  60.,  66.,  59.,  45.,  58.,  61.,  99.],
        [ 59.,  65.,  60.,  30.,  66.,  72.,  86.,  56.,  70.,  58.],
        [ 53.,  47.,  56.,  59.,  81.,  51.,  46.,  75.,  66.,  91.],
        [103.,  52.,  61.,  57.,  52.,  63.,  57.,  57.,  65.,  60.],
        [ 63.,  57.,  69.,  49.,  73.,  55.,  93.,  52.,  63.,  48.],
        [ 54.,  53.,  51.,  54.,  82.,  61.,  44.,  64.,  53.,  99.],
        [ 89.,  53.,  70.,  60.,  50.,  54.,  58.,  63.,  68.,  55.],
        [ 45., 104.,  59.,  58.,  57.,  58.,  53.,  58.,  63.,  58.],
        [ 62.,  60.,  47.,  70.,  47.,  91.,  63.,  51.,  65.,  69.],
        [ 56.,  47.,  51.,  56.,  72.,  61.,  45.,  70.,  73.,  96.],
        [ 61.,  56.,  68.,  71.,  47.,  50.,  40.,  92.,  46.,  66.],
        [ 52.,  63.,  65.,  78.,  53.,  62.,  54.,  57.,  67.,  59.],
        [ 51.,  59.,  58.,  56., 100.,  54.,  59.,  62.,  62.,  66.]],
       device='cuda:0')
Train accuarcate: 95.41%



iteration:
  157
    0  1568   bit_w:-1  loss: 0.11670
    1  1480   bit_w:-1  loss: 0.11656
    2   935   bit_w:-1  loss: 0.11651
    3  1492   bit_w: 1  loss: 0.11642
    4  1355   bit_w: 1  loss: 0.11637
    690    262    778   2300   2415   1806   2697    568   3077   1951
     -1     -1      0      0      1      0      1     -1      1      1
Train accuarcate: 96.41%
tensor([[ 55.,  56.,  59.,  67.,  57.,  55.,  43., 109.,  54.,  57.],
        [ 63.,  68., 100.,  68.,  48.,  64.,  61.,  48.,  67.,  44.],
        [ 50.,  96.,  70.,  56.,  59.,  57.,  58.,  58.,  66.,  48.],
        [ 94.,  57.,  69.,  51.,  47.,  52.,  69.,  63.,  52.,  66.],
        [ 56.,  69.,  55.,  48., 102.,  53.,  64.,  59.,  64.,  70.],
        [ 48., 101.,  64.,  51.,  66.,  48.,  54.,  68.,  64.,  51.],
        [ 41.,  61.,  43.,  67.,  95.,  58.,  56.,  60.,  67.,  68.],
        [ 50.,  52.,  67.,  60.,  66.,  59.,  45.,  59.,  61.,  99.],
        [ 59.,  65.,  60.,  30.,  67.,  72.,  87.,  56.,  71.,  59.],
        [ 54.,  48.,  56.,  59.,  81.,  51.,  46.,  76.,  66.,  91.],
        [104.,  53.,  61.,  57.,  52.,  63.,  57.,  58.,  65.,  60.],
        [ 64.,  58.,  69.,  49.,  73.,  55.,  93.,  53.,  63.,  48.],
        [ 55.,  54.,  51.,  54.,  82.,  61.,  44.,  65.,  53.,  99.],
        [ 90.,  54.,  70.,  60.,  50.,  54.,  58.,  64.,  68.,  55.],
        [ 46., 105.,  59.,  58.,  57.,  58.,  53.,  59.,  63.,  58.],
        [ 63.,  61.,  47.,  70.,  47.,  91.,  63.,  52.,  65.,  69.],
        [ 56.,  47.,  51.,  56.,  73.,  61.,  46.,  70.,  74.,  97.],
        [ 62.,  57.,  68.,  71.,  47.,  50.,  40.,  93.,  46.,  66.],
        [ 52.,  63.,  65.,  78.,  54.,  62.,  55.,  57.,  68.,  60.],
        [ 52.,  60.,  58.,  56., 100.,  54.,  59.,  63.,  62.,  66.]],
       device='cuda:0')
Train accuarcate: 95.41%



iteration:
  158
    0  1401   bit_w:-1  loss: 0.11611
    1  1397   bit_w:-1  loss: 0.11586
    2   663   bit_w: 1  loss: 0.11568
    3  1479   bit_w:-1  loss: 0.11562
    4   376   bit_w: 1  loss: 0.11551
   1305    880    988   3739   3606   3968   2721   3556   2274   4029
      0      0     -1     -1      1      1     -1     -1      0      0
Train accuarcate: 96.47%
tensor([[ 55.,  56.,  59.,  67.,  58.,  56.,  43., 109.,  54.,  57.],
        [ 63.,  68., 101.,  69.,  48.,  64.,  62.,  49.,  67.,  44.],
        [ 50.,  96.,  71.,  57.,  59.,  57.,  59.,  59.,  66.,  48.],
        [ 94.,  57.,  70.,  52.,  47.,  52.,  70.,  64.,  52.,  66.],
        [ 56.,  69.,  56.,  49., 102.,  53.,  65.,  60.,  64.,  70.],
        [ 48., 101.,  65.,  52.,  66.,  48.,  55.,  69.,  64.,  51.],
        [ 41.,  61.,  43.,  67.,  96.,  59.,  56.,  60.,  67.,  68.],
        [ 50.,  52.,  68.,  61.,  66.,  59.,  46.,  60.,  61.,  99.],
        [ 59.,  65.,  61.,  31.,  67.,  72.,  88.,  57.,  71.,  59.],
        [ 54.,  48.,  56.,  59.,  82.,  52.,  46.,  76.,  66.,  91.],
        [104.,  53.,  62.,  58.,  52.,  63.,  58.,  59.,  65.,  60.],
        [ 64.,  58.,  70.,  50.,  73.,  55.,  94.,  54.,  63.,  48.],
        [ 55.,  54.,  51.,  54.,  83.,  62.,  44.,  65.,  53.,  99.],
        [ 90.,  54.,  71.,  61.,  50.,  54.,  59.,  65.,  68.,  55.],
        [ 46., 105.,  60.,  59.,  57.,  58.,  54.,  60.,  63.,  58.],
        [ 63.,  61.,  48.,  71.,  47.,  91.,  64.,  53.,  65.,  69.],
        [ 56.,  47.,  52.,  57.,  73.,  61.,  47.,  71.,  74.,  97.],
        [ 62.,  57.,  68.,  71.,  48.,  51.,  40.,  93.,  46.,  66.],
        [ 52.,  63.,  65.,  78.,  55.,  63.,  55.,  57.,  68.,  60.],
        [ 52.,  60.,  59.,  57., 100.,  54.,  60.,  64.,  62.,  66.]],
       device='cuda:0')
Train accuarcate: 95.41%



iteration:
  159
    0  1453   bit_w:-1  loss: 0.11521
    1  1210   bit_w: 1  loss: 0.11504
    2  1544   bit_w:-1  loss: 0.11499
    3   516   bit_w:-1  loss: 0.11490
    4  1376   bit_w: 1  loss: 0.11492
   2359   2003   3668   3123   4434   1888   2170   3787   1898   4421
      0      1      0     -1      0      0      0      0     -1      1
Train accuarcate: 96.48%
tensor([[ 55.,  56.,  59.,  68.,  58.,  56.,  43., 109.,  55.,  57.],
        [ 63.,  68., 101.,  70.,  48.,  64.,  62.,  49.,  68.,  44.],
        [ 50.,  96.,  71.,  58.,  59.,  57.,  59.,  59.,  67.,  48.],
        [ 94.,  58.,  70.,  52.,  47.,  52.,  70.,  64.,  52.,  67.],
        [ 56.,  70.,  56.,  49., 102.,  53.,  65.,  60.,  64.,  71.],
        [ 48., 101.,  65.,  53.,  66.,  48.,  55.,  69.,  65.,  51.],
        [ 41.,  62.,  43.,  67.,  96.,  59.,  56.,  60.,  67.,  69.],
        [ 50.,  53.,  68.,  61.,  66.,  59.,  46.,  60.,  61., 100.],
        [ 59.,  65.,  61.,  32.,  67.,  72.,  88.,  57.,  72.,  59.],
        [ 54.,  49.,  56.,  59.,  82.,  52.,  46.,  76.,  66.,  92.],
        [104.,  53.,  62.,  59.,  52.,  63.,  58.,  59.,  66.,  60.],
        [ 64.,  59.,  70.,  50.,  73.,  55.,  94.,  54.,  63.,  49.],
        [ 55.,  55.,  51.,  54.,  83.,  62.,  44.,  65.,  53., 100.],
        [ 90.,  54.,  71.,  62.,  50.,  54.,  59.,  65.,  69.,  55.],
        [ 46., 106.,  60.,  59.,  57.,  58.,  54.,  60.,  63.,  59.],
        [ 63.,  62.,  48.,  71.,  47.,  91.,  64.,  53.,  65.,  70.],
        [ 56.,  48.,  52.,  57.,  73.,  61.,  47.,  71.,  74.,  98.],
        [ 62.,  58.,  68.,  71.,  48.,  51.,  40.,  93.,  46.,  67.],
        [ 52.,  64.,  65.,  78.,  55.,  63.,  55.,  57.,  68.,  61.],
        [ 52.,  60.,  59.,  58., 100.,  54.,  60.,  64.,  63.,  66.]],
       device='cuda:0')
Train accuarcate: 95.42%



iteration:
  160
    0  1520   bit_w:-1  loss: 0.11468
    1  1384   bit_w:-1  loss: 0.11450
    2  1407   bit_w: 1  loss: 0.11440
    3  1504   bit_w:-1  loss: 0.11433
    4  1438   bit_w: 1  loss: 0.11420
   2250   5793   3710   4252   4804   2764   3783   1270   3656   4757
     -1      0     -1      0      1     -1      0     -1      0      1
Train accuarcate: 96.47%
tensor([[ 56.,  56.,  60.,  68.,  58.,  57.,  43., 110.,  55.,  57.],
        [ 63.,  68., 101.,  70.,  49.,  64.,  62.,  49.,  68.,  45.],
        [ 50.,  96.,  71.,  58.,  60.,  57.,  59.,  59.,  67.,  49.],
        [ 95.,  58.,  71.,  52.,  47.,  53.,  70.,  65.,  52.,  67.],
        [ 57.,  70.,  57.,  49., 102.,  54.,  65.,  61.,  64.,  71.],
        [ 48., 101.,  65.,  53.,  67.,  48.,  55.,  69.,  65.,  52.],
        [ 41.,  62.,  43.,  67.,  97.,  59.,  56.,  60.,  67.,  70.],
        [ 50.,  53.,  68.,  61.,  67.,  59.,  46.,  60.,  61., 101.],
        [ 60.,  65.,  62.,  32.,  67.,  73.,  88.,  58.,  72.,  59.],
        [ 54.,  49.,  56.,  59.,  83.,  52.,  46.,  76.,  66.,  93.],
        [105.,  53.,  63.,  59.,  52.,  64.,  58.,  60.,  66.,  60.],
        [ 65.,  59.,  71.,  50.,  73.,  56.,  94.,  55.,  63.,  49.],
        [ 55.,  55.,  51.,  54.,  84.,  62.,  44.,  65.,  53., 101.],
        [ 90.,  54.,  71.,  62.,  51.,  54.,  59.,  65.,  69.,  56.],
        [ 46., 106.,  60.,  59.,  58.,  58.,  54.,  60.,  63.,  60.],
        [ 63.,  62.,  48.,  71.,  48.,  91.,  64.,  53.,  65.,  71.],
        [ 56.,  48.,  52.,  57.,  74.,  61.,  47.,  71.,  74.,  99.],
        [ 63.,  58.,  69.,  71.,  48.,  52.,  40.,  94.,  46.,  67.],
        [ 52.,  64.,  65.,  78.,  56.,  63.,  55.,  57.,  68.,  62.],
        [ 52.,  60.,  59.,  58., 101.,  54.,  60.,  64.,  63.,  67.]],
       device='cuda:0')
Train accuarcate: 95.38%



iteration:
  161
    0  1473   bit_w:-1  loss: 0.11396
    1  1543   bit_w: 1  loss: 0.11378
    2  1566   bit_w:-1  loss: 0.11384
    3  1022   bit_w:-1  loss: 0.11360
    4  1418   bit_w:-1  loss: 0.11371
   4425   6323   1992   3143   4306   3746   4354   4845   2759   4418
      0      0     -1      0      0      0      1      0     -1      0
Train accuarcate: 96.48%
tensor([[ 56.,  56.,  60.,  68.,  58.,  57.,  44., 110.,  55.,  57.],
        [ 63.,  68., 101.,  70.,  49.,  64.,  63.,  49.,  68.,  45.],
        [ 50.,  96.,  71.,  58.,  60.,  57.,  60.,  59.,  67.,  49.],
        [ 95.,  58.,  71.,  52.,  47.,  53.,  71.,  65.,  52.,  67.],
        [ 57.,  70.,  57.,  49., 102.,  54.,  66.,  61.,  64.,  71.],
        [ 48., 101.,  65.,  53.,  67.,  48.,  56.,  69.,  65.,  52.],
        [ 41.,  62.,  44.,  67.,  97.,  59.,  56.,  60.,  68.,  70.],
        [ 50.,  53.,  68.,  61.,  67.,  59.,  47.,  60.,  61., 101.],
        [ 60.,  65.,  63.,  32.,  67.,  73.,  88.,  58.,  73.,  59.],
        [ 54.,  49.,  57.,  59.,  83.,  52.,  46.,  76.,  67.,  93.],
        [105.,  53.,  64.,  59.,  52.,  64.,  58.,  60.,  67.,  60.],
        [ 65.,  59.,  72.,  50.,  73.,  56.,  94.,  55.,  64.,  49.],
        [ 55.,  55.,  51.,  54.,  84.,  62.,  45.,  65.,  53., 101.],
        [ 90.,  54.,  71.,  62.,  51.,  54.,  60.,  65.,  69.,  56.],
        [ 46., 106.,  60.,  59.,  58.,  58.,  55.,  60.,  63.,  60.],
        [ 63.,  62.,  49.,  71.,  48.,  91.,  64.,  53.,  66.,  71.],
        [ 56.,  48.,  52.,  57.,  74.,  61.,  48.,  71.,  74.,  99.],
        [ 63.,  58.,  69.,  71.,  48.,  52.,  41.,  94.,  46.,  67.],
        [ 52.,  64.,  65.,  78.,  56.,  63.,  56.,  57.,  68.,  62.],
        [ 52.,  60.,  59.,  58., 101.,  54.,  61.,  64.,  63.,  67.]],
       device='cuda:0')
Train accuarcate: 95.37%



iteration:
  162
    0  1468   bit_w:-1  loss: 0.11345
    1  1572   bit_w:-1  loss: 0.11334
    2  1549   bit_w:-1  loss: 0.11333
    3  1156   bit_w:-1  loss: 0.11313
    4  1548   bit_w: 1  loss: 0.11312
   5336   5804   4232   3573   4333   3540   2938   4324   4348   4532
      1      1      0     -1     -1     -1      0      1     -1      0
Train accuarcate: 96.51%
tensor([[ 56.,  56.,  60.,  69.,  59.,  58.,  44., 110.,  56.,  57.],
        [ 64.,  69., 101.,  70.,  49.,  64.,  63.,  50.,  68.,  45.],
        [ 50.,  96.,  71.,  59.,  61.,  58.,  60.,  59.,  68.,  49.],
        [ 96.,  59.,  71.,  52.,  47.,  53.,  71.,  66.,  52.,  67.],
        [ 58.,  71.,  57.,  49., 102.,  54.,  66.,  62.,  64.,  71.],
        [ 49., 102.,  65.,  53.,  67.,  48.,  56.,  70.,  65.,  52.],
        [ 41.,  62.,  44.,  68.,  98.,  60.,  56.,  60.,  69.,  70.],
        [ 51.,  54.,  68.,  61.,  67.,  59.,  47.,  61.,  61., 101.],
        [ 61.,  66.,  63.,  32.,  67.,  73.,  88.,  59.,  73.,  59.],
        [ 54.,  49.,  57.,  60.,  84.,  53.,  46.,  76.,  68.,  93.],
        [106.,  54.,  64.,  59.,  52.,  64.,  58.,  61.,  67.,  60.],
        [ 66.,  60.,  72.,  50.,  73.,  56.,  94.,  56.,  64.,  49.],
        [ 56.,  56.,  51.,  54.,  84.,  62.,  45.,  66.,  53., 101.],
        [ 90.,  54.,  71.,  63.,  52.,  55.,  60.,  65.,  70.,  56.],
        [ 47., 107.,  60.,  59.,  58.,  58.,  55.,  61.,  63.,  60.],
        [ 63.,  62.,  49.,  72.,  49.,  92.,  64.,  53.,  67.,  71.],
        [ 57.,  49.,  52.,  57.,  74.,  61.,  48.,  72.,  74.,  99.],
        [ 64.,  59.,  69.,  71.,  48.,  52.,  41.,  95.,  46.,  67.],
        [ 52.,  64.,  65.,  79.,  57.,  64.,  56.,  57.,  69.,  62.],
        [ 53.,  61.,  59.,  58., 101.,  54.,  61.,  65.,  63.,  67.]],
       device='cuda:0')
Train accuarcate: 95.39%



iteration:
  163
    0  1515   bit_w:-1  loss: 0.11291
    1  1422   bit_w: 1  loss: 0.11275
    2  1337   bit_w:-1  loss: 0.11276
    3  1448   bit_w:-1  loss: 0.11264
    4  1582   bit_w: 1  loss: 0.11257
   2194    460   2113   3370    831   2860   1109   4068   1815   3418
      0      0      0      1     -1      1      0      0      0      1
Train accuarcate: 96.54%
tensor([[ 56.,  56.,  60.,  70.,  59.,  59.,  44., 110.,  56.,  58.],
        [ 64.,  69., 101.,  70.,  50.,  64.,  63.,  50.,  68.,  45.],
        [ 50.,  96.,  71.,  59.,  62.,  58.,  60.,  59.,  68.,  49.],
        [ 96.,  59.,  71.,  53.,  47.,  54.,  71.,  66.,  52.,  68.],
        [ 58.,  71.,  57.,  49., 103.,  54.,  66.,  62.,  64.,  71.],
        [ 49., 102.,  65.,  53.,  68.,  48.,  56.,  70.,  65.,  52.],
        [ 41.,  62.,  44.,  68.,  99.,  60.,  56.,  60.,  69.,  70.],
        [ 51.,  54.,  68.,  61.,  68.,  59.,  47.,  61.,  61., 101.],
        [ 61.,  66.,  63.,  32.,  68.,  73.,  88.,  59.,  73.,  59.],
        [ 54.,  49.,  57.,  60.,  85.,  53.,  46.,  76.,  68.,  93.],
        [106.,  54.,  64.,  59.,  53.,  64.,  58.,  61.,  67.,  60.],
        [ 66.,  60.,  72.,  50.,  74.,  56.,  94.,  56.,  64.,  49.],
        [ 56.,  56.,  51.,  54.,  85.,  62.,  45.,  66.,  53., 101.],
        [ 90.,  54.,  71.,  63.,  53.,  55.,  60.,  65.,  70.,  56.],
        [ 47., 107.,  60.,  59.,  59.,  58.,  55.,  61.,  63.,  60.],
        [ 63.,  62.,  49.,  72.,  50.,  92.,  64.,  53.,  67.,  71.],
        [ 57.,  49.,  52.,  58.,  74.,  62.,  48.,  72.,  74., 100.],
        [ 64.,  59.,  69.,  72.,  48.,  53.,  41.,  95.,  46.,  68.],
        [ 52.,  64.,  65.,  79.,  58.,  64.,  56.,  57.,  69.,  62.],
        [ 53.,  61.,  59.,  58., 102.,  54.,  61.,  65.,  63.,  67.]],
       device='cuda:0')
Train accuarcate: 95.39%



iteration:
  164
    0  1570   bit_w:-1  loss: 0.11235
    1  1377   bit_w: 1  loss: 0.11216
    2  1459   bit_w: 1  loss: 0.11218
    3  1502   bit_w: 1  loss: 0.11200
    4  1549   bit_w:-1  loss: 0.11202
   5167   5603   4126   2701   4018   4181   5479   3569   3750   4328
      0      0      1     -1      0      0      1     -1     -1      0
Train accuarcate: 96.60%
tensor([[ 56.,  56.,  60.,  71.,  59.,  59.,  44., 111.,  57.,  58.],
        [ 64.,  69., 101.,  71.,  50.,  64.,  63.,  51.,  69.,  45.],
        [ 50.,  96.,  71.,  60.,  62.,  58.,  60.,  60.,  69.,  49.],
        [ 96.,  59.,  72.,  53.,  47.,  54.,  72.,  66.,  52.,  68.],
        [ 58.,  71.,  58.,  49., 103.,  54.,  67.,  62.,  64.,  71.],
        [ 49., 102.,  66.,  53.,  68.,  48.,  57.,  70.,  65.,  52.],
        [ 41.,  62.,  44.,  69.,  99.,  60.,  56.,  61.,  70.,  70.],
        [ 51.,  54.,  69.,  61.,  68.,  59.,  48.,  61.,  61., 101.],
        [ 61.,  66.,  64.,  32.,  68.,  73.,  89.,  59.,  73.,  59.],
        [ 54.,  49.,  57.,  61.,  85.,  53.,  46.,  77.,  69.,  93.],
        [106.,  54.,  65.,  59.,  53.,  64.,  59.,  61.,  67.,  60.],
        [ 66.,  60.,  73.,  50.,  74.,  56.,  95.,  56.,  64.,  49.],
        [ 56.,  56.,  52.,  54.,  85.,  62.,  46.,  66.,  53., 101.],
        [ 90.,  54.,  72.,  63.,  53.,  55.,  61.,  65.,  70.,  56.],
        [ 47., 107.,  61.,  59.,  59.,  58.,  56.,  61.,  63.,  60.],
        [ 63.,  62.,  49.,  73.,  50.,  92.,  64.,  54.,  68.,  71.],
        [ 57.,  49.,  53.,  58.,  74.,  62.,  49.,  72.,  74., 100.],
        [ 64.,  59.,  70.,  72.,  48.,  53.,  42.,  95.,  46.,  68.],
        [ 52.,  64.,  66.,  79.,  58.,  64.,  57.,  57.,  69.,  62.],
        [ 53.,  61.,  59.,  59., 102.,  54.,  61.,  66.,  64.,  67.]],
       device='cuda:0')
Train accuarcate: 95.49%



iteration:
  165
    0  1404   bit_w:-1  loss: 0.11176
    1  1274   bit_w: 1  loss: 0.11162
    2   994   bit_w:-1  loss: 0.11158
    3  1277   bit_w: 1  loss: 0.11146
    4  1217   bit_w: 1  loss: 0.11143
   2430   1256   3301   4407   2329   1612   2830   1560   2660   4546
     -1      0      0      0     -1     -1      0      0      1      1
Train accuarcate: 96.61%
tensor([[ 57.,  56.,  60.,  71.,  60.,  60.,  44., 111.,  57.,  58.],
        [ 64.,  69., 101.,  71.,  50.,  64.,  63.,  51.,  70.,  46.],
        [ 51.,  96.,  71.,  60.,  63.,  59.,  60.,  60.,  69.,  49.],
        [ 97.,  59.,  72.,  53.,  48.,  55.,  72.,  66.,  52.,  68.],
        [ 59.,  71.,  58.,  49., 104.,  55.,  67.,  62.,  64.,  71.],
        [ 50., 102.,  66.,  53.,  69.,  49.,  57.,  70.,  65.,  52.],
        [ 42.,  62.,  44.,  69., 100.,  61.,  56.,  61.,  70.,  70.],
        [ 51.,  54.,  69.,  61.,  68.,  59.,  48.,  61.,  62., 102.],
        [ 62.,  66.,  64.,  32.,  69.,  74.,  89.,  59.,  73.,  59.],
        [ 54.,  49.,  57.,  61.,  85.,  53.,  46.,  77.,  70.,  94.],
        [107.,  54.,  65.,  59.,  54.,  65.,  59.,  61.,  67.,  60.],
        [ 66.,  60.,  73.,  50.,  74.,  56.,  95.,  56.,  65.,  50.],
        [ 56.,  56.,  52.,  54.,  85.,  62.,  46.,  66.,  54., 102.],
        [ 91.,  54.,  72.,  63.,  54.,  56.,  61.,  65.,  70.,  56.],
        [ 47., 107.,  61.,  59.,  59.,  58.,  56.,  61.,  64.,  61.],
        [ 64.,  62.,  49.,  73.,  51.,  93.,  64.,  54.,  68.,  71.],
        [ 57.,  49.,  53.,  58.,  74.,  62.,  49.,  72.,  75., 101.],
        [ 65.,  59.,  70.,  72.,  49.,  54.,  42.,  95.,  46.,  68.],
        [ 52.,  64.,  66.,  79.,  58.,  64.,  57.,  57.,  70.,  63.],
        [ 54.,  61.,  59.,  59., 103.,  55.,  61.,  66.,  64.,  67.]],
       device='cuda:0')
Train accuarcate: 95.48%



iteration:
  166
    0  1425   bit_w:-1  loss: 0.11122
    1  1505   bit_w:-1  loss: 0.11102
    2  1561   bit_w:-1  loss: 0.11095
    3  1388   bit_w: 1  loss: 0.11092
    4   857   bit_w: 1  loss: 0.11087
   4355   5190   5121   1134   4743   1507   4122   2729   1821   2826
      0      1      1     -1      0      0      0     -1      0      0
Train accuarcate: 96.62%
tensor([[ 57.,  57.,  61.,  71.,  60.,  60.,  44., 111.,  57.,  58.],
        [ 64.,  70., 102.,  71.,  50.,  64.,  63.,  51.,  70.,  46.],
        [ 51.,  97.,  72.,  60.,  63.,  59.,  60.,  60.,  69.,  49.],
        [ 97.,  59.,  72.,  54.,  48.,  55.,  72.,  67.,  52.,  68.],
        [ 59.,  72.,  59.,  49., 104.,  55.,  67.,  62.,  64.,  71.],
        [ 50., 103.,  67.,  53.,  69.,  49.,  57.,  70.,  65.,  52.],
        [ 42.,  62.,  44.,  70., 100.,  61.,  56.,  62.,  70.,  70.],
        [ 51.,  54.,  69.,  62.,  68.,  59.,  48.,  62.,  62., 102.],
        [ 62.,  66.,  64.,  33.,  69.,  74.,  89.,  60.,  73.,  59.],
        [ 54.,  50.,  58.,  61.,  85.,  53.,  46.,  77.,  70.,  94.],
        [107.,  55.,  66.,  59.,  54.,  65.,  59.,  61.,  67.,  60.],
        [ 66.,  61.,  74.,  50.,  74.,  56.,  95.,  56.,  65.,  50.],
        [ 56.,  57.,  53.,  54.,  85.,  62.,  46.,  66.,  54., 102.],
        [ 91.,  54.,  72.,  64.,  54.,  56.,  61.,  66.,  70.,  56.],
        [ 47., 108.,  62.,  59.,  59.,  58.,  56.,  61.,  64.,  61.],
        [ 64.,  63.,  50.,  73.,  51.,  93.,  64.,  54.,  68.,  71.],
        [ 57.,  50.,  54.,  58.,  74.,  62.,  49.,  72.,  75., 101.],
        [ 65.,  60.,  71.,  72.,  49.,  54.,  42.,  95.,  46.,  68.],
        [ 52.,  65.,  67.,  79.,  58.,  64.,  57.,  57.,  70.,  63.],
        [ 54.,  62.,  60.,  59., 103.,  55.,  61.,  66.,  64.,  67.]],
       device='cuda:0')
Train accuarcate: 95.49%



iteration:
  167
    0  1353   bit_w:-1  loss: 0.11063
    1  1506   bit_w: 1  loss: 0.11041
    2  1497   bit_w:-1  loss: 0.11040
    3   464   bit_w: 1  loss: 0.11031
    4   463   bit_w:-1  loss: 0.11031
   1705   4369   2191   4136   1324   1943   1307   3717   2714   2471
     -1      1      0      0      0     -1     -1      0      1      1
Train accuarcate: 96.64%
tensor([[ 57.,  58.,  61.,  71.,  60.,  60.,  44., 111.,  58.,  59.],
        [ 64.,  71., 102.,  71.,  50.,  64.,  63.,  51.,  71.,  47.],
        [ 51.,  98.,  72.,  60.,  63.,  59.,  60.,  60.,  70.,  50.],
        [ 97.,  60.,  72.,  54.,  48.,  55.,  72.,  67.,  53.,  69.],
        [ 60.,  72.,  59.,  49., 104.,  56.,  68.,  62.,  64.,  71.],
        [ 51., 103.,  67.,  53.,  69.,  50.,  58.,  70.,  65.,  52.],
        [ 42.,  63.,  44.,  70., 100.,  61.,  56.,  62.,  71.,  71.],
        [ 51.,  55.,  69.,  62.,  68.,  59.,  48.,  62.,  63., 103.],
        [ 63.,  66.,  64.,  33.,  69.,  75.,  90.,  60.,  73.,  59.],
        [ 55.,  50.,  58.,  61.,  85.,  54.,  47.,  77.,  70.,  94.],
        [108.,  55.,  66.,  59.,  54.,  66.,  60.,  61.,  67.,  60.],
        [ 67.,  61.,  74.,  50.,  74.,  57.,  96.,  56.,  65.,  50.],
        [ 56.,  58.,  53.,  54.,  85.,  62.,  46.,  66.,  55., 103.],
        [ 92.,  54.,  72.,  64.,  54.,  57.,  62.,  66.,  70.,  56.],
        [ 47., 109.,  62.,  59.,  59.,  58.,  56.,  61.,  65.,  62.],
        [ 65.,  63.,  50.,  73.,  51.,  94.,  65.,  54.,  68.,  71.],
        [ 58.,  50.,  54.,  58.,  74.,  63.,  50.,  72.,  75., 101.],
        [ 65.,  61.,  71.,  72.,  49.,  54.,  42.,  95.,  47.,  69.],
        [ 52.,  66.,  67.,  79.,  58.,  64.,  57.,  57.,  71.,  64.],
        [ 54.,  63.,  60.,  59., 103.,  55.,  61.,  66.,  65.,  68.]],
       device='cuda:0')
Train accuarcate: 95.41%



iteration:
  168
    0  1543   bit_w:-1  loss: 0.11013
    1  1427   bit_w: 1  loss: 0.10998
    2  1487   bit_w:-1  loss: 0.11004
    3  1509   bit_w: 1  loss: 0.10980
    4  1100   bit_w:-1  loss: 0.10990
   1063   4916   3494   1999   3335   1200   3871   2827   4338   1820
      0     -1      1      0     -1      0      0      1      0      0
Train accuarcate: 96.66%
tensor([[ 57.,  59.,  61.,  71.,  61.,  60.,  44., 111.,  58.,  59.],
        [ 64.,  72., 102.,  71.,  51.,  64.,  63.,  51.,  71.,  47.],
        [ 51.,  98.,  73.,  60.,  63.,  59.,  60.,  61.,  70.,  50.],
        [ 97.,  61.,  72.,  54.,  49.,  55.,  72.,  67.,  53.,  69.],
        [ 60.,  73.,  59.,  49., 105.,  56.,  68.,  62.,  64.,  71.],
        [ 51., 103.,  68.,  53.,  69.,  50.,  58.,  71.,  65.,  52.],
        [ 42.,  64.,  44.,  70., 101.,  61.,  56.,  62.,  71.,  71.],
        [ 51.,  56.,  69.,  62.,  69.,  59.,  48.,  62.,  63., 103.],
        [ 63.,  66.,  65.,  33.,  69.,  75.,  90.,  61.,  73.,  59.],
        [ 55.,  50.,  59.,  61.,  85.,  54.,  47.,  78.,  70.,  94.],
        [108.,  56.,  66.,  59.,  55.,  66.,  60.,  61.,  67.,  60.],
        [ 67.,  61.,  75.,  50.,  74.,  57.,  96.,  57.,  65.,  50.],
        [ 56.,  59.,  53.,  54.,  86.,  62.,  46.,  66.,  55., 103.],
        [ 92.,  55.,  72.,  64.,  55.,  57.,  62.,  66.,  70.,  56.],
        [ 47., 110.,  62.,  59.,  60.,  58.,  56.,  61.,  65.,  62.],
        [ 65.,  63.,  51.,  73.,  51.,  94.,  65.,  55.,  68.,  71.],
        [ 58.,  51.,  54.,  58.,  75.,  63.,  50.,  72.,  75., 101.],
        [ 65.,  62.,  71.,  72.,  50.,  54.,  42.,  95.,  47.,  69.],
        [ 52.,  67.,  67.,  79.,  59.,  64.,  57.,  57.,  71.,  64.],
        [ 54.,  64.,  60.,  59., 104.,  55.,  61.,  66.,  65.,  68.]],
       device='cuda:0')
Train accuarcate: 95.45%



iteration:
  169
    0  1354   bit_w:-1  loss: 0.10966
    1  1287   bit_w:-1  loss: 0.10943
    2  1540   bit_w:-1  loss: 0.10935
    3   542   bit_w:-1  loss: 0.10930
    4   813   bit_w: 1  loss: 0.10920
   1256   1751   2442   5157   2806   3993   1304   5391   1156   5259
     -1      0      0      1      0      1     -1      0     -1      1
Train accuarcate: 96.66%
tensor([[ 57.,  59.,  61.,  72.,  61.,  61.,  44., 111.,  58.,  60.],
        [ 64.,  72., 102.,  72.,  51.,  65.,  63.,  51.,  71.,  48.],
        [ 52.,  98.,  73.,  60.,  63.,  59.,  61.,  61.,  71.,  50.],
        [ 98.,  61.,  72.,  54.,  49.,  55.,  73.,  67.,  54.,  69.],
        [ 61.,  73.,  59.,  49., 105.,  56.,  69.,  62.,  65.,  71.],
        [ 52., 103.,  68.,  53.,  69.,  50.,  59.,  71.,  66.,  52.],
        [ 42.,  64.,  44.,  71., 101.,  62.,  56.,  62.,  71.,  72.],
        [ 51.,  56.,  69.,  63.,  69.,  60.,  48.,  62.,  63., 104.],
        [ 63.,  66.,  65.,  34.,  69.,  76.,  90.,  61.,  73.,  60.],
        [ 55.,  50.,  59.,  62.,  85.,  55.,  47.,  78.,  70.,  95.],
        [108.,  56.,  66.,  60.,  55.,  67.,  60.,  61.,  67.,  61.],
        [ 68.,  61.,  75.,  50.,  74.,  57.,  97.,  57.,  66.,  50.],
        [ 56.,  59.,  53.,  55.,  86.,  63.,  46.,  66.,  55., 104.],
        [ 93.,  55.,  72.,  64.,  55.,  57.,  63.,  66.,  71.,  56.],
        [ 48., 110.,  62.,  59.,  60.,  58.,  57.,  61.,  66.,  62.],
        [ 65.,  63.,  51.,  74.,  51.,  95.,  65.,  55.,  68.,  72.],
        [ 59.,  51.,  54.,  58.,  75.,  63.,  51.,  72.,  76., 101.],
        [ 65.,  62.,  71.,  73.,  50.,  55.,  42.,  95.,  47.,  70.],
        [ 52.,  67.,  67.,  80.,  59.,  65.,  57.,  57.,  71.,  65.],
        [ 55.,  64.,  60.,  59., 104.,  55.,  62.,  66.,  66.,  68.]],
       device='cuda:0')
Train accuarcate: 95.41%



iteration:
  170
    0  1441   bit_w:-1  loss: 0.10897
    1  1535   bit_w:-1  loss: 0.10885
    2  1455   bit_w: 1  loss: 0.10884
    3  1557   bit_w: 1  loss: 0.10862
    4   519   bit_w:-1  loss: 0.10876
   4121   5197   4218   3369   4757   2663   3905   5402   1977   3387
     -1      1      0     -1      0     -1      0      1     -1      0
Train accuarcate: 96.68%
tensor([[ 58.,  59.,  61.,  73.,  61.,  62.,  44., 111.,  59.,  60.],
        [ 64.,  73., 102.,  72.,  51.,  65.,  63.,  52.,  71.,  48.],
        [ 52.,  99.,  73.,  60.,  63.,  59.,  61.,  62.,  71.,  50.],
        [ 98.,  62.,  72.,  54.,  49.,  55.,  73.,  68.,  54.,  69.],
        [ 61.,  74.,  59.,  49., 105.,  56.,  69.,  63.,  65.,  71.],
        [ 53., 103.,  68.,  54.,  69.,  51.,  59.,  71.,  67.,  52.],
        [ 43.,  64.,  44.,  72., 101.,  63.,  56.,  62.,  72.,  72.],
        [ 51.,  57.,  69.,  63.,  69.,  60.,  48.,  63.,  63., 104.],
        [ 63.,  67.,  65.,  34.,  69.,  76.,  90.,  62.,  73.,  60.],
        [ 55.,  51.,  59.,  62.,  85.,  55.,  47.,  79.,  70.,  95.],
        [108.,  57.,  66.,  60.,  55.,  67.,  60.,  62.,  67.,  61.],
        [ 69.,  61.,  75.,  51.,  74.,  58.,  97.,  57.,  67.,  50.],
        [ 56.,  60.,  53.,  55.,  86.,  63.,  46.,  67.,  55., 104.],
        [ 93.,  56.,  72.,  64.,  55.,  57.,  63.,  67.,  71.,  56.],
        [ 48., 111.,  62.,  59.,  60.,  58.,  57.,  62.,  66.,  62.],
        [ 65.,  64.,  51.,  74.,  51.,  95.,  65.,  56.,  68.,  72.],
        [ 59.,  52.,  54.,  58.,  75.,  63.,  51.,  73.,  76., 101.],
        [ 65.,  63.,  71.,  73.,  50.,  55.,  42.,  96.,  47.,  70.],
        [ 52.,  68.,  67.,  80.,  59.,  65.,  57.,  58.,  71.,  65.],
        [ 55.,  65.,  60.,  59., 104.,  55.,  62.,  67.,  66.,  68.]],
       device='cuda:0')
Train accuarcate: 95.42%



iteration:
  171
    0  1417   bit_w:-1  loss: 0.10845
    1  1456   bit_w:-1  loss: 0.10820
    2  1332   bit_w:-1  loss: 0.10825
    3  1560   bit_w:-1  loss: 0.10807
    4  1410   bit_w:-1  loss: 0.10812
   2509    369   4476   3222    265   1396   1539   3816   1766    671
      0      0      1      1     -1      0     -1      0      0     -1
Train accuarcate: 96.68%
tensor([[ 58.,  59.,  61.,  73.,  62.,  62.,  45., 111.,  59.,  61.],
        [ 64.,  73., 102.,  72.,  52.,  65.,  64.,  52.,  71.,  49.],
        [ 52.,  99.,  73.,  60.,  64.,  59.,  62.,  62.,  71.,  51.],
        [ 98.,  62.,  72.,  54.,  50.,  55.,  74.,  68.,  54.,  70.],
        [ 61.,  74.,  59.,  49., 106.,  56.,  70.,  63.,  65.,  72.],
        [ 53., 103.,  68.,  54.,  70.,  51.,  60.,  71.,  67.,  53.],
        [ 43.,  64.,  44.,  72., 102.,  63.,  57.,  62.,  72.,  73.],
        [ 51.,  57.,  69.,  63.,  70.,  60.,  49.,  63.,  63., 105.],
        [ 63.,  67.,  65.,  34.,  70.,  76.,  91.,  62.,  73.,  61.],
        [ 55.,  51.,  59.,  62.,  86.,  55.,  48.,  79.,  70.,  96.],
        [108.,  57.,  66.,  60.,  56.,  67.,  61.,  62.,  67.,  62.],
        [ 69.,  61.,  76.,  52.,  74.,  58.,  97.,  57.,  67.,  50.],
        [ 56.,  60.,  54.,  56.,  86.,  63.,  46.,  67.,  55., 104.],
        [ 93.,  56.,  72.,  64.,  56.,  57.,  64.,  67.,  71.,  57.],
        [ 48., 111.,  62.,  59.,  61.,  58.,  58.,  62.,  66.,  63.],
        [ 65.,  64.,  52.,  75.,  51.,  95.,  65.,  56.,  68.,  72.],
        [ 59.,  52.,  54.,  58.,  76.,  63.,  52.,  73.,  76., 102.],
        [ 65.,  63.,  72.,  74.,  50.,  55.,  42.,  96.,  47.,  70.],
        [ 52.,  68.,  68.,  81.,  59.,  65.,  57.,  58.,  71.,  65.],
        [ 55.,  65.,  60.,  59., 105.,  55.,  63.,  67.,  66.,  69.]],
       device='cuda:0')
Train accuarcate: 95.50%



iteration:
  172
    0  1469   bit_w:-1  loss: 0.10789
    1  1304   bit_w:-1  loss: 0.10775
    2  1266   bit_w: 1  loss: 0.10774
    3  1316   bit_w: 1  loss: 0.10760
    4  1442   bit_w:-1  loss: 0.10763
   1489   2831   3503   3150   1028   3286   2787    682   3766   1061
      0      0      1      0      0      1      0     -1      1      0
Train accuarcate: 96.70%
tensor([[ 58.,  59.,  61.,  73.,  62.,  62.,  45., 112.,  59.,  61.],
        [ 64.,  73., 103.,  72.,  52.,  66.,  64.,  52.,  72.,  49.],
        [ 52.,  99.,  73.,  60.,  64.,  59.,  62.,  63.,  71.,  51.],
        [ 98.,  62.,  72.,  54.,  50.,  55.,  74.,  69.,  54.,  70.],
        [ 61.,  74.,  59.,  49., 106.,  56.,  70.,  64.,  65.,  72.],
        [ 53., 103.,  68.,  54.,  70.,  51.,  60.,  72.,  67.,  53.],
        [ 43.,  64.,  44.,  72., 102.,  63.,  57.,  63.,  72.,  73.],
        [ 51.,  57.,  69.,  63.,  70.,  60.,  49.,  64.,  63., 105.],
        [ 63.,  67.,  66.,  34.,  70.,  77.,  91.,  62.,  74.,  61.],
        [ 55.,  51.,  59.,  62.,  86.,  55.,  48.,  80.,  70.,  96.],
        [108.,  57.,  66.,  60.,  56.,  67.,  61.,  63.,  67.,  62.],
        [ 69.,  61.,  77.,  52.,  74.,  59.,  97.,  57.,  68.,  50.],
        [ 56.,  60.,  54.,  56.,  86.,  63.,  46.,  68.,  55., 104.],
        [ 93.,  56.,  72.,  64.,  56.,  57.,  64.,  68.,  71.,  57.],
        [ 48., 111.,  63.,  59.,  61.,  59.,  58.,  62.,  67.,  63.],
        [ 65.,  64.,  53.,  75.,  51.,  96.,  65.,  56.,  69.,  72.],
        [ 59.,  52.,  55.,  58.,  76.,  64.,  52.,  73.,  77., 102.],
        [ 65.,  63.,  73.,  74.,  50.,  56.,  42.,  96.,  48.,  70.],
        [ 52.,  68.,  69.,  81.,  59.,  66.,  57.,  58.,  72.,  65.],
        [ 55.,  65.,  60.,  59., 105.,  55.,  63.,  68.,  66.,  69.]],
       device='cuda:0')
Train accuarcate: 95.50%



iteration:
  173
    0  1399   bit_w:-1  loss: 0.10739
    1  1541   bit_w: 1  loss: 0.10720
    2   914   bit_w: 1  loss: 0.10725
    3  1457   bit_w:-1  loss: 0.10709
    4  1425   bit_w: 1  loss: 0.10714
   1415   1789   2395   1986   5003   2471   4104   3471   2788   4273
     -1     -1      0      0      1      0      0      0      0     -1
Train accuarcate: 96.75%
tensor([[ 58.,  59.,  61.,  73.,  63.,  62.,  45., 112.,  59.,  61.],
        [ 65.,  74., 103.,  72.,  52.,  66.,  64.,  52.,  72.,  50.],
        [ 53., 100.,  73.,  60.,  64.,  59.,  62.,  63.,  71.,  52.],
        [ 98.,  62.,  72.,  54.,  51.,  55.,  74.,  69.,  54.,  70.],
        [ 61.,  74.,  59.,  49., 107.,  56.,  70.,  64.,  65.,  72.],
        [ 54., 104.,  68.,  54.,  70.,  51.,  60.,  72.,  67.,  54.],
        [ 43.,  64.,  44.,  72., 103.,  63.,  57.,  63.,  72.,  73.],
        [ 52.,  58.,  69.,  63.,  70.,  60.,  49.,  64.,  63., 106.],
        [ 63.,  67.,  66.,  34.,  71.,  77.,  91.,  62.,  74.,  61.],
        [ 56.,  52.,  59.,  62.,  86.,  55.,  48.,  80.,  70.,  97.],
        [109.,  58.,  66.,  60.,  56.,  67.,  61.,  63.,  67.,  63.],
        [ 69.,  61.,  77.,  52.,  75.,  59.,  97.,  57.,  68.,  50.],
        [ 57.,  61.,  54.,  56.,  86.,  63.,  46.,  68.,  55., 105.],
        [ 93.,  56.,  72.,  64.,  57.,  57.,  64.,  68.,  71.,  57.],
        [ 49., 112.,  63.,  59.,  61.,  59.,  58.,  62.,  67.,  64.],
        [ 66.,  65.,  53.,  75.,  51.,  96.,  65.,  56.,  69.,  73.],
        [ 59.,  52.,  55.,  58.,  77.,  64.,  52.,  73.,  77., 102.],
        [ 65.,  63.,  73.,  74.,  51.,  56.,  42.,  96.,  48.,  70.],
        [ 53.,  69.,  69.,  81.,  59.,  66.,  57.,  58.,  72.,  66.],
        [ 55.,  65.,  60.,  59., 106.,  55.,  63.,  68.,  66.,  69.]],
       device='cuda:0')
Train accuarcate: 95.51%



iteration:
  174
    0  1569   bit_w:-1  loss: 0.10694
    1  1402   bit_w: 1  loss: 0.10677
    2  1308   bit_w: 1  loss: 0.10679
    3  1488   bit_w: 1  loss: 0.10662
    4  1264   bit_w:-1  loss: 0.10664
   2851   3513   4098   3594   4561   2422   1703   5765   3549   5292
      0     -1      1     -1      0     -1     -1      0      0      0
Train accuarcate: 96.76%
tensor([[ 58.,  59.,  62.,  73.,  63.,  62.,  45., 112.,  59.,  61.],
        [ 65.,  75., 103.,  73.,  52.,  67.,  65.,  52.,  72.,  50.],
        [ 53., 101.,  73.,  61.,  64.,  60.,  63.,  63.,  71.,  52.],
        [ 98.,  62.,  73.,  54.,  51.,  55.,  74.,  69.,  54.,  70.],
        [ 61.,  75.,  59.,  50., 107.,  57.,  71.,  64.,  65.,  72.],
        [ 54., 105.,  68.,  55.,  70.,  52.,  61.,  72.,  67.,  54.],
        [ 43.,  65.,  44.,  73., 103.,  64.,  58.,  63.,  72.,  73.],
        [ 52.,  58.,  70.,  63.,  70.,  60.,  49.,  64.,  63., 106.],
        [ 63.,  67.,  67.,  34.,  71.,  77.,  91.,  62.,  74.,  61.],
        [ 56.,  52.,  60.,  62.,  86.,  55.,  48.,  80.,  70.,  97.],
        [109.,  58.,  67.,  60.,  56.,  67.,  61.,  63.,  67.,  63.],
        [ 69.,  62.,  77.,  53.,  75.,  60.,  98.,  57.,  68.,  50.],
        [ 57.,  61.,  55.,  56.,  86.,  63.,  46.,  68.,  55., 105.],
        [ 93.,  56.,  73.,  64.,  57.,  57.,  64.,  68.,  71.,  57.],
        [ 49., 113.,  63.,  60.,  61.,  60.,  59.,  62.,  67.,  64.],
        [ 66.,  65.,  54.,  75.,  51.,  96.,  65.,  56.,  69.,  73.],
        [ 59.,  53.,  55.,  59.,  77.,  65.,  53.,  73.,  77., 102.],
        [ 65.,  63.,  74.,  74.,  51.,  56.,  42.,  96.,  48.,  70.],
        [ 53.,  70.,  69.,  82.,  59.,  67.,  58.,  58.,  72.,  66.],
        [ 55.,  65.,  61.,  59., 106.,  55.,  63.,  68.,  66.,  69.]],
       device='cuda:0')
Train accuarcate: 95.52%



iteration:
  175
    0  1365   bit_w:-1  loss: 0.10641
    1  1007   bit_w:-1  loss: 0.10630
    2  1485   bit_w:-1  loss: 0.10630
    3  1122   bit_w:-1  loss: 0.10614
    4  1329   bit_w: 1  loss: 0.10620
   5423   1692   3080   2037   2475   4123   3842   2632   2848   2071
      1      0      0     -1      0      0      0      0     -1     -1
Train accuarcate: 96.79%
tensor([[ 58.,  59.,  62.,  74.,  63.,  62.,  45., 112.,  60.,  62.],
        [ 66.,  75., 103.,  73.,  52.,  67.,  65.,  52.,  72.,  50.],
        [ 53., 101.,  73.,  62.,  64.,  60.,  63.,  63.,  72.,  53.],
        [ 99.,  62.,  73.,  54.,  51.,  55.,  74.,  69.,  54.,  70.],
        [ 62.,  75.,  59.,  50., 107.,  57.,  71.,  64.,  65.,  72.],
        [ 54., 105.,  68.,  56.,  70.,  52.,  61.,  72.,  68.,  55.],
        [ 44.,  65.,  44.,  73., 103.,  64.,  58.,  63.,  72.,  73.],
        [ 52.,  58.,  70.,  64.,  70.,  60.,  49.,  64.,  64., 107.],
        [ 63.,  67.,  67.,  35.,  71.,  77.,  91.,  62.,  75.,  62.],
        [ 57.,  52.,  60.,  62.,  86.,  55.,  48.,  80.,  70.,  97.],
        [110.,  58.,  67.,  60.,  56.,  67.,  61.,  63.,  67.,  63.],
        [ 70.,  62.,  77.,  53.,  75.,  60.,  98.,  57.,  68.,  50.],
        [ 57.,  61.,  55.,  57.,  86.,  63.,  46.,  68.,  56., 106.],
        [ 93.,  56.,  73.,  65.,  57.,  57.,  64.,  68.,  72.,  58.],
        [ 49., 113.,  63.,  61.,  61.,  60.,  59.,  62.,  68.,  65.],
        [ 67.,  65.,  54.,  75.,  51.,  96.,  65.,  56.,  69.,  73.],
        [ 60.,  53.,  55.,  59.,  77.,  65.,  53.,  73.,  77., 102.],
        [ 65.,  63.,  74.,  75.,  51.,  56.,  42.,  96.,  49.,  71.],
        [ 54.,  70.,  69.,  82.,  59.,  67.,  58.,  58.,  72.,  66.],
        [ 55.,  65.,  61.,  60., 106.,  55.,  63.,  68.,  67.,  70.]],
       device='cuda:0')
Train accuarcate: 95.49%



iteration:
  176
    0  1514   bit_w:-1  loss: 0.10594
    1  1173   bit_w:-1  loss: 0.10582
    2  1120   bit_w: 1  loss: 0.10574
    3  1517   bit_w:-1  loss: 0.10569
    4  1371   bit_w:-1  loss: 0.10566
    918   2131   2876   1866   2291   2531   2228    605   3863   1405
      0      0      0      0      1      1     -1     -1      1      0
Train accuarcate: 96.78%
tensor([[ 58.,  59.,  62.,  74.,  63.,  62.,  46., 113.,  60.,  62.],
        [ 66.,  75., 103.,  73.,  52.,  67.,  66.,  53.,  72.,  50.],
        [ 53., 101.,  73.,  62.,  64.,  60.,  64.,  64.,  72.,  53.],
        [ 99.,  62.,  73.,  54.,  51.,  55.,  75.,  70.,  54.,  70.],
        [ 62.,  75.,  59.,  50., 107.,  57.,  72.,  65.,  65.,  72.],
        [ 54., 105.,  68.,  56.,  70.,  52.,  62.,  73.,  68.,  55.],
        [ 44.,  65.,  44.,  73., 103.,  64.,  59.,  64.,  72.,  73.],
        [ 52.,  58.,  70.,  64.,  71.,  61.,  49.,  64.,  65., 107.],
        [ 63.,  67.,  67.,  35.,  72.,  78.,  91.,  62.,  76.,  62.],
        [ 57.,  52.,  60.,  62.,  86.,  55.,  49.,  81.,  70.,  97.],
        [110.,  58.,  67.,  60.,  56.,  67.,  62.,  64.,  67.,  63.],
        [ 70.,  62.,  77.,  53.,  75.,  60.,  99.,  58.,  68.,  50.],
        [ 57.,  61.,  55.,  57.,  86.,  63.,  47.,  69.,  56., 106.],
        [ 93.,  56.,  73.,  65.,  57.,  57.,  65.,  69.,  72.,  58.],
        [ 49., 113.,  63.,  61.,  61.,  60.,  60.,  63.,  68.,  65.],
        [ 67.,  65.,  54.,  75.,  51.,  96.,  66.,  57.,  69.,  73.],
        [ 60.,  53.,  55.,  59.,  77.,  65.,  54.,  74.,  77., 102.],
        [ 65.,  63.,  74.,  75.,  51.,  56.,  43.,  97.,  49.,  71.],
        [ 54.,  70.,  69.,  82.,  60.,  68.,  58.,  58.,  73.,  66.],
        [ 55.,  65.,  61.,  60., 106.,  55.,  64.,  69.,  67.,  70.]],
       device='cuda:0')
Train accuarcate: 95.47%



iteration:
  177
    0  1452   bit_w:-1  loss: 0.10547
    1  1490   bit_w: 1  loss: 0.10531
    2  1520   bit_w:-1  loss: 0.10539
    3  1554   bit_w:-1  loss: 0.10512
    4   150   bit_w:-1  loss: 0.10529
   2764   6435   2818   3483   4622   3229   3267   6047   4532   5500
     -1      0     -1     -1      0     -1     -1      0      0      0
Train accuarcate: 96.79%
tensor([[ 58.,  59.,  62.,  74.,  63.,  62.,  46., 113.,  60.,  62.],
        [ 67.,  75., 104.,  74.,  52.,  68.,  67.,  53.,  72.,  50.],
        [ 53., 101.,  73.,  62.,  64.,  60.,  64.,  64.,  72.,  53.],
        [ 99.,  62.,  73.,  54.,  51.,  55.,  75.,  70.,  54.,  70.],
        [ 62.,  75.,  59.,  50., 107.,  57.,  72.,  65.,  65.,  72.],
        [ 54., 105.,  68.,  56.,  70.,  52.,  62.,  73.,  68.,  55.],
        [ 45.,  65.,  45.,  74., 103.,  65.,  60.,  64.,  72.,  73.],
        [ 52.,  58.,  70.,  64.,  71.,  61.,  49.,  64.,  65., 107.],
        [ 63.,  67.,  67.,  35.,  72.,  78.,  91.,  62.,  76.,  62.],
        [ 57.,  52.,  60.,  62.,  86.,  55.,  49.,  81.,  70.,  97.],
        [111.,  58.,  68.,  61.,  56.,  68.,  63.,  64.,  67.,  63.],
        [ 71.,  62.,  78.,  54.,  75.,  61., 100.,  58.,  68.,  50.],
        [ 57.,  61.,  55.,  57.,  86.,  63.,  47.,  69.,  56., 106.],
        [ 93.,  56.,  73.,  65.,  57.,  57.,  65.,  69.,  72.,  58.],
        [ 49., 113.,  63.,  61.,  61.,  60.,  60.,  63.,  68.,  65.],
        [ 67.,  65.,  54.,  75.,  51.,  96.,  66.,  57.,  69.,  73.],
        [ 60.,  53.,  55.,  59.,  77.,  65.,  54.,  74.,  77., 102.],
        [ 65.,  63.,  74.,  75.,  51.,  56.,  43.,  97.,  49.,  71.],
        [ 55.,  70.,  70.,  83.,  60.,  69.,  59.,  58.,  73.,  66.],
        [ 55.,  65.,  61.,  60., 106.,  55.,  64.,  69.,  67.,  70.]],
       device='cuda:0')
Train accuarcate: 95.48%



iteration:
  178
    0  1530   bit_w:-1  loss: 0.10511
    1  1321   bit_w: 1  loss: 0.10496
    2   380   bit_w: 1  loss: 0.10487
    3  1464   bit_w:-1  loss: 0.10479
    4  1073   bit_w:-1  loss: 0.10479
   3613    388   2257   3048    275   1132    624   1368   2620   1989
      0     -1      1      1     -1      0      0      0      1      1
Train accuarcate: 96.83%
tensor([[ 58.,  60.,  62.,  74.,  64.,  62.,  46., 113.,  60.,  62.],
        [ 67.,  76., 104.,  74.,  53.,  68.,  67.,  53.,  72.,  50.],
        [ 53., 102.,  73.,  62.,  65.,  60.,  64.,  64.,  72.,  53.],
        [ 99.,  63.,  73.,  54.,  52.,  55.,  75.,  70.,  54.,  70.],
        [ 62.,  76.,  59.,  50., 108.,  57.,  72.,  65.,  65.,  72.],
        [ 54., 106.,  68.,  56.,  71.,  52.,  62.,  73.,  68.,  55.],
        [ 45.,  66.,  45.,  74., 104.,  65.,  60.,  64.,  72.,  73.],
        [ 52.,  59.,  70.,  64.,  72.,  61.,  49.,  64.,  65., 107.],
        [ 63.,  68.,  67.,  35.,  73.,  78.,  91.,  62.,  76.,  62.],
        [ 57.,  53.,  60.,  62.,  87.,  55.,  49.,  81.,  70.,  97.],
        [111.,  58.,  69.,  62.,  56.,  68.,  63.,  64.,  68.,  64.],
        [ 71.,  63.,  78.,  54.,  76.,  61., 100.,  58.,  68.,  50.],
        [ 57.,  61.,  56.,  58.,  86.,  63.,  47.,  69.,  57., 107.],
        [ 93.,  56.,  74.,  66.,  57.,  57.,  65.,  69.,  73.,  59.],
        [ 49., 114.,  63.,  61.,  62.,  60.,  60.,  63.,  68.,  65.],
        [ 67.,  66.,  54.,  75.,  52.,  96.,  66.,  57.,  69.,  73.],
        [ 60.,  54.,  55.,  59.,  78.,  65.,  54.,  74.,  77., 102.],
        [ 65.,  64.,  74.,  75.,  52.,  56.,  43.,  97.,  49.,  71.],
        [ 55.,  71.,  70.,  83.,  61.,  69.,  59.,  58.,  73.,  66.],
        [ 55.,  66.,  61.,  60., 107.,  55.,  64.,  69.,  67.,  70.]],
       device='cuda:0')
Train accuarcate: 95.52%



iteration:
  179
    0  1538   bit_w:-1  loss: 0.10457
    1  1541   bit_w: 1  loss: 0.10442
    2   288   bit_w:-1  loss: 0.10445
    3  1008   bit_w:-1  loss: 0.10427
    4  1007   bit_w: 1  loss: 0.10435
   3690   6663   4967   5402   4227   2679   4069   2604   3765   2898
      0      0      0      0      0     -1      0     -1      0     -1
Train accuarcate: 96.83%
tensor([[ 58.,  60.,  62.,  74.,  64.,  62.,  46., 113.,  60.,  62.],
        [ 67.,  76., 104.,  74.,  53.,  69.,  67.,  54.,  72.,  51.],
        [ 53., 102.,  73.,  62.,  65.,  60.,  64.,  64.,  72.,  53.],
        [ 99.,  63.,  73.,  54.,  52.,  56.,  75.,  71.,  54.,  71.],
        [ 62.,  76.,  59.,  50., 108.,  57.,  72.,  65.,  65.,  72.],
        [ 54., 106.,  68.,  56.,  71.,  52.,  62.,  73.,  68.,  55.],
        [ 45.,  66.,  45.,  74., 104.,  66.,  60.,  65.,  72.,  74.],
        [ 52.,  59.,  70.,  64.,  72.,  62.,  49.,  65.,  65., 108.],
        [ 63.,  68.,  67.,  35.,  73.,  79.,  91.,  63.,  76.,  63.],
        [ 57.,  53.,  60.,  62.,  87.,  56.,  49.,  82.,  70.,  98.],
        [111.,  58.,  69.,  62.,  56.,  69.,  63.,  65.,  68.,  65.],
        [ 71.,  63.,  78.,  54.,  76.,  62., 100.,  59.,  68.,  51.],
        [ 57.,  61.,  56.,  58.,  86.,  63.,  47.,  69.,  57., 107.],
        [ 93.,  56.,  74.,  66.,  57.,  57.,  65.,  69.,  73.,  59.],
        [ 49., 114.,  63.,  61.,  62.,  60.,  60.,  63.,  68.,  65.],
        [ 67.,  66.,  54.,  75.,  52.,  96.,  66.,  57.,  69.,  73.],
        [ 60.,  54.,  55.,  59.,  78.,  66.,  54.,  75.,  77., 103.],
        [ 65.,  64.,  74.,  75.,  52.,  56.,  43.,  97.,  49.,  71.],
        [ 55.,  71.,  70.,  83.,  61.,  69.,  59.,  58.,  73.,  66.],
        [ 55.,  66.,  61.,  60., 107.,  56.,  64.,  70.,  67.,  71.]],
       device='cuda:0')
Train accuarcate: 95.52%



iteration:
  180
    0  1521   bit_w:-1  loss: 0.10417
    1   842   bit_w:-1  loss: 0.10404
    2  1435   bit_w:-1  loss: 0.10405
    3  1522   bit_w:-1  loss: 0.10398
    4  1561   bit_w: 1  loss: 0.10397
   4301   5783   2546   4551   4204   3810   3866   2822   3986   4084
      1     -1     -1      0      0     -1      0      0     -1      0
Train accuarcate: 96.84%
tensor([[ 58.,  61.,  63.,  74.,  64.,  63.,  46., 113.,  61.,  62.],
        [ 68.,  76., 104.,  74.,  53.,  69.,  67.,  54.,  72.,  51.],
        [ 54., 102.,  73.,  62.,  65.,  60.,  64.,  64.,  72.,  53.],
        [100.,  63.,  73.,  54.,  52.,  56.,  75.,  71.,  54.,  71.],
        [ 63.,  76.,  59.,  50., 108.,  57.,  72.,  65.,  65.,  72.],
        [ 55., 106.,  68.,  56.,  71.,  52.,  62.,  73.,  68.,  55.],
        [ 46.,  66.,  45.,  74., 104.,  66.,  60.,  65.,  72.,  74.],
        [ 53.,  59.,  70.,  64.,  72.,  62.,  49.,  65.,  65., 108.],
        [ 64.,  68.,  67.,  35.,  73.,  79.,  91.,  63.,  76.,  63.],
        [ 57.,  54.,  61.,  62.,  87.,  57.,  49.,  82.,  71.,  98.],
        [112.,  58.,  69.,  62.,  56.,  69.,  63.,  65.,  68.,  65.],
        [ 71.,  64.,  79.,  54.,  76.,  63., 100.,  59.,  69.,  51.],
        [ 57.,  62.,  57.,  58.,  86.,  64.,  47.,  69.,  58., 107.],
        [ 93.,  57.,  75.,  66.,  57.,  58.,  65.,  69.,  74.,  59.],
        [ 50., 114.,  63.,  61.,  62.,  60.,  60.,  63.,  68.,  65.],
        [ 67.,  67.,  55.,  75.,  52.,  97.,  66.,  57.,  70.,  73.],
        [ 60.,  55.,  56.,  59.,  78.,  67.,  54.,  75.,  78., 103.],
        [ 65.,  65.,  75.,  75.,  52.,  57.,  43.,  97.,  50.,  71.],
        [ 56.,  71.,  70.,  83.,  61.,  69.,  59.,  58.,  73.,  66.],
        [ 56.,  66.,  61.,  60., 107.,  56.,  64.,  70.,  67.,  71.]],
       device='cuda:0')
Train accuarcate: 95.52%



iteration:
  181
    0  1465   bit_w:-1  loss: 0.10377
    1  1496   bit_w:-1  loss: 0.10366
    2  1412   bit_w: 1  loss: 0.10360
    3  1494   bit_w: 1  loss: 0.10346
    4  1540   bit_w: 1  loss: 0.10337
   3430   2315   2043   4471   4243   4037   5262   1939   4403   3237
      0      0     -1      1      0      0      1     -1      1     -1
Train accuarcate: 96.86%
tensor([[ 58.,  61.,  64.,  74.,  64.,  63.,  46., 114.,  61.,  63.],
        [ 68.,  76., 105.,  74.,  53.,  69.,  67.,  55.,  72.,  52.],
        [ 54., 102.,  74.,  62.,  65.,  60.,  64.,  65.,  72.,  54.],
        [100.,  63.,  73.,  55.,  52.,  56.,  76.,  71.,  55.,  71.],
        [ 63.,  76.,  59.,  51., 108.,  57.,  73.,  65.,  66.,  72.],
        [ 55., 106.,  69.,  56.,  71.,  52.,  62.,  74.,  68.,  56.],
        [ 46.,  66.,  46.,  74., 104.,  66.,  60.,  66.,  72.,  75.],
        [ 53.,  59.,  71.,  64.,  72.,  62.,  49.,  66.,  65., 109.],
        [ 64.,  68.,  68.,  35.,  73.,  79.,  91.,  64.,  76.,  64.],
        [ 57.,  54.,  61.,  63.,  87.,  57.,  50.,  82.,  72.,  98.],
        [112.,  58.,  69.,  63.,  56.,  69.,  64.,  65.,  69.,  65.],
        [ 71.,  64.,  79.,  55.,  76.,  63., 101.,  59.,  70.,  51.],
        [ 57.,  62.,  58.,  58.,  86.,  64.,  47.,  70.,  58., 108.],
        [ 93.,  57.,  75.,  67.,  57.,  58.,  66.,  69.,  75.,  59.],
        [ 50., 114.,  64.,  61.,  62.,  60.,  60.,  64.,  68.,  66.],
        [ 67.,  67.,  55.,  76.,  52.,  97.,  67.,  57.,  71.,  73.],
        [ 60.,  55.,  56.,  60.,  78.,  67.,  55.,  75.,  79., 103.],
        [ 65.,  65.,  75.,  76.,  52.,  57.,  44.,  97.,  51.,  71.],
        [ 56.,  71.,  70.,  84.,  61.,  69.,  60.,  58.,  74.,  66.],
        [ 56.,  66.,  62.,  60., 107.,  56.,  64.,  71.,  67.,  72.]],
       device='cuda:0')
Train accuarcate: 95.52%



iteration:
  182
    0  1543   bit_w:-1  loss: 0.10318
    1   300   bit_w: 1  loss: 0.10307
    2  1477   bit_w:-1  loss: 0.10307
    3  1526   bit_w:-1  loss: 0.10293
    4  1569   bit_w:-1  loss: 0.10299
   4644   5362   4117   2541   5078   2351   4022   5542   5352   5269
      1     -1      0     -1     -1     -1      0      0      0      0
Train accuarcate: 96.86%
tensor([[ 59.,  61.,  64.,  74.,  64.,  63.,  46., 114.,  61.,  63.],
        [ 68.,  77., 105.,  75.,  54.,  70.,  67.,  55.,  72.,  52.],
        [ 55., 102.,  74.,  62.,  65.,  60.,  64.,  65.,  72.,  54.],
        [100.,  64.,  73.,  56.,  53.,  57.,  76.,  71.,  55.,  71.],
        [ 64.,  76.,  59.,  51., 108.,  57.,  73.,  65.,  66.,  72.],
        [ 56., 106.,  69.,  56.,  71.,  52.,  62.,  74.,  68.,  56.],
        [ 47.,  66.,  46.,  74., 104.,  66.,  60.,  66.,  72.,  75.],
        [ 53.,  60.,  71.,  65.,  73.,  63.,  49.,  66.,  65., 109.],
        [ 65.,  68.,  68.,  35.,  73.,  79.,  91.,  64.,  76.,  64.],
        [ 58.,  54.,  61.,  63.,  87.,  57.,  50.,  82.,  72.,  98.],
        [113.,  58.,  69.,  63.,  56.,  69.,  64.,  65.,  69.,  65.],
        [ 72.,  64.,  79.,  55.,  76.,  63., 101.,  59.,  70.,  51.],
        [ 58.,  62.,  58.,  58.,  86.,  64.,  47.,  70.,  58., 108.],
        [ 94.,  57.,  75.,  67.,  57.,  58.,  66.,  69.,  75.,  59.],
        [ 51., 114.,  64.,  61.,  62.,  60.,  60.,  64.,  68.,  66.],
        [ 68.,  67.,  55.,  76.,  52.,  97.,  67.,  57.,  71.,  73.],
        [ 61.,  55.,  56.,  60.,  78.,  67.,  55.,  75.,  79., 103.],
        [ 66.,  65.,  75.,  76.,  52.,  57.,  44.,  97.,  51.,  71.],
        [ 56.,  72.,  70.,  85.,  62.,  70.,  60.,  58.,  74.,  66.],
        [ 57.,  66.,  62.,  60., 107.,  56.,  64.,  71.,  67.,  72.]],
       device='cuda:0')
Train accuarcate: 95.50%



iteration:
  183
    0  1529   bit_w:-1  loss: 0.10282
    1  1430   bit_w: 1  loss: 0.10265
    2  1351   bit_w:-1  loss: 0.10265
    3  1567   bit_w:-1  loss: 0.10258
    4  1369   bit_w: 1  loss: 0.10260
   4289   3648   3435   3489   1054   4081   4430   1451   4093   3308
      0      0      1      0     -1      0     -1     -1      0      1
Train accuarcate: 96.88%
tensor([[ 59.,  61.,  64.,  74.,  65.,  63.,  47., 115.,  61.,  63.],
        [ 68.,  77., 106.,  75.,  54.,  70.,  67.,  55.,  72.,  53.],
        [ 55., 102.,  74.,  62.,  66.,  60.,  65.,  66.,  72.,  54.],
        [100.,  64.,  74.,  56.,  53.,  57.,  76.,  71.,  55.,  72.],
        [ 64.,  76.,  60.,  51., 108.,  57.,  73.,  65.,  66.,  73.],
        [ 56., 106.,  69.,  56.,  72.,  52.,  63.,  75.,  68.,  56.],
        [ 47.,  66.,  46.,  74., 105.,  66.,  61.,  67.,  72.,  75.],
        [ 53.,  60.,  71.,  65.,  74.,  63.,  50.,  67.,  65., 109.],
        [ 65.,  68.,  69.,  35.,  73.,  79.,  91.,  64.,  76.,  65.],
        [ 58.,  54.,  61.,  63.,  88.,  57.,  51.,  83.,  72.,  98.],
        [113.,  58.,  70.,  63.,  56.,  69.,  64.,  65.,  69.,  66.],
        [ 72.,  64.,  79.,  55.,  77.,  63., 102.,  60.,  70.,  51.],
        [ 58.,  62.,  58.,  58.,  87.,  64.,  48.,  71.,  58., 108.],
        [ 94.,  57.,  76.,  67.,  57.,  58.,  66.,  69.,  75.,  60.],
        [ 51., 114.,  65.,  61.,  62.,  60.,  60.,  64.,  68.,  67.],
        [ 68.,  67.,  56.,  76.,  52.,  97.,  67.,  57.,  71.,  74.],
        [ 61.,  55.,  56.,  60.,  79.,  67.,  56.,  76.,  79., 103.],
        [ 66.,  65.,  76.,  76.,  52.,  57.,  44.,  97.,  51.,  72.],
        [ 56.,  72.,  70.,  85.,  63.,  70.,  61.,  59.,  74.,  66.],
        [ 57.,  66.,  62.,  60., 108.,  56.,  65.,  72.,  67.,  72.]],
       device='cuda:0')
Train accuarcate: 95.50%



iteration:
  184
    0  1420   bit_w:-1  loss: 0.10240
    1  1490   bit_w:-1  loss: 0.10229
    2  1083   bit_w: 1  loss: 0.10236
    3  1583   bit_w: 1  loss: 0.10221
    4  1460   bit_w:-1  loss: 0.10226
   1526   2228   2087   2164   1913   2712   1146   4101   3504   2846
      0     -1      0      1      0      1      0      0      1      0
Train accuarcate: 96.89%
tensor([[ 59.,  61.,  64.,  75.,  65.,  64.,  47., 115.,  62.,  63.],
        [ 68.,  77., 106.,  76.,  54.,  71.,  67.,  55.,  73.,  53.],
        [ 55., 103.,  74.,  62.,  66.,  60.,  65.,  66.,  72.,  54.],
        [100.,  64.,  74.,  57.,  53.,  58.,  76.,  71.,  56.,  72.],
        [ 64.,  76.,  60.,  52., 108.,  58.,  73.,  65.,  67.,  73.],
        [ 56., 107.,  69.,  56.,  72.,  52.,  63.,  75.,  68.,  56.],
        [ 47.,  66.,  46.,  75., 105.,  67.,  61.,  67.,  73.,  75.],
        [ 53.,  60.,  71.,  66.,  74.,  64.,  50.,  67.,  66., 109.],
        [ 65.,  69.,  69.,  35.,  73.,  79.,  91.,  64.,  76.,  65.],
        [ 58.,  55.,  61.,  63.,  88.,  57.,  51.,  83.,  72.,  98.],
        [113.,  59.,  70.,  63.,  56.,  69.,  64.,  65.,  69.,  66.],
        [ 72.,  64.,  79.,  56.,  77.,  64., 102.,  60.,  71.,  51.],
        [ 58.,  62.,  58.,  59.,  87.,  65.,  48.,  71.,  59., 108.],
        [ 94.,  58.,  76.,  67.,  57.,  58.,  66.,  69.,  75.,  60.],
        [ 51., 114.,  65.,  62.,  62.,  61.,  60.,  64.,  69.,  67.],
        [ 68.,  68.,  56.,  76.,  52.,  97.,  67.,  57.,  71.,  74.],
        [ 61.,  55.,  56.,  61.,  79.,  68.,  56.,  76.,  80., 103.],
        [ 66.,  65.,  76.,  77.,  52.,  58.,  44.,  97.,  52.,  72.],
        [ 56.,  73.,  70.,  85.,  63.,  70.,  61.,  59.,  74.,  66.],
        [ 57.,  67.,  62.,  60., 108.,  56.,  65.,  72.,  67.,  72.]],
       device='cuda:0')
Train accuarcate: 95.55%



iteration:
  185
    0  1334   bit_w:-1  loss: 0.10210
    1  1292   bit_w:-1  loss: 0.10195
    2  1454   bit_w:-1  loss: 0.10203
    3  1418   bit_w:-1  loss: 0.10185
    4  1501   bit_w: 1  loss: 0.10191
   2257   1465   2129   2604   4232   2102   1769   2790   1785   3954
     -1      0      0      0      1      0     -1      0      0      1
Train accuarcate: 96.87%
tensor([[ 60.,  61.,  64.,  75.,  65.,  64.,  48., 115.,  62.,  63.],
        [ 69.,  77., 106.,  76.,  54.,  71.,  68.,  55.,  73.,  53.],
        [ 56., 103.,  74.,  62.,  66.,  60.,  66.,  66.,  72.,  54.],
        [101.,  64.,  74.,  57.,  53.,  58.,  77.,  71.,  56.,  72.],
        [ 64.,  76.,  60.,  52., 109.,  58.,  73.,  65.,  67.,  74.],
        [ 57., 107.,  69.,  56.,  72.,  52.,  64.,  75.,  68.,  56.],
        [ 47.,  66.,  46.,  75., 106.,  67.,  61.,  67.,  73.,  76.],
        [ 53.,  60.,  71.,  66.,  75.,  64.,  50.,  67.,  66., 110.],
        [ 65.,  69.,  69.,  35.,  74.,  79.,  91.,  64.,  76.,  66.],
        [ 58.,  55.,  61.,  63.,  89.,  57.,  51.,  83.,  72.,  99.],
        [114.,  59.,  70.,  63.,  56.,  69.,  65.,  65.,  69.,  66.],
        [ 73.,  64.,  79.,  56.,  77.,  64., 103.,  60.,  71.,  51.],
        [ 58.,  62.,  58.,  59.,  88.,  65.,  48.,  71.,  59., 109.],
        [ 94.,  58.,  76.,  67.,  58.,  58.,  66.,  69.,  75.,  61.],
        [ 52., 114.,  65.,  62.,  62.,  61.,  61.,  64.,  69.,  67.],
        [ 68.,  68.,  56.,  76.,  53.,  97.,  67.,  57.,  71.,  75.],
        [ 61.,  55.,  56.,  61.,  80.,  68.,  56.,  76.,  80., 104.],
        [ 66.,  65.,  76.,  77.,  53.,  58.,  44.,  97.,  52.,  73.],
        [ 57.,  73.,  70.,  85.,  63.,  70.,  62.,  59.,  74.,  66.],
        [ 57.,  67.,  62.,  60., 109.,  56.,  65.,  72.,  67.,  73.]],
       device='cuda:0')
Train accuarcate: 95.62%



iteration:
  186
    0  1577   bit_w:-1  loss: 0.10164
    1  1260   bit_w: 1  loss: 0.10150
    2  1545   bit_w: 1  loss: 0.10151
    3  1543   bit_w: 1  loss: 0.10129
    4   630   bit_w:-1  loss: 0.10139
   2398   2503   4216   3856   4950   1683   3784   3588   2429   4072
      0     -1      1      1      0     -1      0     -1     -1      0
Train accuarcate: 96.94%
tensor([[ 60.,  61.,  65.,  76.,  65.,  64.,  48., 115.,  62.,  63.],
        [ 69.,  78., 106.,  76.,  54.,  72.,  68.,  56.,  74.,  53.],
        [ 56., 104.,  74.,  62.,  66.,  61.,  66.,  67.,  73.,  54.],
        [101.,  64.,  75.,  58.,  53.,  58.,  77.,  71.,  56.,  72.],
        [ 64.,  76.,  61.,  53., 109.,  58.,  73.,  65.,  67.,  74.],
        [ 57., 107.,  70.,  57.,  72.,  52.,  64.,  75.,  68.,  56.],
        [ 47.,  67.,  46.,  75., 106.,  68.,  61.,  68.,  74.,  76.],
        [ 53.,  60.,  72.,  67.,  75.,  64.,  50.,  67.,  66., 110.],
        [ 65.,  70.,  69.,  35.,  74.,  80.,  91.,  65.,  77.,  66.],
        [ 58.,  55.,  62.,  64.,  89.,  57.,  51.,  83.,  72.,  99.],
        [114.,  60.,  70.,  63.,  56.,  70.,  65.,  66.,  70.,  66.],
        [ 73.,  64.,  80.,  57.,  77.,  64., 103.,  60.,  71.,  51.],
        [ 58.,  63.,  58.,  59.,  88.,  66.,  48.,  72.,  60., 109.],
        [ 94.,  58.,  77.,  68.,  58.,  58.,  66.,  69.,  75.,  61.],
        [ 52., 115.,  65.,  62.,  62.,  62.,  61.,  65.,  70.,  67.],
        [ 68.,  69.,  56.,  76.,  53.,  98.,  67.,  58.,  72.,  75.],
        [ 61.,  56.,  56.,  61.,  80.,  69.,  56.,  77.,  81., 104.],
        [ 66.,  66.,  76.,  77.,  53.,  59.,  44.,  98.,  53.,  73.],
        [ 57.,  74.,  70.,  85.,  63.,  71.,  62.,  60.,  75.,  66.],
        [ 57.,  67.,  63.,  61., 109.,  56.,  65.,  72.,  67.,  73.]],
       device='cuda:0')
Train accuarcate: 95.62%



iteration:
  187
    0  1542   bit_w:-1  loss: 0.10120
    1  1228   bit_w:-1  loss: 0.10106
    2  1467   bit_w: 1  loss: 0.10106
    3  1330   bit_w:-1  loss: 0.10096
    4   482   bit_w: 1  loss: 0.10096
   4275   1423   1252    623   1890   2076   1899   1148   2221   3246
      1      0      0      0      0      0      0     -1      0      1
Train accuarcate: 96.94%
tensor([[ 60.,  61.,  65.,  76.,  65.,  64.,  48., 116.,  62.,  63.],
        [ 69.,  78., 106.,  76.,  54.,  72.,  68.,  57.,  74.,  53.],
        [ 56., 104.,  74.,  62.,  66.,  61.,  66.,  68.,  73.,  54.],
        [102.,  64.,  75.,  58.,  53.,  58.,  77.,  71.,  56.,  73.],
        [ 64.,  76.,  61.,  53., 109.,  58.,  73.,  66.,  67.,  74.],
        [ 57., 107.,  70.,  57.,  72.,  52.,  64.,  76.,  68.,  56.],
        [ 47.,  67.,  46.,  75., 106.,  68.,  61.,  69.,  74.,  76.],
        [ 54.,  60.,  72.,  67.,  75.,  64.,  50.,  67.,  66., 111.],
        [ 65.,  70.,  69.,  35.,  74.,  80.,  91.,  66.,  77.,  66.],
        [ 58.,  55.,  62.,  64.,  89.,  57.,  51.,  84.,  72.,  99.],
        [114.,  60.,  70.,  63.,  56.,  70.,  65.,  67.,  70.,  66.],
        [ 73.,  64.,  80.,  57.,  77.,  64., 103.,  61.,  71.,  51.],
        [ 59.,  63.,  58.,  59.,  88.,  66.,  48.,  72.,  60., 110.],
        [ 95.,  58.,  77.,  68.,  58.,  58.,  66.,  69.,  75.,  62.],
        [ 52., 115.,  65.,  62.,  62.,  62.,  61.,  66.,  70.,  67.],
        [ 68.,  69.,  56.,  76.,  53.,  98.,  67.,  59.,  72.,  75.],
        [ 61.,  56.,  56.,  61.,  80.,  69.,  56.,  78.,  81., 104.],
        [ 66.,  66.,  76.,  77.,  53.,  59.,  44.,  99.,  53.,  73.],
        [ 57.,  74.,  70.,  85.,  63.,  71.,  62.,  61.,  75.,  66.],
        [ 58.,  67.,  63.,  61., 109.,  56.,  65.,  72.,  67.,  74.]],
       device='cuda:0')
Train accuarcate: 95.65%



iteration:
  188
    0  1398   bit_w:-1  loss: 0.10079
    1  1551   bit_w:-1  loss: 0.10065
    2  1478   bit_w:-1  loss: 0.10068
    3  1372   bit_w: 1  loss: 0.10049
    4   869   bit_w:-1  loss: 0.10048
   1317   3637   2910   4262   2606   2301   2497   4201   1241   2652
      0     -1      1      1      1      1     -1      0     -1      0
Train accuarcate: 96.94%
tensor([[ 60.,  62.,  65.,  76.,  65.,  64.,  49., 116.,  63.,  63.],
        [ 69.,  79., 106.,  76.,  54.,  72.,  69.,  57.,  75.,  53.],
        [ 56., 104.,  75.,  63.,  67.,  62.,  66.,  68.,  73.,  54.],
        [102.,  64.,  76.,  59.,  54.,  59.,  77.,  71.,  56.,  73.],
        [ 64.,  77.,  61.,  53., 109.,  58.,  74.,  66.,  68.,  74.],
        [ 57., 107.,  71.,  58.,  73.,  53.,  64.,  76.,  68.,  56.],
        [ 47.,  68.,  46.,  75., 106.,  68.,  62.,  69.,  75.,  76.],
        [ 54.,  60.,  73.,  68.,  76.,  65.,  50.,  67.,  66., 111.],
        [ 65.,  71.,  69.,  35.,  74.,  80.,  92.,  66.,  78.,  66.],
        [ 58.,  56.,  62.,  64.,  89.,  57.,  52.,  84.,  73.,  99.],
        [114.,  61.,  70.,  63.,  56.,  70.,  66.,  67.,  71.,  66.],
        [ 73.,  64.,  81.,  58.,  78.,  65., 103.,  61.,  71.,  51.],
        [ 59.,  63.,  59.,  60.,  89.,  67.,  48.,  72.,  60., 110.],
        [ 95.,  59.,  77.,  68.,  58.,  58.,  67.,  69.,  76.,  62.],
        [ 52., 116.,  65.,  62.,  62.,  62.,  62.,  66.,  71.,  67.],
        [ 68.,  69.,  57.,  77.,  54.,  99.,  67.,  59.,  72.,  75.],
        [ 61.,  57.,  56.,  61.,  80.,  69.,  57.,  78.,  82., 104.],
        [ 66.,  66.,  77.,  78.,  54.,  60.,  44.,  99.,  53.,  73.],
        [ 57.,  74.,  71.,  86.,  64.,  72.,  62.,  61.,  75.,  66.],
        [ 58.,  67.,  64.,  62., 110.,  57.,  65.,  72.,  67.,  74.]],
       device='cuda:0')
Train accuarcate: 95.69%



iteration:
  189
    0  1563   bit_w:-1  loss: 0.10032
    1  1583   bit_w: 1  loss: 0.10014
    2  1582   bit_w: 1  loss: 0.10020
    3  1167   bit_w: 1  loss: 0.10000
    4  1105   bit_w:-1  loss: 0.10010
   1163    622   1546   1730   1871   3094    274   1560   1175   1422
     -1      0      1      0      0      1      0      0      0      1
Train accuarcate: 96.94%
tensor([[ 61.,  62.,  65.,  76.,  65.,  64.,  49., 116.,  63.,  63.],
        [ 69.,  79., 107.,  76.,  54.,  73.,  69.,  57.,  75.,  54.],
        [ 57., 104.,  75.,  63.,  67.,  62.,  66.,  68.,  73.,  54.],
        [103.,  64.,  76.,  59.,  54.,  59.,  77.,  71.,  56.,  73.],
        [ 64.,  77.,  62.,  53., 109.,  59.,  74.,  66.,  68.,  75.],
        [ 58., 107.,  71.,  58.,  73.,  53.,  64.,  76.,  68.,  56.],
        [ 47.,  68.,  47.,  75., 106.,  69.,  62.,  69.,  75.,  77.],
        [ 54.,  60.,  74.,  68.,  76.,  66.,  50.,  67.,  66., 112.],
        [ 65.,  71.,  70.,  35.,  74.,  81.,  92.,  66.,  78.,  67.],
        [ 59.,  56.,  62.,  64.,  89.,  57.,  52.,  84.,  73.,  99.],
        [115.,  61.,  70.,  63.,  56.,  70.,  66.,  67.,  71.,  66.],
        [ 74.,  64.,  81.,  58.,  78.,  65., 103.,  61.,  71.,  51.],
        [ 60.,  63.,  59.,  60.,  89.,  67.,  48.,  72.,  60., 110.],
        [ 96.,  59.,  77.,  68.,  58.,  58.,  67.,  69.,  76.,  62.],
        [ 53., 116.,  65.,  62.,  62.,  62.,  62.,  66.,  71.,  67.],
        [ 68.,  69.,  58.,  77.,  54., 100.,  67.,  59.,  72.,  76.],
        [ 62.,  57.,  56.,  61.,  80.,  69.,  57.,  78.,  82., 104.],
        [ 67.,  66.,  77.,  78.,  54.,  60.,  44.,  99.,  53.,  73.],
        [ 58.,  74.,  71.,  86.,  64.,  72.,  62.,  61.,  75.,  66.],
        [ 59.,  67.,  64.,  62., 110.,  57.,  65.,  72.,  67.,  74.]],
       device='cuda:0')
Train accuarcate: 95.71%



iteration:
  190
    0  1462   bit_w:-1  loss: 0.09993
    1  1578   bit_w:-1  loss: 0.09976
    2  1370   bit_w:-1  loss: 0.09986
    3  1097   bit_w:-1  loss: 0.09962
    4   857   bit_w:-1  loss: 0.09978
   2673   3404   1784   4526    920   3215   1006   1002   2411   1627
      0      1      0      1      1      0     -1     -1      1      0
Train accuarcate: 97.00%
tensor([[ 61.,  62.,  65.,  76.,  65.,  64.,  50., 117.,  63.,  63.],
        [ 69.,  80., 107.,  77.,  55.,  73.,  69.,  57.,  76.,  54.],
        [ 57., 104.,  75.,  63.,  67.,  62.,  67.,  69.,  73.,  54.],
        [103.,  65.,  76.,  60.,  55.,  59.,  77.,  71.,  57.,  73.],
        [ 64.,  77.,  62.,  53., 109.,  59.,  75.,  67.,  68.,  75.],
        [ 58., 108.,  71.,  59.,  74.,  53.,  64.,  76.,  69.,  56.],
        [ 47.,  68.,  47.,  75., 106.,  69.,  63.,  70.,  75.,  77.],
        [ 54.,  60.,  74.,  68.,  76.,  66.,  51.,  68.,  66., 112.],
        [ 65.,  71.,  70.,  35.,  74.,  81.,  93.,  67.,  78.,  67.],
        [ 59.,  56.,  62.,  64.,  89.,  57.,  53.,  85.,  73.,  99.],
        [115.,  61.,  70.,  63.,  56.,  70.,  67.,  68.,  71.,  66.],
        [ 74.,  64.,  81.,  58.,  78.,  65., 104.,  62.,  71.,  51.],
        [ 60.,  63.,  59.,  60.,  89.,  67.,  49.,  73.,  60., 110.],
        [ 96.,  59.,  77.,  68.,  58.,  58.,  68.,  70.,  76.,  62.],
        [ 53., 117.,  65.,  63.,  63.,  62.,  62.,  66.,  72.,  67.],
        [ 68.,  70.,  58.,  78.,  55., 100.,  67.,  59.,  73.,  76.],
        [ 62.,  57.,  56.,  61.,  80.,  69.,  58.,  79.,  82., 104.],
        [ 67.,  66.,  77.,  78.,  54.,  60.,  45., 100.,  53.,  73.],
        [ 58.,  74.,  71.,  86.,  64.,  72.,  63.,  62.,  75.,  66.],
        [ 59.,  67.,  64.,  62., 110.,  57.,  66.,  73.,  67.,  74.]],
       device='cuda:0')
Train accuarcate: 95.68%



iteration:
  191
    0  1284   bit_w:-1  loss: 0.09955
    1  1295   bit_w: 1  loss: 0.09945
    2   978   bit_w: 1  loss: 0.09942
    3  1087   bit_w: 1  loss: 0.09934
    4  1556   bit_w: 1  loss: 0.09934
   3566   3654   3217   3522   4732   1084    849   5078   3292   4040
      0      0     -1      0      1     -1     -1      0      0      1
Train accuarcate: 97.03%
tensor([[ 61.,  62.,  66.,  76.,  65.,  65.,  51., 117.,  63.,  63.],
        [ 69.,  80., 108.,  77.,  55.,  74.,  70.,  57.,  76.,  54.],
        [ 57., 104.,  75.,  63.,  68.,  62.,  67.,  69.,  73.,  55.],
        [103.,  65.,  76.,  60.,  56.,  59.,  77.,  71.,  57.,  74.],
        [ 64.,  77.,  62.,  53., 110.,  59.,  75.,  67.,  68.,  76.],
        [ 58., 108.,  71.,  59.,  75.,  53.,  64.,  76.,  69.,  57.],
        [ 47.,  68.,  48.,  75., 106.,  70.,  64.,  70.,  75.,  77.],
        [ 54.,  60.,  75.,  68.,  76.,  67.,  52.,  68.,  66., 112.],
        [ 65.,  71.,  71.,  35.,  74.,  82.,  94.,  67.,  78.,  67.],
        [ 59.,  56.,  62.,  64.,  90.,  57.,  53.,  85.,  73., 100.],
        [115.,  61.,  71.,  63.,  56.,  71.,  68.,  68.,  71.,  66.],
        [ 74.,  64.,  82.,  58.,  78.,  66., 105.,  62.,  71.,  51.],
        [ 60.,  63.,  59.,  60.,  90.,  67.,  49.,  73.,  60., 111.],
        [ 96.,  59.,  78.,  68.,  58.,  59.,  69.,  70.,  76.,  62.],
        [ 53., 117.,  66.,  63.,  63.,  63.,  63.,  66.,  72.,  67.],
        [ 68.,  70.,  59.,  78.,  55., 101.,  68.,  59.,  73.,  76.],
        [ 62.,  57.,  56.,  61.,  81.,  69.,  58.,  79.,  82., 105.],
        [ 67.,  66.,  77.,  78.,  55.,  60.,  45., 100.,  53.,  74.],
        [ 58.,  74.,  72.,  86.,  64.,  73.,  64.,  62.,  75.,  66.],
        [ 59.,  67.,  64.,  62., 111.,  57.,  66.,  73.,  67.,  75.]],
       device='cuda:0')
Train accuarcate: 95.71%



iteration:
  192
    0  1572   bit_w:-1  loss: 0.09916
    1  1434   bit_w:-1  loss: 0.09904
    2  1385   bit_w:-1  loss: 0.09909
    3  1090   bit_w:-1  loss: 0.09887
    4  1545   bit_w: 1  loss: 0.09889
   4990   2797   3047   2505   3529   2044   2367   3104   2613   3723
      1     -1      1     -1      0      0      0      1     -1      0
Train accuarcate: 97.06%
tensor([[ 61.,  63.,  66.,  77.,  65.,  65.,  51., 117.,  64.,  63.],
        [ 70.,  80., 109.,  77.,  55.,  74.,  70.,  58.,  76.,  54.],
        [ 57., 105.,  75.,  64.,  68.,  62.,  67.,  69.,  74.,  55.],
        [104.,  65.,  77.,  60.,  56.,  59.,  77.,  72.,  57.,  74.],
        [ 65.,  77.,  63.,  53., 110.,  59.,  75.,  68.,  68.,  76.],
        [ 59., 108.,  72.,  59.,  75.,  53.,  64.,  77.,  69.,  57.],
        [ 48.,  68.,  49.,  75., 106.,  70.,  64.,  71.,  75.,  77.],
        [ 54.,  61.,  75.,  69.,  76.,  67.,  52.,  68.,  67., 112.],
        [ 65.,  72.,  71.,  36.,  74.,  82.,  94.,  67.,  79.,  67.],
        [ 60.,  56.,  63.,  64.,  90.,  57.,  53.,  86.,  73., 100.],
        [116.,  61.,  72.,  63.,  56.,  71.,  68.,  69.,  71.,  66.],
        [ 75.,  64.,  83.,  58.,  78.,  66., 105.,  63.,  71.,  51.],
        [ 61.,  63.,  60.,  60.,  90.,  67.,  49.,  74.,  60., 111.],
        [ 97.,  59.,  79.,  68.,  58.,  59.,  69.,  71.,  76.,  62.],
        [ 54., 117.,  67.,  63.,  63.,  63.,  63.,  67.,  72.,  67.],
        [ 68.,  71.,  59.,  79.,  55., 101.,  68.,  59.,  74.,  76.],
        [ 62.,  58.,  56.,  62.,  81.,  69.,  58.,  79.,  83., 105.],
        [ 68.,  66.,  78.,  78.,  55.,  60.,  45., 101.,  53.,  74.],
        [ 58.,  75.,  72.,  87.,  64.,  73.,  64.,  62.,  76.,  66.],
        [ 60.,  67.,  65.,  62., 111.,  57.,  66.,  74.,  67.,  75.]],
       device='cuda:0')
Train accuarcate: 95.70%



iteration:
  193
    0  1504   bit_w:-1  loss: 0.09871
    1  1502   bit_w:-1  loss: 0.09856
    2  1321   bit_w:-1  loss: 0.09860
    3  1414   bit_w:-1  loss: 0.09845
    4  1421   bit_w: 1  loss: 0.09852
   1468   4697   3634   3865   4496    882   2233   2340   2917   4262
      0      1      0      0      1     -1      0      0      0      1
Train accuarcate: 97.07%
tensor([[ 61.,  63.,  66.,  77.,  65.,  66.,  51., 117.,  64.,  63.],
        [ 70.,  81., 109.,  77.,  56.,  74.,  70.,  58.,  76.,  55.],
        [ 57., 106.,  75.,  64.,  69.,  62.,  67.,  69.,  74.,  56.],
        [104.,  65.,  77.,  60.,  56.,  60.,  77.,  72.,  57.,  74.],
        [ 65.,  77.,  63.,  53., 110.,  60.,  75.,  68.,  68.,  76.],
        [ 59., 109.,  72.,  59.,  76.,  53.,  64.,  77.,  69.,  58.],
        [ 48.,  69.,  49.,  75., 107.,  70.,  64.,  71.,  75.,  78.],
        [ 54.,  62.,  75.,  69.,  77.,  67.,  52.,  68.,  67., 113.],
        [ 65.,  72.,  71.,  36.,  74.,  83.,  94.,  67.,  79.,  67.],
        [ 60.,  57.,  63.,  64.,  91.,  57.,  53.,  86.,  73., 101.],
        [116.,  61.,  72.,  63.,  56.,  72.,  68.,  69.,  71.,  66.],
        [ 75.,  64.,  83.,  58.,  78.,  67., 105.,  63.,  71.,  51.],
        [ 61.,  64.,  60.,  60.,  91.,  67.,  49.,  74.,  60., 112.],
        [ 97.,  60.,  79.,  68.,  59.,  59.,  69.,  71.,  76.,  63.],
        [ 54., 118.,  67.,  63.,  64.,  63.,  63.,  67.,  72.,  68.],
        [ 68.,  72.,  59.,  79.,  56., 101.,  68.,  59.,  74.,  77.],
        [ 62.,  59.,  56.,  62.,  82.,  69.,  58.,  79.,  83., 106.],
        [ 68.,  66.,  78.,  78.,  55.,  61.,  45., 101.,  53.,  74.],
        [ 58.,  76.,  72.,  87.,  65.,  73.,  64.,  62.,  76.,  67.],
        [ 60.,  68.,  65.,  62., 112.,  57.,  66.,  74.,  67.,  76.]],
       device='cuda:0')
Train accuarcate: 95.68%



iteration:
  194
    0  1564   bit_w:-1  loss: 0.09835
    1   882   bit_w:-1  loss: 0.09820
    2  1494   bit_w:-1  loss: 0.09824
    3  1559   bit_w:-1  loss: 0.09805
    4  1379   bit_w:-1  loss: 0.09814
   4069   5317   1562    975   1991   2345   2041   3154   1846   2806
      1      0     -1     -1      0      0      0      1      1      0
Train accuarcate: 97.06%
tensor([[ 61.,  63.,  67.,  78.,  65.,  66.,  51., 117.,  64.,  63.],
        [ 70.,  81., 110.,  78.,  56.,  74.,  70.,  58.,  76.,  55.],
        [ 58., 106.,  75.,  64.,  69.,  62.,  67.,  70.,  75.,  56.],
        [104.,  65.,  78.,  61.,  56.,  60.,  77.,  72.,  57.,  74.],
        [ 65.,  77.,  64.,  54., 110.,  60.,  75.,  68.,  68.,  76.],
        [ 60., 109.,  72.,  59.,  76.,  53.,  64.,  78.,  70.,  58.],
        [ 48.,  69.,  50.,  76., 107.,  70.,  64.,  71.,  75.,  78.],
        [ 54.,  62.,  76.,  70.,  77.,  67.,  52.,  68.,  67., 113.],
        [ 65.,  72.,  72.,  37.,  74.,  83.,  94.,  67.,  79.,  67.],
        [ 61.,  57.,  63.,  64.,  91.,  57.,  53.,  87.,  74., 101.],
        [116.,  61.,  73.,  64.,  56.,  72.,  68.,  69.,  71.,  66.],
        [ 75.,  64.,  84.,  59.,  78.,  67., 105.,  63.,  71.,  51.],
        [ 61.,  64.,  61.,  61.,  91.,  67.,  49.,  74.,  60., 112.],
        [ 97.,  60.,  80.,  69.,  59.,  59.,  69.,  71.,  76.,  63.],
        [ 55., 118.,  67.,  63.,  64.,  63.,  63.,  68.,  73.,  68.],
        [ 69.,  72.,  59.,  79.,  56., 101.,  68.,  60.,  75.,  77.],
        [ 63.,  59.,  56.,  62.,  82.,  69.,  58.,  80.,  84., 106.],
        [ 68.,  66.,  79.,  79.,  55.,  61.,  45., 101.,  53.,  74.],
        [ 58.,  76.,  73.,  88.,  65.,  73.,  64.,  62.,  76.,  67.],
        [ 61.,  68.,  65.,  62., 112.,  57.,  66.,  75.,  68.,  76.]],
       device='cuda:0')
Train accuarcate: 95.68%



iteration:
  195
    0  1512   bit_w:-1  loss: 0.09795
    1  1433   bit_w: 1  loss: 0.09784
    2  1428   bit_w:-1  loss: 0.09785
    3  1416   bit_w: 1  loss: 0.09777
    4  1576   bit_w:-1  loss: 0.09773
   2464   3819   2683   1114   4034   2651   4107    866   2226   1372
      0      0      0      0      1      0      1     -1      0     -1
Train accuarcate: 97.07%
tensor([[ 61.,  63.,  67.,  78.,  65.,  66.,  51., 118.,  64.,  64.],
        [ 70.,  81., 110.,  78.,  57.,  74.,  71.,  58.,  76.,  55.],
        [ 58., 106.,  75.,  64.,  69.,  62.,  67.,  71.,  75.,  57.],
        [104.,  65.,  78.,  61.,  56.,  60.,  77.,  73.,  57.,  75.],
        [ 65.,  77.,  64.,  54., 111.,  60.,  76.,  68.,  68.,  76.],
        [ 60., 109.,  72.,  59.,  76.,  53.,  64.,  79.,  70.,  59.],
        [ 48.,  69.,  50.,  76., 108.,  70.,  65.,  71.,  75.,  78.],
        [ 54.,  62.,  76.,  70.,  78.,  67.,  53.,  68.,  67., 113.],
        [ 65.,  72.,  72.,  37.,  75.,  83.,  95.,  67.,  79.,  67.],
        [ 61.,  57.,  63.,  64.,  92.,  57.,  54.,  87.,  74., 101.],
        [116.,  61.,  73.,  64.,  56.,  72.,  68.,  70.,  71.,  67.],
        [ 75.,  64.,  84.,  59.,  79.,  67., 106.,  63.,  71.,  51.],
        [ 61.,  64.,  61.,  61.,  92.,  67.,  50.,  74.,  60., 112.],
        [ 97.,  60.,  80.,  69.,  59.,  59.,  69.,  72.,  76.,  64.],
        [ 55., 118.,  67.,  63.,  64.,  63.,  63.,  69.,  73.,  69.],
        [ 69.,  72.,  59.,  79.,  56., 101.,  68.,  61.,  75.,  78.],
        [ 63.,  59.,  56.,  62.,  83.,  69.,  59.,  80.,  84., 106.],
        [ 68.,  66.,  79.,  79.,  55.,  61.,  45., 102.,  53.,  75.],
        [ 58.,  76.,  73.,  88.,  65.,  73.,  64.,  63.,  76.,  68.],
        [ 61.,  68.,  65.,  62., 112.,  57.,  66.,  76.,  68.,  77.]],
       device='cuda:0')
Train accuarcate: 95.68%



iteration:
  196
    0   862   bit_w:-1  loss: 0.09756
    1  1431   bit_w: 1  loss: 0.09743
    2   384   bit_w:-1  loss: 0.09744
    3   891   bit_w:-1  loss: 0.09732
    4  1554   bit_w:-1  loss: 0.09736
    314   4345   3817   4068   2386    808    831   3283   3738   3475
      0      1      0      1      0     -1      0      0      1     -1
Train accuarcate: 97.07%
tensor([[ 61.,  63.,  67.,  78.,  65.,  67.,  51., 118.,  64.,  65.],
        [ 70.,  82., 110.,  79.,  57.,  74.,  71.,  58.,  77.,  55.],
        [ 58., 106.,  75.,  64.,  69.,  63.,  67.,  71.,  75.,  58.],
        [104.,  65.,  78.,  61.,  56.,  61.,  77.,  73.,  57.,  76.],
        [ 65.,  78.,  64.,  55., 111.,  60.,  76.,  68.,  69.,  76.],
        [ 60., 110.,  72.,  60.,  76.,  53.,  64.,  79.,  71.,  59.],
        [ 48.,  69.,  50.,  76., 108.,  71.,  65.,  71.,  75.,  79.],
        [ 54.,  63.,  76.,  71.,  78.,  67.,  53.,  68.,  68., 113.],
        [ 65.,  72.,  72.,  37.,  75.,  84.,  95.,  67.,  79.,  68.],
        [ 61.,  57.,  63.,  64.,  92.,  58.,  54.,  87.,  74., 102.],
        [116.,  61.,  73.,  64.,  56.,  73.,  68.,  70.,  71.,  68.],
        [ 75.,  65.,  84.,  60.,  79.,  67., 106.,  63.,  72.,  51.],
        [ 61.,  64.,  61.,  61.,  92.,  68.,  50.,  74.,  60., 113.],
        [ 97.,  60.,  80.,  69.,  59.,  60.,  69.,  72.,  76.,  65.],
        [ 55., 119.,  67.,  64.,  64.,  63.,  63.,  69.,  74.,  69.],
        [ 69.,  72.,  59.,  79.,  56., 102.,  68.,  61.,  75.,  79.],
        [ 63.,  60.,  56.,  63.,  83.,  69.,  59.,  80.,  85., 106.],
        [ 68.,  66.,  79.,  79.,  55.,  62.,  45., 102.,  53.,  76.],
        [ 58.,  77.,  73.,  89.,  65.,  73.,  64.,  63.,  77.,  68.],
        [ 61.,  68.,  65.,  62., 112.,  58.,  66.,  76.,  68.,  78.]],
       device='cuda:0')
Train accuarcate: 95.64%



iteration:
  197
    0  1355   bit_w:-1  loss: 0.09714
    1   796   bit_w: 1  loss: 0.09701
    2  1170   bit_w:-1  loss: 0.09703
    3   626   bit_w:-1  loss: 0.09690
    4   498   bit_w:-1  loss: 0.09697
   1331   6630   5228   4997   4376   3096   4489   4644   2828   4338
     -1      0      1      0     -1      0      0      0     -1      0
Train accuarcate: 97.05%
tensor([[ 61.,  63.,  68.,  78.,  65.,  67.,  51., 118.,  64.,  65.],
        [ 70.,  82., 111.,  79.,  57.,  74.,  71.,  58.,  77.,  55.],
        [ 58., 106.,  76.,  64.,  69.,  63.,  67.,  71.,  75.,  58.],
        [105.,  65.,  78.,  61.,  57.,  61.,  77.,  73.,  58.,  76.],
        [ 66.,  78.,  64.,  55., 112.,  60.,  76.,  68.,  70.,  76.],
        [ 60., 110.,  73.,  60.,  76.,  53.,  64.,  79.,  71.,  59.],
        [ 48.,  69.,  51.,  76., 108.,  71.,  65.,  71.,  75.,  79.],
        [ 54.,  63.,  77.,  71.,  78.,  67.,  53.,  68.,  68., 113.],
        [ 66.,  72.,  72.,  37.,  76.,  84.,  95.,  67.,  80.,  68.],
        [ 62.,  57.,  63.,  64.,  93.,  58.,  54.,  87.,  75., 102.],
        [117.,  61.,  73.,  64.,  57.,  73.,  68.,  70.,  72.,  68.],
        [ 76.,  65.,  84.,  60.,  80.,  67., 106.,  63.,  73.,  51.],
        [ 61.,  64.,  62.,  61.,  92.,  68.,  50.,  74.,  60., 113.],
        [ 98.,  60.,  80.,  69.,  60.,  60.,  69.,  72.,  77.,  65.],
        [ 55., 119.,  68.,  64.,  64.,  63.,  63.,  69.,  74.,  69.],
        [ 70.,  72.,  59.,  79.,  57., 102.,  68.,  61.,  76.,  79.],
        [ 64.,  60.,  56.,  63.,  84.,  69.,  59.,  80.,  86., 106.],
        [ 68.,  66.,  80.,  79.,  55.,  62.,  45., 102.,  53.,  76.],
        [ 58.,  77.,  74.,  89.,  65.,  73.,  64.,  63.,  77.,  68.],
        [ 61.,  68.,  66.,  62., 112.,  58.,  66.,  76.,  68.,  78.]],
       device='cuda:0')
Train accuarcate: 95.64%



iteration:
  198
    0  1383   bit_w:-1  loss: 0.09683
    1  1380   bit_w: 1  loss: 0.09672
    2  1060   bit_w: 1  loss: 0.09670
    3   623   bit_w: 1  loss: 0.09657
    4  1336   bit_w: 1  loss: 0.09653
   3320   3385   3189   3211   2793   2836   1432   4440   2674   3779
      1      1      0      0      1      0     -1     -1     -1      0
Train accuarcate: 97.09%
tensor([[ 62.,  64.,  68.,  78.,  66.,  67.,  51., 118.,  64.,  65.],
        [ 70.,  82., 111.,  79.,  57.,  74.,  72.,  59.,  78.,  55.],
        [ 58., 106.,  76.,  64.,  69.,  63.,  68.,  72.,  76.,  58.],
        [105.,  65.,  78.,  61.,  57.,  61.,  78.,  74.,  59.,  76.],
        [ 66.,  78.,  64.,  55., 112.,  60.,  77.,  69.,  71.,  76.],
        [ 60., 110.,  73.,  60.,  76.,  53.,  65.,  80.,  72.,  59.],
        [ 48.,  69.,  51.,  76., 108.,  71.,  66.,  72.,  76.,  79.],
        [ 54.,  63.,  77.,  71.,  78.,  67.,  54.,  69.,  69., 113.],
        [ 66.,  72.,  72.,  37.,  76.,  84.,  96.,  68.,  81.,  68.],
        [ 63.,  58.,  63.,  64.,  94.,  58.,  54.,  87.,  75., 102.],
        [118.,  62.,  73.,  64.,  58.,  73.,  68.,  70.,  72.,  68.],
        [ 77.,  66.,  84.,  60.,  81.,  67., 106.,  63.,  73.,  51.],
        [ 62.,  65.,  62.,  61.,  93.,  68.,  50.,  74.,  60., 113.],
        [ 99.,  61.,  80.,  69.,  61.,  60.,  69.,  72.,  77.,  65.],
        [ 55., 119.,  68.,  64.,  64.,  63.,  64.,  70.,  75.,  69.],
        [ 70.,  72.,  59.,  79.,  57., 102.,  69.,  62.,  77.,  79.],
        [ 65.,  61.,  56.,  63.,  85.,  69.,  59.,  80.,  86., 106.],
        [ 68.,  66.,  80.,  79.,  55.,  62.,  46., 103.,  54.,  76.],
        [ 58.,  77.,  74.,  89.,  65.,  73.,  65.,  64.,  78.,  68.],
        [ 62.,  69.,  66.,  62., 113.,  58.,  66.,  76.,  68.,  78.]],
       device='cuda:0')
Train accuarcate: 95.59%



iteration:
  199
    0  1428   bit_w:-1  loss: 0.09635
    1  1560   bit_w: 1  loss: 0.09625
    2   290   bit_w:-1  loss: 0.09623
    3  1491   bit_w: 1  loss: 0.09612
    4   651   bit_w:-1  loss: 0.09609
   4584   5701   3472   2913   4771   3346   4636   1451   3044   4273
      0      0     -1     -1      0     -1      0     -1      0      1
Train accuarcate: 97.08%
tensor([[ 62.,  64.,  69.,  79.,  66.,  68.,  51., 119.,  64.,  65.],
        [ 70.,  82., 111.,  79.,  57.,  74.,  72.,  59.,  78.,  56.],
        [ 58., 106.,  76.,  64.,  69.,  63.,  68.,  72.,  76.,  59.],
        [105.,  65.,  78.,  61.,  57.,  61.,  78.,  74.,  59.,  77.],
        [ 66.,  78.,  64.,  55., 112.,  60.,  77.,  69.,  71.,  77.],
        [ 60., 110.,  73.,  60.,  76.,  53.,  65.,  80.,  72.,  60.],
        [ 48.,  69.,  51.,  76., 108.,  71.,  66.,  72.,  76.,  80.],
        [ 54.,  63.,  77.,  71.,  78.,  67.,  54.,  69.,  69., 114.],
        [ 66.,  72.,  72.,  37.,  76.,  84.,  96.,  68.,  81.,  69.],
        [ 63.,  58.,  63.,  64.,  94.,  58.,  54.,  87.,  75., 103.],
        [118.,  62.,  73.,  64.,  58.,  73.,  68.,  70.,  72.,  69.],
        [ 77.,  66.,  84.,  60.,  81.,  67., 106.,  63.,  73.,  52.],
        [ 62.,  65.,  62.,  61.,  93.,  68.,  50.,  74.,  60., 114.],
        [ 99.,  61.,  80.,  69.,  61.,  60.,  69.,  72.,  77.,  66.],
        [ 55., 119.,  68.,  64.,  64.,  63.,  64.,  70.,  75.,  70.],
        [ 70.,  72.,  60.,  80.,  57., 103.,  69.,  63.,  77.,  79.],
        [ 65.,  61.,  56.,  63.,  85.,  69.,  59.,  80.,  86., 107.],
        [ 68.,  66.,  81.,  80.,  55.,  63.,  46., 104.,  54.,  76.],
        [ 58.,  77.,  75.,  90.,  65.,  74.,  65.,  65.,  78.,  68.],
        [ 62.,  69.,  66.,  62., 113.,  58.,  66.,  76.,  68.,  79.]],
       device='cuda:0')
Train accuarcate: 95.59%



iteration:
  200
    0  1446   bit_w:-1  loss: 0.09597
    1  1409   bit_w: 1  loss: 0.09583
    2  1328   bit_w:-1  loss: 0.09586
    3  1429   bit_w: 1  loss: 0.09568
    4   211   bit_w: 1  loss: 0.09573
   4893   4621   3289   4410   1261   2084   2192   4691   3323   4191
      1      1      0     -1     -1     -1     -1      0      0      0
Train accuarcate: 97.11%
tensor([[ 62.,  64.,  69.,  80.,  67.,  69.,  52., 119.,  64.,  65.],
        [ 71.,  83., 111.,  79.,  57.,  74.,  72.,  59.,  78.,  56.],
        [ 59., 107.,  76.,  64.,  69.,  63.,  68.,  72.,  76.,  59.],
        [106.,  66.,  78.,  61.,  57.,  61.,  78.,  74.,  59.,  77.],
        [ 66.,  78.,  64.,  56., 113.,  61.,  78.,  69.,  71.,  77.],
        [ 60., 110.,  73.,  61.,  77.,  54.,  66.,  80.,  72.,  60.],
        [ 48.,  69.,  51.,  77., 109.,  72.,  67.,  72.,  76.,  80.],
        [ 54.,  63.,  77.,  72.,  79.,  68.,  55.,  69.,  69., 114.],
        [ 66.,  72.,  72.,  38.,  77.,  85.,  97.,  68.,  81.,  69.],
        [ 64.,  59.,  63.,  64.,  94.,  58.,  54.,  87.,  75., 103.],
        [118.,  62.,  73.,  65.,  59.,  74.,  69.,  70.,  72.,  69.],
        [ 77.,  66.,  84.,  61.,  82.,  68., 107.,  63.,  73.,  52.],
        [ 63.,  66.,  62.,  61.,  93.,  68.,  50.,  74.,  60., 114.],
        [100.,  62.,  80.,  69.,  61.,  60.,  69.,  72.,  77.,  66.],
        [ 55., 119.,  68.,  65.,  65.,  64.,  65.,  70.,  75.,  70.],
        [ 70.,  72.,  60.,  81.,  58., 104.,  70.,  63.,  77.,  79.],
        [ 65.,  61.,  56.,  64.,  86.,  70.,  60.,  80.,  86., 107.],
        [ 69.,  67.,  81.,  80.,  55.,  63.,  46., 104.,  54.,  76.],
        [ 58.,  77.,  75.,  91.,  66.,  75.,  66.,  65.,  78.,  68.],
        [ 62.,  69.,  66.,  63., 114.,  59.,  67.,  76.,  68.,  79.]],
       device='cuda:0')
Train accuarcate: 95.57%



iteration:
  201
    0  1396   bit_w:-1  loss: 0.09556
    1  1515   bit_w: 1  loss: 0.09543
    2  1437   bit_w: 1  loss: 0.09544
    3  1088   bit_w: 1  loss: 0.09532
    4  1116   bit_w: 1  loss: 0.09532
   3641   3893   2864   2683   1783   2032   1976   2534   3816   1338
      0      0      1     -1      0     -1      0      1      1      0
Train accuarcate: 97.14%
tensor([[ 62.,  64.,  69.,  81.,  67.,  70.,  52., 119.,  64.,  65.],
        [ 71.,  83., 112.,  79.,  57.,  74.,  72.,  60.,  79.,  56.],
        [ 59., 107.,  77.,  64.,  69.,  63.,  68.,  73.,  77.,  59.],
        [106.,  66.,  78.,  62.,  57.,  62.,  78.,  74.,  59.,  77.],
        [ 66.,  78.,  64.,  57., 113.,  62.,  78.,  69.,  71.,  77.],
        [ 60., 110.,  74.,  61.,  77.,  54.,  66.,  81.,  73.,  60.],
        [ 48.,  69.,  51.,  78., 109.,  73.,  67.,  72.,  76.,  80.],
        [ 54.,  63.,  78.,  72.,  79.,  68.,  55.,  70.,  70., 114.],
        [ 66.,  72.,  72.,  39.,  77.,  86.,  97.,  68.,  81.,  69.],
        [ 64.,  59.,  63.,  65.,  94.,  59.,  54.,  87.,  75., 103.],
        [118.,  62.,  74.,  65.,  59.,  74.,  69.,  71.,  73.,  69.],
        [ 77.,  66.,  85.,  61.,  82.,  68., 107.,  64.,  74.,  52.],
        [ 63.,  66.,  62.,  62.,  93.,  69.,  50.,  74.,  60., 114.],
        [100.,  62.,  80.,  70.,  61.,  61.,  69.,  72.,  77.,  66.],
        [ 55., 119.,  68.,  66.,  65.,  65.,  65.,  70.,  75.,  70.],
        [ 70.,  72.,  61.,  81.,  58., 104.,  70.,  64.,  78.,  79.],
        [ 65.,  61.,  56.,  65.,  86.,  71.,  60.,  80.,  86., 107.],
        [ 69.,  67.,  81.,  81.,  55.,  64.,  46., 104.,  54.,  76.],
        [ 58.,  77.,  75.,  92.,  66.,  76.,  66.,  65.,  78.,  68.],
        [ 62.,  69.,  67.,  63., 114.,  59.,  67.,  77.,  69.,  79.]],
       device='cuda:0')
Train accuarcate: 95.65%



iteration:
  202
    0  1541   bit_w:-1  loss: 0.09516
    1  1399   bit_w: 1  loss: 0.09505
    2  1325   bit_w:-1  loss: 0.09497
    3  1123   bit_w:-1  loss: 0.09493
    4  1416   bit_w:-1  loss: 0.09489
   4466   1081   4109   5007   3171   2880   1917   6053   4013   5709
      0     -1      0      0     -1      0     -1      0     -1      1
Train accuarcate: 97.13%
tensor([[ 62.,  64.,  69.,  81.,  67.,  70.,  52., 119.,  64.,  66.],
        [ 71.,  83., 112.,  79.,  57.,  74.,  72.,  60.,  79.,  57.],
        [ 59., 108.,  77.,  64.,  70.,  63.,  69.,  73.,  78.,  59.],
        [106.,  66.,  78.,  62.,  57.,  62.,  78.,  74.,  59.,  78.],
        [ 66.,  79.,  64.,  57., 114.,  62.,  79.,  69.,  72.,  77.],
        [ 60., 111.,  74.,  61.,  78.,  54.,  67.,  81.,  74.,  60.],
        [ 48.,  70.,  51.,  78., 110.,  73.,  68.,  72.,  77.,  80.],
        [ 54.,  64.,  78.,  72.,  80.,  68.,  56.,  70.,  71., 114.],
        [ 66.,  73.,  72.,  39.,  78.,  86.,  98.,  68.,  82.,  69.],
        [ 64.,  59.,  63.,  65.,  94.,  59.,  54.,  87.,  75., 104.],
        [118.,  62.,  74.,  65.,  59.,  74.,  69.,  71.,  73.,  70.],
        [ 77.,  67.,  85.,  61.,  83.,  68., 108.,  64.,  75.,  52.],
        [ 63.,  66.,  62.,  62.,  93.,  69.,  50.,  74.,  60., 115.],
        [100.,  62.,  80.,  70.,  61.,  61.,  69.,  72.,  77.,  67.],
        [ 55., 119.,  68.,  66.,  65.,  65.,  65.,  70.,  75.,  71.],
        [ 70.,  72.,  61.,  81.,  58., 104.,  70.,  64.,  78.,  80.],
        [ 65.,  61.,  56.,  65.,  86.,  71.,  60.,  80.,  86., 108.],
        [ 69.,  67.,  81.,  81.,  55.,  64.,  46., 104.,  54.,  77.],
        [ 58.,  77.,  75.,  92.,  66.,  76.,  66.,  65.,  78.,  69.],
        [ 62.,  69.,  67.,  63., 114.,  59.,  67.,  77.,  69.,  80.]],
       device='cuda:0')
Train accuarcate: 95.66%



iteration:
  203
    0  1451   bit_w:-1  loss: 0.09469
    1  1447   bit_w:-1  loss: 0.09456
    2  1341   bit_w: 1  loss: 0.09461
    3   429   bit_w:-1  loss: 0.09450
    4   208   bit_w:-1  loss: 0.09454
   1731   5807   4611   3997   2448   2019   1806   5188   4162   2832
     -1     -1      1      0     -1      0     -1      1      0      0
Train accuarcate: 97.14%
tensor([[ 62.,  64.,  70.,  81.,  67.,  70.,  52., 120.,  64.,  66.],
        [ 71.,  83., 113.,  79.,  57.,  74.,  72.,  61.,  79.,  57.],
        [ 59., 108.,  78.,  64.,  70.,  63.,  69.,  74.,  78.,  59.],
        [107.,  67.,  78.,  62.,  58.,  62.,  79.,  74.,  59.,  78.],
        [ 66.,  79.,  65.,  57., 114.,  62.,  79.,  70.,  72.,  77.],
        [ 60., 111.,  75.,  61.,  78.,  54.,  67.,  82.,  74.,  60.],
        [ 48.,  70.,  52.,  78., 110.,  73.,  68.,  73.,  77.,  80.],
        [ 55.,  65.,  78.,  72.,  81.,  68.,  57.,  70.,  71., 114.],
        [ 67.,  74.,  72.,  39.,  79.,  86.,  99.,  68.,  82.,  69.],
        [ 65.,  60.,  63.,  65.,  95.,  59.,  55.,  87.,  75., 104.],
        [118.,  62.,  75.,  65.,  59.,  74.,  69.,  72.,  73.,  70.],
        [ 77.,  67.,  86.,  61.,  83.,  68., 108.,  65.,  75.,  52.],
        [ 64.,  67.,  62.,  62.,  94.,  69.,  51.,  74.,  60., 115.],
        [101.,  63.,  80.,  70.,  62.,  61.,  70.,  72.,  77.,  67.],
        [ 55., 119.,  69.,  66.,  65.,  65.,  65.,  71.,  75.,  71.],
        [ 70.,  72.,  62.,  81.,  58., 104.,  70.,  65.,  78.,  80.],
        [ 65.,  61.,  57.,  65.,  86.,  71.,  60.,  81.,  86., 108.],
        [ 69.,  67.,  82.,  81.,  55.,  64.,  46., 105.,  54.,  77.],
        [ 58.,  77.,  76.,  92.,  66.,  76.,  66.,  66.,  78.,  69.],
        [ 62.,  69.,  68.,  63., 114.,  59.,  67.,  78.,  69.,  80.]],
       device='cuda:0')
Train accuarcate: 95.63%



iteration:
  204
    0  1569   bit_w:-1  loss: 0.09435
    1  1496   bit_w: 1  loss: 0.09427
    2  1347   bit_w: 1  loss: 0.09421
    3  1138   bit_w:-1  loss: 0.09408
    4  1369   bit_w:-1  loss: 0.09410
   2946   3512   3786   1984   4575   1326   1444   4531   1832   4401
     -1      0      0     -1      0     -1      0      0     -1      0
Train accuarcate: 97.15%
tensor([[ 63.,  64.,  70.,  82.,  67.,  71.,  52., 120.,  65.,  66.],
        [ 72.,  83., 113.,  80.,  57.,  75.,  72.,  61.,  80.,  57.],
        [ 60., 108.,  78.,  65.,  70.,  64.,  69.,  74.,  79.,  59.],
        [107.,  67.,  78.,  62.,  58.,  62.,  79.,  74.,  59.,  78.],
        [ 67.,  79.,  65.,  58., 114.,  63.,  79.,  70.,  73.,  77.],
        [ 60., 111.,  75.,  61.,  78.,  54.,  67.,  82.,  74.,  60.],
        [ 48.,  70.,  52.,  78., 110.,  73.,  68.,  73.,  77.,  80.],
        [ 55.,  65.,  78.,  72.,  81.,  68.,  57.,  70.,  71., 114.],
        [ 68.,  74.,  72.,  40.,  79.,  87.,  99.,  68.,  83.,  69.],
        [ 65.,  60.,  63.,  65.,  95.,  59.,  55.,  87.,  75., 104.],
        [119.,  62.,  75.,  66.,  59.,  75.,  69.,  72.,  74.,  70.],
        [ 78.,  67.,  86.,  62.,  83.,  69., 108.,  65.,  76.,  52.],
        [ 64.,  67.,  62.,  62.,  94.,  69.,  51.,  74.,  60., 115.],
        [102.,  63.,  80.,  71.,  62.,  62.,  70.,  72.,  78.,  67.],
        [ 55., 119.,  69.,  66.,  65.,  65.,  65.,  71.,  75.,  71.],
        [ 71.,  72.,  62.,  82.,  58., 105.,  70.,  65.,  79.,  80.],
        [ 65.,  61.,  57.,  65.,  86.,  71.,  60.,  81.,  86., 108.],
        [ 70.,  67.,  82.,  82.,  55.,  65.,  46., 105.,  55.,  77.],
        [ 59.,  77.,  76.,  93.,  66.,  77.,  66.,  66.,  79.,  69.],
        [ 63.,  69.,  68.,  64., 114.,  60.,  67.,  78.,  70.,  80.]],
       device='cuda:0')
Train accuarcate: 95.69%



iteration:
  205
    0  1531   bit_w:-1  loss: 0.09399
    1  1095   bit_w:-1  loss: 0.09386
    2  1527   bit_w:-1  loss: 0.09389
    3  1551   bit_w:-1  loss: 0.09370
    4  1473   bit_w: 1  loss: 0.09381
   1782   1416   2963   3862    989   1115   1237   2112   2255   2978
      0      0      1      1      0      0      0      0      1      1
Train accuarcate: 97.15%
tensor([[ 63.,  64.,  71.,  83.,  67.,  71.,  52., 120.,  66.,  67.],
        [ 72.,  83., 114.,  81.,  57.,  75.,  72.,  61.,  81.,  58.],
        [ 60., 108.,  78.,  65.,  70.,  64.,  69.,  74.,  79.,  59.],
        [107.,  67.,  79.,  63.,  58.,  62.,  79.,  74.,  60.,  79.],
        [ 67.,  79.,  65.,  58., 114.,  63.,  79.,  70.,  73.,  77.],
        [ 60., 111.,  76.,  62.,  78.,  54.,  67.,  82.,  75.,  61.],
        [ 48.,  70.,  53.,  79., 110.,  73.,  68.,  73.,  78.,  81.],
        [ 55.,  65.,  78.,  72.,  81.,  68.,  57.,  70.,  71., 114.],
        [ 68.,  74.,  72.,  40.,  79.,  87.,  99.,  68.,  83.,  69.],
        [ 65.,  60.,  64.,  66.,  95.,  59.,  55.,  87.,  76., 105.],
        [119.,  62.,  75.,  66.,  59.,  75.,  69.,  72.,  74.,  70.],
        [ 78.,  67.,  86.,  62.,  83.,  69., 108.,  65.,  76.,  52.],
        [ 64.,  67.,  63.,  63.,  94.,  69.,  51.,  74.,  61., 116.],
        [102.,  63.,  80.,  71.,  62.,  62.,  70.,  72.,  78.,  67.],
        [ 55., 119.,  69.,  66.,  65.,  65.,  65.,  71.,  75.,  71.],
        [ 71.,  72.,  62.,  82.,  58., 105.,  70.,  65.,  79.,  80.],
        [ 65.,  61.,  58.,  66.,  86.,  71.,  60.,  81.,  87., 109.],
        [ 70.,  67.,  83.,  83.,  55.,  65.,  46., 105.,  56.,  78.],
        [ 59.,  77.,  77.,  94.,  66.,  77.,  66.,  66.,  80.,  70.],
        [ 63.,  69.,  68.,  64., 114.,  60.,  67.,  78.,  70.,  80.]],
       device='cuda:0')
Train accuarcate: 95.74%



iteration:
  206
    0  1414   bit_w:-1  loss: 0.09364
    1   271   bit_w: 1  loss: 0.09351
    2  1049   bit_w: 1  loss: 0.09350
    3  1039   bit_w:-1  loss: 0.09347
    4  1531   bit_w:-1  loss: 0.09344
   5387   5644   5220   4958   5409   2559   1951   5599   5141   5421
      0      0      0      0      0     -1     -1     -1      0      0
Train accuarcate: 97.15%
tensor([[ 63.,  64.,  71.,  83.,  67.,  71.,  52., 120.,  66.,  67.],
        [ 72.,  83., 114.,  81.,  57.,  75.,  72.,  61.,  81.,  58.],
        [ 60., 108.,  78.,  65.,  70.,  64.,  69.,  74.,  79.,  59.],
        [107.,  67.,  79.,  63.,  58.,  62.,  79.,  74.,  60.,  79.],
        [ 67.,  79.,  65.,  58., 114.,  63.,  79.,  70.,  73.,  77.],
        [ 60., 111.,  76.,  62.,  78.,  54.,  67.,  82.,  75.,  61.],
        [ 48.,  70.,  53.,  79., 110.,  73.,  68.,  73.,  78.,  81.],
        [ 55.,  65.,  78.,  72.,  81.,  69.,  58.,  71.,  71., 114.],
        [ 68.,  74.,  72.,  40.,  79.,  88., 100.,  69.,  83.,  69.],
        [ 65.,  60.,  64.,  66.,  95.,  59.,  55.,  87.,  76., 105.],
        [119.,  62.,  75.,  66.,  59.,  75.,  69.,  72.,  74.,  70.],
        [ 78.,  67.,  86.,  62.,  83.,  70., 109.,  66.,  76.,  52.],
        [ 64.,  67.,  63.,  63.,  94.,  69.,  51.,  74.,  61., 116.],
        [102.,  63.,  80.,  71.,  62.,  62.,  70.,  72.,  78.,  67.],
        [ 55., 119.,  69.,  66.,  65.,  65.,  65.,  71.,  75.,  71.],
        [ 71.,  72.,  62.,  82.,  58., 105.,  70.,  65.,  79.,  80.],
        [ 65.,  61.,  58.,  66.,  86.,  71.,  60.,  81.,  87., 109.],
        [ 70.,  67.,  83.,  83.,  55.,  65.,  46., 105.,  56.,  78.],
        [ 59.,  77.,  77.,  94.,  66.,  78.,  67.,  67.,  80.,  70.],
        [ 63.,  69.,  68.,  64., 114.,  60.,  67.,  78.,  70.,  80.]],
       device='cuda:0')
Train accuarcate: 95.74%



iteration:
  207
    0  1490   bit_w:-1  loss: 0.09332
    1  1528   bit_w: 1  loss: 0.09322
    2  1492   bit_w: 1  loss: 0.09323
    3  1409   bit_w: 1  loss: 0.09310
    4  1110   bit_w: 1  loss: 0.09316
   2184   1261   3708   3912   4063   2390   4640   4204   2784   3766
      0     -1      0      0     -1      0      0      1      0      0
Train accuarcate: 97.18%
tensor([[ 63.,  65.,  71.,  83.,  68.,  71.,  52., 120.,  66.,  67.],
        [ 72.,  84., 114.,  81.,  58.,  75.,  72.,  61.,  81.,  58.],
        [ 60., 109.,  78.,  65.,  71.,  64.,  69.,  74.,  79.,  59.],
        [107.,  68.,  79.,  63.,  59.,  62.,  79.,  74.,  60.,  79.],
        [ 67.,  79.,  65.,  58., 114.,  63.,  79.,  71.,  73.,  77.],
        [ 60., 112.,  76.,  62.,  79.,  54.,  67.,  82.,  75.,  61.],
        [ 48.,  70.,  53.,  79., 110.,  73.,  68.,  74.,  78.,  81.],
        [ 55.,  65.,  78.,  72.,  81.,  69.,  58.,  72.,  71., 114.],
        [ 68.,  74.,  72.,  40.,  79.,  88., 100.,  70.,  83.,  69.],
        [ 65.,  60.,  64.,  66.,  95.,  59.,  55.,  88.,  76., 105.],
        [119.,  62.,  75.,  66.,  59.,  75.,  69.,  73.,  74.,  70.],
        [ 78.,  67.,  86.,  62.,  83.,  70., 109.,  67.,  76.,  52.],
        [ 64.,  67.,  63.,  63.,  94.,  69.,  51.,  75.,  61., 116.],
        [102.,  64.,  80.,  71.,  63.,  62.,  70.,  72.,  78.,  67.],
        [ 55., 120.,  69.,  66.,  66.,  65.,  65.,  71.,  75.,  71.],
        [ 71.,  73.,  62.,  82.,  59., 105.,  70.,  65.,  79.,  80.],
        [ 65.,  61.,  58.,  66.,  86.,  71.,  60.,  82.,  87., 109.],
        [ 70.,  67.,  83.,  83.,  55.,  65.,  46., 106.,  56.,  78.],
        [ 59.,  77.,  77.,  94.,  66.,  78.,  67.,  68.,  80.,  70.],
        [ 63.,  69.,  68.,  64., 114.,  60.,  67.,  79.,  70.,  80.]],
       device='cuda:0')
Train accuarcate: 95.75%



iteration:
  208
    0  1479   bit_w:-1  loss: 0.09301
    1  1203   bit_w: 1  loss: 0.09289
    2  1503   bit_w:-1  loss: 0.09292
    3  1516   bit_w:-1  loss: 0.09284
    4   375   bit_w:-1  loss: 0.09287
   2757   6534   3182   4069   3961   3878   2188   5825   4173   5078
     -1      0     -1      0      0      0     -1      0      0      1
Train accuarcate: 97.18%
tensor([[ 63.,  65.,  71.,  83.,  68.,  71.,  52., 120.,  66.,  68.],
        [ 73.,  84., 115.,  81.,  58.,  75.,  73.,  61.,  81.,  58.],
        [ 60., 109.,  78.,  65.,  71.,  64.,  69.,  74.,  79.,  60.],
        [107.,  68.,  79.,  63.,  59.,  62.,  79.,  74.,  60.,  80.],
        [ 67.,  79.,  65.,  58., 114.,  63.,  79.,  71.,  73.,  78.],
        [ 60., 112.,  76.,  62.,  79.,  54.,  67.,  82.,  75.,  62.],
        [ 49.,  70.,  54.,  79., 110.,  73.,  69.,  74.,  78.,  81.],
        [ 55.,  65.,  78.,  72.,  81.,  69.,  58.,  72.,  71., 115.],
        [ 68.,  74.,  72.,  40.,  79.,  88., 100.,  70.,  83.,  70.],
        [ 66.,  60.,  65.,  66.,  95.,  59.,  56.,  88.,  76., 105.],
        [119.,  62.,  75.,  66.,  59.,  75.,  69.,  73.,  74.,  71.],
        [ 79.,  67.,  87.,  62.,  83.,  70., 110.,  67.,  76.,  52.],
        [ 64.,  67.,  63.,  63.,  94.,  69.,  51.,  75.,  61., 117.],
        [102.,  64.,  80.,  71.,  63.,  62.,  70.,  72.,  78.,  68.],
        [ 55., 120.,  69.,  66.,  66.,  65.,  65.,  71.,  75.,  72.],
        [ 71.,  73.,  62.,  82.,  59., 105.,  70.,  65.,  79.,  81.],
        [ 65.,  61.,  58.,  66.,  86.,  71.,  60.,  82.,  87., 110.],
        [ 70.,  67.,  83.,  83.,  55.,  65.,  46., 106.,  56.,  79.],
        [ 60.,  77.,  78.,  94.,  66.,  78.,  68.,  68.,  80.,  70.],
        [ 63.,  69.,  68.,  64., 114.,  60.,  67.,  79.,  70.,  81.]],
       device='cuda:0')
Train accuarcate: 95.70%



iteration:
  209
    0  1523   bit_w:-1  loss: 0.09272
    1  1564   bit_w:-1  loss: 0.09260
    2  1338   bit_w:-1  loss: 0.09255
    3   350   bit_w:-1  loss: 0.09240
    4  1501   bit_w: 1  loss: 0.09237
   3369    453   2249   1163   4317   2980   3294   1854   2595   4187
      0      0      0     -1      1      1      0      0      1      0
Train accuarcate: 97.22%
tensor([[ 63.,  65.,  71.,  84.,  68.,  71.,  52., 120.,  66.,  68.],
        [ 73.,  84., 115.,  82.,  58.,  75.,  73.,  61.,  81.,  58.],
        [ 60., 109.,  78.,  66.,  71.,  64.,  69.,  74.,  79.,  60.],
        [107.,  68.,  79.,  64.,  59.,  62.,  79.,  74.,  60.,  80.],
        [ 67.,  79.,  65.,  58., 115.,  64.,  79.,  71.,  74.,  78.],
        [ 60., 112.,  76.,  63.,  79.,  54.,  67.,  82.,  75.,  62.],
        [ 49.,  70.,  54.,  79., 111.,  74.,  69.,  74.,  79.,  81.],
        [ 55.,  65.,  78.,  73.,  81.,  69.,  58.,  72.,  71., 115.],
        [ 68.,  74.,  72.,  40.,  80.,  89., 100.,  70.,  84.,  70.],
        [ 66.,  60.,  65.,  66.,  96.,  60.,  56.,  88.,  77., 105.],
        [119.,  62.,  75.,  67.,  59.,  75.,  69.,  73.,  74.,  71.],
        [ 79.,  67.,  87.,  63.,  83.,  70., 110.,  67.,  76.,  52.],
        [ 64.,  67.,  63.,  63.,  95.,  70.,  51.,  75.,  62., 117.],
        [102.,  64.,  80.,  71.,  64.,  63.,  70.,  72.,  79.,  68.],
        [ 55., 120.,  69.,  67.,  66.,  65.,  65.,  71.,  75.,  72.],
        [ 71.,  73.,  62.,  82.,  60., 106.,  70.,  65.,  80.,  81.],
        [ 65.,  61.,  58.,  66.,  87.,  72.,  60.,  82.,  88., 110.],
        [ 70.,  67.,  83.,  84.,  55.,  65.,  46., 106.,  56.,  79.],
        [ 60.,  77.,  78.,  95.,  66.,  78.,  68.,  68.,  80.,  70.],
        [ 63.,  69.,  68.,  64., 115.,  61.,  67.,  79.,  71.,  81.]],
       device='cuda:0')
Train accuarcate: 95.68%



iteration:
  210
    0  1469   bit_w:-1  loss: 0.09224
    1  1251   bit_w:-1  loss: 0.09210
    2   515   bit_w: 1  loss: 0.09216
    3   326   bit_w:-1  loss: 0.09203
    4  1534   bit_w: 1  loss: 0.09205
    759   1694   2851   2101   1643   1092   3858   1849   3072   2006
      1     -1      1      0      0     -1      0     -1      1      0
Train accuarcate: 97.23%
tensor([[ 64.,  65.,  72.,  84.,  68.,  71.,  52., 120.,  67.,  68.],
        [ 73.,  85., 115.,  82.,  58.,  76.,  73.,  62.,  81.,  58.],
        [ 60., 110.,  78.,  66.,  71.,  65.,  69.,  75.,  79.,  60.],
        [107.,  69.,  79.,  64.,  59.,  63.,  79.,  75.,  60.,  80.],
        [ 67.,  80.,  65.,  58., 115.,  65.,  79.,  72.,  74.,  78.],
        [ 60., 113.,  76.,  63.,  79.,  55.,  67.,  83.,  75.,  62.],
        [ 49.,  71.,  54.,  79., 111.,  75.,  69.,  75.,  79.,  81.],
        [ 56.,  65.,  79.,  73.,  81.,  69.,  58.,  72.,  72., 115.],
        [ 69.,  74.,  73.,  40.,  80.,  89., 100.,  70.,  85.,  70.],
        [ 67.,  60.,  66.,  66.,  96.,  60.,  56.,  88.,  78., 105.],
        [119.,  63.,  75.,  67.,  59.,  76.,  69.,  74.,  74.,  71.],
        [ 79.,  68.,  87.,  63.,  83.,  71., 110.,  68.,  76.,  52.],
        [ 64.,  68.,  63.,  63.,  95.,  71.,  51.,  76.,  62., 117.],
        [102.,  65.,  80.,  71.,  64.,  64.,  70.,  73.,  79.,  68.],
        [ 55., 121.,  69.,  67.,  66.,  66.,  65.,  72.,  75.,  72.],
        [ 72.,  73.,  63.,  82.,  60., 106.,  70.,  65.,  81.,  81.],
        [ 66.,  61.,  59.,  66.,  87.,  72.,  60.,  82.,  89., 110.],
        [ 70.,  68.,  83.,  84.,  55.,  66.,  46., 107.,  56.,  79.],
        [ 61.,  77.,  79.,  95.,  66.,  78.,  68.,  68.,  81.,  70.],
        [ 63.,  70.,  68.,  64., 115.,  62.,  67.,  80.,  71.,  81.]],
       device='cuda:0')
Train accuarcate: 95.73%



iteration:
  211
    0  1282   bit_w:-1  loss: 0.09189
    1  1015   bit_w: 1  loss: 0.09173
    2  1350   bit_w:-1  loss: 0.09177
    3  1246   bit_w: 1  loss: 0.09164
    4   870   bit_w: 1  loss: 0.09170
   3857   1718   4095   2568   2172   4643   5466   2367   3768   2810
      0      0      0      0     -1      0      1     -1      0      1
Train accuarcate: 97.26%
tensor([[ 64.,  65.,  72.,  84.,  69.,  71.,  52., 121.,  67.,  68.],
        [ 73.,  85., 115.,  82.,  58.,  76.,  74.,  62.,  81.,  59.],
        [ 60., 110.,  78.,  66.,  72.,  65.,  69.,  76.,  79.,  60.],
        [107.,  69.,  79.,  64.,  60.,  63.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  65.,  58., 115.,  65.,  80.,  72.,  74.,  79.],
        [ 60., 113.,  76.,  63.,  80.,  55.,  67.,  84.,  75.,  62.],
        [ 49.,  71.,  54.,  79., 112.,  75.,  69.,  76.,  79.,  81.],
        [ 56.,  65.,  79.,  73.,  82.,  69.,  58.,  73.,  72., 115.],
        [ 69.,  74.,  73.,  40.,  80.,  89., 101.,  70.,  85.,  71.],
        [ 67.,  60.,  66.,  66.,  97.,  60.,  56.,  89.,  78., 105.],
        [119.,  63.,  75.,  67.,  59.,  76.,  70.,  74.,  74.,  72.],
        [ 79.,  68.,  87.,  63.,  83.,  71., 111.,  68.,  76.,  53.],
        [ 64.,  68.,  63.,  63.,  95.,  71.,  52.,  76.,  62., 118.],
        [102.,  65.,  80.,  71.,  65.,  64.,  70.,  74.,  79.,  68.],
        [ 55., 121.,  69.,  67.,  67.,  66.,  65.,  73.,  75.,  72.],
        [ 72.,  73.,  63.,  82.,  60., 106.,  71.,  65.,  81.,  82.],
        [ 66.,  61.,  59.,  66.,  87.,  72.,  61.,  82.,  89., 111.],
        [ 70.,  68.,  83.,  84.,  56.,  66.,  46., 108.,  56.,  79.],
        [ 61.,  77.,  79.,  95.,  66.,  78.,  69.,  68.,  81.,  71.],
        [ 63.,  70.,  68.,  64., 116.,  62.,  67.,  81.,  71.,  81.]],
       device='cuda:0')
Train accuarcate: 95.72%



iteration:
  212
    0  1513   bit_w:-1  loss: 0.09155
    1  1548   bit_w: 1  loss: 0.09147
    2  1475   bit_w: 1  loss: 0.09145
    3  1523   bit_w: 1  loss: 0.09130
    4  1132   bit_w: 1  loss: 0.09139
   3245   1348   3803   3291    963   1505   1935   1067   1265   1010
      1      1      1      1      0      0      0      0      0      0
Train accuarcate: 97.27%
tensor([[ 65.,  66.,  73.,  85.,  69.,  71.,  52., 121.,  67.,  68.],
        [ 74.,  86., 116.,  83.,  58.,  76.,  74.,  62.,  81.,  59.],
        [ 60., 110.,  78.,  66.,  72.,  65.,  69.,  76.,  79.,  60.],
        [107.,  69.,  79.,  64.,  60.,  63.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  65.,  58., 115.,  65.,  80.,  72.,  74.,  79.],
        [ 60., 113.,  76.,  63.,  80.,  55.,  67.,  84.,  75.,  62.],
        [ 49.,  71.,  54.,  79., 112.,  75.,  69.,  76.,  79.,  81.],
        [ 57.,  66.,  80.,  74.,  82.,  69.,  58.,  73.,  72., 115.],
        [ 69.,  74.,  73.,  40.,  80.,  89., 101.,  70.,  85.,  71.],
        [ 67.,  60.,  66.,  66.,  97.,  60.,  56.,  89.,  78., 105.],
        [120.,  64.,  76.,  68.,  59.,  76.,  70.,  74.,  74.,  72.],
        [ 80.,  69.,  88.,  64.,  83.,  71., 111.,  68.,  76.,  53.],
        [ 64.,  68.,  63.,  63.,  95.,  71.,  52.,  76.,  62., 118.],
        [103.,  66.,  81.,  72.,  65.,  64.,  70.,  74.,  79.,  68.],
        [ 55., 121.,  69.,  67.,  67.,  66.,  65.,  73.,  75.,  72.],
        [ 72.,  73.,  63.,  82.,  60., 106.,  71.,  65.,  81.,  82.],
        [ 66.,  61.,  59.,  66.,  87.,  72.,  61.,  82.,  89., 111.],
        [ 71.,  69.,  84.,  85.,  56.,  66.,  46., 108.,  56.,  79.],
        [ 62.,  78.,  80.,  96.,  66.,  78.,  69.,  68.,  81.,  71.],
        [ 64.,  71.,  69.,  65., 116.,  62.,  67.,  81.,  71.,  81.]],
       device='cuda:0')
Train accuarcate: 95.72%



iteration:
  213
    0  1568   bit_w:-1  loss: 0.09126
    1  1543   bit_w:-1  loss: 0.09117
    2  1060   bit_w:-1  loss: 0.09121
    3  1086   bit_w:-1  loss: 0.09111
    4  1557   bit_w:-1  loss: 0.09118
   2445   1011   1575   3183    726   1611   1796   1116   3392    861
      0      0      0      0      0      0      1      0      1      0
Train accuarcate: 97.29%
tensor([[ 65.,  66.,  73.,  85.,  69.,  71.,  53., 121.,  68.,  68.],
        [ 74.,  86., 116.,  83.,  58.,  76.,  74.,  62.,  81.,  59.],
        [ 60., 110.,  78.,  66.,  72.,  65.,  69.,  76.,  79.,  60.],
        [107.,  69.,  79.,  64.,  60.,  63.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  65.,  58., 115.,  65.,  80.,  72.,  74.,  79.],
        [ 60., 113.,  76.,  63.,  80.,  55.,  68.,  84.,  76.,  62.],
        [ 49.,  71.,  54.,  79., 112.,  75.,  69.,  76.,  79.,  81.],
        [ 57.,  66.,  80.,  74.,  82.,  69.,  58.,  73.,  72., 115.],
        [ 69.,  74.,  73.,  40.,  80.,  89., 101.,  70.,  85.,  71.],
        [ 67.,  60.,  66.,  66.,  97.,  60.,  56.,  89.,  78., 105.],
        [120.,  64.,  76.,  68.,  59.,  76.,  70.,  74.,  74.,  72.],
        [ 80.,  69.,  88.,  64.,  83.,  71., 111.,  68.,  76.,  53.],
        [ 64.,  68.,  63.,  63.,  95.,  71.,  52.,  76.,  62., 118.],
        [103.,  66.,  81.,  72.,  65.,  64.,  70.,  74.,  79.,  68.],
        [ 55., 121.,  69.,  67.,  67.,  66.,  65.,  73.,  75.,  72.],
        [ 72.,  73.,  63.,  82.,  60., 106.,  71.,  65.,  81.,  82.],
        [ 66.,  61.,  59.,  66.,  87.,  72.,  61.,  82.,  89., 111.],
        [ 71.,  69.,  84.,  85.,  56.,  66.,  46., 108.,  56.,  79.],
        [ 62.,  78.,  80.,  96.,  66.,  78.,  70.,  68.,  82.,  71.],
        [ 64.,  71.,  69.,  65., 116.,  62.,  67.,  81.,  71.,  81.]],
       device='cuda:0')
Train accuarcate: 95.71%



iteration:
  214
    0  1575   bit_w:-1  loss: 0.09105
    1  1075   bit_w: 1  loss: 0.09093
    2  1490   bit_w:-1  loss: 0.09093
    3  1422   bit_w:-1  loss: 0.09084
    4  1364   bit_w: 1  loss: 0.09088
   4624   2722   4310   2624   3971   3699   3250   5624   2833   3610
     -1      0      1      0     -1     -1      0      0      0      1
Train accuarcate: 97.31%
tensor([[ 65.,  66.,  74.,  85.,  69.,  71.,  53., 121.,  68.,  69.],
        [ 74.,  86., 117.,  83.,  58.,  76.,  74.,  62.,  81.,  60.],
        [ 61., 110.,  78.,  66.,  73.,  66.,  69.,  76.,  79.,  60.],
        [108.,  69.,  79.,  64.,  61.,  64.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  66.,  58., 115.,  65.,  80.,  72.,  74.,  80.],
        [ 60., 113.,  77.,  63.,  80.,  55.,  68.,  84.,  76.,  63.],
        [ 49.,  71.,  55.,  79., 112.,  75.,  69.,  76.,  79.,  82.],
        [ 57.,  66.,  81.,  74.,  82.,  69.,  58.,  73.,  72., 116.],
        [ 69.,  74.,  74.,  40.,  80.,  89., 101.,  70.,  85.,  72.],
        [ 68.,  60.,  66.,  66.,  98.,  61.,  56.,  89.,  78., 105.],
        [120.,  64.,  77.,  68.,  59.,  76.,  70.,  74.,  74.,  73.],
        [ 81.,  69.,  88.,  64.,  84.,  72., 111.,  68.,  76.,  53.],
        [ 65.,  68.,  63.,  63.,  96.,  72.,  52.,  76.,  62., 118.],
        [103.,  66.,  82.,  72.,  65.,  64.,  70.,  74.,  79.,  69.],
        [ 56., 121.,  69.,  67.,  68.,  67.,  65.,  73.,  75.,  72.],
        [ 72.,  73.,  64.,  82.,  60., 106.,  71.,  65.,  81.,  83.],
        [ 66.,  61.,  60.,  66.,  87.,  72.,  61.,  82.,  89., 112.],
        [ 71.,  69.,  85.,  85.,  56.,  66.,  46., 108.,  56.,  80.],
        [ 62.,  78.,  81.,  96.,  66.,  78.,  70.,  68.,  82.,  72.],
        [ 64.,  71.,  70.,  65., 116.,  62.,  67.,  81.,  71.,  82.]],
       device='cuda:0')
Train accuarcate: 95.71%



iteration:
  215
    0  1578   bit_w:-1  loss: 0.09065
    1  1157   bit_w:-1  loss: 0.09059
    2  1570   bit_w: 1  loss: 0.09055
    3  1377   bit_w:-1  loss: 0.09050
    4  1169   bit_w:-1  loss: 0.09052
   2438   4349   2222   3308    828   1815    733   1334   2796   1729
      1      1      0      1      0      0      0      1      1      0
Train accuarcate: 97.34%
tensor([[ 65.,  66.,  74.,  85.,  69.,  71.,  53., 121.,  68.,  69.],
        [ 74.,  86., 117.,  83.,  58.,  76.,  74.,  62.,  81.,  60.],
        [ 61., 110.,  78.,  66.,  73.,  66.,  69.,  76.,  79.,  60.],
        [108.,  69.,  79.,  64.,  61.,  64.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  66.,  58., 115.,  65.,  80.,  72.,  74.,  80.],
        [ 61., 114.,  77.,  64.,  80.,  55.,  68.,  85.,  77.,  63.],
        [ 49.,  71.,  55.,  79., 112.,  75.,  69.,  76.,  79.,  82.],
        [ 57.,  66.,  81.,  74.,  82.,  69.,  58.,  73.,  72., 116.],
        [ 69.,  74.,  74.,  40.,  80.,  89., 101.,  70.,  85.,  72.],
        [ 68.,  60.,  66.,  66.,  98.,  61.,  56.,  89.,  78., 105.],
        [121.,  65.,  77.,  69.,  59.,  76.,  70.,  75.,  75.,  73.],
        [ 81.,  69.,  88.,  64.,  84.,  72., 111.,  68.,  76.,  53.],
        [ 65.,  68.,  63.,  63.,  96.,  72.,  52.,  76.,  62., 118.],
        [104.,  67.,  82.,  73.,  65.,  64.,  70.,  75.,  80.,  69.],
        [ 57., 122.,  69.,  68.,  68.,  67.,  65.,  74.,  76.,  72.],
        [ 73.,  74.,  64.,  83.,  60., 106.,  71.,  66.,  82.,  83.],
        [ 66.,  61.,  60.,  66.,  87.,  72.,  61.,  82.,  89., 112.],
        [ 71.,  69.,  85.,  85.,  56.,  66.,  46., 108.,  56.,  80.],
        [ 62.,  78.,  81.,  96.,  66.,  78.,  70.,  68.,  82.,  72.],
        [ 64.,  71.,  70.,  65., 116.,  62.,  67.,  81.,  71.,  82.]],
       device='cuda:0')
Train accuarcate: 95.74%



iteration:
  216
    0  1559   bit_w:-1  loss: 0.09040
    1  1042   bit_w: 1  loss: 0.09030
    2  1514   bit_w:-1  loss: 0.09033
    3  1108   bit_w: 1  loss: 0.09024
    4  1455   bit_w: 1  loss: 0.09026
   2341   1026   3169   1656    738   2597   1573   2481   1619    926
      0      0      1     -1      0      1      0      0      1      0
Train accuarcate: 97.35%
tensor([[ 65.,  66.,  74.,  86.,  69.,  71.,  53., 121.,  68.,  69.],
        [ 74.,  86., 117.,  84.,  58.,  76.,  74.,  62.,  81.,  60.],
        [ 61., 110.,  78.,  67.,  73.,  66.,  69.,  76.,  79.,  60.],
        [108.,  69.,  79.,  65.,  61.,  64.,  79.,  76.,  60.,  80.],
        [ 67.,  80.,  66.,  59., 115.,  65.,  80.,  72.,  74.,  80.],
        [ 61., 114.,  77.,  65.,  80.,  55.,  68.,  85.,  77.,  63.],
        [ 49.,  71.,  55.,  80., 112.,  75.,  69.,  76.,  79.,  82.],
        [ 57.,  66.,  82.,  74.,  82.,  70.,  58.,  73.,  73., 116.],
        [ 69.,  74.,  74.,  41.,  80.,  89., 101.,  70.,  85.,  72.],
        [ 68.,  60.,  67.,  66.,  98.,  62.,  56.,  89.,  79., 105.],
        [121.,  65.,  77.,  70.,  59.,  76.,  70.,  75.,  75.,  73.],
        [ 81.,  69.,  88.,  65.,  84.,  72., 111.,  68.,  76.,  53.],
        [ 65.,  68.,  63.,  64.,  96.,  72.,  52.,  76.,  62., 118.],
        [104.,  67.,  82.,  74.,  65.,  64.,  70.,  75.,  80.,  69.],
        [ 57., 122.,  69.,  69.,  68.,  67.,  65.,  74.,  76.,  72.],
        [ 73.,  74.,  65.,  83.,  60., 107.,  71.,  66.,  83.,  83.],
        [ 66.,  61.,  60.,  67.,  87.,  72.,  61.,  82.,  89., 112.],
        [ 71.,  69.,  86.,  85.,  56.,  67.,  46., 108.,  57.,  80.],
        [ 62.,  78.,  81.,  97.,  66.,  78.,  70.,  68.,  82.,  72.],
        [ 64.,  71.,  70.,  66., 116.,  62.,  67.,  81.,  71.,  82.]],
       device='cuda:0')
Train accuarcate: 95.76%



iteration:
  217
    0  1558   bit_w:-1  loss: 0.09013
    1  1529   bit_w: 1  loss: 0.08997
    2  1527   bit_w:-1  loss: 0.09005
    3  1403   bit_w: 1  loss: 0.08984
    4   827   bit_w: 1  loss: 0.08990
   3437   4480   3489   4928   4415   2604   2662   5563   2101   3596
     -1      0      0      0      1     -1     -1      1      0     -1
Train accuarcate: 97.36%
tensor([[ 65.,  66.,  74.,  86.,  70.,  71.,  53., 122.,  68.,  69.],
        [ 74.,  86., 117.,  84.,  59.,  76.,  74.,  63.,  81.,  60.],
        [ 61., 110.,  78.,  67.,  74.,  66.,  69.,  77.,  79.,  60.],
        [108.,  69.,  79.,  65.,  62.,  64.,  79.,  77.,  60.,  80.],
        [ 67.,  80.,  66.,  59., 116.,  65.,  80.,  73.,  74.,  80.],
        [ 61., 114.,  77.,  65.,  81.,  55.,  68.,  86.,  77.,  63.],
        [ 50.,  71.,  55.,  80., 112.,  76.,  70.,  76.,  79.,  83.],
        [ 58.,  66.,  82.,  74.,  82.,  71.,  59.,  73.,  73., 117.],
        [ 70.,  74.,  74.,  41.,  80.,  90., 102.,  70.,  85.,  73.],
        [ 68.,  60.,  67.,  66.,  99.,  62.,  56.,  90.,  79., 105.],
        [121.,  65.,  77.,  70.,  60.,  76.,  70.,  76.,  75.,  73.],
        [ 81.,  69.,  88.,  65.,  85.,  72., 111.,  69.,  76.,  53.],
        [ 65.,  68.,  63.,  64.,  97.,  72.,  52.,  77.,  62., 118.],
        [104.,  67.,  82.,  74.,  66.,  64.,  70.,  76.,  80.,  69.],
        [ 58., 122.,  69.,  69.,  68.,  68.,  66.,  74.,  76.,  73.],
        [ 73.,  74.,  65.,  83.,  61., 107.,  71.,  67.,  83.,  83.],
        [ 67.,  61.,  60.,  67.,  87.,  73.,  62.,  82.,  89., 113.],
        [ 71.,  69.,  86.,  85.,  57.,  67.,  46., 109.,  57.,  80.],
        [ 62.,  78.,  81.,  97.,  67.,  78.,  70.,  69.,  82.,  72.],
        [ 64.,  71.,  70.,  66., 117.,  62.,  67.,  82.,  71.,  82.]],
       device='cuda:0')
Train accuarcate: 95.80%



iteration:
  218
    0  1285   bit_w:-1  loss: 0.08976
    1  1462   bit_w: 1  loss: 0.08967
    2  1579   bit_w: 1  loss: 0.08965
    3  1479   bit_w: 1  loss: 0.08943
    4  1454   bit_w: 1  loss: 0.08956
   3276   6236   4677   4672   3403   2670   5288   3798   3086   2374
      0      1      0      0      0     -1      0      0     -1     -1
Train accuarcate: 97.39%
tensor([[ 65.,  67.,  74.,  86.,  70.,  71.,  53., 122.,  68.,  69.],
        [ 74.,  87., 117.,  84.,  59.,  76.,  74.,  63.,  81.,  60.],
        [ 61., 111.,  78.,  67.,  74.,  66.,  69.,  77.,  79.,  60.],
        [108.,  70.,  79.,  65.,  62.,  64.,  79.,  77.,  60.,  80.],
        [ 67.,  81.,  66.,  59., 116.,  65.,  80.,  73.,  74.,  80.],
        [ 61., 115.,  77.,  65.,  81.,  55.,  68.,  86.,  77.,  63.],
        [ 50.,  72.,  55.,  80., 112.,  76.,  70.,  76.,  79.,  83.],
        [ 58.,  67.,  82.,  74.,  82.,  71.,  59.,  73.,  73., 117.],
        [ 70.,  75.,  74.,  41.,  80.,  90., 102.,  70.,  85.,  73.],
        [ 68.,  61.,  67.,  66.,  99.,  62.,  56.,  90.,  79., 105.],
        [121.,  66.,  77.,  70.,  60.,  76.,  70.,  76.,  75.,  73.],
        [ 81.,  70.,  88.,  65.,  85.,  72., 111.,  69.,  76.,  53.],
        [ 65.,  68.,  63.,  64.,  97.,  73.,  52.,  77.,  63., 119.],
        [104.,  68.,  82.,  74.,  66.,  64.,  70.,  76.,  80.,  69.],
        [ 58., 123.,  69.,  69.,  68.,  68.,  66.,  74.,  76.,  73.],
        [ 73.,  74.,  65.,  83.,  61., 108.,  71.,  67.,  84.,  84.],
        [ 67.,  62.,  60.,  67.,  87.,  73.,  62.,  82.,  89., 113.],
        [ 71.,  69.,  86.,  85.,  57.,  68.,  46., 109.,  58.,  81.],
        [ 62.,  79.,  81.,  97.,  67.,  78.,  70.,  69.,  82.,  72.],
        [ 64.,  71.,  70.,  66., 117.,  63.,  67.,  82.,  72.,  83.]],
       device='cuda:0')
Train accuarcate: 95.76%



iteration:
  219
    0  1391   bit_w:-1  loss: 0.08943
    1  1567   bit_w:-1  loss: 0.08933
    2  1502   bit_w: 1  loss: 0.08933
    3  1392   bit_w:-1  loss: 0.08920
    4  1078   bit_w:-1  loss: 0.08924
   3522    706   2417   3445   1352   3169   4102   1356   1728   1297
     -1      0      1      1      0      0      1      0      0      0
Train accuarcate: 97.40%
tensor([[ 66.,  67.,  74.,  86.,  70.,  71.,  53., 122.,  68.,  69.],
        [ 74.,  87., 118.,  85.,  59.,  76.,  75.,  63.,  81.,  60.],
        [ 62., 111.,  78.,  67.,  74.,  66.,  69.,  77.,  79.,  60.],
        [108.,  70.,  80.,  66.,  62.,  64.,  80.,  77.,  60.,  80.],
        [ 68.,  81.,  66.,  59., 116.,  65.,  80.,  73.,  74.,  80.],
        [ 62., 115.,  77.,  65.,  81.,  55.,  68.,  86.,  77.,  63.],
        [ 51.,  72.,  55.,  80., 112.,  76.,  70.,  76.,  79.,  83.],
        [ 59.,  67.,  82.,  74.,  82.,  71.,  59.,  73.,  73., 117.],
        [ 70.,  75.,  75.,  42.,  80.,  90., 103.,  70.,  85.,  73.],
        [ 69.,  61.,  67.,  66.,  99.,  62.,  56.,  90.,  79., 105.],
        [121.,  66.,  78.,  71.,  60.,  76.,  71.,  76.,  75.,  73.],
        [ 81.,  70.,  89.,  66.,  85.,  72., 112.,  69.,  76.,  53.],
        [ 65.,  68.,  64.,  65.,  97.,  73.,  53.,  77.,  63., 119.],
        [105.,  68.,  82.,  74.,  66.,  64.,  70.,  76.,  80.,  69.],
        [ 59., 123.,  69.,  69.,  68.,  68.,  66.,  74.,  76.,  73.],
        [ 73.,  74.,  66.,  84.,  61., 108.,  72.,  67.,  84.,  84.],
        [ 68.,  62.,  60.,  67.,  87.,  73.,  62.,  82.,  89., 113.],
        [ 71.,  69.,  87.,  86.,  57.,  68.,  47., 109.,  58.,  81.],
        [ 63.,  79.,  81.,  97.,  67.,  78.,  70.,  69.,  82.,  72.],
        [ 65.,  71.,  70.,  66., 117.,  63.,  67.,  82.,  72.,  83.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  220
    0  1537   bit_w:-1  loss: 0.08911
    1  1543   bit_w:-1  loss: 0.08902
    2  1370   bit_w: 1  loss: 0.08906
    3  1152   bit_w: 1  loss: 0.08894
    4  1422   bit_w:-1  loss: 0.08897
   1456   2960   4280    924   2590    928   3049    713   3556    580
      0      1      1      0      1      0      0      0      1      0
Train accuarcate: 97.39%
tensor([[ 66.,  67.,  74.,  86.,  70.,  71.,  53., 122.,  68.,  69.],
        [ 74.,  88., 119.,  85.,  60.,  76.,  75.,  63.,  82.,  60.],
        [ 62., 112.,  79.,  67.,  75.,  66.,  69.,  77.,  80.,  60.],
        [108.,  70.,  80.,  66.,  62.,  64.,  80.,  77.,  60.,  80.],
        [ 68.,  82.,  67.,  59., 117.,  65.,  80.,  73.,  75.,  80.],
        [ 62., 115.,  77.,  65.,  81.,  55.,  68.,  86.,  77.,  63.],
        [ 51.,  73.,  56.,  80., 113.,  76.,  70.,  76.,  80.,  83.],
        [ 59.,  67.,  82.,  74.,  82.,  71.,  59.,  73.,  73., 117.],
        [ 70.,  76.,  76.,  42.,  81.,  90., 103.,  70.,  86.,  73.],
        [ 69.,  61.,  67.,  66.,  99.,  62.,  56.,  90.,  79., 105.],
        [121.,  66.,  78.,  71.,  60.,  76.,  71.,  76.,  75.,  73.],
        [ 81.,  71.,  90.,  66.,  86.,  72., 112.,  69.,  77.,  53.],
        [ 65.,  68.,  64.,  65.,  97.,  73.,  53.,  77.,  63., 119.],
        [105.,  68.,  82.,  74.,  66.,  64.,  70.,  76.,  80.,  69.],
        [ 59., 123.,  69.,  69.,  68.,  68.,  66.,  74.,  76.,  73.],
        [ 73.,  74.,  66.,  84.,  61., 108.,  72.,  67.,  84.,  84.],
        [ 68.,  62.,  60.,  67.,  87.,  73.,  62.,  82.,  89., 113.],
        [ 71.,  69.,  87.,  86.,  57.,  68.,  47., 109.,  58.,  81.],
        [ 63.,  80.,  82.,  97.,  68.,  78.,  70.,  69.,  83.,  72.],
        [ 65.,  71.,  70.,  66., 117.,  63.,  67.,  82.,  72.,  83.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  221
    0  1495   bit_w:-1  loss: 0.08884
    1  1508   bit_w: 1  loss: 0.08875
    2  1543   bit_w:-1  loss: 0.08876
    3  1440   bit_w:-1  loss: 0.08860
    4   911   bit_w: 1  loss: 0.08868
   2250   6503   3356   2161   5415   3115   5222   5969   4708   5483
     -1      0      0     -1      0     -1      1      0      0      0
Train accuarcate: 97.41%
tensor([[ 66.,  67.,  74.,  86.,  70.,  71.,  54., 122.,  68.,  69.],
        [ 75.,  88., 119.,  86.,  60.,  77.,  75.,  63.,  82.,  60.],
        [ 62., 112.,  79.,  67.,  75.,  66.,  70.,  77.,  80.,  60.],
        [109.,  70.,  80.,  67.,  62.,  65.,  80.,  77.,  60.,  80.],
        [ 68.,  82.,  67.,  59., 117.,  65.,  81.,  73.,  75.,  80.],
        [ 62., 115.,  77.,  65.,  81.,  55.,  69.,  86.,  77.,  63.],
        [ 51.,  73.,  56.,  80., 113.,  76.,  71.,  76.,  80.,  83.],
        [ 60.,  67.,  82.,  75.,  82.,  72.,  59.,  73.,  73., 117.],
        [ 70.,  76.,  76.,  42.,  81.,  90., 104.,  70.,  86.,  73.],
        [ 69.,  61.,  67.,  66.,  99.,  62.,  57.,  90.,  79., 105.],
        [121.,  66.,  78.,  71.,  60.,  76.,  72.,  76.,  75.,  73.],
        [ 81.,  71.,  90.,  66.,  86.,  72., 113.,  69.,  77.,  53.],
        [ 65.,  68.,  64.,  65.,  97.,  73.,  54.,  77.,  63., 119.],
        [106.,  68.,  82.,  75.,  66.,  65.,  70.,  76.,  80.,  69.],
        [ 59., 123.,  69.,  69.,  68.,  68.,  67.,  74.,  76.,  73.],
        [ 74.,  74.,  66.,  85.,  61., 109.,  72.,  67.,  84.,  84.],
        [ 68.,  62.,  60.,  67.,  87.,  73.,  63.,  82.,  89., 113.],
        [ 71.,  69.,  87.,  86.,  57.,  68.,  48., 109.,  58.,  81.],
        [ 64.,  80.,  82.,  98.,  68.,  79.,  70.,  69.,  83.,  72.],
        [ 65.,  71.,  70.,  66., 117.,  63.,  68.,  82.,  72.,  83.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  222
    0  1572   bit_w:-1  loss: 0.08855
    1  1524   bit_w:-1  loss: 0.08847
    2  1568   bit_w: 1  loss: 0.08852
    3  1040   bit_w: 1  loss: 0.08838
    4  1279   bit_w: 1  loss: 0.08841
   3692   5519   3656   2279   1508   2103   2807   3309   2945   1685
      0      0      0      0     -1      0      0      1      1     -1
Train accuarcate: 97.39%
tensor([[ 66.,  67.,  74.,  86.,  71.,  71.,  54., 122.,  68.,  70.],
        [ 75.,  88., 119.,  86.,  60.,  77.,  75.,  64.,  83.,  60.],
        [ 62., 112.,  79.,  67.,  75.,  66.,  70.,  78.,  81.,  60.],
        [109.,  70.,  80.,  67.,  63.,  65.,  80.,  77.,  60.,  81.],
        [ 68.,  82.,  67.,  59., 117.,  65.,  81.,  74.,  76.,  80.],
        [ 62., 115.,  77.,  65.,  81.,  55.,  69.,  87.,  78.,  63.],
        [ 51.,  73.,  56.,  80., 113.,  76.,  71.,  77.,  81.,  83.],
        [ 60.,  67.,  82.,  75.,  82.,  72.,  59.,  74.,  74., 117.],
        [ 70.,  76.,  76.,  42.,  82.,  90., 104.,  70.,  86.,  74.],
        [ 69.,  61.,  67.,  66., 100.,  62.,  57.,  90.,  79., 106.],
        [121.,  66.,  78.,  71.,  60.,  76.,  72.,  77.,  76.,  73.],
        [ 81.,  71.,  90.,  66.,  86.,  72., 113.,  70.,  78.,  53.],
        [ 65.,  68.,  64.,  65.,  98.,  73.,  54.,  77.,  63., 120.],
        [106.,  68.,  82.,  75.,  67.,  65.,  70.,  76.,  80.,  70.],
        [ 59., 123.,  69.,  69.,  68.,  68.,  67.,  75.,  77.,  73.],
        [ 74.,  74.,  66.,  85.,  61., 109.,  72.,  68.,  85.,  84.],
        [ 68.,  62.,  60.,  67.,  87.,  73.,  63.,  83.,  90., 113.],
        [ 71.,  69.,  87.,  86.,  58.,  68.,  48., 109.,  58.,  82.],
        [ 64.,  80.,  82.,  98.,  69.,  79.,  70.,  69.,  83.,  73.],
        [ 65.,  71.,  70.,  66., 117.,  63.,  68.,  83.,  73.,  83.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  223
    0  1278   bit_w:-1  loss: 0.08829
    1   998   bit_w: 1  loss: 0.08816
    2   857   bit_w: 1  loss: 0.08816
    3  1397   bit_w: 1  loss: 0.08809
    4  1356   bit_w: 1  loss: 0.08801
   2359   2810   4761   1146   1816    491   2076   3143   3837   2652
      1     -1      1      1      0     -1      0      0      0      0
Train accuarcate: 97.41%
tensor([[ 67.,  67.,  75.,  87.,  71.,  71.,  54., 122.,  68.,  70.],
        [ 75.,  89., 119.,  86.,  60.,  78.,  75.,  64.,  83.,  60.],
        [ 63., 112.,  80.,  68.,  75.,  66.,  70.,  78.,  81.,  60.],
        [109.,  71.,  80.,  67.,  63.,  66.,  80.,  77.,  60.,  81.],
        [ 68.,  83.,  67.,  59., 117.,  66.,  81.,  74.,  76.,  80.],
        [ 63., 115.,  78.,  66.,  81.,  55.,  69.,  87.,  78.,  63.],
        [ 51.,  74.,  56.,  80., 113.,  77.,  71.,  77.,  81.,  83.],
        [ 60.,  68.,  82.,  75.,  82.,  73.,  59.,  74.,  74., 117.],
        [ 70.,  77.,  76.,  42.,  82.,  91., 104.,  70.,  86.,  74.],
        [ 70.,  61.,  68.,  67., 100.,  62.,  57.,  90.,  79., 106.],
        [122.,  66.,  79.,  72.,  60.,  76.,  72.,  77.,  76.,  73.],
        [ 81.,  72.,  90.,  66.,  86.,  73., 113.,  70.,  78.,  53.],
        [ 65.,  69.,  64.,  65.,  98.,  74.,  54.,  77.,  63., 120.],
        [107.,  68.,  83.,  76.,  67.,  65.,  70.,  76.,  80.,  70.],
        [ 59., 124.,  69.,  69.,  68.,  69.,  67.,  75.,  77.,  73.],
        [ 74.,  75.,  66.,  85.,  61., 110.,  72.,  68.,  85.,  84.],
        [ 69.,  62.,  61.,  68.,  87.,  73.,  63.,  83.,  90., 113.],
        [ 72.,  69.,  88.,  87.,  58.,  68.,  48., 109.,  58.,  82.],
        [ 65.,  80.,  83.,  99.,  69.,  79.,  70.,  69.,  83.,  73.],
        [ 65.,  72.,  70.,  66., 117.,  64.,  68.,  83.,  73.,  83.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  224
    0  1562   bit_w:-1  loss: 0.08787
    1  1544   bit_w:-1  loss: 0.08777
    2  1440   bit_w: 1  loss: 0.08778
    3  1509   bit_w:-1  loss: 0.08770
    4  1508   bit_w:-1  loss: 0.08769
   3476   5589   3911   5477   3638   4370   1770   3815   3739   4679
     -1      0      0      0      0      0     -1     -1     -1      0
Train accuarcate: 97.42%
tensor([[ 67.,  67.,  75.,  87.,  71.,  71.,  54., 122.,  68.,  70.],
        [ 75.,  89., 119.,  86.,  60.,  78.,  75.,  64.,  83.,  60.],
        [ 63., 112.,  80.,  68.,  75.,  66.,  70.,  78.,  81.,  60.],
        [110.,  71.,  80.,  67.,  63.,  66.,  81.,  78.,  61.,  81.],
        [ 69.,  83.,  67.,  59., 117.,  66.,  82.,  75.,  77.,  80.],
        [ 63., 115.,  78.,  66.,  81.,  55.,  69.,  87.,  78.,  63.],
        [ 52.,  74.,  56.,  80., 113.,  77.,  72.,  78.,  82.,  83.],
        [ 60.,  68.,  82.,  75.,  82.,  73.,  59.,  74.,  74., 117.],
        [ 71.,  77.,  76.,  42.,  82.,  91., 105.,  71.,  87.,  74.],
        [ 71.,  61.,  68.,  67., 100.,  62.,  58.,  91.,  80., 106.],
        [123.,  66.,  79.,  72.,  60.,  76.,  73.,  78.,  77.,  73.],
        [ 82.,  72.,  90.,  66.,  86.,  73., 114.,  71.,  79.,  53.],
        [ 65.,  69.,  64.,  65.,  98.,  74.,  54.,  77.,  63., 120.],
        [108.,  68.,  83.,  76.,  67.,  65.,  71.,  77.,  81.,  70.],
        [ 59., 124.,  69.,  69.,  68.,  69.,  67.,  75.,  77.,  73.],
        [ 74.,  75.,  66.,  85.,  61., 110.,  72.,  68.,  85.,  84.],
        [ 69.,  62.,  61.,  68.,  87.,  73.,  63.,  83.,  90., 113.],
        [ 72.,  69.,  88.,  87.,  58.,  68.,  48., 109.,  58.,  82.],
        [ 65.,  80.,  83.,  99.,  69.,  79.,  70.,  69.,  83.,  73.],
        [ 65.,  72.,  70.,  66., 117.,  64.,  68.,  83.,  73.,  83.]],
       device='cuda:0')
Train accuarcate: 95.75%



iteration:
  225
    0  1556   bit_w:-1  loss: 0.08759
    1  1461   bit_w: 1  loss: 0.08745
    2  1453   bit_w:-1  loss: 0.08745
    3  1082   bit_w:-1  loss: 0.08731
    4  1574   bit_w:-1  loss: 0.08737
   4170   2150   3290   1795   2613   2301   3058   2945   1273   3931
      0      0      1     -1     -1      0      0      0      0      1
Train accuarcate: 97.42%
tensor([[ 67.,  67.,  75.,  88.,  72.,  71.,  54., 122.,  68.,  70.],
        [ 75.,  89., 120.,  86.,  60.,  78.,  75.,  64.,  83.,  61.],
        [ 63., 112.,  80.,  69.,  76.,  66.,  70.,  78.,  81.,  60.],
        [110.,  71.,  80.,  68.,  64.,  66.,  81.,  78.,  61.,  81.],
        [ 69.,  83.,  67.,  60., 118.,  66.,  82.,  75.,  77.,  80.],
        [ 63., 115.,  78.,  67.,  82.,  55.,  69.,  87.,  78.,  63.],
        [ 52.,  74.,  56.,  81., 114.,  77.,  72.,  78.,  82.,  83.],
        [ 60.,  68.,  83.,  75.,  82.,  73.,  59.,  74.,  74., 118.],
        [ 71.,  77.,  77.,  42.,  82.,  91., 105.,  71.,  87.,  75.],
        [ 71.,  61.,  69.,  67., 100.,  62.,  58.,  91.,  80., 107.],
        [123.,  66.,  80.,  72.,  60.,  76.,  73.,  78.,  77.,  74.],
        [ 82.,  72.,  91.,  66.,  86.,  73., 114.,  71.,  79.,  54.],
        [ 65.,  69.,  65.,  65.,  98.,  74.,  54.,  77.,  63., 121.],
        [108.,  68.,  84.,  76.,  67.,  65.,  71.,  77.,  81.,  71.],
        [ 59., 124.,  70.,  69.,  68.,  69.,  67.,  75.,  77.,  74.],
        [ 74.,  75.,  67.,  85.,  61., 110.,  72.,  68.,  85.,  85.],
        [ 69.,  62.,  62.,  68.,  87.,  73.,  63.,  83.,  90., 114.],
        [ 72.,  69.,  89.,  87.,  58.,  68.,  48., 109.,  58.,  83.],
        [ 65.,  80.,  84.,  99.,  69.,  79.,  70.,  69.,  83.,  74.],
        [ 65.,  72.,  70.,  67., 118.,  64.,  68.,  83.,  73.,  83.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  226
    0  1014   bit_w:-1  loss: 0.08720
    1  1405   bit_w: 1  loss: 0.08710
    2  1548   bit_w: 1  loss: 0.08707
    3  1583   bit_w:-1  loss: 0.08701
    4  1081   bit_w: 1  loss: 0.08700
   3713   2978   3096   2128   4298   3054   4883   4032   3961   4224
      0      0      0      0      0      0      0      1     -1     -1
Train accuarcate: 97.41%
tensor([[ 67.,  67.,  75.,  88.,  72.,  71.,  54., 123.,  68.,  70.],
        [ 75.,  89., 120.,  86.,  60.,  78.,  75.,  64.,  84.,  62.],
        [ 63., 112.,  80.,  69.,  76.,  66.,  70.,  79.,  81.,  60.],
        [110.,  71.,  80.,  68.,  64.,  66.,  81.,  79.,  61.,  81.],
        [ 69.,  83.,  67.,  60., 118.,  66.,  82.,  76.,  77.,  80.],
        [ 63., 115.,  78.,  67.,  82.,  55.,  69.,  87.,  79.,  64.],
        [ 52.,  74.,  56.,  81., 114.,  77.,  72.,  79.,  82.,  83.],
        [ 60.,  68.,  83.,  75.,  82.,  73.,  59.,  74.,  75., 119.],
        [ 71.,  77.,  77.,  42.,  82.,  91., 105.,  71.,  88.,  76.],
        [ 71.,  61.,  69.,  67., 100.,  62.,  58.,  91.,  81., 108.],
        [123.,  66.,  80.,  72.,  60.,  76.,  73.,  79.,  77.,  74.],
        [ 82.,  72.,  91.,  66.,  86.,  73., 114.,  72.,  79.,  54.],
        [ 65.,  69.,  65.,  65.,  98.,  74.,  54.,  78.,  63., 121.],
        [108.,  68.,  84.,  76.,  67.,  65.,  71.,  78.,  81.,  71.],
        [ 59., 124.,  70.,  69.,  68.,  69.,  67.,  75.,  78.,  75.],
        [ 74.,  75.,  67.,  85.,  61., 110.,  72.,  68.,  86.,  86.],
        [ 69.,  62.,  62.,  68.,  87.,  73.,  63.,  84.,  90., 114.],
        [ 72.,  69.,  89.,  87.,  58.,  68.,  48., 110.,  58.,  83.],
        [ 65.,  80.,  84.,  99.,  69.,  79.,  70.,  70.,  83.,  74.],
        [ 65.,  72.,  70.,  67., 118.,  64.,  68.,  83.,  74.,  84.]],
       device='cuda:0')
Train accuarcate: 95.72%



iteration:
  227
    0  1512   bit_w:-1  loss: 0.08689
    1  1406   bit_w:-1  loss: 0.08678
    2  1311   bit_w:-1  loss: 0.08676
    3  1231   bit_w: 1  loss: 0.08671
    4  1087   bit_w:-1  loss: 0.08668
   2609   1476    713    415   4327   3723   3438   1075   1742   2549
      0     -1      0      0      1      1      1      0      0      0
Train accuarcate: 97.44%
tensor([[ 67.,  68.,  75.,  88.,  72.,  71.,  54., 123.,  68.,  70.],
        [ 75.,  90., 120.,  86.,  60.,  78.,  75.,  64.,  84.,  62.],
        [ 63., 112.,  80.,  69.,  77.,  67.,  71.,  79.,  81.,  60.],
        [110.,  71.,  80.,  68.,  65.,  67.,  82.,  79.,  61.,  81.],
        [ 69.,  83.,  67.,  60., 119.,  67.,  83.,  76.,  77.,  80.],
        [ 63., 115.,  78.,  67.,  83.,  56.,  70.,  87.,  79.,  64.],
        [ 52.,  74.,  56.,  81., 115.,  78.,  73.,  79.,  82.,  83.],
        [ 60.,  68.,  83.,  75.,  83.,  74.,  60.,  74.,  75., 119.],
        [ 71.,  77.,  77.,  42.,  83.,  92., 106.,  71.,  88.,  76.],
        [ 71.,  61.,  69.,  67., 101.,  63.,  59.,  91.,  81., 108.],
        [123.,  66.,  80.,  72.,  61.,  77.,  74.,  79.,  77.,  74.],
        [ 82.,  72.,  91.,  66.,  87.,  74., 115.,  72.,  79.,  54.],
        [ 65.,  69.,  65.,  65.,  99.,  75.,  55.,  78.,  63., 121.],
        [108.,  69.,  84.,  76.,  67.,  65.,  71.,  78.,  81.,  71.],
        [ 59., 125.,  70.,  69.,  68.,  69.,  67.,  75.,  78.,  75.],
        [ 74.,  76.,  67.,  85.,  61., 110.,  72.,  68.,  86.,  86.],
        [ 69.,  63.,  62.,  68.,  87.,  73.,  63.,  84.,  90., 114.],
        [ 72.,  70.,  89.,  87.,  58.,  68.,  48., 110.,  58.,  83.],
        [ 65.,  81.,  84.,  99.,  69.,  79.,  70.,  70.,  83.,  74.],
        [ 65.,  72.,  70.,  67., 119.,  65.,  69.,  83.,  74.,  84.]],
       device='cuda:0')
Train accuarcate: 95.77%



iteration:
  228
    0  1503   bit_w:-1  loss: 0.08655
    1  1030   bit_w: 1  loss: 0.08645
    2  1025   bit_w:-1  loss: 0.08651
    3  1537   bit_w: 1  loss: 0.08636
    4   654   bit_w:-1  loss: 0.08646
   2252   4178   2470   2711   3260   2230   5058   4834   2038   4881
     -1      0     -1      0      0      0      0      0     -1      0
Train accuarcate: 97.46%
tensor([[ 67.,  68.,  75.,  88.,  72.,  71.,  54., 123.,  68.,  70.],
        [ 76.,  90., 121.,  86.,  60.,  78.,  75.,  64.,  85.,  62.],
        [ 63., 112.,  80.,  69.,  77.,  67.,  71.,  79.,  81.,  60.],
        [110.,  71.,  80.,  68.,  65.,  67.,  82.,  79.,  61.,  81.],
        [ 70.,  83.,  68.,  60., 119.,  67.,  83.,  76.,  78.,  80.],
        [ 63., 115.,  78.,  67.,  83.,  56.,  70.,  87.,  79.,  64.],
        [ 53.,  74.,  57.,  81., 115.,  78.,  73.,  79.,  83.,  83.],
        [ 60.,  68.,  83.,  75.,  83.,  74.,  60.,  74.,  75., 119.],
        [ 72.,  77.,  78.,  42.,  83.,  92., 106.,  71.,  89.,  76.],
        [ 72.,  61.,  70.,  67., 101.,  63.,  59.,  91.,  82., 108.],
        [124.,  66.,  81.,  72.,  61.,  77.,  74.,  79.,  78.,  74.],
        [ 82.,  72.,  91.,  66.,  87.,  74., 115.,  72.,  79.,  54.],
        [ 65.,  69.,  65.,  65.,  99.,  75.,  55.,  78.,  63., 121.],
        [108.,  69.,  84.,  76.,  67.,  65.,  71.,  78.,  81.,  71.],
        [ 59., 125.,  70.,  69.,  68.,  69.,  67.,  75.,  78.,  75.],
        [ 75.,  76.,  68.,  85.,  61., 110.,  72.,  68.,  87.,  86.],
        [ 69.,  63.,  62.,  68.,  87.,  73.,  63.,  84.,  90., 114.],
        [ 72.,  70.,  89.,  87.,  58.,  68.,  48., 110.,  58.,  83.],
        [ 66.,  81.,  85.,  99.,  69.,  79.,  70.,  70.,  84.,  74.],
        [ 65.,  72.,  70.,  67., 119.,  65.,  69.,  83.,  74.,  84.]],
       device='cuda:0')
Train accuarcate: 95.77%



iteration:
  229
    0  1485   bit_w:-1  loss: 0.08635
    1  1373   bit_w: 1  loss: 0.08625
    2  1042   bit_w: 1  loss: 0.08625
    3  1558   bit_w: 1  loss: 0.08611
    4  1375   bit_w: 1  loss: 0.08617
   4740    865   2616   3220   1021   4570   2791   1538   3319   1528
      1      0      0     -1      0      1      0     -1      0      0
Train accuarcate: 97.47%
tensor([[ 67.,  68.,  75.,  89.,  72.,  71.,  54., 124.,  68.,  70.],
        [ 77.,  90., 121.,  86.,  60.,  79.,  75.,  64.,  85.,  62.],
        [ 63., 112.,  80.,  70.,  77.,  67.,  71.,  80.,  81.,  60.],
        [110.,  71.,  80.,  69.,  65.,  67.,  82.,  80.,  61.,  81.],
        [ 70.,  83.,  68.,  61., 119.,  67.,  83.,  77.,  78.,  80.],
        [ 63., 115.,  78.,  68.,  83.,  56.,  70.,  88.,  79.,  64.],
        [ 53.,  74.,  57.,  82., 115.,  78.,  73.,  80.,  83.,  83.],
        [ 60.,  68.,  83.,  76.,  83.,  74.,  60.,  75.,  75., 119.],
        [ 72.,  77.,  78.,  43.,  83.,  92., 106.,  72.,  89.,  76.],
        [ 73.,  61.,  70.,  67., 101.,  64.,  59.,  91.,  82., 108.],
        [125.,  66.,  81.,  72.,  61.,  78.,  74.,  79.,  78.,  74.],
        [ 82.,  72.,  91.,  67.,  87.,  74., 115.,  73.,  79.,  54.],
        [ 65.,  69.,  65.,  66.,  99.,  75.,  55.,  79.,  63., 121.],
        [108.,  69.,  84.,  77.,  67.,  65.,  71.,  79.,  81.,  71.],
        [ 59., 125.,  70.,  70.,  68.,  69.,  67.,  76.,  78.,  75.],
        [ 76.,  76.,  68.,  85.,  61., 111.,  72.,  68.,  87.,  86.],
        [ 69.,  63.,  62.,  69.,  87.,  73.,  63.,  85.,  90., 114.],
        [ 72.,  70.,  89.,  88.,  58.,  68.,  48., 111.,  58.,  83.],
        [ 67.,  81.,  85.,  99.,  69.,  80.,  70.,  70.,  84.,  74.],
        [ 65.,  72.,  70.,  68., 119.,  65.,  69.,  84.,  74.,  84.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  230
    0  1546   bit_w:-1  loss: 0.08606
    1  1362   bit_w:-1  loss: 0.08588
    2   906   bit_w:-1  loss: 0.08592
    3  1264   bit_w:-1  loss: 0.08577
    4  1221   bit_w:-1  loss: 0.08587
    721   6290   4590   4273   2904   2564   1385   3833   3171   3420
      0      0      1      0      1      0     -1      0     -1      1
Train accuarcate: 97.46%
tensor([[ 67.,  68.,  75.,  89.,  72.,  71.,  55., 124.,  69.,  70.],
        [ 77.,  90., 122.,  86.,  61.,  79.,  75.,  64.,  85.,  63.],
        [ 63., 112.,  81.,  70.,  78.,  67.,  71.,  80.,  81.,  61.],
        [110.,  71.,  80.,  69.,  65.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  83.,  69.,  61., 120.,  67.,  83.,  77.,  78.,  81.],
        [ 63., 115.,  79.,  68.,  84.,  56.,  70.,  88.,  79.,  65.],
        [ 53.,  74.,  57.,  82., 115.,  78.,  74.,  80.,  84.,  83.],
        [ 60.,  68.,  83.,  76.,  83.,  74.,  61.,  75.,  76., 119.],
        [ 72.,  77.,  79.,  43.,  84.,  92., 106.,  72.,  89.,  77.],
        [ 73.,  61.,  70.,  67., 101.,  64.,  60.,  91.,  83., 108.],
        [125.,  66.,  81.,  72.,  61.,  78.,  75.,  79.,  79.,  74.],
        [ 82.,  72.,  91.,  67.,  87.,  74., 116.,  73.,  80.,  54.],
        [ 65.,  69.,  66.,  66., 100.,  75.,  55.,  79.,  63., 122.],
        [108.,  69.,  84.,  77.,  67.,  65.,  72.,  79.,  82.,  71.],
        [ 59., 125.,  71.,  70.,  69.,  69.,  67.,  76.,  78.,  76.],
        [ 76.,  76.,  69.,  85.,  62., 111.,  72.,  68.,  87.,  87.],
        [ 69.,  63.,  62.,  69.,  87.,  73.,  64.,  85.,  91., 114.],
        [ 72.,  70.,  90.,  88.,  59.,  68.,  48., 111.,  58.,  84.],
        [ 67.,  81.,  86.,  99.,  70.,  80.,  70.,  70.,  84.,  75.],
        [ 65.,  72.,  71.,  68., 120.,  65.,  69.,  84.,  74.,  85.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  231
    0  1424   bit_w:-1  loss: 0.08572
    1  1533   bit_w: 1  loss: 0.08562
    2  1374   bit_w:-1  loss: 0.08562
    3  1096   bit_w: 1  loss: 0.08556
    4  1383   bit_w:-1  loss: 0.08560
   2496   4930   2947   1871   2001   2719   3378   3928   1503   2682
      0      1      0     -1      0      0      0      0      0      0
Train accuarcate: 97.50%
tensor([[ 67.,  69.,  75.,  89.,  72.,  71.,  55., 124.,  69.,  70.],
        [ 77.,  91., 122.,  86.,  61.,  79.,  75.,  64.,  85.,  63.],
        [ 63., 113.,  81.,  70.,  78.,  67.,  71.,  80.,  81.,  61.],
        [110.,  71.,  80.,  70.,  65.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 120.,  67.,  83.,  77.,  78.,  81.],
        [ 63., 116.,  79.,  68.,  84.,  56.,  70.,  88.,  79.,  65.],
        [ 53.,  74.,  57.,  83., 115.,  78.,  74.,  80.,  84.,  83.],
        [ 60.,  69.,  83.,  76.,  83.,  74.,  61.,  75.,  76., 119.],
        [ 72.,  77.,  79.,  44.,  84.,  92., 106.,  72.,  89.,  77.],
        [ 73.,  61.,  70.,  68., 101.,  64.,  60.,  91.,  83., 108.],
        [125.,  66.,  81.,  73.,  61.,  78.,  75.,  79.,  79.,  74.],
        [ 82.,  73.,  91.,  67.,  87.,  74., 116.,  73.,  80.,  54.],
        [ 65.,  70.,  66.,  66., 100.,  75.,  55.,  79.,  63., 122.],
        [108.,  69.,  84.,  78.,  67.,  65.,  72.,  79.,  82.,  71.],
        [ 59., 125.,  71.,  71.,  69.,  69.,  67.,  76.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  62., 111.,  72.,  68.,  87.,  87.],
        [ 69.,  63.,  62.,  70.,  87.,  73.,  64.,  85.,  91., 114.],
        [ 72.,  71.,  90.,  88.,  59.,  68.,  48., 111.,  58.,  84.],
        [ 67.,  82.,  86.,  99.,  70.,  80.,  70.,  70.,  84.,  75.],
        [ 65.,  72.,  71.,  69., 120.,  65.,  69.,  84.,  74.,  85.]],
       device='cuda:0')
Train accuarcate: 95.82%



iteration:
  232
    0  1572   bit_w:-1  loss: 0.08550
    1   927   bit_w: 1  loss: 0.08539
    2  1555   bit_w: 1  loss: 0.08542
    3   351   bit_w:-1  loss: 0.08532
    4   453   bit_w: 1  loss: 0.08529
   3946     27   1817    350   1026    458    335   1197    990    557
      1      0      1      0      1      0      0      1      0      0
Train accuarcate: 97.51%
tensor([[ 67.,  69.,  75.,  89.,  72.,  71.,  55., 124.,  69.,  70.],
        [ 78.,  91., 123.,  86.,  62.,  79.,  75.,  65.,  85.,  63.],
        [ 63., 113.,  81.,  70.,  78.,  67.,  71.,  80.,  81.,  61.],
        [110.,  71.,  80.,  70.,  65.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 120.,  67.,  83.,  77.,  78.,  81.],
        [ 63., 116.,  79.,  68.,  84.,  56.,  70.,  88.,  79.,  65.],
        [ 53.,  74.,  57.,  83., 115.,  78.,  74.,  80.,  84.,  83.],
        [ 60.,  69.,  83.,  76.,  83.,  74.,  61.,  75.,  76., 119.],
        [ 73.,  77.,  80.,  44.,  85.,  92., 106.,  73.,  89.,  77.],
        [ 73.,  61.,  70.,  68., 101.,  64.,  60.,  91.,  83., 108.],
        [125.,  66.,  81.,  73.,  61.,  78.,  75.,  79.,  79.,  74.],
        [ 82.,  73.,  91.,  67.,  87.,  74., 116.,  73.,  80.,  54.],
        [ 65.,  70.,  66.,  66., 100.,  75.,  55.,  79.,  63., 122.],
        [109.,  69.,  85.,  78.,  68.,  65.,  72.,  80.,  82.,  71.],
        [ 59., 125.,  71.,  71.,  69.,  69.,  67.,  76.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  62., 111.,  72.,  68.,  87.,  87.],
        [ 69.,  63.,  62.,  70.,  87.,  73.,  64.,  85.,  91., 114.],
        [ 72.,  71.,  90.,  88.,  59.,  68.,  48., 111.,  58.,  84.],
        [ 67.,  82.,  86.,  99.,  70.,  80.,  70.,  70.,  84.,  75.],
        [ 65.,  72.,  71.,  69., 120.,  65.,  69.,  84.,  74.,  85.]],
       device='cuda:0')
Train accuarcate: 95.83%



iteration:
  233
    0  1573   bit_w:-1  loss: 0.08518
    1  1524   bit_w: 1  loss: 0.08510
    2   593   bit_w: 1  loss: 0.08516
    3  1549   bit_w:-1  loss: 0.08502
    4  1460   bit_w: 1  loss: 0.08510
   3492   4694   3576   4116   3915   2614   3453   4379   1554   3975
      0      0      0      0      0     -1     -1      0     -1      0
Train accuarcate: 97.50%
tensor([[ 67.,  69.,  75.,  89.,  72.,  72.,  56., 124.,  70.,  70.],
        [ 78.,  91., 123.,  86.,  62.,  80.,  76.,  65.,  86.,  63.],
        [ 63., 113.,  81.,  70.,  78.,  68.,  72.,  80.,  82.,  61.],
        [110.,  71.,  80.,  70.,  65.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 120.,  67.,  83.,  77.,  78.,  81.],
        [ 63., 116.,  79.,  68.,  84.,  56.,  70.,  88.,  79.,  65.],
        [ 53.,  74.,  57.,  83., 115.,  79.,  75.,  80.,  85.,  83.],
        [ 60.,  69.,  83.,  76.,  83.,  74.,  61.,  75.,  76., 119.],
        [ 73.,  77.,  80.,  44.,  85.,  92., 106.,  73.,  89.,  77.],
        [ 73.,  61.,  70.,  68., 101.,  65.,  61.,  91.,  84., 108.],
        [125.,  66.,  81.,  73.,  61.,  79.,  76.,  79.,  80.,  74.],
        [ 82.,  73.,  91.,  67.,  87.,  75., 117.,  73.,  81.,  54.],
        [ 65.,  70.,  66.,  66., 100.,  76.,  56.,  79.,  64., 122.],
        [109.,  69.,  85.,  78.,  68.,  66.,  73.,  80.,  83.,  71.],
        [ 59., 125.,  71.,  71.,  69.,  69.,  67.,  76.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  62., 112.,  73.,  68.,  88.,  87.],
        [ 69.,  63.,  62.,  70.,  87.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  71.,  90.,  88.,  59.,  68.,  48., 111.,  58.,  84.],
        [ 67.,  82.,  86.,  99.,  70.,  80.,  70.,  70.,  84.,  75.],
        [ 65.,  72.,  71.,  69., 120.,  65.,  69.,  84.,  74.,  85.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  234
    0  1565   bit_w:-1  loss: 0.08499
    1  1581   bit_w:-1  loss: 0.08491
    2  1319   bit_w:-1  loss: 0.08492
    3  1455   bit_w: 1  loss: 0.08481
    4   968   bit_w: 1  loss: 0.08485
   4168   4460   3177   3199   3155   3496   3167   2867   3411   1987
     -1      0      0     -1      1      0      0      0      0     -1
Train accuarcate: 97.50%
tensor([[ 68.,  69.,  75.,  90.,  72.,  72.,  56., 124.,  70.,  71.],
        [ 79.,  91., 123.,  87.,  62.,  80.,  76.,  65.,  86.,  64.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  79.,  75.,  80.,  85.,  84.],
        [ 60.,  69.,  83.,  76.,  84.,  74.,  61.,  75.,  76., 119.],
        [ 74.,  77.,  80.,  45.,  85.,  92., 106.,  73.,  89.,  78.],
        [ 74.,  61.,  70.,  69., 101.,  65.,  61.,  91.,  84., 109.],
        [125.,  66.,  81.,  73.,  62.,  79.,  76.,  79.,  80.,  74.],
        [ 82.,  73.,  91.,  67.,  88.,  75., 117.,  73.,  81.,  54.],
        [ 66.,  70.,  66.,  67., 100.,  76.,  56.,  79.,  64., 123.],
        [109.,  69.,  85.,  78.,  69.,  66.,  73.,  80.,  83.,  71.],
        [ 59., 125.,  71.,  71.,  70.,  69.,  67.,  76.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 112.,  73.,  68.,  88.,  87.],
        [ 69.,  63.,  62.,  70.,  88.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  71.,  90.,  88.,  60.,  68.,  48., 111.,  58.,  84.],
        [ 67.,  82.,  86.,  99.,  71.,  80.,  70.,  70.,  84.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.80%



iteration:
  235
    0  1535   bit_w:-1  loss: 0.08472
    1  1066   bit_w: 1  loss: 0.08457
    2  1486   bit_w:-1  loss: 0.08461
    3   468   bit_w:-1  loss: 0.08447
    4  1061   bit_w:-1  loss: 0.08453
    632   1983   3979    728   1362    712   2165   4179   2235    970
      0      1      1      0      0      0      0      1      0      0
Train accuarcate: 97.52%
tensor([[ 68.,  69.,  75.,  90.,  72.,  72.,  56., 124.,  70.,  71.],
        [ 79.,  92., 124.,  87.,  62.,  80.,  76.,  66.,  86.,  64.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  79.,  75.,  80.,  85.,  84.],
        [ 60.,  69.,  83.,  76.,  84.,  74.,  61.,  75.,  76., 119.],
        [ 74.,  77.,  80.,  45.,  85.,  92., 106.,  73.,  89.,  78.],
        [ 74.,  61.,  70.,  69., 101.,  65.,  61.,  91.,  84., 109.],
        [125.,  66.,  81.,  73.,  62.,  79.,  76.,  79.,  80.,  74.],
        [ 82.,  74.,  92.,  67.,  88.,  75., 117.,  74.,  81.,  54.],
        [ 66.,  70.,  66.,  67., 100.,  76.,  56.,  79.,  64., 123.],
        [109.,  69.,  85.,  78.,  69.,  66.,  73.,  80.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 112.,  73.,  68.,  88.,  87.],
        [ 69.,  63.,  62.,  70.,  88.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  68.,  48., 112.,  58.,  84.],
        [ 67.,  83.,  87.,  99.,  71.,  80.,  70.,  71.,  84.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  236
    0  1505   bit_w:-1  loss: 0.08444
    1  1099   bit_w:-1  loss: 0.08435
    2   232   bit_w:-1  loss: 0.08438
    3  1030   bit_w: 1  loss: 0.08428
    4  1159   bit_w:-1  loss: 0.08434
   5132   6704   5336   5463   4606   4317   5276   2616   5044   3413
      0      0      0      0      0     -1      0     -1      0      0
Train accuarcate: 97.53%
tensor([[ 68.,  69.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 79.,  92., 124.,  87.,  62.,  80.,  76.,  66.,  86.,  64.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  80.,  75.,  81.,  85.,  84.],
        [ 60.,  69.,  83.,  76.,  84.,  75.,  61.,  76.,  76., 119.],
        [ 74.,  77.,  80.,  45.,  85.,  93., 106.,  74.,  89.,  78.],
        [ 74.,  61.,  70.,  69., 101.,  65.,  61.,  91.,  84., 109.],
        [125.,  66.,  81.,  73.,  62.,  79.,  76.,  79.,  80.,  74.],
        [ 82.,  74.,  92.,  67.,  88.,  75., 117.,  74.,  81.,  54.],
        [ 66.,  70.,  66.,  67., 100.,  76.,  56.,  79.,  64., 123.],
        [109.,  69.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 112.,  73.,  68.,  88.,  87.],
        [ 69.,  63.,  62.,  70.,  88.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  87.,  99.,  71.,  80.,  70.,  71.,  84.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  237
    0  1046   bit_w:-1  loss: 0.08425
    1  1476   bit_w:-1  loss: 0.08419
    2  1463   bit_w: 1  loss: 0.08416
    3  1553   bit_w:-1  loss: 0.08410
    4  1162   bit_w:-1  loss: 0.08410
   2937    421    662    338   1154    868   2196   1042   2609   1817
      1      0      0      0      0      0      1      0      1      1
Train accuarcate: 97.54%
tensor([[ 68.,  69.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 79.,  92., 124.,  87.,  62.,  80.,  76.,  66.,  86.,  64.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  80.,  75.,  81.,  85.,  84.],
        [ 61.,  69.,  83.,  76.,  84.,  75.,  62.,  76.,  77., 120.],
        [ 74.,  77.,  80.,  45.,  85.,  93., 106.,  74.,  89.,  78.],
        [ 74.,  61.,  70.,  69., 101.,  65.,  61.,  91.,  84., 109.],
        [126.,  66.,  81.,  73.,  62.,  79.,  77.,  79.,  81.,  75.],
        [ 83.,  74.,  92.,  67.,  88.,  75., 118.,  74.,  82.,  55.],
        [ 66.,  70.,  66.,  67., 100.,  76.,  56.,  79.,  64., 123.],
        [109.,  69.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 112.,  73.,  68.,  88.,  87.],
        [ 69.,  63.,  62.,  70.,  88.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  87.,  99.,  71.,  80.,  70.,  71.,  84.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.77%



iteration:
  238
    0  1509   bit_w:-1  loss: 0.08402
    1  1577   bit_w:-1  loss: 0.08391
    2  1527   bit_w:-1  loss: 0.08396
    3  1554   bit_w:-1  loss: 0.08382
    4  1046   bit_w: 1  loss: 0.08390
   2783   5454   4690   5076   5039   2576   2246   5231   3565   4840
      0      0      0      0      0     -1     -1      0      0     -1
Train accuarcate: 97.54%
tensor([[ 68.,  69.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 79.,  92., 124.,  87.,  62.,  81.,  77.,  66.,  86.,  65.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  80.,  75.,  81.,  85.,  84.],
        [ 61.,  69.,  83.,  76.,  84.,  75.,  62.,  76.,  77., 120.],
        [ 74.,  77.,  80.,  45.,  85.,  93., 106.,  74.,  89.,  78.],
        [ 74.,  61.,  70.,  69., 101.,  65.,  61.,  91.,  84., 109.],
        [126.,  66.,  81.,  73.,  62.,  79.,  77.,  79.,  81.,  75.],
        [ 83.,  74.,  92.,  67.,  88.,  75., 118.,  74.,  82.,  55.],
        [ 66.,  70.,  66.,  67., 100.,  76.,  56.,  79.,  64., 123.],
        [109.,  69.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 113.,  74.,  68.,  88.,  88.],
        [ 69.,  63.,  62.,  70.,  88.,  74.,  65.,  85.,  92., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  87.,  99.,  71.,  80.,  70.,  71.,  84.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.75%



iteration:
  239
    0  1554   bit_w:-1  loss: 0.08380
    1  1173   bit_w:-1  loss: 0.08370
    2  1539   bit_w: 1  loss: 0.08370
    3   552   bit_w:-1  loss: 0.08360
    4  1020   bit_w:-1  loss: 0.08366
    670   1773   2149   1869   1802   1317   1237   1651   3080   3823
      0      0      0      1      1      0      0      0      1      0
Train accuarcate: 97.55%
tensor([[ 68.,  69.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 79.,  92., 124.,  87.,  62.,  81.,  77.,  66.,  86.,  65.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [110.,  71.,  80.,  70.,  66.,  67.,  83.,  80.,  62.,  81.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  80.,  75.,  81.,  85.,  84.],
        [ 61.,  69.,  83.,  76.,  84.,  75.,  62.,  76.,  77., 120.],
        [ 74.,  77.,  80.,  46.,  86.,  93., 106.,  74.,  90.,  78.],
        [ 74.,  61.,  70.,  70., 102.,  65.,  61.,  91.,  85., 109.],
        [126.,  66.,  81.,  73.,  62.,  79.,  77.,  79.,  81.,  75.],
        [ 83.,  74.,  92.,  67.,  88.,  75., 118.,  74.,  82.,  55.],
        [ 66.,  70.,  66.,  68., 101.,  76.,  56.,  79.,  65., 123.],
        [109.,  69.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 76.,  76.,  69.,  86.,  63., 113.,  74.,  68.,  88.,  88.],
        [ 69.,  63.,  62.,  71.,  89.,  74.,  65.,  85.,  93., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  87., 100.,  72.,  80.,  70.,  71.,  85.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.79%



iteration:
  240
    0  1572   bit_w:-1  loss: 0.08357
    1  1464   bit_w:-1  loss: 0.08349
    2  1399   bit_w: 1  loss: 0.08351
    3  1021   bit_w: 1  loss: 0.08336
    4  1566   bit_w: 1  loss: 0.08345
   4959    224   2627   1971    683   1286   1779   1040   1855   1074
      1      0      1      0      0      0      0      1      0      1
Train accuarcate: 97.57%
tensor([[ 68.,  69.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 80.,  92., 125.,  87.,  62.,  81.,  77.,  67.,  86.,  66.],
        [ 64., 113.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [111.,  71.,  81.,  70.,  66.,  67.,  83.,  81.,  62.,  82.],
        [ 70.,  84.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 116.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  57.,  84., 115.,  80.,  75.,  81.,  85.,  84.],
        [ 61.,  69.,  83.,  76.,  84.,  75.,  62.,  76.,  77., 120.],
        [ 75.,  77.,  81.,  46.,  86.,  93., 106.,  75.,  90.,  79.],
        [ 75.,  61.,  71.,  70., 102.,  65.,  61.,  92.,  85., 110.],
        [127.,  66.,  82.,  73.,  62.,  79.,  77.,  80.,  81.,  76.],
        [ 83.,  74.,  92.,  67.,  88.,  75., 118.,  74.,  82.,  55.],
        [ 67.,  70.,  67.,  68., 101.,  76.,  56.,  80.,  65., 124.],
        [109.,  69.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 126.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 77.,  76.,  70.,  86.,  63., 113.,  74.,  69.,  88.,  89.],
        [ 69.,  63.,  62.,  71.,  89.,  74.,  65.,  85.,  93., 114.],
        [ 72.,  72.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  87., 100.,  72.,  80.,  70.,  71.,  85.,  75.],
        [ 66.,  72.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.75%



iteration:
  241
    0  1582   bit_w:-1  loss: 0.08337
    1  1476   bit_w: 1  loss: 0.08329
    2   880   bit_w:-1  loss: 0.08329
    3  1529   bit_w: 1  loss: 0.08320
    4  1540   bit_w: 1  loss: 0.08323
   4331   6206   2731   2640   5421   3148   5078   4865   4189   5238
      0      1     -1     -1      0     -1      0      0      0      0
Train accuarcate: 97.56%
tensor([[ 68.,  70.,  75.,  90.,  72.,  73.,  56., 125.,  70.,  71.],
        [ 80.,  92., 126.,  88.,  62.,  82.,  77.,  67.,  86.,  66.],
        [ 64., 114.,  81.,  71.,  78.,  68.,  72.,  80.,  82.,  62.],
        [111.,  72.,  81.,  70.,  66.,  67.,  83.,  81.,  62.,  82.],
        [ 70.,  85.,  69.,  61., 121.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 117.,  79.,  69.,  84.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  58.,  85., 115.,  81.,  75.,  81.,  85.,  84.],
        [ 61.,  69.,  84.,  77.,  84.,  76.,  62.,  76.,  77., 120.],
        [ 75.,  77.,  82.,  47.,  86.,  94., 106.,  75.,  90.,  79.],
        [ 75.,  62.,  71.,  70., 102.,  65.,  61.,  92.,  85., 110.],
        [127.,  66.,  83.,  74.,  62.,  80.,  77.,  80.,  81.,  76.],
        [ 83.,  75.,  92.,  67.,  88.,  75., 118.,  74.,  82.,  55.],
        [ 67.,  71.,  67.,  68., 101.,  76.,  56.,  80.,  65., 124.],
        [109.,  70.,  85.,  78.,  69.,  67.,  73.,  81.,  83.,  71.],
        [ 59., 127.,  72.,  71.,  70.,  69.,  67.,  77.,  78.,  76.],
        [ 77.,  76.,  71.,  87.,  63., 114.,  74.,  69.,  88.,  89.],
        [ 69.,  64.,  62.,  71.,  89.,  74.,  65.,  85.,  93., 114.],
        [ 72.,  73.,  91.,  88.,  60.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  88., 101.,  72.,  81.,  70.,  71.,  85.,  75.],
        [ 66.,  73.,  71.,  70., 120.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  242
    0  1030   bit_w:-1  loss: 0.08314
    1  1509   bit_w:-1  loss: 0.08306
    2  1372   bit_w: 1  loss: 0.08300
    3  1157   bit_w: 1  loss: 0.08295
    4   712   bit_w:-1  loss: 0.08290
   4610   5685   4824   4639   3824   3846   5265   2397   3057   3160
      0      0      0      0      1      0      0     -1     -1     -1
Train accuarcate: 97.57%
tensor([[ 68.,  70.,  75.,  90.,  72.,  73.,  56., 126.,  71.,  72.],
        [ 80.,  92., 126.,  88.,  63.,  82.,  77.,  67.,  86.,  66.],
        [ 64., 114.,  81.,  71.,  79.,  68.,  72.,  80.,  82.,  62.],
        [111.,  72.,  81.,  70.,  67.,  67.,  83.,  81.,  62.,  82.],
        [ 70.,  85.,  69.,  61., 122.,  67.,  83.,  77.,  78.,  81.],
        [ 64., 117.,  79.,  69.,  85.,  56.,  70.,  88.,  79.,  66.],
        [ 54.,  74.,  58.,  85., 115.,  81.,  75.,  82.,  86.,  85.],
        [ 61.,  69.,  84.,  77.,  85.,  76.,  62.,  76.,  77., 120.],
        [ 75.,  77.,  82.,  47.,  86.,  94., 106.,  76.,  91.,  80.],
        [ 75.,  62.,  71.,  70., 102.,  65.,  61.,  93.,  86., 111.],
        [127.,  66.,  83.,  74.,  62.,  80.,  77.,  81.,  82.,  77.],
        [ 83.,  75.,  92.,  67.,  88.,  75., 118.,  75.,  83.,  56.],
        [ 67.,  71.,  67.,  68., 101.,  76.,  56.,  81.,  66., 125.],
        [109.,  70.,  85.,  78.,  69.,  67.,  73.,  82.,  84.,  72.],
        [ 59., 127.,  72.,  71.,  71.,  69.,  67.,  77.,  78.,  76.],
        [ 77.,  76.,  71.,  87.,  63., 114.,  74.,  70.,  89.,  90.],
        [ 69.,  64.,  62.,  71.,  90.,  74.,  65.,  85.,  93., 114.],
        [ 72.,  73.,  91.,  88.,  61.,  69.,  48., 113.,  58.,  84.],
        [ 67.,  83.,  88., 101.,  73.,  81.,  70.,  71.,  85.,  75.],
        [ 66.,  73.,  71.,  70., 121.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  243
    0  1467   bit_w:-1  loss: 0.08279
    1  1486   bit_w:-1  loss: 0.08272
    2  1148   bit_w: 1  loss: 0.08275
    3   927   bit_w:-1  loss: 0.08265
    4  1072   bit_w:-1  loss: 0.08273
   2044   2571   2271   1469    975   3871   3580    593   1560    542
     -1      0      1      0      0      1      0      0      1      0
Train accuarcate: 97.56%
tensor([[ 69.,  70.,  75.,  90.,  72.,  73.,  56., 126.,  71.,  72.],
        [ 80.,  92., 127.,  88.,  63.,  83.,  77.,  67.,  87.,  66.],
        [ 65., 114.,  81.,  71.,  79.,  68.,  72.,  80.,  82.,  62.],
        [112.,  72.,  81.,  70.,  67.,  67.,  83.,  81.,  62.,  82.],
        [ 71.,  85.,  69.,  61., 122.,  67.,  83.,  77.,  78.,  81.],
        [ 65., 117.,  79.,  69.,  85.,  56.,  70.,  88.,  79.,  66.],
        [ 55.,  74.,  58.,  85., 115.,  81.,  75.,  82.,  86.,  85.],
        [ 62.,  69.,  84.,  77.,  85.,  76.,  62.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  47.,  86.,  94., 106.,  76.,  91.,  80.],
        [ 76.,  62.,  71.,  70., 102.,  65.,  61.,  93.,  86., 111.],
        [128.,  66.,  83.,  74.,  62.,  80.,  77.,  81.,  82.,  77.],
        [ 83.,  75.,  93.,  67.,  88.,  76., 118.,  75.,  84.,  56.],
        [ 68.,  71.,  67.,  68., 101.,  76.,  56.,  81.,  66., 125.],
        [110.,  70.,  85.,  78.,  69.,  67.,  73.,  82.,  84.,  72.],
        [ 59., 127.,  73.,  71.,  71.,  70.,  67.,  77.,  79.,  76.],
        [ 77.,  76.,  72.,  87.,  63., 115.,  74.,  70.,  90.,  90.],
        [ 70.,  64.,  62.,  71.,  90.,  74.,  65.,  85.,  93., 114.],
        [ 73.,  73.,  91.,  88.,  61.,  69.,  48., 113.,  58.,  84.],
        [ 68.,  83.,  88., 101.,  73.,  81.,  70.,  71.,  85.,  75.],
        [ 67.,  73.,  71.,  70., 121.,  65.,  69.,  84.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.82%



iteration:
  244
    0   920   bit_w:-1  loss: 0.08258
    1  1241   bit_w: 1  loss: 0.08249
    2   915   bit_w:-1  loss: 0.08248
    3  1464   bit_w: 1  loss: 0.08240
    4  1344   bit_w: 1  loss: 0.08237
   1950   3952   1073   1900   3576   2390    442   4537   2816   2493
      0      1      0     -1      0      0     -1      1      0      0
Train accuarcate: 97.59%
tensor([[ 69.,  70.,  75.,  91.,  72.,  73.,  57., 126.,  71.,  72.],
        [ 80.,  92., 127.,  89.,  63.,  83.,  78.,  67.,  87.,  66.],
        [ 65., 114.,  81.,  72.,  79.,  68.,  73.,  80.,  82.,  62.],
        [112.,  72.,  81.,  71.,  67.,  67.,  84.,  81.,  62.,  82.],
        [ 71.,  86.,  69.,  61., 122.,  67.,  83.,  78.,  78.,  81.],
        [ 65., 118.,  79.,  69.,  85.,  56.,  70.,  89.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 115.,  81.,  75.,  83.,  86.,  85.],
        [ 62.,  69.,  84.,  78.,  85.,  76.,  63.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  48.,  86.,  94., 107.,  76.,  91.,  80.],
        [ 76.,  63.,  71.,  70., 102.,  65.,  61.,  94.,  86., 111.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  82.,  82.,  77.],
        [ 83.,  75.,  93.,  68.,  88.,  76., 119.,  75.,  84.,  56.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  81.,  66., 125.],
        [110.,  70.,  85.,  79.,  69.,  67.,  74.,  82.,  84.,  72.],
        [ 59., 127.,  73.,  72.,  71.,  70.,  68.,  77.,  79.,  76.],
        [ 77.,  77.,  72.,  87.,  63., 115.,  74.,  71.,  90.,  90.],
        [ 70.,  64.,  62.,  72.,  90.,  74.,  66.,  85.,  93., 114.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 114.,  58.,  84.],
        [ 68.,  83.,  88., 102.,  73.,  81.,  71.,  71.,  85.,  75.],
        [ 67.,  74.,  71.,  70., 121.,  65.,  69.,  85.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.82%



iteration:
  245
    0  1466   bit_w:-1  loss: 0.08228
    1  1449   bit_w:-1  loss: 0.08216
    2  1548   bit_w: 1  loss: 0.08223
    3  1327   bit_w:-1  loss: 0.08216
    4   715   bit_w:-1  loss: 0.08219
   5761   5624   4068   3425   5208   3211   4124   5392   4047   4488
      0      0     -1      0      0     -1      0      0      0     -1
Train accuarcate: 97.59%
tensor([[ 69.,  70.,  75.,  91.,  72.,  73.,  57., 126.,  71.,  72.],
        [ 80.,  92., 128.,  89.,  63.,  84.,  78.,  67.,  87.,  67.],
        [ 65., 114.,  81.,  72.,  79.,  68.,  73.,  80.,  82.,  62.],
        [112.,  72.,  81.,  71.,  67.,  67.,  84.,  81.,  62.,  82.],
        [ 71.,  86.,  69.,  61., 122.,  67.,  83.,  78.,  78.,  81.],
        [ 65., 118.,  79.,  69.,  85.,  56.,  70.,  89.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 115.,  81.,  75.,  83.,  86.,  85.],
        [ 62.,  69.,  84.,  78.,  85.,  76.,  63.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  48.,  86.,  94., 107.,  76.,  91.,  80.],
        [ 76.,  63.,  71.,  70., 102.,  65.,  61.,  94.,  86., 111.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  82.,  82.,  77.],
        [ 83.,  75.,  93.,  68.,  88.,  76., 119.,  75.,  84.,  56.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  81.,  66., 125.],
        [110.,  70.,  85.,  79.,  69.,  67.,  74.,  82.,  84.,  72.],
        [ 59., 127.,  74.,  72.,  71.,  71.,  68.,  77.,  79.,  77.],
        [ 77.,  77.,  72.,  87.,  63., 115.,  74.,  71.,  90.,  90.],
        [ 70.,  64.,  62.,  72.,  90.,  74.,  66.,  85.,  93., 114.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 114.,  58.,  84.],
        [ 68.,  83.,  88., 102.,  73.,  81.,  71.,  71.,  85.,  75.],
        [ 67.,  74.,  71.,  70., 121.,  65.,  69.,  85.,  74.,  86.]],
       device='cuda:0')
Train accuarcate: 95.77%



iteration:
  246
    0  1466   bit_w:-1  loss: 0.08210
    1   908   bit_w: 1  loss: 0.08199
    2   688   bit_w: 1  loss: 0.08204
    3   286   bit_w:-1  loss: 0.08192
    4  1548   bit_w:-1  loss: 0.08198
    636    302   1438   1627   3669   1788   2624    537   2519   3033
      0      0      0      0      1      0      1      0      0      1
Train accuarcate: 97.60%
tensor([[ 69.,  70.,  75.,  91.,  72.,  73.,  57., 126.,  71.,  72.],
        [ 80.,  92., 128.,  89.,  64.,  84.,  79.,  67.,  87.,  68.],
        [ 65., 114.,  81.,  72.,  79.,  68.,  73.,  80.,  82.,  62.],
        [112.,  72.,  81.,  71.,  67.,  67.,  84.,  81.,  62.,  82.],
        [ 71.,  86.,  69.,  61., 123.,  67.,  84.,  78.,  78.,  82.],
        [ 65., 118.,  79.,  69.,  85.,  56.,  70.,  89.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 116.,  81.,  76.,  83.,  86.,  86.],
        [ 62.,  69.,  84.,  78.,  85.,  76.,  63.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  48.,  87.,  94., 108.,  76.,  91.,  81.],
        [ 76.,  63.,  71.,  70., 103.,  65.,  62.,  94.,  86., 112.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  82.,  82.,  77.],
        [ 83.,  75.,  93.,  68.,  89.,  76., 120.,  75.,  84.,  57.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  81.,  66., 125.],
        [110.,  70.,  85.,  79.,  70.,  67.,  75.,  82.,  84.,  73.],
        [ 59., 127.,  74.,  72.,  71.,  71.,  68.,  77.,  79.,  77.],
        [ 77.,  77.,  72.,  87.,  64., 115.,  75.,  71.,  90.,  91.],
        [ 70.,  64.,  62.,  72.,  91.,  74.,  67.,  85.,  93., 115.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 114.,  58.,  84.],
        [ 68.,  83.,  88., 102.,  73.,  81.,  71.,  71.,  85.,  75.],
        [ 67.,  74.,  71.,  70., 122.,  65.,  70.,  85.,  74.,  87.]],
       device='cuda:0')
Train accuarcate: 95.79%



iteration:
  247
    0  1429   bit_w:-1  loss: 0.08186
    1  1418   bit_w:-1  loss: 0.08177
    2   407   bit_w:-1  loss: 0.08180
    3  1205   bit_w: 1  loss: 0.08171
    4   488   bit_w:-1  loss: 0.08175
   5616   3305   3169   3355   3693   3908   4266   4661   3372   3995
     -1     -1     -1      0      0      0      0      0      1      0
Train accuarcate: 97.60%
tensor([[ 69.,  70.,  75.,  91.,  72.,  73.,  57., 126.,  72.,  72.],
        [ 80.,  92., 128.,  89.,  64.,  84.,  79.,  67.,  88.,  68.],
        [ 66., 115.,  82.,  72.,  79.,  68.,  73.,  80.,  82.,  62.],
        [112.,  72.,  81.,  71.,  67.,  67.,  84.,  81.,  63.,  82.],
        [ 71.,  86.,  69.,  61., 123.,  67.,  84.,  78.,  79.,  82.],
        [ 66., 119.,  80.,  69.,  85.,  56.,  70.,  89.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 116.,  81.,  76.,  83.,  87.,  86.],
        [ 63.,  70.,  85.,  78.,  85.,  76.,  63.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  48.,  87.,  94., 108.,  76.,  92.,  81.],
        [ 76.,  63.,  71.,  70., 103.,  65.,  62.,  94.,  87., 112.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  82.,  83.,  77.],
        [ 84.,  76.,  94.,  68.,  89.,  76., 120.,  75.,  84.,  57.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  81.,  67., 125.],
        [110.,  70.,  85.,  79.,  70.,  67.,  75.,  82.,  85.,  73.],
        [ 59., 127.,  74.,  72.,  71.,  71.,  68.,  77.,  80.,  77.],
        [ 78.,  78.,  73.,  87.,  64., 115.,  75.,  71.,  90.,  91.],
        [ 70.,  64.,  62.,  72.,  91.,  74.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 114.,  59.,  84.],
        [ 68.,  83.,  88., 102.,  73.,  81.,  71.,  71.,  86.,  75.],
        [ 67.,  74.,  71.,  70., 122.,  65.,  70.,  85.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.75%



iteration:
  248
    0  1483   bit_w:-1  loss: 0.08165
    1  1526   bit_w:-1  loss: 0.08157
    2   596   bit_w:-1  loss: 0.08157
    3  1168   bit_w:-1  loss: 0.08148
    4  1569   bit_w:-1  loss: 0.08152
   3691   4830   3237   1907   4168   1989   4760   4769   3889   2329
      0      0      0     -1      0     -1      0      1      0      0
Train accuarcate: 97.62%
tensor([[ 69.,  70.,  75.,  92.,  72.,  74.,  57., 126.,  72.,  72.],
        [ 80.,  92., 128.,  90.,  64.,  85.,  79.,  67.,  88.,  68.],
        [ 66., 115.,  82.,  72.,  79.,  68.,  73.,  81.,  82.,  62.],
        [112.,  72.,  81.,  71.,  67.,  67.,  84.,  82.,  63.,  82.],
        [ 71.,  86.,  69.,  61., 123.,  67.,  84.,  79.,  79.,  82.],
        [ 66., 119.,  80.,  69.,  85.,  56.,  70.,  90.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 116.,  81.,  76.,  84.,  87.,  86.],
        [ 63.,  70.,  85.,  79.,  85.,  77.,  63.,  76.,  77., 120.],
        [ 76.,  77.,  82.,  48.,  87.,  94., 108.,  77.,  92.,  81.],
        [ 76.,  63.,  71.,  71., 103.,  66.,  62.,  94.,  87., 112.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  83.,  83.,  77.],
        [ 84.,  76.,  94.,  69.,  89.,  77., 120.,  75.,  84.,  57.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  82.,  67., 125.],
        [110.,  70.,  85.,  79.,  70.,  67.,  75.,  83.,  85.,  73.],
        [ 59., 127.,  74.,  72.,  71.,  71.,  68.,  78.,  80.,  77.],
        [ 78.,  78.,  73.,  87.,  64., 115.,  75.,  72.,  90.,  91.],
        [ 70.,  64.,  62.,  73.,  91.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 115.,  59.,  84.],
        [ 68.,  83.,  88., 103.,  73.,  82.,  71.,  71.,  86.,  75.],
        [ 67.,  74.,  71.,  70., 122.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  249
    0  1327   bit_w:-1  loss: 0.08142
    1  1021   bit_w: 1  loss: 0.08131
    2  1437   bit_w: 1  loss: 0.08133
    3  1404   bit_w:-1  loss: 0.08124
    4  1137   bit_w:-1  loss: 0.08124
   4310   1196   1393   3712   1156   1990   1529   2819   1169   1490
      1      0      0      0      0      0      0      0      1      1
Train accuarcate: 97.62%
tensor([[ 70.,  70.,  75.,  92.,  72.,  74.,  57., 126.,  73.,  73.],
        [ 81.,  92., 128.,  90.,  64.,  85.,  79.,  67.,  89.,  69.],
        [ 66., 115.,  82.,  72.,  79.,  68.,  73.,  81.,  82.,  62.],
        [113.,  72.,  81.,  71.,  67.,  67.,  84.,  82.,  64.,  83.],
        [ 72.,  86.,  69.,  61., 123.,  67.,  84.,  79.,  80.,  83.],
        [ 66., 119.,  80.,  69.,  85.,  56.,  70.,  90.,  79.,  66.],
        [ 55.,  75.,  58.,  85., 116.,  81.,  76.,  84.,  87.,  86.],
        [ 64.,  70.,  85.,  79.,  85.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  82.,  48.,  87.,  94., 108.,  77.,  92.,  81.],
        [ 77.,  63.,  71.,  71., 103.,  66.,  62.,  94.,  88., 113.],
        [128.,  67.,  83.,  74.,  62.,  80.,  77.,  83.,  83.,  77.],
        [ 85.,  76.,  94.,  69.,  89.,  77., 120.,  75.,  85.,  58.],
        [ 68.,  71.,  67.,  69., 101.,  76.,  57.,  82.,  67., 125.],
        [111.,  70.,  85.,  79.,  70.,  67.,  75.,  83.,  86.,  74.],
        [ 59., 127.,  74.,  72.,  71.,  71.,  68.,  78.,  80.,  77.],
        [ 79.,  78.,  73.,  87.,  64., 115.,  75.,  72.,  91.,  92.],
        [ 70.,  64.,  62.,  73.,  91.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  91.,  88.,  61.,  69.,  48., 115.,  59.,  84.],
        [ 68.,  83.,  88., 103.,  73.,  82.,  71.,  71.,  86.,  75.],
        [ 67.,  74.,  71.,  70., 122.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.80%



iteration:
  250
    0  1561   bit_w:-1  loss: 0.08114
    1  1574   bit_w:-1  loss: 0.08102
    2  1537   bit_w:-1  loss: 0.08106
    3  1253   bit_w:-1  loss: 0.08096
    4  1333   bit_w: 1  loss: 0.08102
    777   5333   3069   1877   4177   1311   1205   2371   3464   2691
      0     -1      1      0      1      0     -1      0      0     -1
Train accuarcate: 97.62%
tensor([[ 70.,  70.,  76.,  92.,  73.,  74.,  57., 126.,  73.,  73.],
        [ 81.,  92., 129.,  90.,  65.,  85.,  79.,  67.,  89.,  69.],
        [ 66., 115.,  83.,  72.,  80.,  68.,  73.,  81.,  82.,  62.],
        [113.,  73.,  81.,  71.,  67.,  67.,  85.,  82.,  64.,  84.],
        [ 72.,  86.,  70.,  61., 124.,  67.,  84.,  79.,  80.,  83.],
        [ 66., 119.,  81.,  69.,  86.,  56.,  70.,  90.,  79.,  66.],
        [ 55.,  75.,  59.,  85., 117.,  81.,  76.,  84.,  87.,  86.],
        [ 64.,  70.,  86.,  79.,  86.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  83.,  48.,  88.,  94., 108.,  77.,  92.,  81.],
        [ 77.,  63.,  72.,  71., 104.,  66.,  62.,  94.,  88., 113.],
        [128.,  68.,  83.,  74.,  62.,  80.,  78.,  83.,  83.,  78.],
        [ 85.,  76.,  95.,  69.,  90.,  77., 120.,  75.,  85.,  58.],
        [ 68.,  71.,  68.,  69., 102.,  76.,  57.,  82.,  67., 125.],
        [111.,  71.,  85.,  79.,  70.,  67.,  76.,  83.,  86.,  75.],
        [ 59., 127.,  75.,  72.,  72.,  71.,  68.,  78.,  80.,  77.],
        [ 79.,  79.,  73.,  87.,  64., 115.,  76.,  72.,  91.,  93.],
        [ 70.,  64.,  63.,  73.,  92.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  92.,  88.,  62.,  69.,  48., 115.,  59.,  84.],
        [ 68.,  83.,  89., 103.,  74.,  82.,  71.,  71.,  86.,  75.],
        [ 67.,  74.,  72.,  70., 123.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.78%



iteration:
  251
    0  1305   bit_w:-1  loss: 0.08089
    1  1245   bit_w:-1  loss: 0.08075
    2  1277   bit_w:-1  loss: 0.08081
    3   837   bit_w: 1  loss: 0.08075
    4  1400   bit_w:-1  loss: 0.08076
    558   3183   2058   4828   3384   4015   1476   3497   3155   3001
     -1      0      0      1      0      1      0      1      0      0
Train accuarcate: 97.63%
tensor([[ 70.,  70.,  76.,  93.,  73.,  75.,  57., 127.,  73.,  73.],
        [ 82.,  92., 129.,  90.,  65.,  85.,  79.,  67.,  89.,  69.],
        [ 66., 115.,  83.,  73.,  80.,  69.,  73.,  82.,  82.,  62.],
        [114.,  73.,  81.,  71.,  67.,  67.,  85.,  82.,  64.,  84.],
        [ 72.,  86.,  70.,  62., 124.,  68.,  84.,  80.,  80.,  83.],
        [ 67., 119.,  81.,  69.,  86.,  56.,  70.,  90.,  79.,  66.],
        [ 55.,  75.,  59.,  86., 117.,  82.,  76.,  85.,  87.,  86.],
        [ 65.,  70.,  86.,  79.,  86.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  83.,  49.,  88.,  95., 108.,  78.,  92.,  81.],
        [ 78.,  63.,  72.,  71., 104.,  66.,  62.,  94.,  88., 113.],
        [129.,  68.,  83.,  74.,  62.,  80.,  78.,  83.,  83.,  78.],
        [ 86.,  76.,  95.,  69.,  90.,  77., 120.,  75.,  85.,  58.],
        [ 69.,  71.,  68.,  69., 102.,  76.,  57.,  82.,  67., 125.],
        [112.,  71.,  85.,  79.,  70.,  67.,  76.,  83.,  86.,  75.],
        [ 59., 127.,  75.,  73.,  72.,  72.,  68.,  79.,  80.,  77.],
        [ 80.,  79.,  73.,  87.,  64., 115.,  76.,  72.,  91.,  93.],
        [ 71.,  64.,  63.,  73.,  92.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  92.,  89.,  62.,  70.,  48., 116.,  59.,  84.],
        [ 68.,  83.,  89., 104.,  74.,  83.,  71.,  72.,  86.,  75.],
        [ 68.,  74.,  72.,  70., 123.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.82%



iteration:
  252
    0  1473   bit_w:-1  loss: 0.08065
    1  1543   bit_w: 1  loss: 0.08059
    2  1410   bit_w: 1  loss: 0.08058
    3   426   bit_w: 1  loss: 0.08049
    4  1120   bit_w:-1  loss: 0.08051
   3385   6565   2669   3181   4677   2917   4138   4455   2046   4334
      0      0     -1      0      0      0      0      0     -1      0
Train accuarcate: 97.64%
tensor([[ 70.,  70.,  76.,  93.,  73.,  75.,  57., 127.,  73.,  73.],
        [ 82.,  92., 129.,  90.,  65.,  85.,  79.,  67.,  89.,  69.],
        [ 66., 115.,  83.,  73.,  80.,  69.,  73.,  82.,  82.,  62.],
        [114.,  73.,  81.,  71.,  67.,  67.,  85.,  82.,  64.,  84.],
        [ 72.,  86.,  70.,  62., 124.,  68.,  84.,  80.,  80.,  83.],
        [ 67., 119.,  81.,  69.,  86.,  56.,  70.,  90.,  79.,  66.],
        [ 55.,  75.,  60.,  86., 117.,  82.,  76.,  85.,  88.,  86.],
        [ 65.,  70.,  86.,  79.,  86.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  83.,  49.,  88.,  95., 108.,  78.,  92.,  81.],
        [ 78.,  63.,  73.,  71., 104.,  66.,  62.,  94.,  89., 113.],
        [129.,  68.,  84.,  74.,  62.,  80.,  78.,  83.,  84.,  78.],
        [ 86.,  76.,  96.,  69.,  90.,  77., 120.,  75.,  86.,  58.],
        [ 69.,  71.,  68.,  69., 102.,  76.,  57.,  82.,  67., 125.],
        [112.,  71.,  85.,  79.,  70.,  67.,  76.,  83.,  86.,  75.],
        [ 59., 127.,  75.,  73.,  72.,  72.,  68.,  79.,  80.,  77.],
        [ 80.,  79.,  73.,  87.,  64., 115.,  76.,  72.,  91.,  93.],
        [ 71.,  64.,  63.,  73.,  92.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  92.,  89.,  62.,  70.,  48., 116.,  59.,  84.],
        [ 68.,  83.,  90., 104.,  74.,  83.,  71.,  72.,  87.,  75.],
        [ 68.,  74.,  72.,  70., 123.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  253
    0  1490   bit_w:-1  loss: 0.08043
    1  1582   bit_w: 1  loss: 0.08035
    2  1161   bit_w: 1  loss: 0.08037
    3  1543   bit_w: 1  loss: 0.08031
    4  1125   bit_w: 1  loss: 0.08035
   5552   4797   4086   4270   5077   4886   4454   6102   4849   5680
     -1     -1      0      0     -1      0     -1      0     -1      0
Train accuarcate: 97.66%
tensor([[ 70.,  70.,  76.,  93.,  73.,  75.,  57., 127.,  73.,  73.],
        [ 82.,  92., 129.,  90.,  65.,  85.,  79.,  67.,  89.,  69.],
        [ 67., 116.,  83.,  73.,  81.,  69.,  74.,  82.,  83.,  62.],
        [114.,  73.,  81.,  71.,  67.,  67.,  85.,  82.,  64.,  84.],
        [ 72.,  86.,  70.,  62., 124.,  68.,  84.,  80.,  80.,  83.],
        [ 68., 120.,  81.,  69.,  87.,  56.,  71.,  90.,  80.,  66.],
        [ 55.,  75.,  60.,  86., 117.,  82.,  76.,  85.,  88.,  86.],
        [ 65.,  70.,  86.,  79.,  86.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  83.,  49.,  88.,  95., 108.,  78.,  92.,  81.],
        [ 78.,  63.,  73.,  71., 104.,  66.,  62.,  94.,  89., 113.],
        [129.,  68.,  84.,  74.,  62.,  80.,  78.,  83.,  84.,  78.],
        [ 87.,  77.,  96.,  69.,  91.,  77., 121.,  75.,  87.,  58.],
        [ 69.,  71.,  68.,  69., 102.,  76.,  57.,  82.,  67., 125.],
        [113.,  72.,  85.,  79.,  71.,  67.,  77.,  83.,  87.,  75.],
        [ 59., 127.,  75.,  73.,  72.,  72.,  68.,  79.,  80.,  77.],
        [ 80.,  79.,  73.,  87.,  64., 115.,  76.,  72.,  91.,  93.],
        [ 71.,  64.,  63.,  73.,  92.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  92.,  89.,  62.,  70.,  48., 116.,  59.,  84.],
        [ 68.,  83.,  90., 104.,  74.,  83.,  71.,  72.,  87.,  75.],
        [ 68.,  74.,  72.,  70., 123.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  254
    0  1507   bit_w:-1  loss: 0.08027
    1  1529   bit_w: 1  loss: 0.08019
    2  1393   bit_w:-1  loss: 0.08021
    3   125   bit_w: 1  loss: 0.08012
    4   709   bit_w:-1  loss: 0.08018
   4070   6294   4509   3966   5163   3122   4966   4811   4634   4998
      0      0      0     -1      0     -1      0      0      0      0
Train accuarcate: 97.65%
tensor([[ 70.,  70.,  76.,  93.,  73.,  75.,  57., 127.,  73.,  73.],
        [ 82.,  92., 129.,  90.,  65.,  85.,  79.,  67.,  89.,  69.],
        [ 67., 116.,  83.,  73.,  81.,  69.,  74.,  82.,  83.,  62.],
        [114.,  73.,  81.,  71.,  67.,  67.,  85.,  82.,  64.,  84.],
        [ 72.,  86.,  70.,  62., 124.,  68.,  84.,  80.,  80.,  83.],
        [ 68., 120.,  81.,  69.,  87.,  56.,  71.,  90.,  80.,  66.],
        [ 55.,  75.,  60.,  86., 117.,  82.,  76.,  85.,  88.,  86.],
        [ 65.,  70.,  86.,  79.,  86.,  77.,  63.,  76.,  78., 121.],
        [ 76.,  77.,  83.,  50.,  88.,  96., 108.,  78.,  92.,  81.],
        [ 78.,  63.,  73.,  72., 104.,  67.,  62.,  94.,  89., 113.],
        [129.,  68.,  84.,  75.,  62.,  81.,  78.,  83.,  84.,  78.],
        [ 87.,  77.,  96.,  69.,  91.,  77., 121.,  75.,  87.,  58.],
        [ 69.,  71.,  68.,  69., 102.,  76.,  57.,  82.,  67., 125.],
        [113.,  72.,  85.,  79.,  71.,  67.,  77.,  83.,  87.,  75.],
        [ 59., 127.,  75.,  73.,  72.,  72.,  68.,  79.,  80.,  77.],
        [ 80.,  79.,  73.,  87.,  64., 115.,  76.,  72.,  91.,  93.],
        [ 71.,  64.,  63.,  73.,  92.,  75.,  67.,  85.,  94., 115.],
        [ 73.,  74.,  92.,  89.,  62.,  70.,  48., 116.,  59.,  84.],
        [ 68.,  83.,  90., 104.,  74.,  83.,  71.,  72.,  87.,  75.],
        [ 68.,  74.,  72.,  70., 123.,  65.,  70.,  86.,  75.,  87.]],
       device='cuda:0')
Train accuarcate: 95.87%



iteration:
  255
    0  1531   bit_w:-1  loss: 0.08011
    1  1285   bit_w: 1  loss: 0.08002
    2  1565   bit_w: 1  loss: 0.08003
    3  1482   bit_w:-1  loss: 0.07994
    4   823   bit_w: 1  loss: 0.07997
   1569   4457   3783   3964   3989   2702   2943   2427   2844   3765
      0     -1      0      0      1      0      0     -1      0      1
Train accuarcate: 97.67%
tensor([[ 70.,  71.,  76.,  93.,  73.,  75.,  57., 128.,  73.,  73.],
        [ 82.,  93., 129.,  90.,  65.,  85.,  79.,  68.,  89.,  69.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  86.,  70.,  62., 125.,  68.,  84.,  80.,  80.,  84.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 55.,  75.,  60.,  86., 118.,  82.,  76.,  85.,  88.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 76.,  77.,  83.,  50.,  89.,  96., 108.,  78.,  92.,  82.],
        [ 78.,  64.,  73.,  72., 104.,  67.,  62.,  95.,  89., 113.],
        [129.,  68.,  84.,  75.,  63.,  81.,  78.,  83.,  84.,  79.],
        [ 87.,  77.,  96.,  69.,  92.,  77., 121.,  75.,  87.,  59.],
        [ 69.,  71.,  68.,  69., 103.,  76.,  57.,  82.,  67., 126.],
        [113.,  73.,  85.,  79.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 80.,  79.,  73.,  87.,  65., 115.,  76.,  72.,  91.,  94.],
        [ 71.,  64.,  63.,  73.,  93.,  75.,  67.,  85.,  94., 116.],
        [ 73.,  75.,  92.,  89.,  62.,  70.,  48., 117.,  59.,  84.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 68.,  74.,  72.,  70., 124.,  65.,  70.,  86.,  75.,  88.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  256
    0  1446   bit_w:-1  loss: 0.07989
    1  1535   bit_w:-1  loss: 0.07982
    2   869   bit_w: 1  loss: 0.07984
    3  1103   bit_w: 1  loss: 0.07974
    4  1548   bit_w: 1  loss: 0.07975
   5528   6701   4652   3666   4210   3157   3980   5495   4652   4691
      0      0      0     -1      0     -1     -1      0     -1      0
Train accuarcate: 97.66%
tensor([[ 70.,  71.,  76.,  93.,  73.,  75.,  57., 128.,  73.,  73.],
        [ 82.,  93., 129.,  90.,  65.,  85.,  79.,  68.,  89.,  69.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  86.,  70.,  63., 125.,  69.,  85.,  80.,  81.,  84.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 55.,  75.,  60.,  87., 118.,  83.,  77.,  85.,  89.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 76.,  77.,  83.,  51.,  89.,  97., 109.,  78.,  93.,  82.],
        [ 78.,  64.,  73.,  72., 104.,  67.,  62.,  95.,  89., 113.],
        [129.,  68.,  84.,  75.,  63.,  81.,  78.,  83.,  84.,  79.],
        [ 87.,  77.,  96.,  69.,  92.,  77., 121.,  75.,  87.,  59.],
        [ 69.,  71.,  68.,  69., 103.,  76.,  57.,  82.,  67., 126.],
        [113.,  73.,  85.,  79.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 80.,  79.,  73.,  88.,  65., 116.,  77.,  72.,  92.,  94.],
        [ 71.,  64.,  63.,  73.,  93.,  75.,  67.,  85.,  94., 116.],
        [ 73.,  75.,  92.,  89.,  62.,  70.,  48., 117.,  59.,  84.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 68.,  74.,  72.,  71., 124.,  66.,  71.,  86.,  76.,  88.]],
       device='cuda:0')
Train accuarcate: 95.89%



iteration:
  257
    0  1521   bit_w:-1  loss: 0.07968
    1  1525   bit_w:-1  loss: 0.07958
    2  1500   bit_w:-1  loss: 0.07960
    3  1558   bit_w: 1  loss: 0.07950
    4  1129   bit_w: 1  loss: 0.07957
   2904   5832   3476   3633   3567   3589   3495   3187   2435   3128
     -1      0     -1      0      0      0      0      0     -1      0
Train accuarcate: 97.65%
tensor([[ 71.,  71.,  77.,  93.,  73.,  75.,  57., 128.,  74.,  73.],
        [ 82.,  93., 129.,  90.,  65.,  85.,  79.,  68.,  89.,  69.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  86.,  70.,  63., 125.,  69.,  85.,  80.,  81.,  84.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  83.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 77.,  77.,  84.,  51.,  89.,  97., 109.,  78.,  94.,  82.],
        [ 79.,  64.,  74.,  72., 104.,  67.,  62.,  95.,  90., 113.],
        [130.,  68.,  85.,  75.,  63.,  81.,  78.,  83.,  85.,  79.],
        [ 88.,  77.,  97.,  69.,  92.,  77., 121.,  75.,  88.,  59.],
        [ 70.,  71.,  69.,  69., 103.,  76.,  57.,  82.,  68., 126.],
        [113.,  73.,  85.,  79.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 81.,  79.,  74.,  88.,  65., 116.,  77.,  72.,  93.,  94.],
        [ 72.,  64.,  64.,  73.,  93.,  75.,  67.,  85.,  95., 116.],
        [ 74.,  75.,  93.,  89.,  62.,  70.,  48., 117.,  60.,  84.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  66.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.87%



iteration:
  258
    0  1570   bit_w:-1  loss: 0.07950
    1  1550   bit_w:-1  loss: 0.07942
    2   131   bit_w:-1  loss: 0.07945
    3   713   bit_w: 1  loss: 0.07935
    4   188   bit_w: 1  loss: 0.07942
   2344    710   1914   1469   1625   2247    676   2119   1812   1846
      0      1      0      0      0      1      0      0      0      1
Train accuarcate: 97.67%
tensor([[ 71.,  72.,  77.,  93.,  73.,  76.,  57., 128.,  74.,  74.],
        [ 82.,  94., 129.,  90.,  65.,  86.,  79.,  68.,  89.,  70.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  87.,  70.,  63., 125.,  70.,  85.,  80.,  81.,  85.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  83.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 77.,  78.,  84.,  51.,  89.,  98., 109.,  78.,  94.,  83.],
        [ 79.,  64.,  74.,  72., 104.,  67.,  62.,  95.,  90., 113.],
        [130.,  69.,  85.,  75.,  63.,  82.,  78.,  83.,  85.,  80.],
        [ 88.,  77.,  97.,  69.,  92.,  77., 121.,  75.,  88.,  59.],
        [ 70.,  72.,  69.,  69., 103.,  77.,  57.,  82.,  68., 127.],
        [113.,  73.,  85.,  79.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 81.,  79.,  74.,  88.,  65., 116.,  77.,  72.,  93.,  94.],
        [ 72.,  64.,  64.,  73.,  93.,  75.,  67.,  85.,  95., 116.],
        [ 74.,  76.,  93.,  89.,  62.,  71.,  48., 117.,  60.,  85.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  66.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  259
    0  1462   bit_w:-1  loss: 0.07933
    1  1299   bit_w:-1  loss: 0.07924
    2   412   bit_w:-1  loss: 0.07920
    3  1022   bit_w:-1  loss: 0.07917
    4   500   bit_w:-1  loss: 0.07916
   3746   6289   5240   4753   3224   4326   1550   5462   5042   5378
      0      0      0     -1     -1      0     -1     -1      0      0
Train accuarcate: 97.67%
tensor([[ 71.,  72.,  77.,  93.,  73.,  76.,  57., 128.,  74.,  74.],
        [ 82.,  94., 129.,  90.,  65.,  86.,  79.,  68.,  89.,  70.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  87.,  70.,  63., 125.,  70.,  85.,  80.,  81.,  85.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  83.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 77.,  78.,  84.,  52.,  90.,  98., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  74.,  73., 105.,  67.,  63.,  96.,  90., 113.],
        [130.,  69.,  85.,  76.,  64.,  82.,  79.,  84.,  85.,  80.],
        [ 88.,  77.,  97.,  70.,  93.,  77., 122.,  76.,  88.,  59.],
        [ 70.,  72.,  69.,  69., 103.,  77.,  57.,  82.,  68., 127.],
        [113.,  73.,  85.,  79.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 81.,  79.,  74.,  88.,  65., 116.,  77.,  72.,  93.,  94.],
        [ 72.,  64.,  64.,  73.,  93.,  75.,  67.,  85.,  95., 116.],
        [ 74.,  76.,  93.,  89.,  62.,  71.,  48., 117.,  60.,  85.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  66.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  260
    0  1530   bit_w:-1  loss: 0.07909
    1  1538   bit_w:-1  loss: 0.07897
    2  1528   bit_w: 1  loss: 0.07897
    3   610   bit_w:-1  loss: 0.07887
    4   123   bit_w: 1  loss: 0.07894
   3685    394   3387   4516    468   1001    683    864   2386    911
      1      0      1      1      0      0      0      0      0      0
Train accuarcate: 97.66%
tensor([[ 71.,  72.,  77.,  93.,  73.,  76.,  57., 128.,  74.,  74.],
        [ 82.,  94., 129.,  90.,  65.,  86.,  79.,  68.,  89.,  70.],
        [ 67., 116.,  83.,  73.,  82.,  69.,  74.,  82.,  83.,  63.],
        [114.,  74.,  81.,  71.,  67.,  67.,  85.,  83.,  64.,  84.],
        [ 72.,  87.,  70.,  63., 125.,  70.,  85.,  80.,  81.,  85.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  83.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 77.,  78.,  84.,  52.,  90.,  98., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  74.,  73., 105.,  67.,  63.,  96.,  90., 113.],
        [131.,  69.,  86.,  77.,  64.,  82.,  79.,  84.,  85.,  80.],
        [ 89.,  77.,  98.,  71.,  93.,  77., 122.,  76.,  88.,  59.],
        [ 70.,  72.,  69.,  69., 103.,  77.,  57.,  82.,  68., 127.],
        [114.,  73.,  86.,  80.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  73.,  72.,  72.,  68.,  80.,  80.,  77.],
        [ 82.,  79.,  75.,  89.,  65., 116.,  77.,  72.,  93.,  94.],
        [ 72.,  64.,  64.,  73.,  93.,  75.,  67.,  85.,  95., 116.],
        [ 74.,  76.,  93.,  89.,  62.,  71.,  48., 117.,  60.,  85.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  66.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  261
    0  1006   bit_w:-1  loss: 0.07885
    1  1485   bit_w:-1  loss: 0.07877
    2  1097   bit_w: 1  loss: 0.07880
    3  1019   bit_w: 1  loss: 0.07872
    4  1179   bit_w: 1  loss: 0.07876
   5624   4282   4276   4348   5190   5199   4196   4790   5079   5203
      0      0      0     -1      0      0     -1     -1     -1      0
Train accuarcate: 97.66%
tensor([[ 71.,  72.,  77.,  93.,  73.,  76.,  57., 128.,  74.,  74.],
        [ 82.,  94., 129.,  90.,  65.,  86.,  79.,  68.,  89.,  70.],
        [ 67., 116.,  83.,  74.,  82.,  69.,  75.,  83.,  84.,  63.],
        [114.,  74.,  81.,  72.,  67.,  67.,  86.,  84.,  65.,  84.],
        [ 72.,  87.,  70.,  63., 125.,  70.,  85.,  80.,  81.,  85.],
        [ 68., 120.,  81.,  69.,  88.,  56.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  83.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  77.,  63.,  77.,  78., 121.],
        [ 77.,  78.,  84.,  52.,  90.,  98., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  74.,  73., 105.,  67.,  63.,  96.,  90., 113.],
        [131.,  69.,  86.,  77.,  64.,  82.,  79.,  84.,  85.,  80.],
        [ 89.,  77.,  98.,  71.,  93.,  77., 122.,  76.,  88.,  59.],
        [ 70.,  72.,  69.,  70., 103.,  77.,  58.,  83.,  69., 127.],
        [114.,  73.,  86.,  80.,  71.,  67.,  77.,  84.,  87.,  75.],
        [ 59., 128.,  75.,  74.,  72.,  72.,  69.,  81.,  81.,  77.],
        [ 82.,  79.,  75.,  89.,  65., 116.,  77.,  72.,  93.,  94.],
        [ 72.,  64.,  64.,  73.,  93.,  75.,  67.,  85.,  95., 116.],
        [ 74.,  76.,  93.,  89.,  62.,  71.,  48., 117.,  60.,  85.],
        [ 68.,  83.,  90., 104.,  75.,  83.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  66.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  262
    0  1006   bit_w:-1  loss: 0.07867
    1  1541   bit_w:-1  loss: 0.07860
    2  1371   bit_w: 1  loss: 0.07864
    3  1432   bit_w: 1  loss: 0.07852
    4   317   bit_w:-1  loss: 0.07856
   1628   5467   4560   4718   3222   3805   3139   4523   3534   3479
     -1      0      0      0     -1      1      0      0      0     -1
Train accuarcate: 97.68%
tensor([[ 71.,  72.,  77.,  93.,  73.,  77.,  57., 128.,  74.,  74.],
        [ 82.,  94., 129.,  90.,  65.,  87.,  79.,  68.,  89.,  70.],
        [ 67., 116.,  83.,  74.,  82.,  70.,  75.,  83.,  84.,  63.],
        [115.,  74.,  81.,  72.,  68.,  67.,  86.,  84.,  65.,  85.],
        [ 73.,  87.,  70.,  63., 126.,  70.,  85.,  80.,  81.,  86.],
        [ 68., 120.,  81.,  69.,  88.,  57.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  61.,  87., 118.,  84.,  77.,  85.,  90.,  87.],
        [ 65.,  71.,  86.,  79.,  86.,  78.,  63.,  77.,  78., 121.],
        [ 77.,  78.,  84.,  52.,  90.,  99., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  74.,  73., 105.,  68.,  63.,  96.,  90., 113.],
        [132.,  69.,  86.,  77.,  65.,  82.,  79.,  84.,  85.,  81.],
        [ 90.,  77.,  98.,  71.,  94.,  77., 122.,  76.,  88.,  60.],
        [ 71.,  72.,  69.,  70., 104.,  77.,  58.,  83.,  69., 128.],
        [115.,  73.,  86.,  80.,  72.,  67.,  77.,  84.,  87.,  76.],
        [ 59., 128.,  75.,  74.,  72.,  73.,  69.,  81.,  81.,  77.],
        [ 83.,  79.,  75.,  89.,  66., 116.,  77.,  72.,  93.,  95.],
        [ 73.,  64.,  64.,  73.,  94.,  75.,  67.,  85.,  95., 117.],
        [ 74.,  76.,  93.,  89.,  62.,  72.,  48., 117.,  60.,  85.],
        [ 68.,  83.,  90., 104.,  75.,  84.,  71.,  72.,  87.,  76.],
        [ 69.,  74.,  73.,  71., 124.,  67.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  263
    0  1451   bit_w:-1  loss: 0.07843
    1   578   bit_w:-1  loss: 0.07835
    2  1082   bit_w:-1  loss: 0.07835
    3  1550   bit_w: 1  loss: 0.07830
    4  1559   bit_w:-1  loss: 0.07831
   2605    989   2240   1311   1185   1296    739   4128   1876   2410
      0     -1      1      0      0      0      0      1      1      0
Train accuarcate: 97.69%
tensor([[ 71.,  72.,  78.,  93.,  73.,  77.,  57., 129.,  75.,  74.],
        [ 82.,  95., 129.,  90.,  65.,  87.,  79.,  68.,  89.,  70.],
        [ 67., 117.,  83.,  74.,  82.,  70.,  75.,  83.,  84.,  63.],
        [115.,  75.,  81.,  72.,  68.,  67.,  86.,  84.,  65.,  85.],
        [ 73.,  88.,  70.,  63., 126.,  70.,  85.,  80.,  81.,  86.],
        [ 68., 121.,  81.,  69.,  88.,  57.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  62.,  87., 118.,  84.,  77.,  86.,  91.,  87.],
        [ 65.,  72.,  86.,  79.,  86.,  78.,  63.,  77.,  78., 121.],
        [ 77.,  79.,  84.,  52.,  90.,  99., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  75.,  73., 105.,  68.,  63.,  97.,  91., 113.],
        [132.,  70.,  86.,  77.,  65.,  82.,  79.,  84.,  85.,  81.],
        [ 90.,  78.,  98.,  71.,  94.,  77., 122.,  76.,  88.,  60.],
        [ 71.,  73.,  69.,  70., 104.,  77.,  58.,  83.,  69., 128.],
        [115.,  74.,  86.,  80.,  72.,  67.,  77.,  84.,  87.,  76.],
        [ 59., 129.,  75.,  74.,  72.,  73.,  69.,  81.,  81.,  77.],
        [ 83.,  79.,  76.,  89.,  66., 116.,  77.,  73.,  94.,  95.],
        [ 73.,  64.,  65.,  73.,  94.,  75.,  67.,  86.,  96., 117.],
        [ 74.,  76.,  94.,  89.,  62.,  72.,  48., 118.,  61.,  85.],
        [ 68.,  83.,  91., 104.,  75.,  84.,  71.,  73.,  88.,  76.],
        [ 69.,  75.,  73.,  71., 124.,  67.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.87%



iteration:
  264
    0  1474   bit_w:-1  loss: 0.07823
    1  1430   bit_w: 1  loss: 0.07815
    2  1091   bit_w: 1  loss: 0.07815
    3  1334   bit_w: 1  loss: 0.07805
    4  1445   bit_w:-1  loss: 0.07811
   5670   5944   5464   2719   4556   3052   5547   4003   4720   3497
      0      0      0     -1      0      0      0      0     -1     -1
Train accuarcate: 97.69%
tensor([[ 71.,  72.,  78.,  93.,  73.,  77.,  57., 129.,  75.,  74.],
        [ 82.,  95., 129.,  90.,  65.,  87.,  79.,  68.,  89.,  70.],
        [ 67., 117.,  83.,  74.,  82.,  70.,  75.,  83.,  84.,  63.],
        [115.,  75.,  81.,  72.,  68.,  67.,  86.,  84.,  65.,  85.],
        [ 73.,  88.,  70.,  63., 126.,  70.,  85.,  80.,  81.,  86.],
        [ 68., 121.,  81.,  69.,  88.,  57.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  62.,  87., 118.,  84.,  77.,  86.,  91.,  87.],
        [ 65.,  72.,  86.,  79.,  86.,  78.,  63.,  77.,  78., 121.],
        [ 77.,  79.,  84.,  52.,  90.,  99., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  75.,  74., 105.,  68.,  63.,  97.,  92., 114.],
        [132.,  70.,  86.,  77.,  65.,  82.,  79.,  84.,  85.,  81.],
        [ 90.,  78.,  98.,  71.,  94.,  77., 122.,  76.,  88.,  60.],
        [ 71.,  73.,  69.,  70., 104.,  77.,  58.,  83.,  69., 128.],
        [115.,  74.,  86.,  80.,  72.,  67.,  77.,  84.,  87.,  76.],
        [ 59., 129.,  75.,  74.,  72.,  73.,  69.,  81.,  81.,  77.],
        [ 83.,  79.,  76.,  89.,  66., 116.,  77.,  73.,  94.,  95.],
        [ 73.,  64.,  65.,  73.,  94.,  75.,  67.,  86.,  96., 117.],
        [ 74.,  76.,  94.,  90.,  62.,  72.,  48., 118.,  62.,  86.],
        [ 68.,  83.,  91., 104.,  75.,  84.,  71.,  73.,  88.,  76.],
        [ 69.,  75.,  73.,  71., 124.,  67.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  265
    0  1402   bit_w:-1  loss: 0.07801
    1  1553   bit_w: 1  loss: 0.07787
    2  1448   bit_w:-1  loss: 0.07789
    3   689   bit_w: 1  loss: 0.07781
    4    99   bit_w:-1  loss: 0.07786
   1189   6307   1785   4794   4774   4422   2229   5486   3472   5411
      0      0     -1      0     -1      0     -1      0      0      0
Train accuarcate: 97.69%
tensor([[ 71.,  72.,  79.,  93.,  74.,  77.,  58., 129.,  75.,  74.],
        [ 82.,  95., 130.,  90.,  66.,  87.,  80.,  68.,  89.,  70.],
        [ 67., 117.,  83.,  74.,  82.,  70.,  75.,  83.,  84.,  63.],
        [115.,  75.,  82.,  72.,  69.,  67.,  87.,  84.,  65.,  85.],
        [ 73.,  88.,  70.,  63., 126.,  70.,  85.,  80.,  81.,  86.],
        [ 68., 121.,  81.,  69.,  88.,  57.,  71.,  90.,  80.,  67.],
        [ 56.,  75.,  62.,  87., 118.,  84.,  77.,  86.,  91.,  87.],
        [ 65.,  72.,  87.,  79.,  87.,  78.,  64.,  77.,  78., 121.],
        [ 77.,  79.,  84.,  52.,  90.,  99., 110.,  79.,  94.,  83.],
        [ 79.,  64.,  75.,  74., 105.,  68.,  63.,  97.,  92., 114.],
        [132.,  70.,  87.,  77.,  66.,  82.,  80.,  84.,  85.,  81.],
        [ 90.,  78.,  99.,  71.,  95.,  77., 123.,  76.,  88.,  60.],
        [ 71.,  73.,  69.,  70., 104.,  77.,  58.,  83.,  69., 128.],
        [115.,  74.,  87.,  80.,  73.,  67.,  78.,  84.,  87.,  76.],
        [ 59., 129.,  75.,  74.,  72.,  73.,  69.,  81.,  81.,  77.],
        [ 83.,  79.,  76.,  89.,  66., 116.,  77.,  73.,  94.,  95.],
        [ 73.,  64.,  65.,  73.,  94.,  75.,  67.,  86.,  96., 117.],
        [ 74.,  76.,  95.,  90.,  63.,  72.,  49., 118.,  62.,  86.],
        [ 68.,  83.,  91., 104.,  75.,  84.,  71.,  73.,  88.,  76.],
        [ 69.,  75.,  73.,  71., 124.,  67.,  71.,  86.,  77.,  88.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  266
    0  1580   bit_w:-1  loss: 0.07778
    1  1479   bit_w:-1  loss: 0.07772
    2  1414   bit_w:-1  loss: 0.07773
    3   234   bit_w: 1  loss: 0.07761
    4   212   bit_w:-1  loss: 0.07767
   2569   1637   3079   1719   4678   2056   1993   5355   3130   2630
      0      0      0      0      1     -1      0      1      1     -1
Train accuarcate: 97.71%
tensor([[ 71.,  72.,  79.,  93.,  75.,  77.,  58., 130.,  76.,  74.],
        [ 82.,  95., 130.,  90.,  66.,  88.,  80.,  68.,  89.,  71.],
        [ 67., 117.,  83.,  74.,  82.,  71.,  75.,  83.,  84.,  64.],
        [115.,  75.,  82.,  72.,  69.,  68.,  87.,  84.,  65.,  86.],
        [ 73.,  88.,  70.,  63., 127.,  70.,  85.,  81.,  82.,  86.],
        [ 68., 121.,  81.,  69.,  88.,  58.,  71.,  90.,  80.,  68.],
        [ 56.,  75.,  62.,  87., 119.,  84.,  77.,  87.,  92.,  87.],
        [ 65.,  72.,  87.,  79.,  88.,  78.,  64.,  78.,  79., 121.],
        [ 77.,  79.,  84.,  52.,  90., 100., 110.,  79.,  94.,  84.],
        [ 79.,  64.,  75.,  74., 105.,  69.,  63.,  97.,  92., 115.],
        [132.,  70.,  87.,  77.,  67.,  82.,  80.,  85.,  86.,  81.],
        [ 90.,  78.,  99.,  71.,  96.,  77., 123.,  77.,  89.,  60.],
        [ 71.,  73.,  69.,  70., 104.,  78.,  58.,  83.,  69., 129.],
        [115.,  74.,  87.,  80.,  74.,  67.,  78.,  85.,  88.,  76.],
        [ 59., 129.,  75.,  74.,  72.,  74.,  69.,  81.,  81.,  78.],
        [ 83.,  79.,  76.,  89.,  67., 116.,  77.,  74.,  95.,  95.],
        [ 73.,  64.,  65.,  73.,  95.,  75.,  67.,  87.,  97., 117.],
        [ 74.,  76.,  95.,  90.,  64.,  72.,  49., 119.,  63.,  86.],
        [ 68.,  83.,  91., 104.,  75.,  85.,  71.,  73.,  88.,  77.],
        [ 69.,  75.,  73.,  71., 125.,  67.,  71.,  87.,  78.,  88.]],
       device='cuda:0')
Train accuarcate: 95.77%



iteration:
  267
    0   996   bit_w:-1  loss: 0.07753
    1  1269   bit_w:-1  loss: 0.07742
    2  1061   bit_w: 1  loss: 0.07748
    3  1073   bit_w:-1  loss: 0.07739
    4  1378   bit_w: 1  loss: 0.07742
    760   2433   4623   4937   4204   1845   2512   4555   3464   4891
     -1      0      0      1      0      0     -1     -1      0      0
Train accuarcate: 97.73%
tensor([[ 72.,  72.,  79.,  93.,  75.,  77.,  59., 131.,  76.,  74.],
        [ 83.,  95., 130.,  90.,  66.,  88.,  81.,  69.,  89.,  71.],
        [ 68., 117.,  83.,  74.,  82.,  71.,  76.,  84.,  84.,  64.],
        [116.,  75.,  82.,  72.,  69.,  68.,  88.,  85.,  65.,  86.],
        [ 74.,  88.,  70.,  63., 127.,  70.,  86.,  82.,  82.,  86.],
        [ 68., 121.,  81.,  70.,  88.,  58.,  71.,  90.,  80.,  68.],
        [ 56.,  75.,  62.,  88., 119.,  84.,  77.,  87.,  92.,  87.],
        [ 65.,  72.,  87.,  80.,  88.,  78.,  64.,  78.,  79., 121.],
        [ 78.,  79.,  84.,  52.,  90., 100., 111.,  80.,  94.,  84.],
        [ 79.,  64.,  75.,  75., 105.,  69.,  63.,  97.,  92., 115.],
        [133.,  70.,  87.,  77.,  67.,  82.,  81.,  86.,  86.,  81.],
        [ 91.,  78.,  99.,  71.,  96.,  77., 124.,  78.,  89.,  60.],
        [ 71.,  73.,  69.,  71., 104.,  78.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  74.,  67.,  79.,  86.,  88.,  76.],
        [ 60., 129.,  75.,  74.,  72.,  74.,  70.,  82.,  81.,  78.],
        [ 83.,  79.,  76.,  90.,  67., 116.,  77.,  74.,  95.,  95.],
        [ 73.,  64.,  65.,  74.,  95.,  75.,  67.,  87.,  97., 117.],
        [ 75.,  76.,  95.,  90.,  64.,  72.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 104.,  75.,  85.,  72.,  74.,  88.,  77.],
        [ 69.,  75.,  73.,  72., 125.,  67.,  71.,  87.,  78.,  88.]],
       device='cuda:0')
Train accuarcate: 95.82%



iteration:
  268
    0  1442   bit_w:-1  loss: 0.07733
    1  1493   bit_w:-1  loss: 0.07718
    2  1430   bit_w: 1  loss: 0.07724
    3   988   bit_w: 1  loss: 0.07707
    4   918   bit_w:-1  loss: 0.07717
    974   3447   3299   1815   2038   2354   2733   1552   2546   1043
      0      1      1      0      0      0      1      0      1      0
Train accuarcate: 97.72%
tensor([[ 72.,  72.,  79.,  93.,  75.,  77.,  59., 131.,  76.,  74.],
        [ 83.,  96., 131.,  90.,  66.,  88.,  82.,  69.,  90.,  71.],
        [ 68., 117.,  83.,  74.,  82.,  71.,  76.,  84.,  84.,  64.],
        [116.,  75.,  82.,  72.,  69.,  68.,  88.,  85.,  65.,  86.],
        [ 74.,  88.,  70.,  63., 127.,  70.,  86.,  82.,  82.,  86.],
        [ 68., 121.,  81.,  70.,  88.,  58.,  71.,  90.,  80.,  68.],
        [ 56.,  75.,  62.,  88., 119.,  84.,  77.,  87.,  92.,  87.],
        [ 65.,  72.,  87.,  80.,  88.,  78.,  64.,  78.,  79., 121.],
        [ 78.,  80.,  85.,  52.,  90., 100., 112.,  80.,  95.,  84.],
        [ 79.,  64.,  75.,  75., 105.,  69.,  63.,  97.,  92., 115.],
        [133.,  70.,  87.,  77.,  67.,  82.,  81.,  86.,  86.,  81.],
        [ 91.,  78.,  99.,  71.,  96.,  77., 124.,  78.,  89.,  60.],
        [ 71.,  73.,  69.,  71., 104.,  78.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  74.,  67.,  79.,  86.,  88.,  76.],
        [ 60., 130.,  76.,  74.,  72.,  74.,  71.,  82.,  82.,  78.],
        [ 83.,  80.,  77.,  90.,  67., 116.,  78.,  74.,  96.,  95.],
        [ 73.,  64.,  65.,  74.,  95.,  75.,  67.,  87.,  97., 117.],
        [ 75.,  76.,  95.,  90.,  64.,  72.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 104.,  75.,  85.,  72.,  74.,  88.,  77.],
        [ 69.,  76.,  74.,  72., 125.,  67.,  72.,  87.,  79.,  88.]],
       device='cuda:0')
Train accuarcate: 95.81%



iteration:
  269
    0  1488   bit_w:-1  loss: 0.07707
    1  1569   bit_w: 1  loss: 0.07697
    2  1254   bit_w: 1  loss: 0.07697
    3  1336   bit_w:-1  loss: 0.07690
    4  1189   bit_w:-1  loss: 0.07691
   1463   3242   1859   3732   3812   2674   2917   3371    998   3275
      1      0      0      0      0      1      0      0      0     -1
Train accuarcate: 97.74%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  96., 131.,  90.,  66.,  89.,  82.,  69.,  90.,  71.],
        [ 69., 117.,  83.,  74.,  82.,  72.,  76.,  84.,  84.,  64.],
        [116.,  75.,  82.,  72.,  69.,  68.,  88.,  85.,  65.,  87.],
        [ 75.,  88.,  70.,  63., 127.,  71.,  86.,  82.,  82.,  86.],
        [ 69., 121.,  81.,  70.,  88.,  59.,  71.,  90.,  80.,  68.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 78.,  80.,  85.,  52.,  90., 100., 112.,  80.,  95.,  85.],
        [ 80.,  64.,  75.,  75., 105.,  70.,  63.,  97.,  92., 115.],
        [133.,  70.,  87.,  77.,  67.,  82.,  81.,  86.,  86.,  82.],
        [ 92.,  78.,  99.,  71.,  96.,  78., 124.,  78.,  89.,  60.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  74.,  67.,  79.,  86.,  88.,  77.],
        [ 61., 130.,  76.,  74.,  72.,  75.,  71.,  82.,  82.,  78.],
        [ 83.,  80.,  77.,  90.,  67., 116.,  78.,  74.,  96.,  96.],
        [ 74.,  64.,  65.,  74.,  95.,  76.,  67.,  87.,  97., 117.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 104.,  75.,  85.,  72.,  74.,  88.,  78.],
        [ 69.,  76.,  74.,  72., 125.,  67.,  72.,  87.,  79.,  89.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  270
    0  1543   bit_w:-1  loss: 0.07685
    1  1581   bit_w:-1  loss: 0.07677
    2  1120   bit_w:-1  loss: 0.07678
    3   714   bit_w: 1  loss: 0.07667
    4   443   bit_w:-1  loss: 0.07674
   3810   6691   5602   4569   4455   3785   4486   5945   3993   5200
      0      0      0     -1     -1     -1      0      0     -1      0
Train accuarcate: 97.73%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  96., 131.,  90.,  66.,  89.,  82.,  69.,  90.,  71.],
        [ 69., 117.,  83.,  74.,  82.,  72.,  76.,  84.,  84.,  64.],
        [116.,  75.,  82.,  72.,  69.,  68.,  88.,  85.,  65.,  87.],
        [ 75.,  88.,  70.,  63., 127.,  71.,  86.,  82.,  82.,  86.],
        [ 69., 121.,  81.,  70.,  88.,  59.,  71.,  90.,  80.,  68.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 78.,  80.,  85.,  53.,  91., 101., 112.,  80.,  96.,  85.],
        [ 80.,  64.,  75.,  75., 105.,  70.,  63.,  97.,  92., 115.],
        [133.,  70.,  87.,  77.,  67.,  82.,  81.,  86.,  86.,  82.],
        [ 92.,  78.,  99.,  71.,  96.,  78., 124.,  78.,  89.,  60.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  74.,  67.,  79.,  86.,  88.,  77.],
        [ 61., 130.,  76.,  74.,  72.,  75.,  71.,  82.,  82.,  78.],
        [ 83.,  80.,  77.,  90.,  67., 116.,  78.,  74.,  96.,  96.],
        [ 74.,  64.,  65.,  74.,  95.,  76.,  67.,  87.,  97., 117.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 105.,  76.,  86.,  72.,  74.,  89.,  78.],
        [ 69.,  76.,  74.,  72., 125.,  67.,  72.,  87.,  79.,  89.]],
       device='cuda:0')
Train accuarcate: 95.87%



iteration:
  271
    0  1111   bit_w:-1  loss: 0.07667
    1  1510   bit_w:-1  loss: 0.07660
    2   688   bit_w:-1  loss: 0.07661
    3  1475   bit_w: 1  loss: 0.07652
    4  1064   bit_w: 1  loss: 0.07657
   5359   4951   5364   5673   4317   4887   5653   3123   4409   3566
      0      0      0      0     -1      0      0     -1      0     -1
Train accuarcate: 97.74%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  96., 131.,  90.,  66.,  89.,  82.,  69.,  90.,  71.],
        [ 69., 117.,  83.,  74.,  83.,  72.,  76.,  85.,  84.,  65.],
        [116.,  75.,  82.,  72.,  70.,  68.,  88.,  86.,  65.,  88.],
        [ 75.,  88.,  70.,  63., 127.,  71.,  86.,  82.,  82.,  86.],
        [ 69., 121.,  81.,  70.,  89.,  59.,  71.,  91.,  80.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 78.,  80.,  85.,  53.,  91., 101., 112.,  80.,  96.,  85.],
        [ 80.,  64.,  75.,  75., 106.,  70.,  63.,  98.,  92., 116.],
        [133.,  70.,  87.,  77.,  67.,  82.,  81.,  86.,  86.,  82.],
        [ 92.,  78.,  99.,  71.,  97.,  78., 124.,  79.,  89.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  67.,  79.,  87.,  88.,  78.],
        [ 61., 130.,  76.,  74.,  72.,  75.,  71.,  82.,  82.,  78.],
        [ 83.,  80.,  77.,  90.,  67., 116.,  78.,  74.,  96.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 105.,  76.,  86.,  72.,  74.,  89.,  78.],
        [ 69.,  76.,  74.,  72., 125.,  67.,  72.,  87.,  79.,  89.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  272
    0  1111   bit_w:-1  loss: 0.07650
    1  1182   bit_w: 1  loss: 0.07644
    2  1503   bit_w: 1  loss: 0.07644
    3   637   bit_w:-1  loss: 0.07638
    4  1425   bit_w:-1  loss: 0.07640
   3846   4857   4072   1324   2468   1814   2499    980   2789   1209
      0      1      1      0      0      0      0      0      1      0
Train accuarcate: 97.74%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  90.,  66.,  89.,  82.,  69.,  91.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [116.,  75.,  82.,  72.,  70.,  68.,  88.,  86.,  65.,  88.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 78.,  81.,  86.,  53.,  91., 101., 112.,  80.,  97.,  85.],
        [ 80.,  65.,  76.,  75., 106.,  70.,  63.,  98.,  93., 116.],
        [133.,  71.,  88.,  77.,  67.,  82.,  81.,  86.,  87.,  82.],
        [ 92.,  79., 100.,  71.,  97.,  78., 124.,  79.,  90.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  67.,  79.,  87.,  88.,  78.],
        [ 61., 131.,  77.,  74.,  72.,  75.,  71.,  82.,  83.,  78.],
        [ 83.,  81.,  78.,  90.,  67., 116.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 105.,  76.,  86.,  72.,  74.,  89.,  78.],
        [ 69.,  77.,  75.,  72., 125.,  67.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.85%



iteration:
  273
    0   888   bit_w:-1  loss: 0.07630
    1   929   bit_w:-1  loss: 0.07623
    2  1441   bit_w:-1  loss: 0.07620
    3  1455   bit_w: 1  loss: 0.07615
    4   276   bit_w:-1  loss: 0.07617
   4244   6602   4712   4612   5135   3298   4640   5688   4003   5059
     -1      0      0     -1      0     -1      0      0      0      0
Train accuarcate: 97.75%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  90.,  66.,  89.,  82.,  69.,  91.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [116.,  75.,  82.,  72.,  70.,  68.,  88.,  86.,  65.,  88.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 78.,  81.,  86.,  53.,  91., 101., 112.,  80.,  97.,  85.],
        [ 80.,  65.,  76.,  75., 106.,  70.,  63.,  98.,  93., 116.],
        [134.,  71.,  88.,  78.,  67.,  83.,  81.,  86.,  87.,  82.],
        [ 92.,  79., 100.,  71.,  97.,  78., 124.,  79.,  90.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  67.,  79.,  87.,  88.,  78.],
        [ 61., 131.,  77.,  74.,  72.,  75.,  71.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  91.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 105.,  76.,  86.,  72.,  74.,  89.,  78.],
        [ 70.,  77.,  75.,  73., 125.,  68.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.85%



iteration:
  274
    0  1411   bit_w:-1  loss: 0.07609
    1  1509   bit_w:-1  loss: 0.07601
    2  1440   bit_w: 1  loss: 0.07606
    3  1058   bit_w:-1  loss: 0.07599
    4  1156   bit_w: 1  loss: 0.07603
   3490   3573   4000   5078   4546   3354   1490   5839   2948   5615
     -1      0      0      0      0      0     -1      0      0      0
Train accuarcate: 97.76%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  90.,  66.,  89.,  82.,  69.,  91.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  82.,  72.,  70.,  68.,  89.,  86.,  65.,  88.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 79.,  81.,  86.,  53.,  91., 101., 113.,  80.,  97.,  85.],
        [ 80.,  65.,  76.,  75., 106.,  70.,  63.,  98.,  93., 116.],
        [135.,  71.,  88.,  78.,  67.,  83.,  82.,  86.,  87.,  82.],
        [ 93.,  79., 100.,  71.,  97.,  78., 125.,  79.,  90.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  67.,  79.,  87.,  88.,  78.],
        [ 62., 131.,  77.,  74.,  72.,  75.,  72.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  91.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 105.,  76.,  86.,  72.,  74.,  89.,  78.],
        [ 70.,  77.,  75.,  73., 125.,  68.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  275
    0  1106   bit_w:-1  loss: 0.07596
    1  1521   bit_w:-1  loss: 0.07592
    2  1522   bit_w:-1  loss: 0.07592
    3  1204   bit_w: 1  loss: 0.07585
    4  1071   bit_w:-1  loss: 0.07582
    665    235   1169   2291    589    685   1458     86    904    159
      0      0      0      1      1      0      0      0      1      0
Train accuarcate: 97.76%
tensor([[ 73.,  72.,  79.,  93.,  75.,  78.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  91.,  67.,  89.,  82.,  69.,  92.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  82.,  72.,  70.,  68.,  89.,  86.,  65.,  88.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  85.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  79.,  64.,  78.,  79., 121.],
        [ 79.,  81.,  86.,  53.,  91., 101., 113.,  80.,  97.,  85.],
        [ 80.,  65.,  76.,  75., 106.,  70.,  63.,  98.,  93., 116.],
        [135.,  71.,  88.,  78.,  67.,  83.,  82.,  86.,  87.,  82.],
        [ 93.,  79., 100.,  71.,  97.,  78., 125.,  79.,  90.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  67.,  79.,  87.,  88.,  78.],
        [ 62., 131.,  77.,  74.,  72.,  75.,  72.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  91.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  73.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 106.,  77.,  86.,  72.,  74.,  90.,  78.],
        [ 70.,  77.,  75.,  73., 125.,  68.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  276
    0  1538   bit_w:-1  loss: 0.07575
    1  1036   bit_w:-1  loss: 0.07567
    2  1294   bit_w: 1  loss: 0.07570
    3   891   bit_w:-1  loss: 0.07559
    4   684   bit_w:-1  loss: 0.07566
   3904   6478   4980   3603   3340   1520   3081   3482   2404   2202
      0      0      0      0      0     -1      0      0      0      0
Train accuarcate: 97.77%
tensor([[ 73.,  72.,  79.,  93.,  75.,  79.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  91.,  67.,  90.,  82.,  69.,  92.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  82.,  72.,  70.,  69.,  89.,  86.,  65.,  88.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  62.,  88., 119.,  86.,  77.,  87.,  92.,  87.],
        [ 66.,  72.,  87.,  80.,  88.,  80.,  64.,  78.,  79., 121.],
        [ 79.,  81.,  86.,  53.,  91., 101., 113.,  80.,  97.,  85.],
        [ 80.,  65.,  76.,  75., 106.,  71.,  63.,  98.,  93., 116.],
        [135.,  71.,  88.,  78.,  67.,  84.,  82.,  86.,  87.,  82.],
        [ 93.,  79., 100.,  71.,  97.,  78., 125.,  79.,  90.,  61.],
        [ 72.,  73.,  69.,  71., 104.,  79.,  58.,  83.,  69., 129.],
        [116.,  74.,  87.,  80.,  75.,  68.,  79.,  87.,  88.,  78.],
        [ 62., 131.,  77.,  74.,  72.,  75.,  72.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  91.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  74.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 106.,  77.,  86.,  72.,  74.,  90.,  78.],
        [ 70.,  77.,  75.,  73., 125.,  69.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.85%



iteration:
  277
    0  1047   bit_w:-1  loss: 0.07560
    1  1303   bit_w: 1  loss: 0.07551
    2   374   bit_w: 1  loss: 0.07548
    3  1435   bit_w:-1  loss: 0.07542
    4  1496   bit_w: 1  loss: 0.07539
   3036     85   1498    925   4132   2265   3011    368   1364   3372
      0      0      1      0      1      0      0      0      0      1
Train accuarcate: 97.78%
tensor([[ 73.,  72.,  79.,  93.,  75.,  79.,  59., 131.,  76.,  74.],
        [ 84.,  97., 132.,  91.,  67.,  90.,  82.,  69.,  92.,  71.],
        [ 69., 118.,  84.,  74.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  83.,  72.,  71.,  69.,  89.,  86.,  65.,  89.],
        [ 75.,  89.,  71.,  63., 127.,  71.,  86.,  82.,  83.,  86.],
        [ 69., 122.,  82.,  70.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  63.,  88., 120.,  86.,  77.,  87.,  92.,  88.],
        [ 66.,  72.,  88.,  80.,  89.,  80.,  64.,  78.,  79., 122.],
        [ 79.,  81.,  86.,  53.,  91., 101., 113.,  80.,  97.,  85.],
        [ 80.,  65.,  77.,  75., 107.,  71.,  63.,  98.,  93., 117.],
        [135.,  71.,  88.,  78.,  67.,  84.,  82.,  86.,  87.,  82.],
        [ 93.,  79., 101.,  71.,  98.,  78., 125.,  79.,  90.,  62.],
        [ 72.,  73.,  70.,  71., 105.,  79.,  58.,  83.,  69., 130.],
        [116.,  74.,  88.,  80.,  76.,  68.,  79.,  87.,  88.,  79.],
        [ 62., 131.,  77.,  74.,  72.,  75.,  72.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  91.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  74.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  90.,  64.,  74.,  50., 120.,  63.,  86.],
        [ 69.,  83.,  91., 106.,  77.,  86.,  72.,  74.,  90.,  78.],
        [ 70.,  77.,  75.,  73., 125.,  69.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.85%



iteration:
  278
    0  1517   bit_w:-1  loss: 0.07532
    1   985   bit_w:-1  loss: 0.07526
    2  1354   bit_w:-1  loss: 0.07526
    3  1556   bit_w: 1  loss: 0.07517
    4   368   bit_w:-1  loss: 0.07517
   1940   6205   3643   5536   4896   4177   3072   5384   4377   5432
     -1     -1      0      1      0      0     -1     -1     -1      0
Train accuarcate: 97.77%
tensor([[ 73.,  72.,  79.,  94.,  75.,  79.,  59., 131.,  76.,  74.],
        [ 85.,  98., 132.,  91.,  67.,  90.,  83.,  70.,  93.,  71.],
        [ 69., 118.,  84.,  75.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  83.,  73.,  71.,  69.,  89.,  86.,  65.,  89.],
        [ 76.,  90.,  71.,  63., 127.,  71.,  87.,  83.,  84.,  86.],
        [ 69., 122.,  82.,  71.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  63.,  89., 120.,  86.,  77.,  87.,  92.,  88.],
        [ 66.,  72.,  88.,  81.,  89.,  80.,  64.,  78.,  79., 122.],
        [ 80.,  82.,  86.,  53.,  91., 101., 114.,  81.,  98.,  85.],
        [ 80.,  65.,  77.,  76., 107.,  71.,  63.,  98.,  93., 117.],
        [136.,  72.,  88.,  78.,  67.,  84.,  83.,  87.,  88.,  82.],
        [ 94.,  80., 101.,  71.,  98.,  78., 126.,  80.,  91.,  62.],
        [ 72.,  73.,  70.,  72., 105.,  79.,  58.,  83.,  69., 130.],
        [117.,  75.,  88.,  80.,  76.,  68.,  80.,  88.,  89.,  79.],
        [ 62., 131.,  77.,  75.,  72.,  75.,  72.,  82.,  83.,  78.],
        [ 84.,  81.,  78.,  92.,  67., 117.,  78.,  74.,  97.,  96.],
        [ 74.,  64.,  65.,  75.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  95.,  91.,  64.,  74.,  50., 120.,  63.,  86.],
        [ 70.,  84.,  91., 106.,  77.,  86.,  73.,  75.,  91.,  78.],
        [ 70.,  77.,  75.,  74., 125.,  69.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.83%



iteration:
  279
    0  1577   bit_w:-1  loss: 0.07509
    1  1349   bit_w: 1  loss: 0.07497
    2  1525   bit_w: 1  loss: 0.07499
    3   485   bit_w: 1  loss: 0.07491
    4   349   bit_w:-1  loss: 0.07492
   4311   4228   5324   3148   4671   1959   4154   4376   3294   4338
      0      0      1      0     -1     -1      0     -1     -1      0
Train accuarcate: 97.77%
tensor([[ 73.,  72.,  80.,  94.,  75.,  79.,  59., 131.,  76.,  74.],
        [ 85.,  98., 132.,  91.,  68.,  91.,  83.,  71.,  94.,  71.],
        [ 69., 118.,  85.,  75.,  83.,  72.,  76.,  85.,  85.,  65.],
        [117.,  75.,  84.,  73.,  71.,  69.,  89.,  86.,  65.,  89.],
        [ 76.,  90.,  72.,  63., 127.,  71.,  87.,  83.,  84.,  86.],
        [ 69., 122.,  83.,  71.,  89.,  59.,  71.,  91.,  81.,  69.],
        [ 57.,  75.,  64.,  89., 120.,  86.,  77.,  87.,  92.,  88.],
        [ 66.,  72.,  89.,  81.,  89.,  80.,  64.,  78.,  79., 122.],
        [ 80.,  82.,  87.,  53.,  91., 101., 114.,  81.,  98.,  85.],
        [ 80.,  65.,  77.,  76., 108.,  72.,  63.,  99.,  94., 117.],
        [136.,  72.,  89.,  78.,  67.,  84.,  83.,  87.,  88.,  82.],
        [ 94.,  80., 102.,  71.,  98.,  78., 126.,  80.,  91.,  62.],
        [ 72.,  73.,  71.,  72., 105.,  79.,  58.,  83.,  69., 130.],
        [117.,  75.,  89.,  80.,  76.,  68.,  80.,  88.,  89.,  79.],
        [ 62., 131.,  77.,  75.,  73.,  76.,  72.,  83.,  84.,  78.],
        [ 84.,  81.,  78.,  92.,  68., 118.,  78.,  75.,  98.,  96.],
        [ 74.,  64.,  66.,  75.,  96.,  76.,  67.,  88.,  97., 118.],
        [ 76.,  76.,  96.,  91.,  64.,  74.,  50., 120.,  63.,  86.],
        [ 70.,  84.,  92., 106.,  77.,  86.,  73.,  75.,  91.,  78.],
        [ 70.,  77.,  76.,  74., 125.,  69.,  72.,  87.,  80.,  89.]],
       device='cuda:0')
Train accuarcate: 95.84%



iteration:
  280
    0  1312   bit_w:-1  loss: 0.07481
    1  1345   bit_w:-1  loss: 0.07469
    2  1037   bit_w:-1  loss: 0.07471
    3   973   bit_w:-1  loss: 0.07464
    4  1409   bit_w: 1  loss: 0.07461
    910   4201   4340   5010    736   1982   1855   4087   1156    680
      0      1      0      0      0      0     -1      1      0     -1
Train accuarcate: 97.80%
tensor([[ 73.,  73.,  80.,  94.,  75.,  79.,  59., 132.,  76.,  74.],
        [ 85.,  99., 132.,  91.,  68.,  91.,  83.,  72.,  94.,  71.],
        [ 69., 119.,  85.,  75.,  83.,  72.,  76.,  86.,  85.,  65.],
        [117.,  75.,  84.,  73.,  71.,  69.,  90.,  86.,  65.,  90.],
        [ 76.,  91.,  72.,  63., 127.,  71.,  87.,  84.,  84.,  86.],
        [ 69., 123.,  83.,  71.,  89.,  59.,  71.,  92.,  81.,  69.],
        [ 57.,  76.,  64.,  89., 120.,  86.,  77.,  88.,  92.,  88.],
        [ 66.,  72.,  89.,  81.,  89.,  80.,  65.,  78.,  79., 123.],
        [ 80.,  82.,  87.,  53.,  91., 101., 115.,  81.,  98.,  86.],
        [ 80.,  66.,  77.,  76., 108.,  72.,  63., 100.,  94., 117.],
        [136.,  72.,  89.,  78.,  67.,  84.,  84.,  87.,  88.,  83.],
        [ 94.,  81., 102.,  71.,  98.,  78., 126.,  81.,  91.,  62.],
        [ 72.,  73.,  71.,  72., 105.,  79.,  59.,  83.,  69., 131.],
        [117.,  75.,  89.,  80.,  76.,  68.,  81.,  88.,  89.,  80.],
        [ 62., 131.,  77.,  75.,  73.,  76.,  73.,  83.,  84.,  79.],
        [ 84.,  82.,  78.,  92.,  68., 118.,  78.,  76.,  98.,  96.],
        [ 74.,  64.,  66.,  75.,  96.,  76.,  68.,  88.,  97., 119.],
        [ 76.,  77.,  96.,  91.,  64.,  74.,  50., 121.,  63.,  86.],
        [ 70.,  85.,  92., 106.,  77.,  86.,  73.,  76.,  91.,  78.],
        [ 70.,  77.,  76.,  74., 125.,  69.,  73.,  87.,  80.,  90.]],
       device='cuda:0')
Train accuarcate: 95.83%



iteration:
  281
    0  1471   bit_w:-1  loss: 0.07449
    1  1536   bit_w:-1  loss: 0.07440
    2  1514   bit_w:-1  loss: 0.07443
    3  1349   bit_w:-1  loss: 0.07434
    4  1369   bit_w:-1  loss: 0.07434
   1552   3678   2367   1658   4151   1751   1426   5345   2028   4698
     -1      0      0      0      1     -1      1      0      1      0
Train accuarcate: 97.80%
tensor([[ 73.,  73.,  80.,  94.,  76.,  79.,  60., 132.,  77.,  74.],
        [ 86.,  99., 132.,  91.,  68.,  92.,  83.,  72.,  94.,  71.],
        [ 69., 119.,  85.,  75.,  84.,  72.,  77.,  86.,  86.,  65.],
        [118.,  75.,  84.,  73.,  71.,  70.,  90.,  86.,  65.,  90.],
        [ 77.,  91.,  72.,  63., 127.,  72.,  87.,  84.,  84.,  86.],
        [ 70., 123.,  83.,  71.,  89.,  60.,  71.,  92.,  81.,  69.],
        [ 57.,  76.,  64.,  89., 121.,  86.,  78.,  88.,  93.,  88.],
        [ 67.,  72.,  89.,  81.,  89.,  81.,  65.,  78.,  79., 123.],
        [ 80.,  82.,  87.,  53.,  92., 101., 116.,  81.,  99.,  86.],
        [ 80.,  66.,  77.,  76., 109.,  72.,  64., 100.,  95., 117.],
        [137.,  72.,  89.,  78.,  67.,  85.,  84.,  87.,  88.,  83.],
        [ 95.,  81., 102.,  71.,  98.,  79., 126.,  81.,  91.,  62.],
        [ 72.,  73.,  71.,  72., 106.,  79.,  60.,  83.,  70., 131.],
        [118.,  75.,  89.,  80.,  76.,  69.,  81.,  88.,  89.,  80.],
        [ 62., 131.,  77.,  75.,  74.,  76.,  74.,  83.,  85.,  79.],
        [ 84.,  82.,  78.,  92.,  69., 118.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  66.,  75.,  97.,  76.,  69.,  88.,  98., 119.],
        [ 76.,  77.,  96.,  91.,  65.,  74.,  51., 121.,  64.,  86.],
        [ 71.,  85.,  92., 106.,  77.,  87.,  73.,  76.,  91.,  78.],
        [ 70.,  77.,  76.,  74., 126.,  69.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.80%



iteration:
  282
    0  1477   bit_w:-1  loss: 0.07424
    1   834   bit_w:-1  loss: 0.07417
    2  1377   bit_w:-1  loss: 0.07413
    3   460   bit_w: 1  loss: 0.07411
    4   710   bit_w:-1  loss: 0.07409
   2704   6692   5026   2878   5686   3230   4757   5414   5544   5613
      0      0      0     -1      0      0      0      0      0     -1
Train accuarcate: 97.81%
tensor([[ 73.,  73.,  80.,  94.,  76.,  79.,  60., 132.,  77.,  74.],
        [ 86.,  99., 132.,  91.,  68.,  92.,  83.,  72.,  94.,  71.],
        [ 69., 119.,  85.,  75.,  84.,  72.,  77.,  86.,  86.,  65.],
        [118.,  75.,  84.,  74.,  71.,  70.,  90.,  86.,  65.,  91.],
        [ 77.,  91.,  72.,  63., 127.,  72.,  87.,  84.,  84.,  86.],
        [ 70., 123.,  83.,  71.,  89.,  60.,  71.,  92.,  81.,  69.],
        [ 57.,  76.,  64.,  89., 121.,  86.,  78.,  88.,  93.,  88.],
        [ 67.,  72.,  89.,  81.,  89.,  81.,  65.,  78.,  79., 123.],
        [ 80.,  82.,  87.,  53.,  92., 101., 116.,  81.,  99.,  86.],
        [ 80.,  66.,  77.,  76., 109.,  72.,  64., 100.,  95., 117.],
        [137.,  72.,  89.,  79.,  67.,  85.,  84.,  87.,  88.,  84.],
        [ 95.,  81., 102.,  71.,  98.,  79., 126.,  81.,  91.,  62.],
        [ 72.,  73.,  71.,  72., 106.,  79.,  60.,  83.,  70., 131.],
        [118.,  75.,  89.,  80.,  76.,  69.,  81.,  88.,  89.,  80.],
        [ 62., 131.,  77.,  75.,  74.,  76.,  74.,  83.,  85.,  79.],
        [ 84.,  82.,  78.,  92.,  69., 118.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  66.,  75.,  97.,  76.,  69.,  88.,  98., 119.],
        [ 76.,  77.,  96.,  92.,  65.,  74.,  51., 121.,  64.,  87.],
        [ 71.,  85.,  92., 107.,  77.,  87.,  73.,  76.,  91.,  79.],
        [ 70.,  77.,  76.,  74., 126.,  69.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.80%



iteration:
  283
    0  1492   bit_w:-1  loss: 0.07400
    1  1303   bit_w: 1  loss: 0.07388
    2    98   bit_w:-1  loss: 0.07383
    3  1076   bit_w:-1  loss: 0.07384
    4   256   bit_w:-1  loss: 0.07376
   5800   4991   3445   4360   5233   4780   4608   4462   4254   5055
      0      1      1     -1      0      0      0     -1     -1      0
Train accuarcate: 97.84%
tensor([[ 73.,  74.,  81.,  94.,  76.,  79.,  60., 132.,  77.,  74.],
        [ 86.,  99., 132.,  92.,  68.,  92.,  83.,  73.,  95.,  71.],
        [ 69., 119.,  85.,  76.,  84.,  72.,  77.,  87.,  87.,  65.],
        [118.,  76.,  85.,  74.,  71.,  70.,  90.,  86.,  65.,  91.],
        [ 77.,  91.,  72.,  64., 127.,  72.,  87.,  85.,  85.,  86.],
        [ 70., 123.,  83.,  72.,  89.,  60.,  71.,  93.,  82.,  69.],
        [ 57.,  76.,  64.,  90., 121.,  86.,  78.,  89.,  94.,  88.],
        [ 67.,  73.,  90.,  81.,  89.,  81.,  65.,  78.,  79., 123.],
        [ 80.,  83.,  88.,  53.,  92., 101., 116.,  81.,  99.,  86.],
        [ 80.,  67.,  78.,  76., 109.,  72.,  64., 100.,  95., 117.],
        [137.,  73.,  90.,  79.,  67.,  85.,  84.,  87.,  88.,  84.],
        [ 95.,  82., 103.,  71.,  98.,  79., 126.,  81.,  91.,  62.],
        [ 72.,  74.,  72.,  72., 106.,  79.,  60.,  83.,  70., 131.],
        [118.,  76.,  90.,  80.,  76.,  69.,  81.,  88.,  89.,  80.],
        [ 62., 132.,  78.,  75.,  74.,  76.,  74.,  83.,  85.,  79.],
        [ 84.,  83.,  79.,  92.,  69., 118.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  66.,  76.,  97.,  76.,  69.,  89.,  99., 119.],
        [ 76.,  77.,  96.,  93.,  65.,  74.,  51., 122.,  65.,  87.],
        [ 71.,  85.,  92., 108.,  77.,  87.,  73.,  77.,  92.,  79.],
        [ 70.,  78.,  77.,  74., 126.,  69.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  284
    0  1551   bit_w:-1  loss: 0.07370
    1  1571   bit_w:-1  loss: 0.07364
    2   357   bit_w: 1  loss: 0.07363
    3   918   bit_w: 1  loss: 0.07356
    4  1031   bit_w: 1  loss: 0.07358
   3036   1442   1000   1977    646    638   3009    927    774   1428
      1      0      0      1      0      0      0      0      0      1
Train accuarcate: 97.83%
tensor([[ 73.,  74.,  81.,  94.,  76.,  79.,  60., 132.,  77.,  74.],
        [ 86.,  99., 132.,  92.,  68.,  92.,  83.,  73.,  95.,  71.],
        [ 69., 119.,  85.,  76.,  84.,  72.,  77.,  87.,  87.,  65.],
        [119.,  76.,  85.,  75.,  71.,  70.,  90.,  86.,  65.,  92.],
        [ 77.,  91.,  72.,  64., 127.,  72.,  87.,  85.,  85.,  86.],
        [ 71., 123.,  83.,  73.,  89.,  60.,  71.,  93.,  82.,  70.],
        [ 57.,  76.,  64.,  90., 121.,  86.,  78.,  89.,  94.,  88.],
        [ 67.,  73.,  90.,  81.,  89.,  81.,  65.,  78.,  79., 123.],
        [ 80.,  83.,  88.,  53.,  92., 101., 116.,  81.,  99.,  86.],
        [ 81.,  67.,  78.,  77., 109.,  72.,  64., 100.,  95., 118.],
        [138.,  73.,  90.,  80.,  67.,  85.,  84.,  87.,  88.,  85.],
        [ 96.,  82., 103.,  72.,  98.,  79., 126.,  81.,  91.,  63.],
        [ 72.,  74.,  72.,  72., 106.,  79.,  60.,  83.,  70., 131.],
        [119.,  76.,  90.,  81.,  76.,  69.,  81.,  88.,  89.,  81.],
        [ 62., 132.,  78.,  75.,  74.,  76.,  74.,  83.,  85.,  79.],
        [ 84.,  83.,  79.,  92.,  69., 118.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  66.,  76.,  97.,  76.,  69.,  89.,  99., 119.],
        [ 76.,  77.,  96.,  93.,  65.,  74.,  51., 122.,  65.,  87.],
        [ 71.,  85.,  92., 108.,  77.,  87.,  73.,  77.,  92.,  79.],
        [ 70.,  78.,  77.,  74., 126.,  69.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  285
    0  1335   bit_w:-1  loss: 0.07351
    1   796   bit_w:-1  loss: 0.07340
    2  1042   bit_w: 1  loss: 0.07345
    3  1296   bit_w:-1  loss: 0.07340
    4  1193   bit_w:-1  loss: 0.07342
   3432   3252   3833   1387   4918   3119   4602   4265   3789   4468
      0      0      0      0      1      1     -1     -1      0      0
Train accuarcate: 97.86%
tensor([[ 73.,  74.,  81.,  94.,  77.,  80.,  60., 132.,  77.,  74.],
        [ 86.,  99., 132.,  92.,  69.,  93.,  83.,  73.,  95.,  71.],
        [ 69., 119.,  85.,  76.,  85.,  73.,  77.,  87.,  87.,  65.],
        [119.,  76.,  85.,  75.,  72.,  71.,  90.,  86.,  65.,  92.],
        [ 77.,  91.,  72.,  64., 128.,  73.,  87.,  85.,  85.,  86.],
        [ 71., 123.,  83.,  73.,  89.,  60.,  72.,  94.,  82.,  70.],
        [ 57.,  76.,  64.,  90., 122.,  87.,  78.,  89.,  94.,  88.],
        [ 67.,  73.,  90.,  81.,  90.,  82.,  65.,  78.,  79., 123.],
        [ 80.,  83.,  88.,  53.,  92., 101., 117.,  82.,  99.,  86.],
        [ 81.,  67.,  78.,  77., 110.,  73.,  64., 100.,  95., 118.],
        [138.,  73.,  90.,  80.,  68.,  86.,  84.,  87.,  88.,  85.],
        [ 96.,  82., 103.,  72.,  99.,  80., 126.,  81.,  91.,  63.],
        [ 72.,  74.,  72.,  72., 107.,  80.,  60.,  83.,  70., 131.],
        [119.,  76.,  90.,  81.,  77.,  70.,  81.,  88.,  89.,  81.],
        [ 62., 132.,  78.,  75.,  74.,  76.,  75.,  84.,  85.,  79.],
        [ 84.,  83.,  79.,  92.,  70., 119.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  66.,  76.,  98.,  77.,  69.,  89.,  99., 119.],
        [ 76.,  77.,  96.,  93.,  66.,  75.,  51., 122.,  65.,  87.],
        [ 71.,  85.,  92., 108.,  78.,  88.,  73.,  77.,  92.,  79.],
        [ 70.,  78.,  77.,  74., 127.,  70.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.86%



iteration:
  286
    0  1516   bit_w:-1  loss: 0.07332
    1  1480   bit_w:-1  loss: 0.07325
    2   543   bit_w: 1  loss: 0.07319
    3   527   bit_w:-1  loss: 0.07313
    4   687   bit_w: 1  loss: 0.07313
   1003   2826   2846   2199   1953   2390   3522   1086   3880   1772
      0     -1      1      0      0      0      1      0      1      1
Train accuarcate: 97.87%
tensor([[ 73.,  75.,  81.,  94.,  77.,  80.,  60., 132.,  77.,  74.],
        [ 86., 100., 132.,  92.,  69.,  93.,  83.,  73.,  95.,  71.],
        [ 69., 120.,  85.,  76.,  85.,  73.,  77.,  87.,  87.,  65.],
        [119.,  77.,  85.,  75.,  72.,  71.,  90.,  86.,  65.,  92.],
        [ 77.,  92.,  72.,  64., 128.,  73.,  87.,  85.,  85.,  86.],
        [ 71., 124.,  83.,  73.,  89.,  60.,  72.,  94.,  82.,  70.],
        [ 57.,  77.,  64.,  90., 122.,  87.,  78.,  89.,  94.,  88.],
        [ 67.,  74.,  90.,  81.,  90.,  82.,  65.,  78.,  79., 123.],
        [ 80.,  83.,  89.,  53.,  92., 101., 118.,  82., 100.,  87.],
        [ 81.,  68.,  78.,  77., 110.,  73.,  64., 100.,  95., 118.],
        [138.,  74.,  90.,  80.,  68.,  86.,  84.,  87.,  88.,  85.],
        [ 96.,  83., 103.,  72.,  99.,  80., 126.,  81.,  91.,  63.],
        [ 72.,  75.,  72.,  72., 107.,  80.,  60.,  83.,  70., 131.],
        [119.,  76.,  91.,  81.,  77.,  70.,  82.,  88.,  90.,  82.],
        [ 62., 133.,  78.,  75.,  74.,  76.,  75.,  84.,  85.,  79.],
        [ 84.,  84.,  79.,  92.,  70., 119.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  67.,  76.,  98.,  77.,  70.,  89., 100., 120.],
        [ 76.,  78.,  96.,  93.,  66.,  75.,  51., 122.,  65.,  87.],
        [ 71.,  86.,  92., 108.,  78.,  88.,  73.,  77.,  92.,  79.],
        [ 70.,  79.,  77.,  74., 127.,  70.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  287
    0  1358   bit_w:-1  loss: 0.07304
    1  1303   bit_w: 1  loss: 0.07295
    2   877   bit_w: 1  loss: 0.07300
    3   941   bit_w: 1  loss: 0.07288
    4   245   bit_w:-1  loss: 0.07297
   4504   5481   3940   2729   4724   3046   4989   4540   2506   5210
      0      0      0     -1      0      0      0      0     -1      0
Train accuarcate: 97.87%
tensor([[ 73.,  75.,  81.,  95.,  77.,  80.,  60., 132.,  78.,  74.],
        [ 86., 100., 132.,  93.,  69.,  93.,  83.,  73.,  96.,  71.],
        [ 69., 120.,  85.,  76.,  85.,  73.,  77.,  87.,  87.,  65.],
        [119.,  77.,  85.,  75.,  72.,  71.,  90.,  86.,  65.,  92.],
        [ 77.,  92.,  72.,  64., 128.,  73.,  87.,  85.,  85.,  86.],
        [ 71., 124.,  83.,  73.,  89.,  60.,  72.,  94.,  82.,  70.],
        [ 57.,  77.,  64.,  91., 122.,  87.,  78.,  89.,  95.,  88.],
        [ 67.,  74.,  90.,  81.,  90.,  82.,  65.,  78.,  79., 123.],
        [ 80.,  83.,  89.,  53.,  92., 101., 118.,  82., 100.,  87.],
        [ 81.,  68.,  78.,  77., 110.,  73.,  64., 100.,  95., 118.],
        [138.,  74.,  90.,  81.,  68.,  86.,  84.,  87.,  89.,  85.],
        [ 96.,  83., 103.,  73.,  99.,  80., 126.,  81.,  92.,  63.],
        [ 72.,  75.,  72.,  72., 107.,  80.,  60.,  83.,  70., 131.],
        [119.,  76.,  91.,  81.,  77.,  70.,  82.,  88.,  90.,  82.],
        [ 62., 133.,  78.,  75.,  74.,  76.,  75.,  84.,  85.,  79.],
        [ 84.,  84.,  79.,  92.,  70., 119.,  79.,  76.,  99.,  96.],
        [ 74.,  64.,  67.,  76.,  98.,  77.,  70.,  89., 100., 120.],
        [ 76.,  78.,  96.,  94.,  66.,  75.,  51., 122.,  66.,  87.],
        [ 71.,  86.,  92., 108.,  78.,  88.,  73.,  77.,  92.,  79.],
        [ 70.,  79.,  77.,  74., 127.,  70.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.85%



iteration:
  288
    0  1452   bit_w:-1  loss: 0.07289
    1   524   bit_w: 1  loss: 0.07283
    2  1495   bit_w:-1  loss: 0.07284
    3  1140   bit_w: 1  loss: 0.07278
    4   923   bit_w: 1  loss: 0.07280
   1673     37   2642   2405   1187    976   2228   2102    801    317
     -1      0      1      0      1      0      0      1      0      0
Train accuarcate: 97.87%
tensor([[ 73.,  75.,  82.,  95.,  78.,  80.,  60., 133.,  78.,  74.],
        [ 86., 100., 133.,  93.,  70.,  93.,  83.,  74.,  96.,  71.],
        [ 70., 120.,  85.,  76.,  85.,  73.,  77.,  87.,  87.,  65.],
        [119.,  77.,  86.,  75.,  73.,  71.,  90.,  87.,  65.,  92.],
        [ 78.,  92.,  72.,  64., 128.,  73.,  87.,  85.,  85.,  86.],
        [ 72., 124.,  83.,  73.,  89.,  60.,  72.,  94.,  82.,  70.],
        [ 58.,  77.,  64.,  91., 122.,  87.,  78.,  89.,  95.,  88.],
        [ 68.,  74.,  90.,  81.,  90.,  82.,  65.,  78.,  79., 123.],
        [ 81.,  83.,  89.,  53.,  92., 101., 118.,  82., 100.,  87.],
        [ 82.,  68.,  78.,  77., 110.,  73.,  64., 100.,  95., 118.],
        [138.,  74.,  91.,  81.,  69.,  86.,  84.,  88.,  89.,  85.],
        [ 97.,  83., 103.,  73.,  99.,  80., 126.,  81.,  92.,  63.],
        [ 73.,  75.,  72.,  72., 107.,  80.,  60.,  83.,  70., 131.],
        [120.,  76.,  91.,  81.,  77.,  70.,  82.,  88.,  90.,  82.],
        [ 63., 133.,  78.,  75.,  74.,  76.,  75.,  84.,  85.,  79.],
        [ 85.,  84.,  79.,  92.,  70., 119.,  79.,  76.,  99.,  96.],
        [ 75.,  64.,  67.,  76.,  98.,  77.,  70.,  89., 100., 120.],
        [ 76.,  78.,  97.,  94.,  67.,  75.,  51., 123.,  66.,  87.],
        [ 72.,  86.,  92., 108.,  78.,  88.,  73.,  77.,  92.,  79.],
        [ 71.,  79.,  77.,  74., 127.,  70.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  289
    0  1510   bit_w:-1  loss: 0.07273
    1  1078   bit_w:-1  loss: 0.07269
    2  1104   bit_w: 1  loss: 0.07267
    3   929   bit_w:-1  loss: 0.07259
    4  1067   bit_w: 1  loss: 0.07261
   5147   6619   5277   5528   4373   4514   5408   2818   5127   3914
      0      0      0     -1      0      0      0     -1      0     -1
Train accuarcate: 97.88%
tensor([[ 73.,  75.,  82.,  95.,  78.,  80.,  60., 133.,  78.,  74.],
        [ 86., 100., 133.,  93.,  70.,  93.,  83.,  74.,  96.,  71.],
        [ 70., 120.,  85.,  76.,  85.,  73.,  77.,  87.,  87.,  65.],
        [119.,  77.,  86.,  75.,  73.,  71.,  90.,  87.,  65.,  92.],
        [ 78.,  92.,  72.,  65., 128.,  73.,  87.,  86.,  85.,  87.],
        [ 72., 124.,  83.,  73.,  89.,  60.,  72.,  94.,  82.,  70.],
        [ 58.,  77.,  64.,  92., 122.,  87.,  78.,  90.,  95.,  89.],
        [ 68.,  74.,  90.,  82.,  90.,  82.,  65.,  79.,  79., 124.],
        [ 81.,  83.,  89.,  54.,  92., 101., 118.,  83., 100.,  88.],
        [ 82.,  68.,  78.,  78., 110.,  73.,  64., 101.,  95., 119.],
        [138.,  74.,  91.,  81.,  69.,  86.,  84.,  88.,  89.,  85.],
        [ 97.,  83., 103.,  74.,  99.,  80., 126.,  82.,  92.,  64.],
        [ 73.,  75.,  72.,  72., 107.,  80.,  60.,  83.,  70., 131.],
        [120.,  76.,  91.,  82.,  77.,  70.,  82.,  89.,  90.,  83.],
        [ 63., 133.,  78.,  75.,  74.,  76.,  75.,  84.,  85.,  79.],
        [ 85.,  84.,  79.,  93.,  70., 119.,  79.,  77.,  99.,  97.],
        [ 75.,  64.,  67.,  77.,  98.,  77.,  70.,  90., 100., 121.],
        [ 76.,  78.,  97.,  94.,  67.,  75.,  51., 123.,  66.,  87.],
        [ 72.,  86.,  92., 108.,  78.,  88.,  73.,  77.,  92.,  79.],
        [ 71.,  79.,  77.,  74., 127.,  70.,  74.,  87.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.89%



iteration:
  290
    0  1395   bit_w:-1  loss: 0.07254
    1  1565   bit_w: 1  loss: 0.07245
    2  1408   bit_w:-1  loss: 0.07247
    3  1485   bit_w: 1  loss: 0.07240
    4   793   bit_w:-1  loss: 0.07244
   1126   1688   1534   4506   3044   1840    708   1497   3241   3418
      0      0      0      1      0     -1     -1      1      0      0
Train accuarcate: 97.88%
tensor([[ 73.,  75.,  82.,  95.,  78.,  81.,  61., 133.,  78.,  74.],
        [ 86., 100., 133.,  93.,  70.,  94.,  84.,  74.,  96.,  71.],
        [ 70., 120.,  85.,  77.,  85.,  73.,  77.,  88.,  87.,  65.],
        [119.,  77.,  86.,  75.,  73.,  72.,  91.,  87.,  65.,  92.],
        [ 78.,  92.,  72.,  65., 128.,  74.,  88.,  86.,  85.,  87.],
        [ 72., 124.,  83.,  73.,  89.,  61.,  73.,  94.,  82.,  70.],
        [ 58.,  77.,  64.,  92., 122.,  88.,  79.,  90.,  95.,  89.],
        [ 68.,  74.,  90.,  83.,  90.,  82.,  65.,  80.,  79., 124.],
        [ 81.,  83.,  89.,  54.,  92., 102., 119.,  83., 100.,  88.],
        [ 82.,  68.,  78.,  78., 110.,  74.,  65., 101.,  95., 119.],
        [138.,  74.,  91.,  81.,  69.,  87.,  85.,  88.,  89.,  85.],
        [ 97.,  83., 103.,  75.,  99.,  80., 126.,  83.,  92.,  64.],
        [ 73.,  75.,  72.,  73., 107.,  80.,  60.,  84.,  70., 131.],
        [120.,  76.,  91.,  82.,  77.,  71.,  83.,  89.,  90.,  83.],
        [ 63., 133.,  78.,  75.,  74.,  77.,  76.,  84.,  85.,  79.],
        [ 85.,  84.,  79.,  93.,  70., 120.,  80.,  77.,  99.,  97.],
        [ 75.,  64.,  67.,  77.,  98.,  78.,  71.,  90., 100., 121.],
        [ 76.,  78.,  97.,  94.,  67.,  76.,  52., 123.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  78.,  88.,  73.,  78.,  92.,  79.],
        [ 71.,  79.,  77.,  75., 127.,  70.,  74.,  88.,  81.,  90.]],
       device='cuda:0')
Train accuarcate: 95.87%



iteration:
  291
    0  1294   bit_w:-1  loss: 0.07235
    1  1465   bit_w:-1  loss: 0.07223
    2  1253   bit_w:-1  loss: 0.07221
    3  1560   bit_w: 1  loss: 0.07215
    4  1372   bit_w: 1  loss: 0.07210
    946   1391   2230   4248   3165   3211   2898   1085   3146   3543
      0     -1     -1      0     -1      0      0      0      1      1
Train accuarcate: 97.90%
tensor([[ 73.,  76.,  83.,  95.,  79.,  81.,  61., 133.,  78.,  74.],
        [ 86., 100., 133.,  93.,  70.,  94.,  84.,  74.,  97.,  72.],
        [ 70., 121.,  86.,  77.,  86.,  73.,  77.,  88.,  87.,  65.],
        [119.,  78.,  87.,  75.,  74.,  72.,  91.,  87.,  65.,  92.],
        [ 78.,  93.,  73.,  65., 129.,  74.,  88.,  86.,  85.,  87.],
        [ 72., 125.,  84.,  73.,  90.,  61.,  73.,  94.,  82.,  70.],
        [ 58.,  77.,  64.,  92., 122.,  88.,  79.,  90.,  96.,  90.],
        [ 68.,  74.,  90.,  83.,  90.,  82.,  65.,  80.,  80., 125.],
        [ 81.,  84.,  90.,  54.,  93., 102., 119.,  83., 100.,  88.],
        [ 82.,  68.,  78.,  78., 110.,  74.,  65., 101.,  96., 120.],
        [138.,  75.,  92.,  81.,  70.,  87.,  85.,  88.,  89.,  85.],
        [ 97.,  83., 103.,  75.,  99.,  80., 126.,  83.,  93.,  65.],
        [ 73.,  76.,  73.,  73., 108.,  80.,  60.,  84.,  70., 131.],
        [120.,  77.,  92.,  82.,  78.,  71.,  83.,  89.,  90.,  83.],
        [ 63., 134.,  79.,  75.,  75.,  77.,  76.,  84.,  85.,  79.],
        [ 85.,  85.,  80.,  93.,  71., 120.,  80.,  77.,  99.,  97.],
        [ 75.,  65.,  68.,  77.,  99.,  78.,  71.,  90., 100., 121.],
        [ 76.,  79.,  98.,  94.,  68.,  76.,  52., 123.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  78.,  88.,  73.,  78.,  93.,  80.],
        [ 71.,  79.,  77.,  75., 127.,  70.,  74.,  88.,  82.,  91.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  292
    0  1452   bit_w:-1  loss: 0.07203
    1   125   bit_w: 1  loss: 0.07198
    2  1152   bit_w: 1  loss: 0.07197
    3  1529   bit_w: 1  loss: 0.07186
    4   538   bit_w:-1  loss: 0.07194
   2316   6703   3786   3744   5146   2990   5138   6175   4632   5716
     -1      0      0     -1      0     -1      0      0      0      0
Train accuarcate: 97.91%
tensor([[ 73.,  76.,  83.,  95.,  79.,  81.,  61., 133.,  78.,  74.],
        [ 86., 100., 133.,  93.,  70.,  94.,  84.,  74.,  97.,  72.],
        [ 70., 121.,  86.,  77.,  86.,  73.,  77.,  88.,  87.,  65.],
        [119.,  78.,  87.,  75.,  74.,  72.,  91.,  87.,  65.,  92.],
        [ 78.,  93.,  73.,  65., 129.,  74.,  88.,  86.,  85.,  87.],
        [ 72., 125.,  84.,  73.,  90.,  61.,  73.,  94.,  82.,  70.],
        [ 58.,  77.,  64.,  92., 122.,  88.,  79.,  90.,  96.,  90.],
        [ 68.,  74.,  90.,  83.,  90.,  82.,  65.,  80.,  80., 125.],
        [ 81.,  84.,  90.,  54.,  93., 102., 119.,  83., 100.,  88.],
        [ 82.,  68.,  78.,  78., 110.,  74.,  65., 101.,  96., 120.],
        [139.,  75.,  92.,  82.,  70.,  88.,  85.,  88.,  89.,  85.],
        [ 97.,  83., 103.,  75.,  99.,  80., 126.,  83.,  93.,  65.],
        [ 73.,  76.,  73.,  73., 108.,  80.,  60.,  84.,  70., 131.],
        [121.,  77.,  92.,  83.,  78.,  72.,  83.,  89.,  90.,  83.],
        [ 63., 134.,  79.,  75.,  75.,  77.,  76.,  84.,  85.,  79.],
        [ 85.,  85.,  80.,  93.,  71., 120.,  80.,  77.,  99.,  97.],
        [ 75.,  65.,  68.,  77.,  99.,  78.,  71.,  90., 100., 121.],
        [ 76.,  79.,  98.,  94.,  68.,  76.,  52., 123.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  78.,  88.,  73.,  78.,  93.,  80.],
        [ 71.,  79.,  77.,  75., 127.,  70.,  74.,  88.,  82.,  91.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  293
    0  1549   bit_w:-1  loss: 0.07188
    1  1567   bit_w: 1  loss: 0.07179
    2  1170   bit_w: 1  loss: 0.07183
    3  1119   bit_w:-1  loss: 0.07174
    4   845   bit_w: 1  loss: 0.07179
   4296   3240   3166   1190   5125   1729   3700   5370   1946   4210
      1      0      0      0      0     -1      0      0     -1      0
Train accuarcate: 97.89%
tensor([[ 73.,  76.,  83.,  95.,  79.,  82.,  61., 133.,  79.,  74.],
        [ 86., 100., 133.,  93.,  70.,  95.,  84.,  74.,  98.,  72.],
        [ 70., 121.,  86.,  77.,  86.,  74.,  77.,  88.,  88.,  65.],
        [120.,  78.,  87.,  75.,  74.,  72.,  91.,  87.,  65.,  92.],
        [ 79.,  93.,  73.,  65., 129.,  74.,  88.,  86.,  85.,  87.],
        [ 73., 125.,  84.,  73.,  90.,  61.,  73.,  94.,  82.,  70.],
        [ 59.,  77.,  64.,  92., 122.,  88.,  79.,  90.,  96.,  90.],
        [ 69.,  74.,  90.,  83.,  90.,  82.,  65.,  80.,  80., 125.],
        [ 82.,  84.,  90.,  54.,  93., 102., 119.,  83., 100.,  88.],
        [ 82.,  68.,  78.,  78., 110.,  75.,  65., 101.,  97., 120.],
        [139.,  75.,  92.,  82.,  70.,  89.,  85.,  88.,  90.,  85.],
        [ 98.,  83., 103.,  75.,  99.,  80., 126.,  83.,  93.,  65.],
        [ 74.,  76.,  73.,  73., 108.,  80.,  60.,  84.,  70., 131.],
        [122.,  77.,  92.,  83.,  78.,  72.,  83.,  89.,  90.,  83.],
        [ 64., 134.,  79.,  75.,  75.,  77.,  76.,  84.,  85.,  79.],
        [ 85.,  85.,  80.,  93.,  71., 121.,  80.,  77., 100.,  97.],
        [ 76.,  65.,  68.,  77.,  99.,  78.,  71.,  90., 100., 121.],
        [ 77.,  79.,  98.,  94.,  68.,  76.,  52., 123.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  78.,  89.,  73.,  78.,  94.,  80.],
        [ 72.,  79.,  77.,  75., 127.,  70.,  74.,  88.,  82.,  91.]],
       device='cuda:0')
Train accuarcate: 95.89%



iteration:
  294
    0  1280   bit_w:-1  loss: 0.07171
    1   833   bit_w:-1  loss: 0.07158
    2  1139   bit_w:-1  loss: 0.07163
    3  1409   bit_w: 1  loss: 0.07150
    4  1371   bit_w: 1  loss: 0.07151
   2630   4304   4529   3217   2092   1994   2462   5217   1779   3693
      0      0      1      1     -1      0     -1     -1      0      1
Train accuarcate: 97.92%
tensor([[ 73.,  76.,  83.,  95.,  80.,  82.,  62., 134.,  79.,  74.],
        [ 86., 100., 134.,  94.,  70.,  95.,  84.,  74.,  98.,  73.],
        [ 70., 121.,  87.,  78.,  86.,  74.,  77.,  88.,  88.,  66.],
        [120.,  78.,  88.,  76.,  74.,  72.,  91.,  87.,  65.,  93.],
        [ 79.,  93.,  74.,  66., 129.,  74.,  88.,  86.,  85.,  88.],
        [ 73., 125.,  85.,  74.,  90.,  61.,  73.,  94.,  82.,  71.],
        [ 59.,  77.,  64.,  92., 123.,  88.,  80.,  91.,  96.,  90.],
        [ 69.,  74.,  90.,  83.,  91.,  82.,  66.,  81.,  80., 125.],
        [ 82.,  84.,  91.,  55.,  93., 102., 119.,  83., 100.,  89.],
        [ 82.,  68.,  79.,  79., 110.,  75.,  65., 101.,  97., 121.],
        [139.,  75.,  93.,  83.,  70.,  89.,  85.,  88.,  90.,  86.],
        [ 98.,  83., 104.,  76.,  99.,  80., 126.,  83.,  93.,  66.],
        [ 74.,  76.,  73.,  73., 109.,  80.,  61.,  85.,  70., 131.],
        [122.,  77.,  92.,  83.,  79.,  72.,  84.,  90.,  90.,  83.],
        [ 64., 134.,  80.,  76.,  75.,  77.,  76.,  84.,  85.,  80.],
        [ 85.,  85.,  80.,  93.,  72., 121.,  81.,  78., 100.,  97.],
        [ 76.,  65.,  69.,  78.,  99.,  78.,  71.,  90., 100., 122.],
        [ 77.,  79.,  98.,  94.,  69.,  76.,  53., 124.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  79.,  89.,  74.,  79.,  94.,  80.],
        [ 72.,  79.,  78.,  76., 127.,  70.,  74.,  88.,  82.,  92.]],
       device='cuda:0')
Train accuarcate: 95.92%



iteration:
  295
    0  1476   bit_w:-1  loss: 0.07144
    1   941   bit_w:-1  loss: 0.07136
    2   712   bit_w:-1  loss: 0.07132
    3   650   bit_w: 1  loss: 0.07131
    4   125   bit_w:-1  loss: 0.07130
   4190   5653   3067   4726   4714   4681   4475   2680   5423   4061
      0     -1      0      0     -1      0      0     -1      0      0
Train accuarcate: 97.93%
tensor([[ 73.,  77.,  83.,  95.,  81.,  82.,  62., 135.,  79.,  74.],
        [ 86., 101., 134.,  94.,  71.,  95.,  84.,  75.,  98.,  73.],
        [ 70., 121.,  87.,  78.,  86.,  74.,  77.,  88.,  88.,  66.],
        [120.,  79.,  88.,  76.,  75.,  72.,  91.,  88.,  65.,  93.],
        [ 79.,  94.,  74.,  66., 130.,  74.,  88.,  87.,  85.,  88.],
        [ 73., 125.,  85.,  74.,  90.,  61.,  73.,  94.,  82.,  71.],
        [ 59.,  77.,  64.,  92., 123.,  88.,  80.,  91.,  96.,  90.],
        [ 69.,  74.,  90.,  83.,  91.,  82.,  66.,  81.,  80., 125.],
        [ 82.,  84.,  91.,  55.,  93., 102., 119.,  83., 100.,  89.],
        [ 82.,  68.,  79.,  79., 110.,  75.,  65., 101.,  97., 121.],
        [139.,  75.,  93.,  83.,  70.,  89.,  85.,  88.,  90.,  86.],
        [ 98.,  83., 104.,  76.,  99.,  80., 126.,  83.,  93.,  66.],
        [ 74.,  77.,  73.,  73., 110.,  80.,  61.,  86.,  70., 131.],
        [122.,  78.,  92.,  83.,  80.,  72.,  84.,  91.,  90.,  83.],
        [ 64., 134.,  80.,  76.,  75.,  77.,  76.,  84.,  85.,  80.],
        [ 85.,  86.,  80.,  93.,  73., 121.,  81.,  79., 100.,  97.],
        [ 76.,  66.,  69.,  78., 100.,  78.,  71.,  91., 100., 122.],
        [ 77.,  80.,  98.,  94.,  70.,  76.,  53., 125.,  66.,  87.],
        [ 72.,  86.,  92., 109.,  79.,  89.,  74.,  79.,  94.,  80.],
        [ 72.,  79.,  78.,  76., 127.,  70.,  74.,  88.,  82.,  92.]],
       device='cuda:0')
Train accuarcate: 95.91%



iteration:
  296
    0  1076   bit_w:-1  loss: 0.07124
    1  1353   bit_w:-1  loss: 0.07116
    2  1060   bit_w:-1  loss: 0.07118
    3  1485   bit_w:-1  loss: 0.07113
    4  1340   bit_w:-1  loss: 0.07114
   2999   3899   1941   3159   2130   2050   2833   1265   2459   2248
      0      1      0      0      0      0      0      0      1     -1
Train accuarcate: 97.93%
tensor([[ 73.,  77.,  83.,  95.,  81.,  82.,  62., 135.,  79.,  75.],
        [ 86., 102., 134.,  94.,  71.,  95.,  84.,  75.,  99.,  73.],
        [ 70., 121.,  87.,  78.,  86.,  74.,  77.,  88.,  88.,  67.],
        [120.,  79.,  88.,  76.,  75.,  72.,  91.,  88.,  65.,  94.],
        [ 79.,  94.,  74.,  66., 130.,  74.,  88.,  87.,  85.,  89.],
        [ 73., 126.,  85.,  74.,  90.,  61.,  73.,  94.,  83.,  71.],
        [ 59.,  77.,  64.,  92., 123.,  88.,  80.,  91.,  96.,  91.],
        [ 69.,  74.,  90.,  83.,  91.,  82.,  66.,  81.,  80., 126.],
        [ 82.,  84.,  91.,  55.,  93., 102., 119.,  83., 100.,  90.],
        [ 82.,  68.,  79.,  79., 110.,  75.,  65., 101.,  97., 122.],
        [139.,  75.,  93.,  83.,  70.,  89.,  85.,  88.,  90.,  87.],
        [ 98.,  83., 104.,  76.,  99.,  80., 126.,  83.,  93.,  67.],
        [ 74.,  78.,  73.,  73., 110.,  80.,  61.,  86.,  71., 131.],
        [122.,  78.,  92.,  83.,  80.,  72.,  84.,  91.,  90.,  84.],
        [ 64., 135.,  80.,  76.,  75.,  77.,  76.,  84.,  86.,  80.],
        [ 85.,  86.,  80.,  93.,  73., 121.,  81.,  79., 100.,  98.],
        [ 76.,  66.,  69.,  78., 100.,  78.,  71.,  91., 100., 123.],
        [ 77.,  80.,  98.,  94.,  70.,  76.,  53., 125.,  66.,  88.],
        [ 72.,  87.,  92., 109.,  79.,  89.,  74.,  79.,  95.,  80.],
        [ 72.,  79.,  78.,  76., 127.,  70.,  74.,  88.,  82.,  93.]],
       device='cuda:0')
Train accuarcate: 95.93%



iteration:
  297
    0  1387   bit_w:-1  loss: 0.07105
    1   895   bit_w:-1  loss: 0.07090
    2  1392   bit_w: 1  loss: 0.07097
    3  1448   bit_w:-1  loss: 0.07083
    4   692   bit_w: 1  loss: 0.07092
    908   1957   1414   1043   3155   3488   4602    714   1090   1722
      0      0      0      0      1      1      1      0      0      0
Train accuarcate: 97.94%
tensor([[ 73.,  77.,  83.,  95.,  81.,  82.,  62., 135.,  79.,  75.],
        [ 86., 102., 134.,  94.,  72.,  96.,  85.,  75.,  99.,  73.],
        [ 70., 121.,  87.,  78.,  86.,  74.,  77.,  88.,  88.,  67.],
        [120.,  79.,  88.,  76.,  75.,  72.,  91.,  88.,  65.,  94.],
        [ 79.,  94.,  74.,  66., 130.,  74.,  88.,  87.,  85.,  89.],
        [ 73., 126.,  85.,  74.,  91.,  62.,  74.,  94.,  83.,  71.],
        [ 59.,  77.,  64.,  92., 123.,  88.,  80.,  91.,  96.,  91.],
        [ 69.,  74.,  90.,  83.,  92.,  83.,  67.,  81.,  80., 126.],
        [ 82.,  84.,  91.,  55.,  94., 103., 120.,  83., 100.,  90.],
        [ 82.,  68.,  79.,  79., 110.,  75.,  65., 101.,  97., 122.],
        [139.,  75.,  93.,  83.,  70.,  89.,  85.,  88.,  90.,  87.],
        [ 98.,  83., 104.,  76., 100.,  81., 127.,  83.,  93.,  67.],
        [ 74.,  78.,  73.,  73., 110.,  80.,  61.,  86.,  71., 131.],
        [122.,  78.,  92.,  83.,  80.,  72.,  84.,  91.,  90.,  84.],
        [ 64., 135.,  80.,  76.,  75.,  77.,  76.,  84.,  86.,  80.],
        [ 85.,  86.,  80.,  93.,  73., 121.,  81.,  79., 100.,  98.],
        [ 76.,  66.,  69.,  78., 100.,  78.,  71.,  91., 100., 123.],
        [ 77.,  80.,  98.,  94.,  70.,  76.,  53., 125.,  66.,  88.],
        [ 72.,  87.,  92., 109.,  80.,  90.,  75.,  79.,  95.,  80.],
        [ 72.,  79.,  78.,  76., 128.,  71.,  75.,  88.,  82.,  93.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  298
    0  1283   bit_w:-1  loss: 0.07083
    1   429   bit_w:-1  loss: 0.07074
    2  1368   bit_w: 1  loss: 0.07077
    3  1416   bit_w:-1  loss: 0.07070
    4  1385   bit_w: 1  loss: 0.07072
    984   1414   2919   3827   2931   2999   2680   5544   3855   4405
     -1      0      0      1      0      0      0      1      0      0
Train accuarcate: 97.95%
tensor([[ 73.,  77.,  83.,  96.,  81.,  82.,  62., 136.,  79.,  75.],
        [ 86., 102., 134.,  95.,  72.,  96.,  85.,  76.,  99.,  73.],
        [ 71., 121.,  87.,  78.,  86.,  74.,  77.,  88.,  88.,  67.],
        [121.,  79.,  88.,  76.,  75.,  72.,  91.,  88.,  65.,  94.],
        [ 80.,  94.,  74.,  66., 130.,  74.,  88.,  87.,  85.,  89.],
        [ 74., 126.,  85.,  74.,  91.,  62.,  74.,  94.,  83.,  71.],
        [ 59.,  77.,  64.,  93., 123.,  88.,  80.,  92.,  96.,  91.],
        [ 70.,  74.,  90.,  83.,  92.,  83.,  67.,  81.,  80., 126.],
        [ 83.,  84.,  91.,  55.,  94., 103., 120.,  83., 100.,  90.],
        [ 82.,  68.,  79.,  80., 110.,  75.,  65., 102.,  97., 122.],
        [140.,  75.,  93.,  83.,  70.,  89.,  85.,  88.,  90.,  87.],
        [ 99.,  83., 104.,  76., 100.,  81., 127.,  83.,  93.,  67.],
        [ 75.,  78.,  73.,  73., 110.,  80.,  61.,  86.,  71., 131.],
        [123.,  78.,  92.,  83.,  80.,  72.,  84.,  91.,  90.,  84.],
        [ 64., 135.,  80.,  77.,  75.,  77.,  76.,  85.,  86.,  80.],
        [ 85.,  86.,  80.,  94.,  73., 121.,  81.,  80., 100.,  98.],
        [ 76.,  66.,  69.,  79., 100.,  78.,  71.,  92., 100., 123.],
        [ 77.,  80.,  98.,  95.,  70.,  76.,  53., 126.,  66.,  88.],
        [ 72.,  87.,  92., 110.,  80.,  90.,  75.,  80.,  95.,  80.],
        [ 73.,  79.,  78.,  76., 128.,  71.,  75.,  88.,  82.,  93.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  299
    0  1535   bit_w:-1  loss: 0.07063
    1   926   bit_w:-1  loss: 0.07054
    2  1294   bit_w: 1  loss: 0.07055
    3  1213   bit_w: 1  loss: 0.07048
    4   300   bit_w:-1  loss: 0.07049
   4209   4829   5347   4167   3368   1783   3867   4786   2727   3447
      0      0      1      0      0     -1     -1      0      0      0
Train accuarcate: 97.97%
tensor([[ 73.,  77.,  84.,  96.,  81.,  82.,  62., 136.,  79.,  75.],
        [ 86., 102., 135.,  95.,  72.,  96.,  85.,  76.,  99.,  73.],
        [ 71., 121.,  88.,  78.,  86.,  74.,  77.,  88.,  88.,  67.],
        [121.,  79.,  89.,  76.,  75.,  72.,  91.,  88.,  65.,  94.],
        [ 80.,  94.,  75.,  66., 130.,  74.,  88.,  87.,  85.,  89.],
        [ 74., 126.,  86.,  74.,  91.,  62.,  74.,  94.,  83.,  71.],
        [ 59.,  77.,  64.,  93., 123.,  89.,  81.,  92.,  96.,  91.],
        [ 70.,  74.,  90.,  83.,  92.,  84.,  68.,  81.,  80., 126.],
        [ 83.,  84.,  92.,  55.,  94., 103., 120.,  83., 100.,  90.],
        [ 82.,  68.,  79.,  80., 110.,  76.,  66., 102.,  97., 122.],
        [140.,  75.,  94.,  83.,  70.,  89.,  85.,  88.,  90.,  87.],
        [ 99.,  83., 104.,  76., 100.,  82., 128.,  83.,  93.,  67.],
        [ 75.,  78.,  73.,  73., 110.,  81.,  62.,  86.,  71., 131.],
        [123.,  78.,  92.,  83.,  80.,  73.,  85.,  91.,  90.,  84.],
        [ 64., 135.,  81.,  77.,  75.,  77.,  76.,  85.,  86.,  80.],
        [ 85.,  86.,  80.,  94.,  73., 122.,  82.,  80., 100.,  98.],
        [ 76.,  66.,  70.,  79., 100.,  78.,  71.,  92., 100., 123.],
        [ 77.,  80.,  99.,  95.,  70.,  76.,  53., 126.,  66.,  88.],
        [ 72.,  87.,  92., 110.,  80.,  91.,  76.,  80.,  95.,  80.],
        [ 73.,  79.,  78.,  76., 128.,  72.,  76.,  88.,  82.,  93.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  300
    0   788   bit_w:-1  loss: 0.07041
    1  1291   bit_w: 1  loss: 0.07030
    2  1386   bit_w: 1  loss: 0.07028
    3   874   bit_w:-1  loss: 0.07025
    4  1092   bit_w: 1  loss: 0.07023
   1719   2766   3543   1831   3559   1526   3774   3590   3449   2342
      0     -1      0      0      1      0      0      0      1     -1
Train accuarcate: 97.98%
tensor([[ 73.,  78.,  84.,  96.,  81.,  82.,  62., 136.,  79.,  76.],
        [ 86., 103., 135.,  95.,  72.,  96.,  85.,  76.,  99.,  74.],
        [ 71., 122.,  88.,  78.,  86.,  74.,  77.,  88.,  88.,  68.],
        [121.,  80.,  89.,  76.,  75.,  72.,  91.,  88.,  65.,  95.],
        [ 80.,  94.,  75.,  66., 131.,  74.,  88.,  87.,  86.,  89.],
        [ 74., 126.,  86.,  74.,  92.,  62.,  74.,  94.,  84.,  71.],
        [ 59.,  77.,  64.,  93., 124.,  89.,  81.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  83.,  92.,  84.,  68.,  81.,  80., 127.],
        [ 83.,  85.,  92.,  55.,  94., 103., 120.,  83., 100.,  91.],
        [ 82.,  69.,  79.,  80., 110.,  76.,  66., 102.,  97., 123.],
        [140.,  76.,  94.,  83.,  70.,  89.,  85.,  88.,  90.,  88.],
        [ 99.,  84., 104.,  76., 100.,  82., 128.,  83.,  93.,  68.],
        [ 75.,  78.,  73.,  73., 111.,  81.,  62.,  86.,  72., 131.],
        [123.,  79.,  92.,  83.,  80.,  73.,  85.,  91.,  90.,  85.],
        [ 64., 135.,  81.,  77.,  76.,  77.,  76.,  85.,  87.,  80.],
        [ 85.,  87.,  80.,  94.,  73., 122.,  82.,  80., 100.,  99.],
        [ 76.,  66.,  70.,  79., 101.,  78.,  71.,  92., 101., 123.],
        [ 77.,  80.,  99.,  95.,  71.,  76.,  53., 126.,  67.,  88.],
        [ 72.,  88.,  92., 110.,  80.,  91.,  76.,  80.,  95.,  81.],
        [ 73.,  79.,  78.,  76., 129.,  72.,  76.,  88.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  301
    0  1505   bit_w:-1  loss: 0.07016
    1  1448   bit_w: 1  loss: 0.07009
    2  1449   bit_w:-1  loss: 0.07011
    3  1544   bit_w:-1  loss: 0.06999
    4  1573   bit_w:-1  loss: 0.07005
   4216   6061   4416   3480   5047   1590   3254   2876   3626   3028
      0      0      0     -1      0     -1      0     -1      0      0
Train accuarcate: 98.00%
tensor([[ 73.,  78.,  84.,  97.,  81.,  83.,  62., 137.,  79.,  76.],
        [ 86., 103., 135.,  96.,  72.,  97.,  85.,  77.,  99.,  74.],
        [ 71., 122.,  88.,  78.,  86.,  74.,  77.,  88.,  88.,  68.],
        [121.,  80.,  89.,  77.,  75.,  73.,  91.,  89.,  65.,  95.],
        [ 80.,  94.,  75.,  66., 131.,  74.,  88.,  87.,  86.,  89.],
        [ 74., 126.,  86.,  74.,  92.,  62.,  74.,  94.,  84.,  71.],
        [ 59.,  77.,  64.,  93., 124.,  89.,  81.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  84.,  92.,  85.,  68.,  82.,  80., 127.],
        [ 83.,  85.,  92.,  56.,  94., 104., 120.,  84., 100.,  91.],
        [ 82.,  69.,  79.,  80., 110.,  76.,  66., 102.,  97., 123.],
        [140.,  76.,  94.,  84.,  70.,  90.,  85.,  89.,  90.,  88.],
        [ 99.,  84., 104.,  76., 100.,  82., 128.,  83.,  93.,  68.],
        [ 75.,  78.,  73.,  73., 111.,  81.,  62.,  86.,  72., 131.],
        [123.,  79.,  92.,  84.,  80.,  74.,  85.,  92.,  90.,  85.],
        [ 64., 135.,  81.,  77.,  76.,  77.,  76.,  85.,  87.,  80.],
        [ 85.,  87.,  80.,  94.,  73., 122.,  82.,  80., 100.,  99.],
        [ 76.,  66.,  70.,  79., 101.,  78.,  71.,  92., 101., 123.],
        [ 77.,  80.,  99.,  96.,  71.,  77.,  53., 127.,  67.,  88.],
        [ 72.,  88.,  92., 111.,  80.,  92.,  76.,  81.,  95.,  81.],
        [ 73.,  79.,  78.,  77., 129.,  73.,  76.,  89.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  302
    0  1469   bit_w:-1  loss: 0.06997
    1  1555   bit_w:-1  loss: 0.06985
    2   983   bit_w:-1  loss: 0.06989
    3   958   bit_w: 1  loss: 0.06980
    4  1001   bit_w:-1  loss: 0.06988
   1459   1493   1782    545   2072    377   3068   1094   2885   1722
      0      1      0      1      0      0      1      0      1      0
Train accuarcate: 98.00%
tensor([[ 73.,  78.,  84.,  97.,  81.,  83.,  62., 137.,  79.,  76.],
        [ 86., 103., 135.,  96.,  72.,  97.,  85.,  77.,  99.,  74.],
        [ 71., 122.,  88.,  78.,  86.,  74.,  77.,  88.,  88.,  68.],
        [121.,  81.,  89.,  78.,  75.,  73.,  92.,  89.,  66.,  95.],
        [ 80.,  94.,  75.,  66., 131.,  74.,  88.,  87.,  86.,  89.],
        [ 74., 126.,  86.,  74.,  92.,  62.,  74.,  94.,  84.,  71.],
        [ 59.,  77.,  64.,  93., 124.,  89.,  81.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  84.,  92.,  85.,  68.,  82.,  80., 127.],
        [ 83.,  85.,  92.,  56.,  94., 104., 120.,  84., 100.,  91.],
        [ 82.,  69.,  79.,  80., 110.,  76.,  66., 102.,  97., 123.],
        [140.,  76.,  94.,  84.,  70.,  90.,  85.,  89.,  90.,  88.],
        [ 99.,  85., 104.,  77., 100.,  82., 129.,  83.,  94.,  68.],
        [ 75.,  78.,  73.,  73., 111.,  81.,  62.,  86.,  72., 131.],
        [123.,  79.,  92.,  84.,  80.,  74.,  85.,  92.,  90.,  85.],
        [ 64., 136.,  81.,  78.,  76.,  77.,  77.,  85.,  88.,  80.],
        [ 85.,  87.,  80.,  94.,  73., 122.,  82.,  80., 100.,  99.],
        [ 76.,  67.,  70.,  80., 101.,  78.,  72.,  92., 102., 123.],
        [ 77.,  80.,  99.,  96.,  71.,  77.,  53., 127.,  67.,  88.],
        [ 72.,  89.,  92., 112.,  80.,  92.,  77.,  81.,  96.,  81.],
        [ 73.,  79.,  78.,  77., 129.,  73.,  76.,  89.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 95.93%



iteration:
  303
    0  1394   bit_w:-1  loss: 0.06980
    1   912   bit_w: 1  loss: 0.06974
    2   183   bit_w:-1  loss: 0.06969
    3   266   bit_w:-1  loss: 0.06964
    4  1571   bit_w: 1  loss: 0.06962
   1372   2197   3665   1574   4402   1001   3042    276   1207    707
      1      1      1      0      1      0      0      0      0     -1
Train accuarcate: 98.00%
tensor([[ 73.,  78.,  84.,  97.,  81.,  83.,  62., 137.,  79.,  77.],
        [ 86., 103., 135.,  96.,  72.,  97.,  85.,  77.,  99.,  75.],
        [ 72., 123.,  89.,  78.,  87.,  74.,  77.,  88.,  88.,  68.],
        [121.,  81.,  89.,  78.,  75.,  73.,  92.,  89.,  66.,  96.],
        [ 81.,  95.,  76.,  66., 132.,  74.,  88.,  87.,  86.,  89.],
        [ 75., 127.,  87.,  74.,  93.,  62.,  74.,  94.,  84.,  71.],
        [ 60.,  78.,  65.,  93., 125.,  89.,  81.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  84.,  92.,  85.,  68.,  82.,  80., 128.],
        [ 83.,  85.,  92.,  56.,  94., 104., 120.,  84., 100.,  92.],
        [ 82.,  69.,  79.,  80., 110.,  76.,  66., 102.,  97., 124.],
        [140.,  76.,  94.,  84.,  70.,  90.,  85.,  89.,  90.,  89.],
        [100.,  86., 105.,  77., 101.,  82., 129.,  83.,  94.,  68.],
        [ 75.,  78.,  73.,  73., 111.,  81.,  62.,  86.,  72., 132.],
        [124.,  80.,  93.,  84.,  81.,  74.,  85.,  92.,  90.,  85.],
        [ 64., 136.,  81.,  78.,  76.,  77.,  77.,  85.,  88.,  81.],
        [ 86.,  88.,  81.,  94.,  74., 122.,  82.,  80., 100.,  99.],
        [ 76.,  67.,  70.,  80., 101.,  78.,  72.,  92., 102., 124.],
        [ 77.,  80.,  99.,  96.,  71.,  77.,  53., 127.,  67.,  89.],
        [ 72.,  89.,  92., 112.,  80.,  92.,  77.,  81.,  96.,  82.],
        [ 74.,  80.,  79.,  77., 130.,  73.,  76.,  89.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  304
    0  1268   bit_w:-1  loss: 0.06949
    1  1124   bit_w: 1  loss: 0.06940
    2   301   bit_w: 1  loss: 0.06938
    3   942   bit_w:-1  loss: 0.06928
    4  1141   bit_w:-1  loss: 0.06930
   3109     83   2736    720   1719   1141   3931   1227   2199    802
      1      0      1     -1      0      0      1     -1      0      0
Train accuarcate: 98.01%
tensor([[ 73.,  78.,  84.,  98.,  81.,  83.,  62., 138.,  79.,  77.],
        [ 86., 103., 135.,  97.,  72.,  97.,  85.,  78.,  99.,  75.],
        [ 72., 123.,  89.,  79.,  87.,  74.,  77.,  89.,  88.,  68.],
        [121.,  81.,  89.,  79.,  75.,  73.,  92.,  90.,  66.,  96.],
        [ 81.,  95.,  76.,  67., 132.,  74.,  88.,  88.,  86.,  89.],
        [ 75., 127.,  87.,  75.,  93.,  62.,  74.,  95.,  84.,  71.],
        [ 61.,  78.,  66.,  93., 125.,  89.,  82.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  85.,  92.,  85.,  68.,  83.,  80., 128.],
        [ 83.,  85.,  92.,  57.,  94., 104., 120.,  85., 100.,  92.],
        [ 82.,  69.,  79.,  81., 110.,  76.,  66., 103.,  97., 124.],
        [141.,  76.,  95.,  84.,  70.,  90.,  86.,  89.,  90.,  89.],
        [101.,  86., 106.,  77., 101.,  82., 130.,  83.,  94.,  68.],
        [ 75.,  78.,  73.,  74., 111.,  81.,  62.,  87.,  72., 132.],
        [124.,  80.,  93.,  85.,  81.,  74.,  85.,  93.,  90.,  85.],
        [ 64., 136.,  81.,  79.,  76.,  77.,  77.,  86.,  88.,  81.],
        [ 86.,  88.,  81.,  95.,  74., 122.,  82.,  81., 100.,  99.],
        [ 76.,  67.,  70.,  81., 101.,  78.,  72.,  93., 102., 124.],
        [ 77.,  80.,  99.,  97.,  71.,  77.,  53., 128.,  67.,  89.],
        [ 73.,  89.,  93., 112.,  80.,  92.,  78.,  81.,  96.,  82.],
        [ 74.,  80.,  79.,  78., 130.,  73.,  76.,  90.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 96.07%



iteration:
  305
    0  1557   bit_w:-1  loss: 0.06918
    1  1568   bit_w: 1  loss: 0.06914
    2  1359   bit_w:-1  loss: 0.06913
    3  1138   bit_w: 1  loss: 0.06907
    4  1572   bit_w:-1  loss: 0.06909
   3387   1300   1064   1985    523   2543    686   3657   2500   1618
      1      0      1      0      0      1      0      0      1      0
Train accuarcate: 98.01%
tensor([[ 73.,  78.,  84.,  98.,  81.,  83.,  62., 138.,  79.,  77.],
        [ 86., 103., 135.,  97.,  72.,  97.,  85.,  78.,  99.,  75.],
        [ 72., 123.,  89.,  79.,  87.,  74.,  77.,  89.,  88.,  68.],
        [121.,  81.,  89.,  79.,  75.,  73.,  92.,  90.,  66.,  96.],
        [ 81.,  95.,  76.,  67., 132.,  74.,  88.,  88.,  86.,  89.],
        [ 76., 127.,  88.,  75.,  93.,  63.,  74.,  95.,  85.,  71.],
        [ 61.,  78.,  66.,  93., 125.,  89.,  82.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  85.,  92.,  85.,  68.,  83.,  80., 128.],
        [ 83.,  85.,  92.,  57.,  94., 104., 120.,  85., 100.,  92.],
        [ 82.,  69.,  79.,  81., 110.,  76.,  66., 103.,  97., 124.],
        [141.,  76.,  95.,  84.,  70.,  90.,  86.,  89.,  90.,  89.],
        [101.,  86., 106.,  77., 101.,  82., 130.,  83.,  94.,  68.],
        [ 75.,  78.,  73.,  74., 111.,  81.,  62.,  87.,  72., 132.],
        [124.,  80.,  93.,  85.,  81.,  74.,  85.,  93.,  90.,  85.],
        [ 64., 136.,  81.,  79.,  76.,  77.,  77.,  86.,  88.,  81.],
        [ 86.,  88.,  81.,  95.,  74., 122.,  82.,  81., 100.,  99.],
        [ 76.,  67.,  70.,  81., 101.,  78.,  72.,  93., 102., 124.],
        [ 78.,  80., 100.,  97.,  71.,  78.,  53., 128.,  68.,  89.],
        [ 73.,  89.,  93., 112.,  80.,  92.,  78.,  81.,  96.,  82.],
        [ 74.,  80.,  79.,  78., 130.,  73.,  76.,  90.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 96.05%



iteration:
  306
    0  1579   bit_w:-1  loss: 0.06901
    1  1518   bit_w:-1  loss: 0.06895
    2  1035   bit_w:-1  loss: 0.06896
    3   862   bit_w:-1  loss: 0.06890
    4   845   bit_w:-1  loss: 0.06889
    332   4321   1939   3797   2114   1846   1789   1631   4062   2424
      0      1      0      0      1      0     -1      0      1      0
Train accuarcate: 98.01%
tensor([[ 73.,  78.,  84.,  98.,  81.,  83.,  63., 138.,  79.,  77.],
        [ 86., 103., 135.,  97.,  72.,  97.,  86.,  78.,  99.,  75.],
        [ 72., 123.,  89.,  79.,  87.,  74.,  78.,  89.,  88.,  68.],
        [121.,  81.,  89.,  79.,  75.,  73.,  93.,  90.,  66.,  96.],
        [ 81.,  95.,  76.,  67., 132.,  74.,  89.,  88.,  86.,  89.],
        [ 76., 128.,  88.,  75.,  94.,  63.,  74.,  95.,  86.,  71.],
        [ 61.,  78.,  66.,  93., 125.,  89.,  83.,  92.,  97.,  91.],
        [ 70.,  75.,  90.,  85.,  92.,  85.,  69.,  83.,  80., 128.],
        [ 83.,  85.,  92.,  57.,  94., 104., 121.,  85., 100.,  92.],
        [ 82.,  70.,  79.,  81., 111.,  76.,  66., 103.,  98., 124.],
        [141.,  76.,  95.,  84.,  70.,  90.,  87.,  89.,  90.,  89.],
        [101.,  86., 106.,  77., 101.,  82., 131.,  83.,  94.,  68.],
        [ 75.,  78.,  73.,  74., 111.,  81.,  63.,  87.,  72., 132.],
        [124.,  80.,  93.,  85.,  81.,  74.,  86.,  93.,  90.,  85.],
        [ 64., 137.,  81.,  79.,  77.,  77.,  77.,  86.,  89.,  81.],
        [ 86.,  88.,  81.,  95.,  74., 122.,  83.,  81., 100.,  99.],
        [ 76.,  67.,  70.,  81., 101.,  78.,  73.,  93., 102., 124.],
        [ 78.,  80., 100.,  97.,  71.,  78.,  54., 128.,  68.,  89.],
        [ 73.,  90.,  93., 112.,  81.,  92.,  78.,  81.,  97.,  82.],
        [ 74.,  80.,  79.,  78., 130.,  73.,  77.,  90.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 96.07%



iteration:
  307
    0  1563   bit_w:-1  loss: 0.06883
    1  1136   bit_w: 1  loss: 0.06875
    2  1304   bit_w:-1  loss: 0.06875
    3  1567   bit_w:-1  loss: 0.06864
    4  1497   bit_w: 1  loss: 0.06866
   3212   2911   3530   3043   2839   4324   3182   2528   3489   3944
     -1      0      0      0     -1      1      0     -1      0      1
Train accuarcate: 98.01%
tensor([[ 74.,  78.,  84.,  98.,  82.,  83.,  63., 139.,  79.,  77.],
        [ 86., 103., 135.,  97.,  72.,  98.,  86.,  78.,  99.,  76.],
        [ 73., 123.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [122.,  81.,  89.,  79.,  76.,  73.,  93.,  91.,  66.,  96.],
        [ 82.,  95.,  76.,  67., 133.,  74.,  89.,  89.,  86.,  89.],
        [ 77., 128.,  88.,  75.,  95.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  78.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  75.,  90.,  85.,  92.,  86.,  69.,  83.,  80., 129.],
        [ 83.,  85.,  92.,  57.,  94., 105., 121.,  85., 100.,  93.],
        [ 83.,  70.,  79.,  81., 112.,  76.,  66., 104.,  98., 124.],
        [141.,  76.,  95.,  84.,  70.,  91.,  87.,  89.,  90.,  90.],
        [102.,  86., 106.,  77., 102.,  82., 131.,  84.,  94.,  68.],
        [ 75.,  78.,  73.,  74., 111.,  82.,  63.,  87.,  72., 133.],
        [125.,  80.,  93.,  85.,  82.,  74.,  86.,  94.,  90.,  85.],
        [ 65., 137.,  81.,  79.,  78.,  77.,  77.,  87.,  89.,  81.],
        [ 86.,  88.,  81.,  95.,  74., 123.,  83.,  81., 100., 100.],
        [ 77.,  67.,  70.,  81., 102.,  78.,  73.,  94., 102., 124.],
        [ 78.,  80., 100.,  97.,  71.,  79.,  54., 128.,  68.,  90.],
        [ 74.,  90.,  93., 112.,  82.,  92.,  78.,  82.,  97.,  82.],
        [ 75.,  80.,  79.,  78., 131.,  73.,  77.,  91.,  83.,  93.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  308
    0  1267   bit_w:-1  loss: 0.06858
    1  1248   bit_w: 1  loss: 0.06850
    2  1430   bit_w:-1  loss: 0.06847
    3   692   bit_w: 1  loss: 0.06837
    4  1061   bit_w: 1  loss: 0.06844
   5004   5049   1603   5184   4177   3070    962   4607   1996   3478
      0      0     -1     -1      0      0     -1      0     -1      0
Train accuarcate: 98.02%
tensor([[ 74.,  78.,  84.,  98.,  82.,  83.,  63., 139.,  79.,  77.],
        [ 86., 103., 136.,  98.,  72.,  98.,  87.,  78., 100.,  76.],
        [ 73., 123.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [122.,  81.,  89.,  79.,  76.,  73.,  93.,  91.,  66.,  96.],
        [ 82.,  95.,  77.,  68., 133.,  74.,  90.,  89.,  87.,  89.],
        [ 77., 128.,  88.,  75.,  95.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  78.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  75.,  90.,  85.,  92.,  86.,  69.,  83.,  80., 129.],
        [ 83.,  85.,  93.,  58.,  94., 105., 122.,  85., 101.,  93.],
        [ 83.,  70.,  79.,  81., 112.,  76.,  66., 104.,  98., 124.],
        [141.,  76.,  95.,  84.,  70.,  91.,  87.,  89.,  90.,  90.],
        [102.,  86., 107.,  78., 102.,  82., 132.,  84.,  95.,  68.],
        [ 75.,  78.,  73.,  74., 111.,  82.,  63.,  87.,  72., 133.],
        [125.,  80.,  94.,  86.,  82.,  74.,  87.,  94.,  91.,  85.],
        [ 65., 137.,  82.,  80.,  78.,  77.,  78.,  87.,  90.,  81.],
        [ 86.,  88.,  82.,  96.,  74., 123.,  84.,  81., 101., 100.],
        [ 77.,  67.,  71.,  82., 102.,  78.,  74.,  94., 103., 124.],
        [ 78.,  80., 100.,  97.,  71.,  79.,  54., 128.,  68.,  90.],
        [ 74.,  90.,  94., 113.,  82.,  92.,  79.,  82.,  98.,  82.],
        [ 75.,  80.,  80.,  79., 131.,  73.,  78.,  91.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  309
    0   161   bit_w:-1  loss: 0.06839
    1  1518   bit_w: 1  loss: 0.06834
    2  1566   bit_w: 1  loss: 0.06836
    3  1421   bit_w:-1  loss: 0.06827
    4  1056   bit_w: 1  loss: 0.06830
    352     94   1656    729    896    719    432   1810   1120   1783
      0      0      1      0      0      1      0      0      1      1
Train accuarcate: 98.03%
tensor([[ 74.,  78.,  84.,  98.,  82.,  83.,  63., 139.,  79.,  77.],
        [ 86., 103., 136.,  98.,  72.,  98.,  87.,  78., 100.,  76.],
        [ 73., 123.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [122.,  81.,  89.,  79.,  76.,  73.,  93.,  91.,  66.,  96.],
        [ 82.,  95.,  77.,  68., 133.,  74.,  90.,  89.,  87.,  89.],
        [ 77., 128.,  88.,  75.,  95.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  78.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  75.,  91.,  85.,  92.,  87.,  69.,  83.,  81., 130.],
        [ 83.,  85.,  93.,  58.,  94., 105., 122.,  85., 101.,  93.],
        [ 83.,  70.,  79.,  81., 112.,  76.,  66., 104.,  98., 124.],
        [141.,  76.,  95.,  84.,  70.,  91.,  87.,  89.,  90.,  90.],
        [102.,  86., 107.,  78., 102.,  82., 132.,  84.,  95.,  68.],
        [ 75.,  78.,  74.,  74., 111.,  83.,  63.,  87.,  73., 134.],
        [125.,  80.,  94.,  86.,  82.,  74.,  87.,  94.,  91.,  85.],
        [ 65., 137.,  82.,  80.,  78.,  77.,  78.,  87.,  90.,  81.],
        [ 86.,  88.,  82.,  96.,  74., 123.,  84.,  81., 101., 100.],
        [ 77.,  67.,  71.,  82., 102.,  78.,  74.,  94., 103., 124.],
        [ 78.,  80., 100.,  97.,  71.,  79.,  54., 128.,  68.,  90.],
        [ 74.,  90.,  95., 113.,  82.,  93.,  79.,  82.,  99.,  83.],
        [ 75.,  80.,  80.,  79., 131.,  73.,  78.,  91.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  310
    0  1399   bit_w:-1  loss: 0.06822
    1  1541   bit_w: 1  loss: 0.06815
    2  1570   bit_w:-1  loss: 0.06816
    3  1523   bit_w:-1  loss: 0.06808
    4   683   bit_w:-1  loss: 0.06812
   2317   6072   3909   2616   4980   4143   5620   2238   2995   3928
     -1      1      0     -1      0      0      0     -1      0      0
Train accuarcate: 98.04%
tensor([[ 75.,  78.,  84.,  99.,  82.,  83.,  63., 140.,  79.,  77.],
        [ 86., 104., 136.,  98.,  72.,  98.,  87.,  78., 100.,  76.],
        [ 73., 124.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  73.,  93.,  92.,  66.,  96.],
        [ 82.,  96.,  77.,  68., 133.,  74.,  90.,  89.,  87.,  89.],
        [ 77., 129.,  88.,  75.,  95.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  76.,  91.,  85.,  92.,  87.,  69.,  83.,  81., 130.],
        [ 83.,  86.,  93.,  58.,  94., 105., 122.,  85., 101.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  76.,  66., 105.,  98., 124.],
        [142.,  76.,  95.,  85.,  70.,  91.,  87.,  90.,  90.,  90.],
        [102.,  87., 107.,  78., 102.,  82., 132.,  84.,  95.,  68.],
        [ 76.,  78.,  74.,  75., 111.,  83.,  63.,  88.,  73., 134.],
        [125.,  81.,  94.,  86.,  82.,  74.,  87.,  94.,  91.,  85.],
        [ 66., 137.,  82.,  81.,  78.,  77.,  78.,  88.,  90.,  81.],
        [ 87.,  88.,  82.,  97.,  74., 123.,  84.,  82., 101., 100.],
        [ 77.,  68.,  71.,  82., 102.,  78.,  74.,  94., 103., 124.],
        [ 79.,  80., 100.,  98.,  71.,  79.,  54., 129.,  68.,  90.],
        [ 75.,  90.,  95., 114.,  82.,  93.,  79.,  83.,  99.,  83.],
        [ 75.,  81.,  80.,  79., 131.,  73.,  78.,  91.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  311
    0  1544   bit_w:-1  loss: 0.06805
    1  1155   bit_w:-1  loss: 0.06799
    2   653   bit_w: 1  loss: 0.06801
    3  1146   bit_w:-1  loss: 0.06794
    4  1318   bit_w: 1  loss: 0.06796
   2007   3963   3807   2361   3442   1817   1680   2885   3563   2348
      0      0      1      0      1      0      0      0      0      0
Train accuarcate: 98.05%
tensor([[ 75.,  78.,  85.,  99.,  83.,  83.,  63., 140.,  79.,  77.],
        [ 86., 104., 136.,  98.,  72.,  98.,  87.,  78., 100.,  76.],
        [ 73., 124.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  73.,  93.,  92.,  66.,  96.],
        [ 82.,  96.,  77.,  68., 133.,  74.,  90.,  89.,  87.,  89.],
        [ 77., 129.,  89.,  75.,  96.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  76.,  91.,  85.,  92.,  87.,  69.,  83.,  81., 130.],
        [ 83.,  86.,  94.,  58.,  95., 105., 122.,  85., 101.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  76.,  66., 105.,  98., 124.],
        [142.,  76.,  95.,  85.,  70.,  91.,  87.,  90.,  90.,  90.],
        [102.,  87., 107.,  78., 102.,  82., 132.,  84.,  95.,  68.],
        [ 76.,  78.,  74.,  75., 111.,  83.,  63.,  88.,  73., 134.],
        [125.,  81.,  94.,  86.,  82.,  74.,  87.,  94.,  91.,  85.],
        [ 66., 137.,  83.,  81.,  79.,  77.,  78.,  88.,  90.,  81.],
        [ 87.,  88.,  82.,  97.,  74., 123.,  84.,  82., 101., 100.],
        [ 77.,  68.,  72.,  82., 103.,  78.,  74.,  94., 103., 124.],
        [ 79.,  80., 100.,  98.,  71.,  79.,  54., 129.,  68.,  90.],
        [ 75.,  90.,  95., 114.,  82.,  93.,  79.,  83.,  99.,  83.],
        [ 75.,  81.,  81.,  79., 132.,  73.,  78.,  91.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  312
    0  1076   bit_w:-1  loss: 0.06791
    1  1582   bit_w:-1  loss: 0.06783
    2  1566   bit_w: 1  loss: 0.06786
    3  1180   bit_w: 1  loss: 0.06780
    4   165   bit_w: 1  loss: 0.06784
   1921    170   1379    895   2265   1154   2384   1348   1490   1532
      1      0      0      0      0      0      0      0      1      0
Train accuarcate: 98.04%
tensor([[ 75.,  78.,  85.,  99.,  83.,  83.,  63., 140.,  79.,  77.],
        [ 86., 104., 136.,  98.,  72.,  98.,  87.,  78., 100.,  76.],
        [ 73., 124.,  89.,  79.,  88.,  74.,  78.,  90.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  73.,  93.,  92.,  66.,  96.],
        [ 82.,  96.,  77.,  68., 133.,  74.,  90.,  89.,  87.,  89.],
        [ 77., 129.,  89.,  75.,  96.,  63.,  74.,  96.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 126.,  89.,  83.,  93.,  97.,  91.],
        [ 70.,  76.,  91.,  85.,  92.,  87.,  69.,  83.,  81., 130.],
        [ 84.,  86.,  94.,  58.,  95., 105., 122.,  85., 102.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  76.,  66., 105.,  98., 124.],
        [142.,  76.,  95.,  85.,  70.,  91.,  87.,  90.,  90.,  90.],
        [102.,  87., 107.,  78., 102.,  82., 132.,  84.,  95.,  68.],
        [ 77.,  78.,  74.,  75., 111.,  83.,  63.,  88.,  74., 134.],
        [125.,  81.,  94.,  86.,  82.,  74.,  87.,  94.,  91.,  85.],
        [ 66., 137.,  83.,  81.,  79.,  77.,  78.,  88.,  90.,  81.],
        [ 87.,  88.,  82.,  97.,  74., 123.,  84.,  82., 101., 100.],
        [ 77.,  68.,  72.,  82., 103.,  78.,  74.,  94., 103., 124.],
        [ 79.,  80., 100.,  98.,  71.,  79.,  54., 129.,  68.,  90.],
        [ 75.,  90.,  95., 114.,  82.,  93.,  79.,  83.,  99.,  83.],
        [ 75.,  81.,  81.,  79., 132.,  73.,  78.,  91.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  313
    0  1548   bit_w:-1  loss: 0.06780
    1  1427   bit_w:-1  loss: 0.06772
    2   189   bit_w:-1  loss: 0.06774
    3   681   bit_w: 1  loss: 0.06767
    4  1320   bit_w: 1  loss: 0.06771
   2861   3736   2747   3318   2053   3268   4240   2325   3418   3221
      0      0      0     -1      0      1      0     -1      0      1
Train accuarcate: 98.07%
tensor([[ 75.,  78.,  85., 100.,  83.,  83.,  63., 141.,  79.,  77.],
        [ 86., 104., 136.,  98.,  72.,  99.,  87.,  78., 100.,  77.],
        [ 73., 124.,  89.,  80.,  88.,  74.,  78.,  91.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 82.,  96.,  77.,  68., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 129.,  89.,  76.,  96.,  63.,  74.,  97.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 126.,  90.,  83.,  93.,  97.,  92.],
        [ 70.,  76.,  91.,  85.,  92.,  88.,  69.,  83.,  81., 131.],
        [ 84.,  86.,  94.,  59.,  95., 105., 122.,  86., 102.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  77.,  66., 105.,  98., 125.],
        [142.,  76.,  95.,  86.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  87., 107.,  78., 102.,  83., 132.,  84.,  95.,  69.],
        [ 77.,  78.,  74.,  76., 111.,  83.,  63.,  89.,  74., 134.],
        [125.,  81.,  94.,  86.,  82.,  75.,  87.,  94.,  91.,  86.],
        [ 66., 137.,  83.,  81.,  79.,  78.,  78.,  88.,  90.,  82.],
        [ 87.,  88.,  82.,  97.,  74., 124.,  84.,  82., 101., 101.],
        [ 77.,  68.,  72.,  82., 103.,  79.,  74.,  94., 103., 125.],
        [ 79.,  80., 100.,  99.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 75.,  90.,  95., 115.,  82.,  93.,  79.,  84.,  99.,  83.],
        [ 75.,  81.,  81.,  80., 132.,  73.,  78.,  92.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  314
    0  1568   bit_w:-1  loss: 0.06765
    1  1119   bit_w: 1  loss: 0.06760
    2  1167   bit_w:-1  loss: 0.06759
    3  1193   bit_w:-1  loss: 0.06753
    4   974   bit_w:-1  loss: 0.06752
    373   1728   1042    926   2574    732   3563   1360   1230   2087
      0      0      0      0      1      0      1      0      1      0
Train accuarcate: 98.08%
tensor([[ 75.,  78.,  85., 100.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 86., 104., 136.,  98.,  72.,  99.,  87.,  78., 100.,  77.],
        [ 73., 124.,  89.,  80.,  88.,  74.,  78.,  91.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 82.,  96.,  77.,  68., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 129.,  89.,  76.,  96.,  63.,  74.,  97.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 70.,  76.,  91.,  85.,  92.,  88.,  69.,  83.,  81., 131.],
        [ 84.,  86.,  94.,  59.,  95., 105., 122.,  86., 102.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  77.,  66., 105.,  98., 125.],
        [142.,  76.,  95.,  86.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  87., 107.,  78., 103.,  83., 133.,  84.,  96.,  69.],
        [ 77.,  78.,  74.,  76., 112.,  83.,  64.,  89.,  75., 134.],
        [125.,  81.,  94.,  86.,  82.,  75.,  87.,  94.,  91.,  86.],
        [ 66., 137.,  83.,  81.,  79.,  78.,  78.,  88.,  90.,  82.],
        [ 87.,  88.,  82.,  97.,  74., 124.,  84.,  82., 101., 101.],
        [ 77.,  68.,  72.,  82., 104.,  79.,  75.,  94., 104., 125.],
        [ 79.,  80., 100.,  99.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 75.,  90.,  95., 115.,  83.,  93.,  80.,  84., 100.,  83.],
        [ 75.,  81.,  81.,  80., 132.,  73.,  78.,  92.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  315
    0  1583   bit_w:-1  loss: 0.06747
    1  1581   bit_w: 1  loss: 0.06740
    2  1132   bit_w:-1  loss: 0.06742
    3  1162   bit_w:-1  loss: 0.06735
    4  1571   bit_w:-1  loss: 0.06739
   4504   6579   2427   4243   5420   4107   4494   5531   4981   5523
      0     -1     -1      0      0      0     -1      0      0      0
Train accuarcate: 98.08%
tensor([[ 75.,  78.,  85., 100.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 86., 105., 137.,  98.,  72.,  99.,  88.,  78., 100.,  77.],
        [ 73., 124.,  89.,  80.,  88.,  74.,  78.,  91.,  88.,  68.],
        [123.,  81.,  89.,  80.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 82.,  96.,  77.,  68., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 129.,  89.,  76.,  96.,  63.,  74.,  97.,  86.,  71.],
        [ 62.,  79.,  66.,  93., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 70.,  77.,  92.,  85.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 84.,  86.,  94.,  59.,  95., 105., 122.,  86., 102.,  93.],
        [ 84.,  70.,  79.,  82., 112.,  77.,  66., 105.,  98., 125.],
        [142.,  76.,  95.,  86.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  88., 108.,  78., 103.,  83., 134.,  84.,  96.,  69.],
        [ 77.,  78.,  74.,  76., 112.,  83.,  64.,  89.,  75., 134.],
        [125.,  82.,  95.,  86.,  82.,  75.,  88.,  94.,  91.,  86.],
        [ 66., 137.,  83.,  81.,  79.,  78.,  78.,  88.,  90.,  82.],
        [ 87.,  89.,  83.,  97.,  74., 124.,  85.,  82., 101., 101.],
        [ 77.,  68.,  72.,  82., 104.,  79.,  75.,  94., 104., 125.],
        [ 79.,  80., 100.,  99.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 75.,  90.,  95., 115.,  83.,  93.,  80.,  84., 100.,  83.],
        [ 75.,  81.,  81.,  80., 132.,  73.,  78.,  92.,  84.,  93.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  316
    0  1320   bit_w:-1  loss: 0.06733
    1   550   bit_w:-1  loss: 0.06725
    2  1290   bit_w:-1  loss: 0.06727
    3  1223   bit_w: 1  loss: 0.06720
    4   428   bit_w: 1  loss: 0.06716
   2670   5865   1632    467   3517    756   1208    988   2448   2791
     -1      1      0      0      0      0      0      0      1      1
Train accuarcate: 98.06%
tensor([[ 76.,  78.,  85., 100.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 87., 105., 137.,  98.,  72.,  99.,  88.,  78., 100.,  77.],
        [ 73., 125.,  89.,  80.,  88.,  74.,  78.,  91.,  89.,  69.],
        [124.,  81.,  89.,  80.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  68., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  96.,  63.,  74.,  97.,  87.,  72.],
        [ 63.,  79.,  66.,  93., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  77.,  92.,  85.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 85.,  86.,  94.,  59.,  95., 105., 122.,  86., 102.,  93.],
        [ 85.,  70.,  79.,  82., 112.,  77.,  66., 105.,  98., 125.],
        [143.,  76.,  95.,  86.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  89., 108.,  78., 103.,  83., 134.,  84.,  97.,  70.],
        [ 77.,  79.,  74.,  76., 112.,  83.,  64.,  89.,  76., 135.],
        [125.,  83.,  95.,  86.,  82.,  75.,  88.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  81.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  74., 124.,  85.,  82., 101., 101.],
        [ 77.,  69.,  72.,  82., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 100.,  99.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 76.,  90.,  95., 115.,  83.,  93.,  80.,  84., 100.,  83.],
        [ 75.,  82.,  81.,  80., 132.,  73.,  78.,  92.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  317
    0  1393   bit_w:-1  loss: 0.06711
    1  1574   bit_w: 1  loss: 0.06705
    2   149   bit_w:-1  loss: 0.06706
    3   881   bit_w: 1  loss: 0.06699
    4  1367   bit_w:-1  loss: 0.06698
   5067   2786   2749   3249   1789   2538   2676   4369   3472   4256
      0      0      0      1     -1     -1      0     -1      0      0
Train accuarcate: 98.06%
tensor([[ 76.,  78.,  85., 101.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 87., 105., 137.,  98.,  73., 100.,  88.,  79., 100.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [124.,  81.,  89.,  81.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  77.,  92.,  86.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 85.,  86.,  94.,  59.,  96., 106., 122.,  87., 102.,  93.],
        [ 85.,  70.,  79.,  83., 112.,  77.,  66., 105.,  98., 125.],
        [143.,  76.,  95.,  87.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  89., 108.,  78., 104.,  84., 134.,  85.,  97.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [125.,  83.,  95.,  87.,  82.,  75.,  88.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 100., 100.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 76.,  90.,  95., 115.,  84.,  94.,  80.,  85., 100.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.93%



iteration:
  318
    0  1552   bit_w:-1  loss: 0.06692
    1  1576   bit_w: 1  loss: 0.06686
    2   962   bit_w: 1  loss: 0.06686
    3  1498   bit_w: 1  loss: 0.06681
    4   932   bit_w:-1  loss: 0.06683
   5048   5038   3919   4883   5331   3976   4724   6175   4604   5688
      0     -1     -1      0      0      0     -1     -1     -1      0
Train accuarcate: 98.05%
tensor([[ 76.,  78.,  85., 101.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [124.,  81.,  89.,  81.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  77.,  92.,  86.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 85.,  87.,  95.,  59.,  96., 106., 123.,  88., 103.,  93.],
        [ 85.,  70.,  79.,  83., 112.,  77.,  66., 105.,  98., 125.],
        [143.,  76.,  95.,  87.,  70.,  91.,  87.,  91.,  90.,  90.],
        [102.,  89., 108.,  78., 104.,  84., 134.,  85.,  97.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [125.,  83.,  95.,  87.,  82.,  75.,  88.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 100., 100.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 76.,  91.,  96., 115.,  84.,  94.,  81.,  86., 101.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  319
    0  1180   bit_w:-1  loss: 0.06679
    1  1583   bit_w: 1  loss: 0.06672
    2   304   bit_w:-1  loss: 0.06675
    3   203   bit_w: 1  loss: 0.06668
    4   962   bit_w: 1  loss: 0.06672
   2629   6711   4220   5516   5271   4947   3100   6150   5235   5842
     -1      0      0      0      0      0     -1      0      0      0
Train accuarcate: 98.06%
tensor([[ 76.,  78.,  85., 101.,  84.,  83.,  64., 141.,  80.,  77.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [124.,  81.,  89.,  81.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  77.,  92.,  86.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 85.,  87.,  95.,  59.,  96., 106., 123.,  88., 103.,  93.],
        [ 85.,  70.,  79.,  83., 112.,  77.,  66., 105.,  98., 125.],
        [144.,  76.,  95.,  87.,  70.,  91.,  88.,  91.,  90.,  90.],
        [103.,  89., 108.,  78., 104.,  84., 135.,  85.,  97.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [126.,  83.,  95.,  87.,  82.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 100., 100.,  71.,  79.,  54., 130.,  68.,  90.],
        [ 76.,  91.,  96., 115.,  84.,  94.,  81.,  86., 101.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  320
    0  1149   bit_w:-1  loss: 0.06667
    1    99   bit_w:-1  loss: 0.06663
    2  1523   bit_w:-1  loss: 0.06664
    3   635   bit_w:-1  loss: 0.06659
    4  1177   bit_w:-1  loss: 0.06660
   2472    491    810   1487    654    888    428   1225   1817   1372
      0      0      1      0      1      0      0      0      0      1
Train accuarcate: 98.07%
tensor([[ 76.,  78.,  86., 101.,  85.,  83.,  64., 141.,  80.,  78.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [124.,  81.,  89.,  81.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  77.,  92.,  86.,  92.,  88.,  70.,  83.,  81., 131.],
        [ 85.,  87.,  95.,  59.,  96., 106., 123.,  88., 103.,  93.],
        [ 85.,  70.,  80.,  83., 113.,  77.,  66., 105.,  98., 126.],
        [144.,  76.,  96.,  87.,  71.,  91.,  88.,  91.,  90.,  91.],
        [103.,  89., 108.,  78., 104.,  84., 135.,  85.,  97.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [126.,  83.,  95.,  87.,  82.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 101., 100.,  72.,  79.,  54., 130.,  68.,  91.],
        [ 76.,  91.,  96., 115.,  84.,  94.,  81.,  86., 101.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  321
    0  1569   bit_w:-1  loss: 0.06655
    1  1555   bit_w: 1  loss: 0.06647
    2  1085   bit_w: 1  loss: 0.06647
    3    99   bit_w: 1  loss: 0.06642
    4   653   bit_w:-1  loss: 0.06646
   3631   4640   4500   3299   4924   3876   4951   3781   4125   5006
      0     -1      0     -1      0     -1      0      0     -1      0
Train accuarcate: 98.08%
tensor([[ 76.,  79.,  86., 102.,  85.,  84.,  64., 141.,  81.,  78.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [124.,  81.,  89.,  81.,  76.,  74.,  93.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  78.,  92.,  87.,  92.,  89.,  70.,  83.,  82., 131.],
        [ 85.,  87.,  95.,  59.,  96., 106., 123.,  88., 103.,  93.],
        [ 85.,  71.,  80.,  84., 113.,  78.,  66., 105.,  99., 126.],
        [144.,  77.,  96.,  88.,  71.,  92.,  88.,  91.,  91.,  91.],
        [103.,  90., 108.,  79., 104.,  85., 135.,  85.,  98.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [126.,  83.,  95.,  87.,  82.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 101., 100.,  72.,  79.,  54., 130.,  68.,  91.],
        [ 76.,  92.,  96., 116.,  84.,  95.,  81.,  86., 102.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.90%



iteration:
  322
    0  1427   bit_w:-1  loss: 0.06641
    1  1052   bit_w:-1  loss: 0.06635
    2  1334   bit_w:-1  loss: 0.06633
    3  1446   bit_w: 1  loss: 0.06624
    4   990   bit_w: 1  loss: 0.06629
   2355   6532   3986   4624   3314   3515   1635   3477   4056   3890
     -1      0     -1      0      0      0     -1      0      0      0
Train accuarcate: 98.09%
tensor([[ 77.,  79.,  87., 102.,  85.,  84.,  65., 141.,  81.,  78.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [125.,  81.,  90.,  81.,  76.,  74.,  94.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  78.,  92.,  87.,  92.,  89.,  70.,  83.,  82., 131.],
        [ 86.,  87.,  96.,  59.,  96., 106., 124.,  88., 103.,  93.],
        [ 85.,  71.,  80.,  84., 113.,  78.,  66., 105.,  99., 126.],
        [145.,  77.,  97.,  88.,  71.,  92.,  89.,  91.,  91.,  91.],
        [104.,  90., 109.,  79., 104.,  85., 136.,  85.,  98.,  70.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [126.,  83.,  95.,  87.,  82.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 125.,  85.,  83., 101., 101.],
        [ 77.,  69.,  72.,  83., 104.,  79.,  75.,  94., 105., 126.],
        [ 80.,  80., 101., 100.,  72.,  79.,  54., 130.,  68.,  91.],
        [ 76.,  92.,  96., 116.,  84.,  95.,  81.,  86., 102.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.88%



iteration:
  323
    0  1114   bit_w:-1  loss: 0.06622
    1   242   bit_w:-1  loss: 0.06615
    2   298   bit_w: 1  loss: 0.06615
    3   243   bit_w:-1  loss: 0.06607
    4  1022   bit_w:-1  loss: 0.06609
    972    436   1830   1300    831   2347   2337   1588   1517   1751
      0      0      0      0      0      1      0      0      1      1
Train accuarcate: 98.12%
tensor([[ 77.,  79.,  87., 102.,  85.,  84.,  65., 141.,  81.,  78.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  80., 101.,  77.],
        [ 73., 125.,  89.,  80.,  89.,  75.,  78.,  92.,  89.,  69.],
        [125.,  81.,  90.,  81.,  76.,  74.,  94.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  69., 133.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  76.,  97.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  94., 127.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  78.,  92.,  87.,  92.,  89.,  70.,  83.,  82., 131.],
        [ 86.,  87.,  96.,  59.,  96., 106., 124.,  88., 103.,  93.],
        [ 85.,  71.,  80.,  84., 113.,  78.,  66., 105.,  99., 126.],
        [145.,  77.,  97.,  88.,  71.,  92.,  89.,  91.,  91.,  91.],
        [104.,  90., 109.,  79., 104.,  86., 136.,  85.,  99.,  71.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  89.,  76., 135.],
        [126.,  83.,  95.,  87.,  82.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  82.,  79.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 126.,  85.,  83., 102., 102.],
        [ 77.,  69.,  72.,  83., 104.,  80.,  75.,  94., 106., 127.],
        [ 80.,  80., 101., 100.,  72.,  80.,  54., 130.,  69.,  92.],
        [ 76.,  92.,  96., 116.,  84.,  95.,  81.,  86., 102.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  93.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.91%



iteration:
  324
    0  1537   bit_w:-1  loss: 0.06604
    1  1459   bit_w: 1  loss: 0.06595
    2   981   bit_w:-1  loss: 0.06597
    3   881   bit_w:-1  loss: 0.06591
    4   464   bit_w:-1  loss: 0.06593
   3411   4645   2608   1510   2759   2438   3468    560   2150   1439
      0      0      0      1      1      0      0     -1      0      0
Train accuarcate: 98.13%
tensor([[ 77.,  79.,  87., 102.,  85.,  84.,  65., 142.,  81.,  78.],
        [ 87., 106., 138.,  98.,  73., 100.,  89.,  81., 101.,  77.],
        [ 73., 125.,  89.,  81.,  90.,  75.,  78.,  92.,  89.,  69.],
        [125.,  81.,  90.,  82.,  77.,  74.,  94.,  92.,  66.,  97.],
        [ 83.,  96.,  77.,  70., 134.,  75.,  90.,  89.,  87.,  90.],
        [ 77., 130.,  89.,  77.,  98.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  95., 128.,  90.,  84.,  93.,  98.,  92.],
        [ 71.,  78.,  92.,  87.,  92.,  89.,  70.,  84.,  82., 131.],
        [ 86.,  87.,  96.,  60.,  97., 106., 124.,  88., 103.,  93.],
        [ 85.,  71.,  80.,  84., 113.,  78.,  66., 106.,  99., 126.],
        [145.,  77.,  97.,  89.,  72.,  92.,  89.,  91.,  91.,  91.],
        [104.,  90., 109.,  80., 105.,  86., 136.,  85.,  99.,  71.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  90.,  76., 135.],
        [126.,  83.,  95.,  88.,  83.,  75.,  89.,  94.,  92.,  87.],
        [ 66., 138.,  83.,  83.,  80.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  89.,  83.,  97.,  75., 126.,  85.,  84., 102., 102.],
        [ 77.,  69.,  72.,  83., 104.,  80.,  75.,  95., 106., 127.],
        [ 80.,  80., 101., 100.,  72.,  80.,  54., 131.,  69.,  92.],
        [ 76.,  92.,  96., 117.,  85.,  95.,  81.,  86., 102.,  83.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  94.,  85.,  94.]],
       device='cuda:0')
Train accuarcate: 95.90%



iteration:
  325
    0  1491   bit_w:-1  loss: 0.06588
    1  1083   bit_w: 1  loss: 0.06577
    2  1075   bit_w: 1  loss: 0.06579
    3  1401   bit_w:-1  loss: 0.06570
    4   237   bit_w:-1  loss: 0.06576
   1522   6388   4091   3786   2554   2102   1745   5004   1739   1315
      0      1      1      0      0      0      0      0     -1     -1
Train accuarcate: 98.09%
tensor([[ 77.,  80.,  88., 102.,  85.,  84.,  65., 142.,  81.,  78.],
        [ 87., 107., 139.,  98.,  73., 100.,  89.,  81., 101.,  77.],
        [ 73., 126.,  90.,  81.,  90.,  75.,  78.,  92.,  89.,  69.],
        [125.,  81.,  90.,  82.,  77.,  74.,  94.,  92.,  67.,  98.],
        [ 83.,  96.,  77.,  70., 134.,  75.,  90.,  89.,  88.,  91.],
        [ 77., 131.,  90.,  77.,  98.,  64.,  74.,  98.,  87.,  72.],
        [ 63.,  79.,  66.,  95., 128.,  90.,  84.,  93.,  99.,  93.],
        [ 71.,  78.,  92.,  87.,  92.,  89.,  70.,  84.,  83., 132.],
        [ 86.,  87.,  96.,  60.,  97., 106., 124.,  88., 104.,  94.],
        [ 85.,  71.,  80.,  84., 113.,  78.,  66., 106., 100., 127.],
        [145.,  77.,  97.,  89.,  72.,  92.,  89.,  91.,  92.,  92.],
        [104.,  90., 109.,  80., 105.,  86., 136.,  85., 100.,  72.],
        [ 77.,  79.,  74.,  77., 112.,  83.,  64.,  90.,  77., 136.],
        [126.,  83.,  95.,  88.,  83.,  75.,  89.,  94.,  93.,  88.],
        [ 66., 139.,  84.,  83.,  80.,  78.,  78.,  88.,  91.,  83.],
        [ 88.,  90.,  84.,  97.,  75., 126.,  85.,  84., 102., 102.],
        [ 77.,  69.,  72.,  83., 104.,  80.,  75.,  95., 107., 128.],
        [ 80.,  81., 102., 100.,  72.,  80.,  54., 131.,  69.,  92.],
        [ 76.,  92.,  96., 117.,  85.,  95.,  81.,  86., 103.,  84.],
        [ 75.,  82.,  81.,  80., 133.,  74.,  78.,  94.,  86.,  95.]],
       device='cuda:0')
Train accuarcate: 95.89%



iteration:
  326
    0   399   bit_w:-1  loss: 0.06568
    1  1479   bit_w: 1  loss: 0.06559
    2  1519   bit_w: 1  loss: 0.06557
    3   289   bit_w:-1  loss: 0.06551
    4   931   bit_w:-1  loss: 0.06555
    834   5150   3980   5131   1017   1268   1266    783   2180    608
     -1      0      0      1      1     -1      1      1      0      0
Train accuarcate: 98.11%
tensor([[ 78.,  80.,  88., 102.,  85.,  85.,  65., 142.,  81.,  78.],
        [ 87., 107., 139.,  99.,  74., 100.,  90.,  82., 101.,  77.],
        [ 73., 126.,  90.,  82.,  91.,  75.,  79.,  93.,  89.,  69.],
        [126.,  81.,  90.,  82.,  77.,  75.,  94.,  92.,  67.,  98.],
        [ 84.,  96.,  77.,  70., 134.,  76.,  90.,  89.,  88.,  91.],
        [ 77., 131.,  90.,  78.,  99.,  64.,  75.,  99.,  87.,  72.],
        [ 63.,  79.,  66.,  96., 129.,  90.,  85.,  94.,  99.,  93.],
        [ 72.,  78.,  92.,  87.,  92.,  90.,  70.,  84.,  83., 132.],
        [ 87.,  87.,  96.,  60.,  97., 107., 124.,  88., 104.,  94.],
        [ 86.,  71.,  80.,  84., 113.,  79.,  66., 106., 100., 127.],
        [146.,  77.,  97.,  89.,  72.,  93.,  89.,  91.,  92.,  92.],
        [105.,  90., 109.,  80., 105.,  87., 136.,  85., 100.,  72.],
        [ 78.,  79.,  74.,  77., 112.,  84.,  64.,  90.,  77., 136.],
        [127.,  83.,  95.,  88.,  83.,  76.,  89.,  94.,  93.,  88.],
        [ 66., 139.,  84.,  84.,  81.,  78.,  79.,  89.,  91.,  83.],
        [ 89.,  90.,  84.,  97.,  75., 127.,  85.,  84., 102., 102.],
        [ 78.,  69.,  72.,  83., 104.,  81.,  75.,  95., 107., 128.],
        [ 81.,  81., 102., 100.,  72.,  81.,  54., 131.,  69.,  92.],
        [ 76.,  92.,  96., 118.,  86.,  95.,  82.,  87., 103.,  84.],
        [ 76.,  82.,  81.,  80., 133.,  75.,  78.,  94.,  86.,  95.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  327
    0  1231   bit_w:-1  loss: 0.06550
    1  1371   bit_w:-1  loss: 0.06537
    2   415   bit_w:-1  loss: 0.06542
    3  1551   bit_w:-1  loss: 0.06534
    4  1295   bit_w: 1  loss: 0.06538
   1607   5835   5285   5377   1489   1259   1087   4116   3132   1956
      0      0      1      0     -1      0     -1     -1      0      1
Train accuarcate: 98.09%
tensor([[ 78.,  80.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 87., 107., 140.,  99.,  74., 100.,  90.,  82., 101.,  78.],
        [ 73., 126.,  91.,  82.,  91.,  75.,  79.,  93.,  89.,  70.],
        [126.,  81.,  90.,  82.,  78.,  75.,  95.,  93.,  67.,  98.],
        [ 84.,  96.,  77.,  70., 135.,  76.,  91.,  90.,  88.,  91.],
        [ 77., 131.,  91.,  78.,  99.,  64.,  75.,  99.,  87.,  73.],
        [ 63.,  79.,  66.,  96., 130.,  90.,  86.,  95.,  99.,  93.],
        [ 72.,  78.,  93.,  87.,  92.,  90.,  70.,  84.,  83., 133.],
        [ 87.,  87.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  84., 114.,  79.,  67., 107., 100., 127.],
        [146.,  77.,  97.,  89.,  73.,  93.,  90.,  92.,  92.,  92.],
        [105.,  90., 110.,  80., 105.,  87., 136.,  85., 100.,  73.],
        [ 78.,  79.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [127.,  83.,  96.,  88.,  83.,  76.,  89.,  94.,  93.,  89.],
        [ 66., 139.,  85.,  84.,  81.,  78.,  79.,  89.,  91.,  84.],
        [ 89.,  90.,  85.,  97.,  75., 127.,  85.,  84., 102., 103.],
        [ 78.,  69.,  72.,  83., 105.,  81.,  76.,  96., 107., 128.],
        [ 81.,  81., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 76.,  92.,  97., 118.,  86.,  95.,  82.,  87., 103.,  85.],
        [ 76.,  82.,  81.,  80., 134.,  75.,  79.,  95.,  86.,  95.]],
       device='cuda:0')
Train accuarcate: 95.91%



iteration:
  328
    0  1494   bit_w:-1  loss: 0.06531
    1  1057   bit_w:-1  loss: 0.06524
    2   998   bit_w:-1  loss: 0.06523
    3  1558   bit_w: 1  loss: 0.06519
    4  1360   bit_w:-1  loss: 0.06521
   5228   4960   1920   2979   1759   4151   2156   3689   2417   3044
      0      1      0     -1      0      0      0      0     -1      0
Train accuarcate: 98.09%
tensor([[ 78.,  81.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 87., 107., 140., 100.,  74., 100.,  90.,  82., 102.,  78.],
        [ 73., 126.,  91.,  83.,  91.,  75.,  79.,  93.,  90.,  70.],
        [126.,  82.,  90.,  82.,  78.,  75.,  95.,  93.,  67.,  98.],
        [ 84.,  96.,  77.,  71., 135.,  76.,  91.,  90.,  89.,  91.],
        [ 77., 132.,  91.,  78.,  99.,  64.,  75.,  99.,  87.,  73.],
        [ 63.,  79.,  66.,  97., 130.,  90.,  86.,  95., 100.,  93.],
        [ 72.,  78.,  93.,  88.,  92.,  90.,  70.,  84.,  84., 133.],
        [ 87.,  88.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  85., 114.,  79.,  67., 107., 101., 127.],
        [146.,  77.,  97.,  90.,  73.,  93.,  90.,  92.,  93.,  92.],
        [105.,  90., 110.,  81., 105.,  87., 136.,  85., 101.,  73.],
        [ 78.,  80.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [127.,  84.,  96.,  88.,  83.,  76.,  89.,  94.,  93.,  89.],
        [ 66., 140.,  85.,  84.,  81.,  78.,  79.,  89.,  91.,  84.],
        [ 89.,  90.,  85.,  98.,  75., 127.,  85.,  84., 103., 103.],
        [ 78.,  69.,  72.,  84., 105.,  81.,  76.,  96., 108., 128.],
        [ 81.,  82., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 76.,  92.,  97., 119.,  86.,  95.,  82.,  87., 104.,  85.],
        [ 76.,  82.,  81.,  81., 134.,  75.,  79.,  95.,  87.,  95.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  329
    0  1563   bit_w:-1  loss: 0.06512
    1  1554   bit_w: 1  loss: 0.06505
    2  1182   bit_w:-1  loss: 0.06507
    3   191   bit_w:-1  loss: 0.06499
    4   638   bit_w: 1  loss: 0.06505
   3344    979   1821   2006   1794   2364    650   2557   1424    893
      1      0      0      0      0      1      0      0      0      1
Train accuarcate: 98.10%
tensor([[ 78.,  81.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 88., 107., 140., 100.,  74., 101.,  90.,  82., 102.,  79.],
        [ 73., 126.,  91.,  83.,  91.,  75.,  79.,  93.,  90.,  70.],
        [126.,  82.,  90.,  82.,  78.,  75.,  95.,  93.,  67.,  98.],
        [ 85.,  96.,  77.,  71., 135.,  77.,  91.,  90.,  89.,  92.],
        [ 77., 132.,  91.,  78.,  99.,  64.,  75.,  99.,  87.,  73.],
        [ 64.,  79.,  66.,  97., 130.,  91.,  86.,  95., 100.,  94.],
        [ 73.,  78.,  93.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 87.,  88.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  85., 114.,  79.,  67., 107., 101., 127.],
        [147.,  77.,  97.,  90.,  73.,  94.,  90.,  92.,  93.,  93.],
        [105.,  90., 110.,  81., 105.,  87., 136.,  85., 101.,  73.],
        [ 78.,  80.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [127.,  84.,  96.,  88.,  83.,  76.,  89.,  94.,  93.,  89.],
        [ 66., 140.,  85.,  84.,  81.,  78.,  79.,  89.,  91.,  84.],
        [ 90.,  90.,  85.,  98.,  75., 128.,  85.,  84., 103., 104.],
        [ 78.,  69.,  72.,  84., 105.,  81.,  76.,  96., 108., 128.],
        [ 81.,  82., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  92.,  97., 119.,  86.,  96.,  82.,  87., 104.,  86.],
        [ 76.,  82.,  81.,  81., 134.,  75.,  79.,  95.,  87.,  95.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  330
    0  1397   bit_w:-1  loss: 0.06500
    1   935   bit_w:-1  loss: 0.06489
    2  1039   bit_w:-1  loss: 0.06491
    3   232   bit_w:-1  loss: 0.06484
    4   535   bit_w: 1  loss: 0.06489
   1946     99    392   1694   1482   2246   1302   1245    486   1528
      0      1      0      1      1      1      0      0      0      0
Train accuarcate: 98.11%
tensor([[ 78.,  81.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 88., 107., 140., 100.,  74., 101.,  90.,  82., 102.,  79.],
        [ 73., 126.,  91.,  83.,  91.,  75.,  79.,  93.,  90.,  70.],
        [126.,  82.,  90.,  82.,  78.,  75.,  95.,  93.,  67.,  98.],
        [ 85.,  96.,  77.,  71., 135.,  77.,  91.,  90.,  89.,  92.],
        [ 77., 132.,  91.,  78.,  99.,  64.,  75.,  99.,  87.,  73.],
        [ 64.,  79.,  66.,  97., 130.,  91.,  86.,  95., 100.,  94.],
        [ 73.,  78.,  93.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 87.,  88.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  85., 114.,  79.,  67., 107., 101., 127.],
        [147.,  78.,  97.,  91.,  74.,  95.,  90.,  92.,  93.,  93.],
        [105.,  90., 110.,  81., 105.,  87., 136.,  85., 101.,  73.],
        [ 78.,  80.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [127.,  84.,  96.,  88.,  83.,  76.,  89.,  94.,  93.,  89.],
        [ 66., 140.,  85.,  84.,  81.,  78.,  79.,  89.,  91.,  84.],
        [ 90.,  90.,  85.,  98.,  75., 128.,  85.,  84., 103., 104.],
        [ 78.,  69.,  72.,  84., 105.,  81.,  76.,  96., 108., 128.],
        [ 81.,  82., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  92.,  97., 119.,  86.,  96.,  82.,  87., 104.,  86.],
        [ 76.,  82.,  81.,  81., 134.,  75.,  79.,  95.,  87.,  95.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  331
    0  1401   bit_w:-1  loss: 0.06484
    1   488   bit_w: 1  loss: 0.06472
    2   359   bit_w:-1  loss: 0.06472
    3  1531   bit_w: 1  loss: 0.06469
    4  1071   bit_w: 1  loss: 0.06468
    990   5400   5548   4101   5035   3571   4772   4584   5002   5210
      0      0      0      0      0      0     -1     -1     -1      0
Train accuarcate: 98.12%
tensor([[ 78.,  81.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 88., 107., 140., 100.,  74., 101.,  91.,  83., 103.,  79.],
        [ 73., 126.,  91.,  83.,  91.,  75.,  79.,  93.,  90.,  70.],
        [126.,  82.,  90.,  82.,  78.,  75.,  96.,  94.,  68.,  98.],
        [ 85.,  96.,  77.,  71., 135.,  77.,  91.,  90.,  89.,  92.],
        [ 77., 132.,  91.,  78.,  99.,  64.,  75.,  99.,  87.,  73.],
        [ 64.,  79.,  66.,  97., 130.,  91.,  86.,  95., 100.,  94.],
        [ 73.,  78.,  93.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 87.,  88.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  85., 114.,  79.,  67., 107., 101., 127.],
        [147.,  78.,  97.,  91.,  74.,  95.,  91.,  93.,  94.,  93.],
        [105.,  90., 110.,  81., 105.,  87., 136.,  85., 101.,  73.],
        [ 78.,  80.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [127.,  84.,  96.,  88.,  83.,  76.,  90.,  95.,  94.,  89.],
        [ 66., 140.,  85.,  84.,  81.,  78.,  80.,  90.,  92.,  84.],
        [ 90.,  90.,  85.,  98.,  75., 128.,  86.,  85., 104., 104.],
        [ 78.,  69.,  72.,  84., 105.,  81.,  76.,  96., 108., 128.],
        [ 81.,  82., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  92.,  97., 119.,  86.,  96.,  82.,  87., 104.,  86.],
        [ 76.,  82.,  81.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  332
    0  1448   bit_w:-1  loss: 0.06463
    1  1025   bit_w:-1  loss: 0.06460
    2  1475   bit_w:-1  loss: 0.06460
    3  1249   bit_w:-1  loss: 0.06451
    4   716   bit_w: 1  loss: 0.06453
   1705   4947   1799   1112   1270   2368   1186   5115    799   2971
     -1      0      0      0      0      0      0      1      1      1
Train accuarcate: 98.12%
tensor([[ 79.,  81.,  89., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 89., 107., 140., 100.,  74., 101.,  91.,  83., 103.,  79.],
        [ 73., 126.,  91.,  83.,  91.,  75.,  79.,  94.,  91.,  71.],
        [126.,  82.,  90.,  82.,  78.,  75.,  96.,  95.,  69.,  99.],
        [ 86.,  96.,  77.,  71., 135.,  77.,  91.,  90.,  89.,  92.],
        [ 77., 132.,  91.,  78.,  99.,  64.,  75., 100.,  88.,  74.],
        [ 65.,  79.,  66.,  97., 130.,  91.,  86.,  95., 100.,  94.],
        [ 74.,  78.,  93.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 88.,  88.,  96.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  80.,  85., 114.,  79.,  67., 108., 102., 128.],
        [147.,  78.,  97.,  91.,  74.,  95.,  91.,  94.,  95.,  94.],
        [105.,  90., 110.,  81., 105.,  87., 136.,  86., 102.,  74.],
        [ 79.,  80.,  74.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [128.,  84.,  96.,  88.,  83.,  76.,  90.,  95.,  94.,  89.],
        [ 66., 140.,  85.,  84.,  81.,  78.,  80.,  91.,  93.,  85.],
        [ 90.,  90.,  85.,  98.,  75., 128.,  86.,  86., 105., 105.],
        [ 78.,  69.,  72.,  84., 105.,  81.,  76.,  97., 109., 129.],
        [ 82.,  82., 103., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  92.,  97., 119.,  86.,  96.,  82.,  88., 105.,  87.],
        [ 77.,  82.,  81.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.95%



iteration:
  333
    0  1529   bit_w:-1  loss: 0.06445
    1   517   bit_w: 1  loss: 0.06438
    2  1308   bit_w: 1  loss: 0.06438
    3  1278   bit_w:-1  loss: 0.06435
    4   929   bit_w: 1  loss: 0.06433
   3341   5556   5287   1644   4275   2136   4082   5126   4884   4914
      0     -1      1     -1     -1      0      0      0      0      0
Train accuarcate: 98.14%
tensor([[ 79.,  81.,  90., 102.,  85.,  85.,  65., 142.,  81.,  79.],
        [ 89., 108., 140., 101.,  75., 101.,  91.,  83., 103.,  79.],
        [ 73., 126.,  92.,  83.,  91.,  75.,  79.,  94.,  91.,  71.],
        [126.,  82.,  91.,  82.,  78.,  75.,  96.,  95.,  69.,  99.],
        [ 86.,  97.,  77.,  72., 136.,  77.,  91.,  90.,  89.,  92.],
        [ 77., 132.,  92.,  78.,  99.,  64.,  75., 100.,  88.,  74.],
        [ 65.,  80.,  66.,  98., 131.,  91.,  86.,  95., 100.,  94.],
        [ 74.,  78.,  94.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 88.,  88.,  97.,  60.,  98., 107., 125.,  89., 104.,  94.],
        [ 86.,  71.,  81.,  85., 114.,  79.,  67., 108., 102., 128.],
        [147.,  78.,  98.,  91.,  74.,  95.,  91.,  94.,  95.,  94.],
        [105.,  90., 111.,  81., 105.,  87., 136.,  86., 102.,  74.],
        [ 79.,  80.,  75.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [128.,  84.,  97.,  88.,  83.,  76.,  90.,  95.,  94.,  89.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  80.,  91.,  93.,  85.],
        [ 90.,  90.,  86.,  98.,  75., 128.,  86.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  76.,  97., 109., 129.],
        [ 82.,  82., 104., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  93.,  97., 120.,  87.,  96.,  82.,  88., 105.,  87.],
        [ 77.,  82.,  82.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  334
    0  1282   bit_w:-1  loss: 0.06425
    1  1199   bit_w:-1  loss: 0.06416
    2   650   bit_w: 1  loss: 0.06419
    3   247   bit_w:-1  loss: 0.06413
    4  1178   bit_w:-1  loss: 0.06416
    658   1693   1524   1044   1431   2770   5206   1872    893   1055
      1      0      0      0      0      1      1      0      0      0
Train accuarcate: 98.14%
tensor([[ 80.,  81.,  90., 102.,  85.,  86.,  66., 142.,  81.,  79.],
        [ 90., 108., 140., 101.,  75., 102.,  92.,  83., 103.,  79.],
        [ 73., 126.,  92.,  83.,  91.,  75.,  79.,  94.,  91.,  71.],
        [126.,  82.,  91.,  82.,  78.,  75.,  96.,  95.,  69.,  99.],
        [ 87.,  97.,  77.,  72., 136.,  78.,  92.,  90.,  89.,  92.],
        [ 77., 132.,  92.,  78.,  99.,  64.,  75., 100.,  88.,  74.],
        [ 65.,  80.,  66.,  98., 131.,  91.,  86.,  95., 100.,  94.],
        [ 74.,  78.,  94.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 89.,  88.,  97.,  60.,  98., 108., 126.,  89., 104.,  94.],
        [ 86.,  71.,  81.,  85., 114.,  79.,  67., 108., 102., 128.],
        [147.,  78.,  98.,  91.,  74.,  95.,  91.,  94.,  95.,  94.],
        [106.,  90., 111.,  81., 105.,  88., 137.,  86., 102.,  74.],
        [ 79.,  80.,  75.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [128.,  84.,  97.,  88.,  83.,  76.,  90.,  95.,  94.,  89.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  80.,  91.,  93.,  85.],
        [ 91.,  90.,  86.,  98.,  75., 129.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  76.,  97., 109., 129.],
        [ 82.,  82., 104., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  93.,  97., 120.,  87.,  96.,  82.,  88., 105.,  87.],
        [ 77.,  82.,  82.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  335
    0  1524   bit_w:-1  loss: 0.06411
    1  1575   bit_w: 1  loss: 0.06405
    2  1068   bit_w:-1  loss: 0.06404
    3  1557   bit_w:-1  loss: 0.06399
    4  1086   bit_w:-1  loss: 0.06404
   4081   5965   3598   5578   3919   4442   3378   5619   4720   5225
      0      0      0     -1     -1      0      0     -1      0      0
Train accuarcate: 98.15%
tensor([[ 80.,  81.,  90., 102.,  85.,  86.,  66., 142.,  81.,  79.],
        [ 90., 108., 140., 101.,  75., 102.,  92.,  83., 103.,  79.],
        [ 73., 126.,  92.,  83.,  91.,  75.,  79.,  94.,  91.,  71.],
        [126.,  82.,  91.,  82.,  78.,  75.,  96.,  95.,  69.,  99.],
        [ 87.,  97.,  77.,  72., 136.,  78.,  92.,  90.,  89.,  92.],
        [ 77., 132.,  92.,  78.,  99.,  64.,  75., 100.,  88.,  74.],
        [ 65.,  80.,  66.,  98., 131.,  91.,  86.,  95., 100.,  94.],
        [ 74.,  78.,  94.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 89.,  88.,  97.,  61.,  99., 108., 126.,  90., 104.,  94.],
        [ 86.,  71.,  81.,  85., 114.,  79.,  67., 108., 102., 128.],
        [147.,  78.,  98.,  91.,  74.,  95.,  91.,  94.,  95.,  94.],
        [106.,  90., 111.,  81., 105.,  88., 137.,  86., 102.,  74.],
        [ 79.,  80.,  75.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [128.,  84.,  97.,  88.,  83.,  76.,  90.,  95.,  94.,  89.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  80.,  91.,  93.,  85.],
        [ 91.,  90.,  86.,  98.,  75., 129.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  76.,  97., 109., 129.],
        [ 82.,  82., 104., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  93.,  97., 121.,  88.,  96.,  82.,  89., 105.,  87.],
        [ 77.,  82.,  82.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.95%



iteration:
  336
    0  1355   bit_w:-1  loss: 0.06397
    1  1531   bit_w: 1  loss: 0.06388
    2   913   bit_w: 1  loss: 0.06392
    3  1527   bit_w: 1  loss: 0.06381
    4  1323   bit_w: 1  loss: 0.06387
   1465   6324   3274   2419   2540   3124   3742   4555   1170   2108
      0      1      0      0      0      0      0      0     -1     -1
Train accuarcate: 98.15%
tensor([[ 80.,  82.,  90., 102.,  85.,  86.,  66., 142.,  81.,  79.],
        [ 90., 108., 140., 101.,  75., 102.,  92.,  83., 104.,  80.],
        [ 73., 127.,  92.,  83.,  91.,  75.,  79.,  94.,  91.,  71.],
        [126.,  83.,  91.,  82.,  78.,  75.,  96.,  95.,  69.,  99.],
        [ 87.,  97.,  77.,  72., 136.,  78.,  92.,  90.,  90.,  93.],
        [ 77., 133.,  92.,  78.,  99.,  64.,  75., 100.,  88.,  74.],
        [ 65.,  80.,  66.,  98., 131.,  91.,  86.,  95., 101.,  95.],
        [ 74.,  79.,  94.,  88.,  92.,  91.,  70.,  84.,  84., 134.],
        [ 89.,  88.,  97.,  61.,  99., 108., 126.,  90., 105.,  95.],
        [ 86.,  71.,  81.,  85., 114.,  79.,  67., 108., 103., 129.],
        [147.,  78.,  98.,  91.,  74.,  95.,  91.,  94.,  96.,  95.],
        [106.,  90., 111.,  81., 105.,  88., 137.,  86., 103.,  75.],
        [ 79.,  81.,  75.,  77., 113.,  84.,  65.,  91.,  77., 136.],
        [128.,  84.,  97.,  88.,  83.,  76.,  90.,  95.,  95.,  90.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  80.,  91.,  94.,  86.],
        [ 91.,  91.,  86.,  98.,  75., 129.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  76.,  97., 110., 130.],
        [ 82.,  83., 104., 100.,  72.,  81.,  54., 131.,  69.,  93.],
        [ 77.,  94.,  97., 121.,  88.,  96.,  82.,  89., 105.,  87.],
        [ 77.,  83.,  82.,  81., 134.,  75.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  337
    0  1019   bit_w:-1  loss: 0.06379
    1  1397   bit_w: 1  loss: 0.06372
    2  1267   bit_w:-1  loss: 0.06374
    3   461   bit_w: 1  loss: 0.06367
    4  1340   bit_w:-1  loss: 0.06369
   3644   6255   4740   3994   2560   2556   4047   1486   4058   2603
      0      0     -1      0     -1     -1      1      1      0      0
Train accuarcate: 98.16%
tensor([[ 80.,  82.,  91., 102.,  86.,  87.,  66., 142.,  81.,  79.],
        [ 90., 108., 140., 101.,  75., 102.,  93.,  84., 104.,  80.],
        [ 73., 127.,  92.,  83.,  91.,  75.,  80.,  95.,  91.,  71.],
        [126.,  83.,  92.,  82.,  79.,  76.,  96.,  95.,  69.,  99.],
        [ 87.,  97.,  78.,  72., 137.,  79.,  92.,  90.,  90.,  93.],
        [ 77., 133.,  92.,  78.,  99.,  64.,  76., 101.,  88.,  74.],
        [ 65.,  80.,  67.,  98., 132.,  92.,  86.,  95., 101.,  95.],
        [ 74.,  79.,  94.,  88.,  92.,  91.,  71.,  85.,  84., 134.],
        [ 89.,  88.,  97.,  61.,  99., 108., 127.,  91., 105.,  95.],
        [ 86.,  71.,  82.,  85., 115.,  80.,  67., 108., 103., 129.],
        [147.,  78.,  98.,  91.,  74.,  95.,  92.,  95.,  96.,  95.],
        [106.,  90., 111.,  81., 105.,  88., 138.,  87., 103.,  75.],
        [ 79.,  81.,  75.,  77., 113.,  84.,  66.,  92.,  77., 136.],
        [128.,  84.,  98.,  88.,  84.,  77.,  90.,  95.,  95.,  90.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  81.,  92.,  94.,  86.],
        [ 91.,  91.,  87.,  98.,  76., 130.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  77.,  98., 110., 130.],
        [ 82.,  83., 105., 100.,  73.,  82.,  54., 131.,  69.,  93.],
        [ 77.,  94.,  98., 121.,  89.,  97.,  82.,  89., 105.,  87.],
        [ 77.,  83.,  83.,  81., 135.,  76.,  80.,  96.,  88.,  95.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  338
    0  1522   bit_w:-1  loss: 0.06363
    1  1155   bit_w:-1  loss: 0.06359
    2  1512   bit_w:-1  loss: 0.06357
    3  1491   bit_w:-1  loss: 0.06352
    4  1230   bit_w:-1  loss: 0.06351
   3026   1461   3275   4019   2446   2593    660   4959   2914   1063
      1      0      0      1      1      0      0      0      0     -1
Train accuarcate: 98.16%
tensor([[ 81.,  82.,  91., 103.,  87.,  87.,  66., 142.,  81.,  79.],
        [ 91., 108., 140., 102.,  76., 102.,  93.,  84., 104.,  80.],
        [ 74., 127.,  92.,  84.,  92.,  75.,  80.,  95.,  91.,  71.],
        [126.,  83.,  92.,  82.,  79.,  76.,  96.,  95.,  69., 100.],
        [ 87.,  97.,  78.,  72., 137.,  79.,  92.,  90.,  90.,  94.],
        [ 77., 133.,  92.,  78.,  99.,  64.,  76., 101.,  88.,  75.],
        [ 65.,  80.,  67.,  98., 132.,  92.,  86.,  95., 101.,  96.],
        [ 74.,  79.,  94.,  88.,  92.,  91.,  71.,  85.,  84., 135.],
        [ 90.,  88.,  97.,  62., 100., 108., 127.,  91., 105.,  95.],
        [ 87.,  71.,  82.,  86., 116.,  80.,  67., 108., 103., 129.],
        [148.,  78.,  98.,  92.,  75.,  95.,  92.,  95.,  96.,  95.],
        [106.,  90., 111.,  81., 105.,  88., 138.,  87., 103.,  76.],
        [ 79.,  81.,  75.,  77., 113.,  84.,  66.,  92.,  77., 137.],
        [128.,  84.,  98.,  88.,  84.,  77.,  90.,  95.,  95.,  91.],
        [ 66., 140.,  86.,  84.,  81.,  78.,  81.,  92.,  94.,  87.],
        [ 92.,  91.,  87.,  99.,  77., 130.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  81.,  77.,  98., 110., 131.],
        [ 83.,  83., 105., 101.,  74.,  82.,  54., 131.,  69.,  93.],
        [ 78.,  94.,  98., 122.,  90.,  97.,  82.,  89., 105.,  87.],
        [ 77.,  83.,  83.,  81., 135.,  76.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  339
    0  1473   bit_w:-1  loss: 0.06343
    1  1146   bit_w: 1  loss: 0.06337
    2   623   bit_w:-1  loss: 0.06337
    3  1480   bit_w: 1  loss: 0.06333
    4   294   bit_w:-1  loss: 0.06333
   3628   3685   3039   3054   4894   3630   4659   5499   3254   4854
      0      0     -1      0      0      1      0      0     -1      0
Train accuarcate: 98.16%
tensor([[ 81.,  82.,  91., 103.,  87.,  88.,  66., 142.,  81.,  79.],
        [ 91., 108., 141., 102.,  76., 102.,  93.,  84., 105.,  80.],
        [ 74., 127.,  92.,  84.,  92.,  76.,  80.,  95.,  91.,  71.],
        [126.,  83.,  92.,  82.,  79.,  77.,  96.,  95.,  69., 100.],
        [ 87.,  97.,  78.,  72., 137.,  80.,  92.,  90.,  90.,  94.],
        [ 77., 133.,  93.,  78.,  99.,  64.,  76., 101.,  89.,  75.],
        [ 65.,  80.,  67.,  98., 132.,  93.,  86.,  95., 101.,  96.],
        [ 74.,  79.,  95.,  88.,  92.,  91.,  71.,  85.,  85., 135.],
        [ 90.,  88.,  97.,  62., 100., 109., 127.,  91., 105.,  95.],
        [ 87.,  71.,  82.,  86., 116.,  81.,  67., 108., 103., 129.],
        [148.,  78.,  98.,  92.,  75.,  96.,  92.,  95.,  96.,  95.],
        [106.,  90., 111.,  81., 105.,  89., 138.,  87., 103.,  76.],
        [ 79.,  81.,  75.,  77., 113.,  85.,  66.,  92.,  77., 137.],
        [128.,  84.,  98.,  88.,  84.,  78.,  90.,  95.,  95.,  91.],
        [ 66., 140.,  86.,  84.,  81.,  79.,  81.,  92.,  94.,  87.],
        [ 92.,  91.,  87.,  99.,  77., 131.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  82.,  77.,  98., 110., 131.],
        [ 83.,  83., 105., 101.,  74.,  83.,  54., 131.,  69.,  93.],
        [ 78.,  94.,  99., 122.,  90.,  97.,  82.,  89., 106.,  87.],
        [ 77.,  83.,  83.,  81., 135.,  77.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 96.03%



iteration:
  340
    0  1070   bit_w:-1  loss: 0.06326
    1  1554   bit_w: 1  loss: 0.06321
    2  1190   bit_w:-1  loss: 0.06321
    3   799   bit_w:-1  loss: 0.06313
    4  1081   bit_w:-1  loss: 0.06312
   4999   3281   1266   1083    782   2122   3675    503    589    476
      1      0      0      0      1      0      1      1      0      0
Train accuarcate: 98.17%
tensor([[ 81.,  82.,  91., 103.,  87.,  88.,  66., 142.,  81.,  79.],
        [ 92., 108., 141., 102.,  77., 102.,  94.,  85., 105.,  80.],
        [ 74., 127.,  92.,  84.,  92.,  76.,  80.,  95.,  91.,  71.],
        [127.,  83.,  92.,  82.,  80.,  77.,  97.,  96.,  69., 100.],
        [ 87.,  97.,  78.,  72., 137.,  80.,  92.,  90.,  90.,  94.],
        [ 78., 133.,  93.,  78., 100.,  64.,  77., 102.,  89.,  75.],
        [ 65.,  80.,  67.,  98., 132.,  93.,  86.,  95., 101.,  96.],
        [ 75.,  79.,  95.,  88.,  93.,  91.,  72.,  86.,  85., 135.],
        [ 91.,  88.,  97.,  62., 101., 109., 128.,  92., 105.,  95.],
        [ 87.,  71.,  82.,  86., 116.,  81.,  67., 108., 103., 129.],
        [149.,  78.,  98.,  92.,  76.,  96.,  93.,  96.,  96.,  95.],
        [106.,  90., 111.,  81., 105.,  89., 138.,  87., 103.,  76.],
        [ 79.,  81.,  75.,  77., 113.,  85.,  66.,  92.,  77., 137.],
        [129.,  84.,  98.,  88.,  85.,  78.,  91.,  96.,  95.,  91.],
        [ 67., 140.,  86.,  84.,  82.,  79.,  82.,  93.,  94.,  87.],
        [ 92.,  91.,  87.,  99.,  77., 131.,  87.,  86., 105., 105.],
        [ 78.,  69.,  73.,  84., 105.,  82.,  77.,  98., 110., 131.],
        [ 83.,  83., 105., 101.,  74.,  83.,  54., 131.,  69.,  93.],
        [ 79.,  94.,  99., 122.,  91.,  97.,  83.,  90., 106.,  87.],
        [ 77.,  83.,  83.,  81., 135.,  77.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  341
    0   979   bit_w:-1  loss: 0.06307
    1   920   bit_w:-1  loss: 0.06299
    2  1445   bit_w:-1  loss: 0.06300
    3   316   bit_w: 1  loss: 0.06293
    4  1144   bit_w: 1  loss: 0.06295
   5289   5757   4892   1939   5376   2638   4189   6043   3951   4995
      0      1      0     -1      0      0      0      0     -1      0
Train accuarcate: 98.19%
tensor([[ 81.,  83.,  91., 103.,  87.,  88.,  66., 142.,  81.,  79.],
        [ 92., 109., 141., 102.,  77., 102.,  94.,  85., 105.,  80.],
        [ 74., 128.,  92.,  84.,  92.,  76.,  80.,  95.,  91.,  71.],
        [127.,  84.,  92.,  82.,  80.,  77.,  97.,  96.,  69., 100.],
        [ 87.,  98.,  78.,  72., 137.,  80.,  92.,  90.,  90.,  94.],
        [ 78., 134.,  93.,  78., 100.,  64.,  77., 102.,  89.,  75.],
        [ 65.,  81.,  67.,  98., 132.,  93.,  86.,  95., 101.,  96.],
        [ 75.,  80.,  95.,  88.,  93.,  91.,  72.,  86.,  85., 135.],
        [ 91.,  89.,  97.,  62., 101., 109., 128.,  92., 105.,  95.],
        [ 87.,  72.,  82.,  86., 116.,  81.,  67., 108., 103., 129.],
        [149.,  79.,  98.,  92.,  76.,  96.,  93.,  96.,  96.,  95.],
        [106.,  91., 111.,  81., 105.,  89., 138.,  87., 103.,  76.],
        [ 79.,  82.,  75.,  77., 113.,  85.,  66.,  92.,  77., 137.],
        [129.,  85.,  98.,  88.,  85.,  78.,  91.,  96.,  95.,  91.],
        [ 67., 141.,  86.,  84.,  82.,  79.,  82.,  93.,  94.,  87.],
        [ 92.,  91.,  87., 100.,  77., 131.,  87.,  86., 106., 105.],
        [ 78.,  70.,  73.,  84., 105.,  82.,  77.,  98., 110., 131.],
        [ 83.,  84., 105., 101.,  74.,  83.,  54., 131.,  69.,  93.],
        [ 79.,  94.,  99., 123.,  91.,  97.,  83.,  90., 107.,  87.],
        [ 77.,  84.,  83.,  81., 135.,  77.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  342
    0    99   bit_w:-1  loss: 0.06290
    1   901   bit_w:-1  loss: 0.06285
    2  1407   bit_w: 1  loss: 0.06285
    3  1534   bit_w:-1  loss: 0.06277
    4   439   bit_w:-1  loss: 0.06280
   3200   5905   4830   3101   3546   3724   3290   1327   4654   3363
     -1      0     -1      0      0      1      0     -1      0      0
Train accuarcate: 98.20%
tensor([[ 82.,  83.,  92., 103.,  87.,  88.,  66., 143.,  81.,  79.],
        [ 92., 109., 141., 102.,  77., 103.,  94.,  85., 105.,  80.],
        [ 74., 128.,  92.,  84.,  92.,  77.,  80.,  95.,  91.,  71.],
        [128.,  84.,  93.,  82.,  80.,  77.,  97.,  97.,  69., 100.],
        [ 87.,  98.,  78.,  72., 137.,  81.,  92.,  90.,  90.,  94.],
        [ 78., 134.,  93.,  78., 100.,  65.,  77., 102.,  89.,  75.],
        [ 65.,  81.,  67.,  98., 132.,  94.,  86.,  95., 101.,  96.],
        [ 75.,  80.,  95.,  88.,  93.,  92.,  72.,  86.,  85., 135.],
        [ 91.,  89.,  97.,  62., 101., 110., 128.,  92., 105.,  95.],
        [ 88.,  72.,  83.,  86., 116.,  81.,  67., 109., 103., 129.],
        [149.,  79.,  98.,  92.,  76.,  97.,  93.,  96.,  96.,  95.],
        [106.,  91., 111.,  81., 105.,  90., 138.,  87., 103.,  76.],
        [ 79.,  82.,  75.,  77., 113.,  86.,  66.,  92.,  77., 137.],
        [129.,  85.,  98.,  88.,  85.,  79.,  91.,  96.,  95.,  91.],
        [ 67., 141.,  86.,  84.,  82.,  80.,  82.,  93.,  94.,  87.],
        [ 92.,  91.,  87., 100.,  77., 132.,  87.,  86., 106., 105.],
        [ 78.,  70.,  73.,  84., 105.,  83.,  77.,  98., 110., 131.],
        [ 84.,  84., 106., 101.,  74.,  83.,  54., 132.,  69.,  93.],
        [ 80.,  94., 100., 123.,  91.,  97.,  83.,  91., 107.,  87.],
        [ 77.,  84.,  83.,  81., 135.,  78.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  343
    0  1488   bit_w:-1  loss: 0.06272
    1   602   bit_w:-1  loss: 0.06264
    2  1150   bit_w: 1  loss: 0.06265
    3   932   bit_w: 1  loss: 0.06260
    4  1486   bit_w: 1  loss: 0.06262
   3756   4742   4583   4277   5460   4710   4946   4238   4798   5097
      0      0     -1     -1      0      0     -1      0      0     -1
Train accuarcate: 98.22%
tensor([[ 82.,  83.,  92., 103.,  87.,  88.,  66., 143.,  81.,  79.],
        [ 92., 109., 142., 103.,  77., 103.,  95.,  85., 105.,  81.],
        [ 74., 128.,  92.,  84.,  92.,  77.,  80.,  95.,  91.,  71.],
        [128.,  84.,  93.,  82.,  80.,  77.,  97.,  97.,  69., 100.],
        [ 87.,  98.,  78.,  72., 137.,  81.,  92.,  90.,  90.,  94.],
        [ 78., 134.,  93.,  78., 100.,  65.,  77., 102.,  89.,  75.],
        [ 65.,  81.,  67.,  98., 132.,  94.,  86.,  95., 101.,  96.],
        [ 75.,  80.,  95.,  88.,  93.,  92.,  72.,  86.,  85., 135.],
        [ 91.,  89.,  97.,  62., 101., 110., 128.,  92., 105.,  95.],
        [ 88.,  72.,  84.,  87., 116.,  81.,  68., 109., 103., 130.],
        [149.,  79.,  99.,  93.,  76.,  97.,  94.,  96.,  96.,  96.],
        [106.,  91., 112.,  82., 105.,  90., 139.,  87., 103.,  77.],
        [ 79.,  82.,  75.,  77., 113.,  86.,  66.,  92.,  77., 137.],
        [129.,  85.,  99.,  89.,  85.,  79.,  92.,  96.,  95.,  92.],
        [ 67., 141.,  86.,  84.,  82.,  80.,  82.,  93.,  94.,  87.],
        [ 92.,  91.,  87., 100.,  77., 132.,  87.,  86., 106., 105.],
        [ 78.,  70.,  73.,  84., 105.,  83.,  77.,  98., 110., 131.],
        [ 84.,  84., 107., 102.,  74.,  83.,  55., 132.,  69.,  94.],
        [ 80.,  94., 101., 124.,  91.,  97.,  84.,  91., 107.,  88.],
        [ 77.,  84.,  83.,  81., 135.,  78.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  344
    0  1460   bit_w:-1  loss: 0.06255
    1  1247   bit_w: 1  loss: 0.06249
    2   871   bit_w: 1  loss: 0.06247
    3  1220   bit_w: 1  loss: 0.06242
    4  1328   bit_w: 1  loss: 0.06246
   1958   2361   1683   1694   1735   3935   2849   1504   3962   1903
      1      0      0      0     -1      0      1      0      1      0
Train accuarcate: 98.22%
tensor([[ 82.,  83.,  92., 103.,  88.,  88.,  66., 143.,  81.,  79.],
        [ 93., 109., 142., 103.,  77., 103.,  96.,  85., 106.,  81.],
        [ 74., 128.,  92.,  84.,  93.,  77.,  80.,  95.,  91.,  71.],
        [128.,  84.,  93.,  82.,  81.,  77.,  97.,  97.,  69., 100.],
        [ 87.,  98.,  78.,  72., 138.,  81.,  92.,  90.,  90.,  94.],
        [ 78., 134.,  93.,  78., 101.,  65.,  77., 102.,  89.,  75.],
        [ 66.,  81.,  67.,  98., 132.,  94.,  87.,  95., 102.,  96.],
        [ 75.,  80.,  95.,  88.,  94.,  92.,  72.,  86.,  85., 135.],
        [ 92.,  89.,  97.,  62., 101., 110., 129.,  92., 106.,  95.],
        [ 89.,  72.,  84.,  87., 116.,  81.,  69., 109., 104., 130.],
        [149.,  79.,  99.,  93.,  77.,  97.,  94.,  96.,  96.,  96.],
        [107.,  91., 112.,  82., 105.,  90., 140.,  87., 104.,  77.],
        [ 79.,  82.,  75.,  77., 114.,  86.,  66.,  92.,  77., 137.],
        [129.,  85.,  99.,  89.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 68., 141.,  86.,  84.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  87., 100.,  77., 132.,  88.,  86., 107., 105.],
        [ 79.,  70.,  73.,  84., 105.,  83.,  78.,  98., 111., 131.],
        [ 84.,  84., 107., 102.,  75.,  83.,  55., 132.,  69.,  94.],
        [ 80.,  94., 101., 124.,  92.,  97.,  84.,  91., 107.,  88.],
        [ 77.,  84.,  83.,  81., 136.,  78.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 95.93%



iteration:
  345
    0  1359   bit_w:-1  loss: 0.06238
    1  1153   bit_w: 1  loss: 0.06233
    2  1143   bit_w:-1  loss: 0.06234
    3    99   bit_w:-1  loss: 0.06226
    4   151   bit_w: 1  loss: 0.06232
   1588   1079   2152   2783    987   1919   1664   4089    937   1920
      0      0      0      0      0      1      0      1      0      1
Train accuarcate: 98.22%
tensor([[ 82.,  83.,  92., 103.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 93., 109., 142., 103.,  77., 103.,  96.,  85., 106.,  81.],
        [ 74., 128.,  92.,  84.,  93.,  77.,  80.,  95.,  91.,  71.],
        [128.,  84.,  93.,  82.,  81.,  78.,  97.,  98.,  69., 101.],
        [ 87.,  98.,  78.,  72., 138.,  82.,  92.,  91.,  90.,  95.],
        [ 78., 134.,  93.,  78., 101.,  65.,  77., 102.,  89.,  75.],
        [ 66.,  81.,  67.,  98., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  80.,  95.,  88.,  94.,  92.,  72.,  86.,  85., 135.],
        [ 92.,  89.,  97.,  62., 101., 110., 129.,  92., 106.,  95.],
        [ 89.,  72.,  84.,  87., 116.,  81.,  69., 109., 104., 130.],
        [149.,  79.,  99.,  93.,  77.,  98.,  94.,  97.,  96.,  97.],
        [107.,  91., 112.,  82., 105.,  91., 140.,  88., 104.,  78.],
        [ 79.,  82.,  75.,  77., 114.,  86.,  66.,  92.,  77., 137.],
        [129.,  85.,  99.,  89.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 68., 141.,  86.,  84.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  87., 100.,  77., 133.,  88.,  87., 107., 106.],
        [ 79.,  70.,  73.,  84., 105.,  83.,  78.,  98., 111., 131.],
        [ 84.,  84., 107., 102.,  75.,  84.,  55., 133.,  69.,  95.],
        [ 80.,  94., 101., 124.,  92.,  98.,  84.,  92., 107.,  89.],
        [ 77.,  84.,  83.,  81., 136.,  78.,  80.,  96.,  88.,  96.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  346
    0  1481   bit_w:-1  loss: 0.06224
    1  1525   bit_w: 1  loss: 0.06217
    2  1436   bit_w:-1  loss: 0.06216
    3  1285   bit_w:-1  loss: 0.06207
    4   521   bit_w:-1  loss: 0.06209
   3833   4717   5003   3636   2805   2382   2017   5580   2210   3190
      0     -1      1      1     -1      0      0      0      0     -1
Train accuarcate: 98.22%
tensor([[ 82.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 93., 109., 143., 104.,  77., 103.,  96.,  85., 106.,  81.],
        [ 74., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [128.,  85.,  93.,  82.,  82.,  78.,  97.,  98.,  69., 102.],
        [ 87.,  99.,  78.,  72., 139.,  82.,  92.,  91.,  90.,  96.],
        [ 78., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 66.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  80.,  96.,  89.,  94.,  92.,  72.,  86.,  85., 135.],
        [ 92.,  89.,  98.,  63., 101., 110., 129.,  92., 106.,  95.],
        [ 89.,  73.,  84.,  87., 117.,  81.,  69., 109., 104., 131.],
        [149.,  79., 100.,  94.,  77.,  98.,  94.,  97.,  96.,  97.],
        [107.,  91., 113.,  83., 105.,  91., 140.,  88., 104.,  78.],
        [ 79.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [129.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 68., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 101.,  77., 133.,  88.,  87., 107., 106.],
        [ 79.,  70.,  74.,  85., 105.,  83.,  78.,  98., 111., 131.],
        [ 84.,  84., 108., 103.,  75.,  84.,  55., 133.,  69.,  95.],
        [ 80.,  94., 102., 125.,  92.,  98.,  84.,  92., 107.,  89.],
        [ 77.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.93%



iteration:
  347
    0  1562   bit_w:-1  loss: 0.06201
    1  1370   bit_w: 1  loss: 0.06195
    2   119   bit_w:-1  loss: 0.06196
    3   453   bit_w: 1  loss: 0.06192
    4   368   bit_w:-1  loss: 0.06194
   4247   6448   4609   5648   4239   4996   4913   3460   5048   4525
     -1     -1      0      0      0      0     -1     -1     -1      0
Train accuarcate: 98.23%
tensor([[ 82.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 93., 109., 143., 104.,  77., 103.,  96.,  85., 106.,  81.],
        [ 74., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [129.,  86.,  93.,  82.,  82.,  78.,  98.,  99.,  70., 102.],
        [ 87.,  99.,  78.,  72., 139.,  82.,  92.,  91.,  90.,  96.],
        [ 78., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 66.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  80.,  96.,  89.,  94.,  92.,  72.,  86.,  85., 135.],
        [ 92.,  89.,  98.,  63., 101., 110., 129.,  92., 106.,  95.],
        [ 90.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  98.,  95.,  98.,  97.,  97.],
        [107.,  91., 113.,  83., 105.,  91., 140.,  88., 104.,  78.],
        [ 79.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [129.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 68., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 101.,  77., 133.,  88.,  87., 107., 106.],
        [ 79.,  70.,  74.,  85., 105.,  83.,  78.,  98., 111., 131.],
        [ 84.,  84., 108., 103.,  75.,  84.,  55., 133.,  69.,  95.],
        [ 80.,  94., 102., 125.,  92.,  98.,  84.,  92., 107.,  89.],
        [ 77.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.92%



iteration:
  348
    0  1470   bit_w:-1  loss: 0.06189
    1  1580   bit_w:-1  loss: 0.06183
    2   192   bit_w:-1  loss: 0.06184
    3   592   bit_w: 1  loss: 0.06180
    4  1021   bit_w: 1  loss: 0.06181
   4957   6432   5633   5021   4696   3147   5561   2981   4438   3363
      1      0      0      0      0     -1     -1      0     -1      0
Train accuarcate: 98.23%
tensor([[ 83.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 94., 109., 143., 104.,  77., 103.,  96.,  85., 106.,  81.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  82.,  82.,  78.,  98.,  99.,  70., 102.],
        [ 88.,  99.,  78.,  72., 139.,  82.,  92.,  91.,  90.,  96.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  80.,  96.,  89.,  94.,  93.,  73.,  86.,  86., 135.],
        [ 92.,  89.,  98.,  63., 101., 111., 130.,  92., 107.,  95.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 101.,  77., 134.,  89.,  87., 108., 106.],
        [ 79.,  70.,  74.,  85., 105.,  84.,  79.,  98., 112., 131.],
        [ 84.,  84., 108., 103.,  75.,  85.,  56., 133.,  70.,  95.],
        [ 81.,  94., 102., 125.,  92.,  98.,  84.,  92., 107.,  89.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.92%



iteration:
  349
    0  1524   bit_w:-1  loss: 0.06176
    1  1531   bit_w: 1  loss: 0.06171
    2   482   bit_w: 1  loss: 0.06173
    3   623   bit_w:-1  loss: 0.06167
    4   173   bit_w: 1  loss: 0.06169
   1335    566   1540    442   1009    481   1446    479    292    187
      0      1      1      0      0      1      1      1      0      0
Train accuarcate: 98.23%
tensor([[ 83.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 94., 109., 143., 104.,  77., 103.,  96.,  85., 106.,  81.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  82.,  82.,  78.,  98.,  99.,  70., 102.],
        [ 88.,  99.,  78.,  72., 139.,  82.,  92.,  91.,  90.,  96.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  81.,  97.,  89.,  94.,  94.,  74.,  87.,  86., 135.],
        [ 92.,  89.,  98.,  63., 101., 111., 130.,  92., 107.,  95.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 101.,  77., 134.,  89.,  87., 108., 106.],
        [ 79.,  70.,  74.,  85., 105.,  84.,  79.,  98., 112., 131.],
        [ 84.,  84., 108., 103.,  75.,  85.,  56., 133.,  70.,  95.],
        [ 81.,  94., 102., 125.,  92.,  98.,  84.,  92., 107.,  89.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.95%



iteration:
  350
    0  1524   bit_w:-1  loss: 0.06164
    1  1550   bit_w:-1  loss: 0.06159
    2   303   bit_w:-1  loss: 0.06160
    3   340   bit_w: 1  loss: 0.06155
    4  1105   bit_w: 1  loss: 0.06158
   4185   6638   5028   5631   4800   4467   4876   5645   5071   4985
      0      0      0     -1     -1      0      0      0      0     -1
Train accuarcate: 98.24%
tensor([[ 83.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 94., 109., 143., 104.,  77., 103.,  96.,  85., 106.,  81.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  83.,  83.,  78.,  98.,  99.,  70., 103.],
        [ 88.,  99.,  78.,  73., 140.,  82.,  92.,  91.,  90.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  81.,  97.,  89.,  94.,  94.,  74.,  87.,  86., 135.],
        [ 92.,  89.,  98.,  64., 102., 111., 130.,  92., 107.,  96.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 101.,  77., 134.,  89.,  87., 108., 106.],
        [ 79.,  70.,  74.,  85., 105.,  84.,  79.,  98., 112., 131.],
        [ 84.,  84., 108., 103.,  75.,  85.,  56., 133.,  70.,  95.],
        [ 81.,  94., 102., 126.,  93.,  98.,  84.,  92., 107.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  351
    0  1046   bit_w:-1  loss: 0.06154
    1  1308   bit_w: 1  loss: 0.06148
    2   554   bit_w: 1  loss: 0.06145
    3   124   bit_w:-1  loss: 0.06143
    4  1168   bit_w:-1  loss: 0.06142
    991     39    959    460    534    632   1312    304   1391    888
      0      0      0      1      0      0      1      0      1      1
Train accuarcate: 98.24%
tensor([[ 83.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 94., 109., 143., 105.,  77., 103.,  97.,  85., 107.,  82.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  83.,  83.,  78.,  98.,  99.,  70., 103.],
        [ 88.,  99.,  78.,  73., 140.,  82.,  92.,  91.,  90.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  81.,  97.,  89.,  94.,  94.,  74.,  87.,  86., 135.],
        [ 92.,  89.,  98.,  64., 102., 111., 130.,  92., 107.,  96.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 102.,  77., 134.,  90.,  87., 109., 107.],
        [ 79.,  70.,  74.,  85., 105.,  84.,  79.,  98., 112., 131.],
        [ 84.,  84., 108., 103.,  75.,  85.,  56., 133.,  70.,  95.],
        [ 81.,  94., 102., 126.,  93.,  98.,  84.,  92., 107.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  352
    0    99   bit_w:-1  loss: 0.06138
    1  1550   bit_w:-1  loss: 0.06134
    2  1154   bit_w: 1  loss: 0.06135
    3   218   bit_w: 1  loss: 0.06132
    4  1115   bit_w: 1  loss: 0.06133
   5126   6700   4489   5432   5615   4332   4184   6106   5533   5826
      0      0     -1     -1     -1     -1      0      0      0      0
Train accuarcate: 98.24%
tensor([[ 83.,  83.,  93., 104.,  88.,  89.,  66., 144.,  81.,  80.],
        [ 94., 109., 143., 105.,  77., 103.,  97.,  85., 107.,  82.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  83.,  83.,  78.,  98.,  99.,  70., 103.],
        [ 88.,  99.,  78.,  73., 140.,  82.,  92.,  91.,  90.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  81.,  97.,  89.,  94.,  94.,  74.,  87.,  86., 135.],
        [ 92.,  89.,  98.,  64., 102., 111., 130.,  92., 107.,  96.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  82.,  76.,  78., 114.,  86.,  66.,  92.,  77., 137.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 102.,  77., 134.,  90.,  87., 109., 107.],
        [ 79.,  70.,  74.,  85., 105.,  84.,  79.,  98., 112., 131.],
        [ 84.,  84., 108., 103.,  75.,  85.,  56., 133.,  70.,  95.],
        [ 81.,  94., 102., 126.,  93.,  98.,  84.,  92., 107.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  353
    0  1099   bit_w:-1  loss: 0.06129
    1   413   bit_w:-1  loss: 0.06122
    2  1511   bit_w:-1  loss: 0.06124
    3   984   bit_w: 1  loss: 0.06114
    4   556   bit_w: 1  loss: 0.06121
    440    212   2238   2885    997   1559    201   3348   2127   2715
      0      1      0      0      0      0      0      1      0      1
Train accuarcate: 98.25%
tensor([[ 83.,  84.,  93., 104.,  88.,  89.,  66., 145.,  81.,  81.],
        [ 94., 110., 143., 105.,  77., 103.,  97.,  86., 107.,  83.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  86.,  93.,  83.,  83.,  78.,  98.,  99.,  70., 103.],
        [ 88.,  99.,  78.,  73., 140.,  82.,  92.,  91.,  90.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  81.,  97.,  89.,  94.,  94.,  74.,  87.,  86., 135.],
        [ 92.,  89.,  98.,  64., 102., 111., 130.,  92., 107.,  96.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  83.,  76.,  78., 114.,  86.,  66.,  93.,  77., 138.],
        [130.,  85., 100.,  90.,  86.,  79.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  91.,  88., 102.,  77., 134.,  90.,  87., 109., 107.],
        [ 79.,  71.,  74.,  85., 105.,  84.,  79.,  99., 112., 132.],
        [ 84.,  85., 108., 103.,  75.,  85.,  56., 134.,  70.,  96.],
        [ 81.,  94., 102., 126.,  93.,  98.,  84.,  92., 107.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  354
    0  1105   bit_w:-1  loss: 0.06117
    1  1518   bit_w:-1  loss: 0.06113
    2   162   bit_w:-1  loss: 0.06114
    3  1141   bit_w:-1  loss: 0.06108
    4   961   bit_w: 1  loss: 0.06111
   3492   6183   4040   1288   4229   2100   4484   4730   3965   4140
      0     -1      0     -1      0     -1      0      0      0      0
Train accuarcate: 98.26%
tensor([[ 83.,  84.,  93., 104.,  88.,  89.,  66., 145.,  81.,  81.],
        [ 94., 111., 143., 106.,  77., 104.,  97.,  86., 107.,  83.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  80.,  95.,  91.,  71.],
        [130.,  87.,  93.,  84.,  83.,  79.,  98.,  99.,  70., 103.],
        [ 88.,  99.,  78.,  73., 140.,  82.,  92.,  91.,  90.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  77., 102.,  89.,  75.],
        [ 67.,  81.,  68.,  99., 132.,  95.,  87.,  96., 102.,  97.],
        [ 75.,  82.,  97.,  90.,  94.,  95.,  74.,  87.,  86., 135.],
        [ 92.,  90.,  98.,  65., 102., 112., 130.,  92., 107.,  96.],
        [ 91.,  74.,  84.,  87., 117.,  81.,  70., 110., 105., 131.],
        [150.,  80., 100.,  94.,  77.,  99.,  96.,  98.,  98.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 141.,  88., 105.,  78.],
        [ 80.,  84.,  76.,  79., 114.,  87.,  66.,  93.,  77., 138.],
        [130.,  86., 100.,  91.,  86.,  80.,  92.,  96.,  95.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  83.,  93.,  95.,  87.],
        [ 93.,  92.,  88., 103.,  77., 135.,  90.,  87., 109., 107.],
        [ 79.,  72.,  74.,  86., 105.,  85.,  79.,  99., 112., 132.],
        [ 84.,  85., 108., 103.,  75.,  85.,  56., 134.,  70.,  96.],
        [ 81.,  95., 102., 127.,  93.,  99.,  84.,  92., 107.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  80.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  355
    0   633   bit_w:-1  loss: 0.06104
    1   869   bit_w:-1  loss: 0.06096
    2  1330   bit_w:-1  loss: 0.06097
    3    97   bit_w: 1  loss: 0.06092
    4   152   bit_w:-1  loss: 0.06093
   3463   5863   2725   1781   4283   3241   4717   4085   2641   4391
      0      0     -1      0      0      0      1     -1     -1      0
Train accuarcate: 98.28%
tensor([[ 83.,  84.,  94., 104.,  88.,  89.,  66., 146.,  82.,  81.],
        [ 94., 111., 144., 106.,  77., 104.,  97.,  87., 108.,  83.],
        [ 75., 128.,  93.,  85.,  93.,  77.,  81.,  95.,  91.,  71.],
        [130.,  87.,  93.,  84.,  83.,  79.,  99.,  99.,  70., 103.],
        [ 88.,  99.,  79.,  73., 140.,  82.,  92.,  92.,  91.,  97.],
        [ 79., 134.,  94.,  79., 101.,  65.,  78., 102.,  89.,  75.],
        [ 67.,  81.,  69.,  99., 132.,  95.,  87.,  97., 103.,  97.],
        [ 75.,  82.,  97.,  90.,  94.,  95.,  75.,  87.,  86., 135.],
        [ 92.,  90.,  98.,  65., 102., 112., 131.,  92., 107.,  96.],
        [ 91.,  74.,  85.,  87., 117.,  81.,  70., 111., 106., 131.],
        [150.,  80., 101.,  94.,  77.,  99.,  96.,  99.,  99.,  97.],
        [107.,  91., 113.,  83., 105.,  92., 142.,  88., 105.,  78.],
        [ 80.,  84.,  76.,  79., 114.,  87.,  67.,  93.,  77., 138.],
        [130.,  86., 101.,  91.,  86.,  80.,  92.,  97.,  96.,  92.],
        [ 69., 141.,  87.,  85.,  82.,  80.,  84.,  93.,  95.,  87.],
        [ 93.,  92.,  89., 103.,  77., 135.,  90.,  88., 110., 107.],
        [ 79.,  72.,  74.,  86., 105.,  85.,  80.,  99., 112., 132.],
        [ 84.,  85., 108., 103.,  75.,  85.,  57., 134.,  70.,  96.],
        [ 81.,  95., 103., 127.,  93.,  99.,  84.,  93., 108.,  90.],
        [ 78.,  85.,  83.,  81., 137.,  78.,  81.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  356
    0  1336   bit_w:-1  loss: 0.06087
    1  1362   bit_w: 1  loss: 0.06079
    2   817   bit_w: 1  loss: 0.06080
    3   377   bit_w:-1  loss: 0.06075
    4   963   bit_w: 1  loss: 0.06074
   4130   2728   3412   1323   1523   2611   4732    770   1178   1174
      1      0      0      0     -1      0      0      0      0      1
Train accuarcate: 98.29%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  81.],
        [ 94., 111., 144., 106.,  78., 104.,  97.,  87., 108.,  83.],
        [ 76., 128.,  93.,  85.,  93.,  77.,  81.,  95.,  91.,  72.],
        [131.,  87.,  93.,  84.,  83.,  79.,  99.,  99.,  70., 104.],
        [ 88.,  99.,  79.,  73., 141.,  82.,  92.,  92.,  91.,  97.],
        [ 79., 134.,  94.,  79., 102.,  65.,  78., 102.,  89.,  75.],
        [ 67.,  81.,  69.,  99., 133.,  95.,  87.,  97., 103.,  97.],
        [ 76.,  82.,  97.,  90.,  94.,  95.,  75.,  87.,  86., 136.],
        [ 93.,  90.,  98.,  65., 102., 112., 131.,  92., 107.,  97.],
        [ 91.,  74.,  85.,  87., 118.,  81.,  70., 111., 106., 131.],
        [151.,  80., 101.,  94.,  77.,  99.,  96.,  99.,  99.,  98.],
        [107.,  91., 113.,  83., 106.,  92., 142.,  88., 105.,  78.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 138.],
        [130.,  86., 101.,  91.,  87.,  80.,  92.,  97.,  96.,  92.],
        [ 70., 141.,  87.,  85.,  82.,  80.,  84.,  93.,  95.,  88.],
        [ 94.,  92.,  89., 103.,  77., 135.,  90.,  88., 110., 108.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 132.],
        [ 85.,  85., 108., 103.,  75.,  85.,  57., 134.,  70.,  97.],
        [ 81.,  95., 103., 127.,  94.,  99.,  84.,  93., 108.,  90.],
        [ 78.,  85.,  83.,  81., 138.,  78.,  81.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  357
    0   650   bit_w:-1  loss: 0.06071
    1  1553   bit_w: 1  loss: 0.06068
    2   456   bit_w:-1  loss: 0.06065
    3   287   bit_w: 1  loss: 0.06062
    4   453   bit_w:-1  loss: 0.06060
   2488   6569   3880   5834   4586   5127   3516   6057   5254   5484
      0      0     -1      0      0      0     -1      0      0      0
Train accuarcate: 98.29%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  81.],
        [ 94., 111., 144., 106.,  78., 104.,  97.,  87., 108.,  83.],
        [ 76., 128.,  93.,  85.,  93.,  77.,  81.,  95.,  91.,  72.],
        [131.,  87.,  94.,  84.,  83.,  79., 100.,  99.,  70., 104.],
        [ 88.,  99.,  79.,  73., 141.,  82.,  92.,  92.,  91.,  97.],
        [ 79., 134.,  94.,  79., 102.,  65.,  78., 102.,  89.,  75.],
        [ 67.,  81.,  69.,  99., 133.,  95.,  87.,  97., 103.,  97.],
        [ 76.,  82.,  97.,  90.,  94.,  95.,  75.,  87.,  86., 136.],
        [ 93.,  90.,  98.,  65., 102., 112., 131.,  92., 107.,  97.],
        [ 91.,  74.,  85.,  87., 118.,  81.,  70., 111., 106., 131.],
        [151.,  80., 102.,  94.,  77.,  99.,  97.,  99.,  99.,  98.],
        [107.,  91., 114.,  83., 106.,  92., 143.,  88., 105.,  78.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 138.],
        [130.,  86., 102.,  91.,  87.,  80.,  93.,  97.,  96.,  92.],
        [ 70., 141.,  87.,  85.,  82.,  80.,  84.,  93.,  95.,  88.],
        [ 94.,  92.,  89., 103.,  77., 135.,  90.,  88., 110., 108.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 132.],
        [ 85.,  85., 108., 103.,  75.,  85.,  57., 134.,  70.,  97.],
        [ 81.,  95., 103., 127.,  94.,  99.,  84.,  93., 108.,  90.],
        [ 78.,  85.,  83.,  81., 138.,  78.,  81.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  358
    0  1472   bit_w:-1  loss: 0.06056
    1   865   bit_w:-1  loss: 0.06050
    2  1196   bit_w:-1  loss: 0.06049
    3  1262   bit_w:-1  loss: 0.06041
    4  1105   bit_w: 1  loss: 0.06045
   4755   6287   4838   4002   4498   3059   5091   4530   4303   4377
      0      0      0     -1      0     -1      0      0      0      0
Train accuarcate: 98.30%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  81.],
        [ 94., 111., 144., 106.,  78., 104.,  97.,  87., 108.,  83.],
        [ 76., 128.,  93.,  85.,  93.,  77.,  81.,  95.,  91.,  72.],
        [131.,  87.,  94.,  84.,  83.,  79., 100.,  99.,  70., 104.],
        [ 88.,  99.,  79.,  73., 141.,  82.,  92.,  92.,  91.,  97.],
        [ 79., 134.,  94.,  79., 102.,  65.,  78., 102.,  89.,  75.],
        [ 67.,  81.,  69.,  99., 133.,  95.,  87.,  97., 103.,  97.],
        [ 76.,  82.,  97.,  91.,  94.,  96.,  75.,  87.,  86., 136.],
        [ 93.,  90.,  98.,  65., 102., 112., 131.,  92., 107.,  97.],
        [ 91.,  74.,  85.,  87., 118.,  81.,  70., 111., 106., 131.],
        [151.,  80., 102.,  94.,  77.,  99.,  97.,  99.,  99.,  98.],
        [107.,  91., 114.,  83., 106.,  92., 143.,  88., 105.,  78.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 138.],
        [130.,  86., 102.,  91.,  87.,  80.,  93.,  97.,  96.,  92.],
        [ 70., 141.,  87.,  85.,  82.,  80.,  84.,  93.,  95.,  88.],
        [ 94.,  92.,  89., 103.,  77., 135.,  90.,  88., 110., 108.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 132.],
        [ 85.,  85., 108., 103.,  75.,  85.,  57., 134.,  70.,  97.],
        [ 81.,  95., 103., 127.,  94.,  99.,  84.,  93., 108.,  90.],
        [ 78.,  85.,  83.,  82., 138.,  79.,  81.,  96.,  88.,  97.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  359
    0  1572   bit_w:-1  loss: 0.06040
    1   232   bit_w:-1  loss: 0.06036
    2   258   bit_w: 1  loss: 0.06036
    3  1505   bit_w:-1  loss: 0.06032
    4   831   bit_w:-1  loss: 0.06033
   3231   5471   1430   4133   1214   3101   1581    659   3689   1334
      1      0      0      0      0      0      0      0      1     -1
Train accuarcate: 98.28%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  82.],
        [ 95., 111., 144., 106.,  78., 104.,  97.,  87., 109.,  83.],
        [ 76., 128.,  93.,  85.,  93.,  77.,  81.,  95.,  91.,  73.],
        [131.,  87.,  94.,  84.,  83.,  79., 100.,  99.,  70., 105.],
        [ 88.,  99.,  79.,  73., 141.,  82.,  92.,  92.,  91.,  98.],
        [ 80., 134.,  94.,  79., 102.,  65.,  78., 102.,  90.,  75.],
        [ 67.,  81.,  69.,  99., 133.,  95.,  87.,  97., 103.,  98.],
        [ 76.,  82.,  97.,  91.,  94.,  96.,  75.,  87.,  86., 137.],
        [ 93.,  90.,  98.,  65., 102., 112., 131.,  92., 107.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  80., 102.,  94.,  77.,  99.,  97.,  99., 100.,  98.],
        [107.,  91., 114.,  83., 106.,  92., 143.,  88., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  86., 102.,  91.,  87.,  80.,  93.,  97.,  96.,  93.],
        [ 71., 141.,  87.,  85.,  82.,  80.,  84.,  93.,  96.,  88.],
        [ 94.,  92.,  89., 103.,  77., 135.,  90.,  88., 110., 109.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  85., 108., 103.,  75.,  85.,  57., 134.,  70.,  98.],
        [ 82.,  95., 103., 127.,  94.,  99.,  84.,  93., 109.,  90.],
        [ 78.,  85.,  83.,  82., 138.,  79.,  81.,  96.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.04%



iteration:
  360
    0  1546   bit_w:-1  loss: 0.06024
    1  1351   bit_w:-1  loss: 0.06016
    2  1458   bit_w:-1  loss: 0.06018
    3  1582   bit_w:-1  loss: 0.06010
    4   680   bit_w: 1  loss: 0.06014
   3219   5286   2796   1389   3283   1928   2064   2730   2320   2911
      0      1      0      0      1      0      0      1      0      0
Train accuarcate: 98.28%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  82.],
        [ 95., 111., 144., 106.,  78., 104.,  97.,  87., 109.,  83.],
        [ 76., 129.,  93.,  85.,  94.,  77.,  81.,  96.,  91.,  73.],
        [131.,  88.,  94.,  84.,  84.,  79., 100., 100.,  70., 105.],
        [ 88., 100.,  79.,  73., 142.,  82.,  92.,  93.,  91.,  98.],
        [ 80., 135.,  94.,  79., 103.,  65.,  78., 103.,  90.,  75.],
        [ 67.,  81.,  69.,  99., 133.,  95.,  87.,  97., 103.,  98.],
        [ 76.,  82.,  97.,  91.,  94.,  96.,  75.,  87.,  86., 137.],
        [ 93.,  91.,  98.,  65., 103., 112., 131.,  93., 107.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 102.,  94.,  78.,  99.,  97., 100., 100.,  98.],
        [107.,  92., 114.,  83., 107.,  92., 143.,  89., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  87., 102.,  91.,  88.,  80.,  93.,  98.,  96.,  93.],
        [ 71., 142.,  87.,  85.,  83.,  80.,  84.,  94.,  96.,  88.],
        [ 94.,  93.,  89., 103.,  78., 135.,  90.,  89., 110., 109.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  86., 108., 103.,  76.,  85.,  57., 135.,  70.,  98.],
        [ 82.,  95., 103., 127.,  94.,  99.,  84.,  93., 109.,  90.],
        [ 78.,  86.,  83.,  82., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  361
    0  1395   bit_w:-1  loss: 0.06010
    1  1354   bit_w: 1  loss: 0.06003
    2   843   bit_w:-1  loss: 0.05999
    3  1498   bit_w: 1  loss: 0.05993
    4   201   bit_w:-1  loss: 0.05993
   4832   6483   3778   3651   4943   2995   4003   5110   4359   4415
      0      0     -1     -1      0     -1     -1     -1      0      0
Train accuarcate: 98.30%
tensor([[ 83.,  84.,  94., 104.,  89.,  89.,  66., 146.,  82.,  82.],
        [ 95., 111., 144., 106.,  78., 104.,  97.,  87., 109.,  83.],
        [ 76., 129.,  93.,  85.,  94.,  77.,  81.,  96.,  91.,  73.],
        [131.,  88.,  95.,  85.,  84.,  80., 101., 101.,  70., 105.],
        [ 88., 100.,  79.,  73., 142.,  82.,  92.,  93.,  91.,  98.],
        [ 80., 135.,  94.,  79., 103.,  65.,  78., 103.,  90.,  75.],
        [ 67.,  81.,  70., 100., 133.,  96.,  88.,  98., 103.,  98.],
        [ 76.,  82.,  97.,  91.,  94.,  96.,  75.,  87.,  86., 137.],
        [ 93.,  91.,  98.,  65., 103., 112., 131.,  93., 107.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 103.,  95.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  92., 114.,  83., 107.,  92., 143.,  89., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  87., 102.,  91.,  88.,  80.,  93.,  98.,  96.,  93.],
        [ 71., 142.,  87.,  85.,  83.,  80.,  84.,  94.,  96.,  88.],
        [ 94.,  93.,  90., 104.,  78., 136.,  91.,  90., 110., 109.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  86., 109., 104.,  76.,  86.,  58., 136.,  70.,  98.],
        [ 82.,  95., 103., 127.,  94.,  99.,  84.,  93., 109.,  90.],
        [ 78.,  86.,  83.,  82., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  362
    0   413   bit_w:-1  loss: 0.05990
    1  1543   bit_w: 1  loss: 0.05984
    2  1028   bit_w: 1  loss: 0.05985
    3  1070   bit_w: 1  loss: 0.05978
    4  1164   bit_w:-1  loss: 0.05979
    509    529   2413   1982   1156    758    414   1904    556    459
      0      0      1      1      1      1      0      0      0      0
Train accuarcate: 98.30%
tensor([[ 83.,  84.,  95., 105.,  90.,  90.,  66., 146.,  82.,  82.],
        [ 95., 111., 145., 107.,  79., 105.,  97.,  87., 109.,  83.],
        [ 76., 129.,  93.,  85.,  94.,  77.,  81.,  96.,  91.,  73.],
        [131.,  88.,  95.,  85.,  84.,  80., 101., 101.,  70., 105.],
        [ 88., 100.,  79.,  73., 142.,  82.,  92.,  93.,  91.,  98.],
        [ 80., 135.,  94.,  79., 103.,  65.,  78., 103.,  90.,  75.],
        [ 67.,  81.,  70., 100., 133.,  96.,  88.,  98., 103.,  98.],
        [ 76.,  82.,  98.,  92.,  95.,  97.,  75.,  87.,  86., 137.],
        [ 93.,  91.,  99.,  66., 104., 113., 131.,  93., 107.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 103.,  95.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  92., 114.,  83., 107.,  92., 143.,  89., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  87., 102.,  91.,  88.,  80.,  93.,  98.,  96.,  93.],
        [ 71., 142.,  87.,  85.,  83.,  80.,  84.,  94.,  96.,  88.],
        [ 94.,  93.,  91., 105.,  79., 137.,  91.,  90., 110., 109.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  86., 109., 104.,  76.,  86.,  58., 136.,  70.,  98.],
        [ 82.,  95., 103., 127.,  94.,  99.,  84.,  93., 109.,  90.],
        [ 78.,  86.,  83.,  82., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.01%



iteration:
  363
    0  1461   bit_w:-1  loss: 0.05974
    1  1019   bit_w: 1  loss: 0.05970
    2  1120   bit_w:-1  loss: 0.05967
    3  1063   bit_w: 1  loss: 0.05965
    4   582   bit_w:-1  loss: 0.05964
   3457   6677   3995   4915   4829   4307   5094   5882   4454   5088
     -1      0      0      0      0      0     -1      0     -1     -1
Train accuarcate: 98.31%
tensor([[ 83.,  84.,  95., 105.,  90.,  90.,  66., 146.,  82.,  82.],
        [ 95., 111., 145., 107.,  79., 105.,  97.,  87., 109.,  83.],
        [ 76., 129.,  93.,  85.,  94.,  77.,  81.,  96.,  91.,  73.],
        [131.,  88.,  95.,  85.,  84.,  80., 101., 101.,  70., 105.],
        [ 88., 100.,  79.,  73., 142.,  82.,  92.,  93.,  91.,  98.],
        [ 80., 135.,  94.,  79., 103.,  65.,  78., 103.,  90.,  75.],
        [ 67.,  81.,  70., 100., 133.,  96.,  88.,  98., 103.,  98.],
        [ 76.,  82.,  98.,  92.,  95.,  97.,  75.,  87.,  86., 137.],
        [ 93.,  91.,  99.,  66., 104., 113., 131.,  93., 107.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 103.,  95.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  92., 114.,  83., 107.,  92., 143.,  89., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  87., 102.,  91.,  88.,  80.,  93.,  98.,  96.,  93.],
        [ 71., 142.,  87.,  85.,  83.,  80.,  84.,  94.,  96.,  88.],
        [ 95.,  93.,  91., 105.,  79., 137.,  92.,  90., 111., 110.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  86., 109., 104.,  76.,  86.,  58., 136.,  70.,  98.],
        [ 83.,  95., 103., 127.,  94.,  99.,  85.,  93., 110.,  91.],
        [ 78.,  86.,  83.,  82., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.06%



iteration:
  364
    0  1573   bit_w:-1  loss: 0.05960
    1  1530   bit_w:-1  loss: 0.05955
    2  1135   bit_w:-1  loss: 0.05957
    3  1057   bit_w: 1  loss: 0.05948
    4  1518   bit_w: 1  loss: 0.05954
   1678    277   2102   1396    677    650    505   1747   2061   2012
      0      0      1      0      0      0      0      0      1      0
Train accuarcate: 98.31%
tensor([[ 83.,  84.,  95., 105.,  90.,  90.,  66., 146.,  82.,  82.],
        [ 95., 111., 145., 107.,  79., 105.,  97.,  87., 109.,  83.],
        [ 76., 129.,  93.,  85.,  94.,  77.,  81.,  96.,  91.,  73.],
        [131.,  88.,  95.,  85.,  84.,  80., 101., 101.,  70., 105.],
        [ 88., 100.,  79.,  73., 142.,  82.,  92.,  93.,  91.,  98.],
        [ 80., 135.,  94.,  79., 103.,  65.,  78., 103.,  90.,  75.],
        [ 67.,  81.,  70., 100., 133.,  96.,  88.,  98., 103.,  98.],
        [ 76.,  82.,  99.,  92.,  95.,  97.,  75.,  87.,  87., 137.],
        [ 93.,  91., 100.,  66., 104., 113., 131.,  93., 108.,  98.],
        [ 92.,  74.,  85.,  87., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 103.,  95.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  92., 114.,  83., 107.,  92., 143.,  89., 105.,  79.],
        [ 80.,  84.,  76.,  79., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  87., 103.,  91.,  88.,  80.,  93.,  98.,  97.,  93.],
        [ 71., 142.,  87.,  85.,  83.,  80.,  84.,  94.,  96.,  88.],
        [ 95.,  93.,  91., 105.,  79., 137.,  92.,  90., 111., 110.],
        [ 79.,  72.,  74.,  86., 106.,  85.,  80.,  99., 112., 133.],
        [ 85.,  86., 109., 104.,  76.,  86.,  58., 136.,  70.,  98.],
        [ 83.,  95., 103., 127.,  94.,  99.,  85.,  93., 110.,  91.],
        [ 78.,  86.,  83.,  82., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.06%



iteration:
  365
    0  1052   bit_w:-1  loss: 0.05949
    1   177   bit_w:-1  loss: 0.05942
    2   260   bit_w: 1  loss: 0.05942
    3  1019   bit_w:-1  loss: 0.05934
    4   928   bit_w:-1  loss: 0.05936
   3539   5423   4096   3232   2928   3319   4574   4109   3872   2601
      0      1     -1     -1      0      0      0      1      0      0
Train accuarcate: 98.31%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  82.],
        [ 95., 111., 146., 108.,  79., 105.,  97.,  87., 109.,  83.],
        [ 76., 130.,  93.,  85.,  94.,  77.,  81.,  97.,  91.,  73.],
        [131.,  89.,  95.,  85.,  84.,  80., 101., 102.,  70., 105.],
        [ 88., 101.,  79.,  73., 142.,  82.,  92.,  94.,  91.,  98.],
        [ 80., 136.,  94.,  79., 103.,  65.,  78., 104.,  90.,  75.],
        [ 67.,  81.,  71., 101., 133.,  96.,  88.,  98., 103.,  98.],
        [ 76.,  82., 100.,  93.,  95.,  97.,  75.,  87.,  87., 137.],
        [ 93.,  92., 100.,  66., 104., 113., 131.,  94., 108.,  98.],
        [ 92.,  74.,  86.,  88., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 104.,  96.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  93., 114.,  83., 107.,  92., 143.,  90., 105.,  79.],
        [ 80.,  84.,  77.,  80., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  88., 103.,  91.,  88.,  80.,  93.,  99.,  97.,  93.],
        [ 71., 143.,  87.,  85.,  83.,  80.,  84.,  95.,  96.,  88.],
        [ 95.,  94.,  91., 105.,  79., 137.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 106.,  85.,  80., 100., 112., 133.],
        [ 85.,  86., 110., 105.,  76.,  86.,  58., 136.,  70.,  98.],
        [ 83.,  95., 104., 128.,  94.,  99.,  85.,  93., 110.,  91.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.04%



iteration:
  366
    0  1575   bit_w:-1  loss: 0.05931
    1   964   bit_w: 1  loss: 0.05926
    2  1062   bit_w: 1  loss: 0.05927
    3   682   bit_w: 1  loss: 0.05919
    4  1078   bit_w:-1  loss: 0.05925
   1980   1101   2049   1816    719   1369    972   2454   1882   1018
      0      0      0      1      0      0      1      0      1      1
Train accuarcate: 98.33%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  82.],
        [ 95., 111., 146., 109.,  79., 105.,  98.,  87., 110.,  84.],
        [ 76., 130.,  93.,  85.,  94.,  77.,  81.,  97.,  91.,  73.],
        [131.,  89.,  95.,  85.,  84.,  80., 101., 102.,  70., 105.],
        [ 88., 101.,  79.,  73., 142.,  82.,  92.,  94.,  91.,  98.],
        [ 80., 136.,  94.,  79., 103.,  65.,  78., 104.,  90.,  75.],
        [ 67.,  81.,  71., 102., 133.,  96.,  89.,  98., 104.,  99.],
        [ 76.,  82., 100.,  93.,  95.,  97.,  75.,  87.,  87., 137.],
        [ 93.,  92., 100.,  66., 104., 113., 131.,  94., 108.,  98.],
        [ 92.,  74.,  86.,  88., 118.,  81.,  70., 111., 107., 131.],
        [152.,  81., 104.,  96.,  78., 100.,  98., 101., 100.,  98.],
        [107.,  93., 114.,  83., 107.,  92., 143.,  90., 105.,  79.],
        [ 80.,  84.,  77.,  80., 115.,  87.,  67.,  93.,  77., 139.],
        [130.,  88., 103.,  91.,  88.,  80.,  93.,  99.,  97.,  93.],
        [ 71., 143.,  87.,  85.,  83.,  80.,  84.,  95.,  96.,  88.],
        [ 95.,  94.,  91., 105.,  79., 137.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 106.,  85.,  80., 100., 112., 133.],
        [ 85.,  86., 110., 106.,  76.,  86.,  59., 136.,  71.,  99.],
        [ 83.,  95., 104., 129.,  94.,  99.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  98.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  367
    0  1190   bit_w:-1  loss: 0.05916
    1   457   bit_w:-1  loss: 0.05908
    2   123   bit_w: 1  loss: 0.05912
    3  1073   bit_w: 1  loss: 0.05904
    4  1450   bit_w:-1  loss: 0.05909
   4677   6510   3032   2596   2391   4870   5227   4079   2743   2434
      1      0      0      0      1      1      0      0      0     -1
Train accuarcate: 98.32%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  83.],
        [ 96., 111., 146., 109.,  80., 106.,  98.,  87., 110.,  84.],
        [ 77., 130.,  93.,  85.,  95.,  78.,  81.,  97.,  91.,  73.],
        [132.,  89.,  95.,  85.,  85.,  81., 101., 102.,  70., 105.],
        [ 88., 101.,  79.,  73., 142.,  82.,  92.,  94.,  91.,  99.],
        [ 81., 136.,  94.,  79., 104.,  66.,  78., 104.,  90.,  75.],
        [ 68.,  81.,  71., 102., 134.,  97.,  89.,  98., 104.,  99.],
        [ 77.,  82., 100.,  93.,  96.,  98.,  75.,  87.,  87., 137.],
        [ 94.,  92., 100.,  66., 105., 114., 131.,  94., 108.,  98.],
        [ 93.,  74.,  86.,  88., 119.,  82.,  70., 111., 107., 131.],
        [153.,  81., 104.,  96.,  79., 101.,  98., 101., 100.,  98.],
        [108.,  93., 114.,  83., 108.,  93., 143.,  90., 105.,  79.],
        [ 80.,  84.,  77.,  80., 115.,  87.,  67.,  93.,  77., 140.],
        [130.,  88., 103.,  91.,  88.,  80.,  93.,  99.,  97.,  94.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  84.,  95.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 106.,  85.,  80., 100., 112., 134.],
        [ 85.,  86., 110., 106.,  76.,  86.,  59., 136.,  71., 100.],
        [ 84.,  95., 104., 129.,  95., 100.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.04%



iteration:
  368
    0  1577   bit_w:-1  loss: 0.05904
    1  1331   bit_w: 1  loss: 0.05896
    2   747   bit_w:-1  loss: 0.05897
    3  1528   bit_w: 1  loss: 0.05894
    4  1539   bit_w:-1  loss: 0.05896
   2447   6262   5106   5727   4334   3559   3484   4910   3373   2864
      0      0      0      0     -1      0     -1     -1     -1      0
Train accuarcate: 98.33%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  83.],
        [ 96., 111., 146., 109.,  80., 106.,  98.,  87., 110.,  84.],
        [ 77., 130.,  93.,  85.,  95.,  78.,  81.,  97.,  91.,  73.],
        [132.,  89.,  95.,  85.,  85.,  81., 101., 102.,  70., 105.],
        [ 88., 101.,  79.,  73., 142.,  82.,  92.,  94.,  91.,  99.],
        [ 81., 136.,  94.,  79., 104.,  66.,  78., 104.,  90.,  75.],
        [ 68.,  81.,  71., 102., 134.,  97.,  89.,  98., 104.,  99.],
        [ 77.,  82., 100.,  93.,  96.,  98.,  75.,  87.,  87., 137.],
        [ 94.,  92., 100.,  66., 106., 114., 132.,  95., 109.,  98.],
        [ 93.,  74.,  86.,  88., 120.,  82.,  71., 112., 108., 131.],
        [153.,  81., 104.,  96.,  79., 101.,  98., 101., 100.,  98.],
        [108.,  93., 114.,  83., 108.,  93., 143.,  90., 105.,  79.],
        [ 80.,  84.,  77.,  80., 116.,  87.,  68.,  94.,  78., 140.],
        [130.,  88., 103.,  91.,  89.,  80.,  94., 100.,  98.,  94.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  84.,  95.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 107.,  85.,  81., 101., 113., 134.],
        [ 85.,  86., 110., 106.,  76.,  86.,  59., 136.,  71., 100.],
        [ 84.,  95., 104., 129.,  95., 100.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  369
    0  1554   bit_w:-1  loss: 0.05892
    1   988   bit_w: 1  loss: 0.05887
    2   692   bit_w:-1  loss: 0.05888
    3  1153   bit_w:-1  loss: 0.05881
    4   749   bit_w:-1  loss: 0.05885
   3672   6733   5367   5899   4643   5278   4865   4170   5466   4259
     -1      0      0      0      0      0     -1      0      0     -1
Train accuarcate: 98.34%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  83.],
        [ 96., 111., 146., 109.,  80., 106.,  98.,  87., 110.,  84.],
        [ 77., 130.,  93.,  85.,  95.,  78.,  81.,  97.,  91.,  73.],
        [133.,  89.,  95.,  85.,  85.,  81., 102., 102.,  70., 106.],
        [ 88., 101.,  79.,  73., 142.,  82.,  92.,  94.,  91.,  99.],
        [ 81., 136.,  94.,  79., 104.,  66.,  78., 104.,  90.,  75.],
        [ 68.,  81.,  71., 102., 134.,  97.,  89.,  98., 104.,  99.],
        [ 77.,  82., 100.,  93.,  96.,  98.,  75.,  87.,  87., 137.],
        [ 94.,  92., 100.,  66., 106., 114., 132.,  95., 109.,  98.],
        [ 94.,  74.,  86.,  88., 120.,  82.,  72., 112., 108., 132.],
        [153.,  81., 104.,  96.,  79., 101.,  98., 101., 100.,  98.],
        [108.,  93., 114.,  83., 108.,  93., 143.,  90., 105.,  79.],
        [ 80.,  84.,  77.,  80., 116.,  87.,  68.,  94.,  78., 140.],
        [131.,  88., 103.,  91.,  89.,  80.,  95., 100.,  98.,  95.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  84.,  95.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 107.,  85.,  81., 101., 113., 134.],
        [ 86.,  86., 110., 106.,  76.,  86.,  60., 136.,  71., 101.],
        [ 84.,  95., 104., 129.,  95., 100.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  370
    0  1554   bit_w:-1  loss: 0.05880
    1   981   bit_w: 1  loss: 0.05875
    2   690   bit_w:-1  loss: 0.05877
    3    99   bit_w: 1  loss: 0.05872
    4   564   bit_w:-1  loss: 0.05876
   3036   6713   4911   5434   3776   4961   4489   5815   5625   4625
     -1      0      0      0     -1     -1      0     -1      0      0
Train accuarcate: 98.35%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 147.,  82.,  83.],
        [ 96., 111., 146., 109.,  80., 106.,  98.,  87., 110.,  84.],
        [ 77., 130.,  93.,  85.,  95.,  78.,  81.,  97.,  91.,  73.],
        [134.,  89.,  95.,  85.,  86.,  82., 102., 103.,  70., 106.],
        [ 89., 101.,  79.,  73., 143.,  83.,  92.,  95.,  91.,  99.],
        [ 81., 136.,  94.,  79., 104.,  66.,  78., 104.,  90.,  75.],
        [ 68.,  81.,  71., 102., 134.,  97.,  89.,  98., 104.,  99.],
        [ 77.,  82., 100.,  93.,  96.,  98.,  75.,  87.,  87., 137.],
        [ 95.,  92., 100.,  66., 107., 115., 132.,  96., 109.,  98.],
        [ 94.,  74.,  86.,  88., 120.,  82.,  72., 112., 108., 132.],
        [154.,  81., 104.,  96.,  80., 102.,  98., 102., 100.,  98.],
        [109.,  93., 114.,  83., 109.,  94., 143.,  91., 105.,  79.],
        [ 80.,  84.,  77.,  80., 116.,  87.,  68.,  94.,  78., 140.],
        [132.,  88., 103.,  91.,  90.,  81.,  95., 101.,  98.,  95.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  84.,  95.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  92.,  91., 111., 110.],
        [ 79.,  73.,  74.,  86., 107.,  85.,  81., 101., 113., 134.],
        [ 86.,  86., 110., 106.,  76.,  86.,  60., 136.,  71., 101.],
        [ 84.,  95., 104., 129.,  95., 100.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  97.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  371
    0  1554   bit_w:-1  loss: 0.05871
    1  1457   bit_w: 1  loss: 0.05866
    2  1141   bit_w: 1  loss: 0.05866
    3  1537   bit_w:-1  loss: 0.05861
    4  1360   bit_w: 1  loss: 0.05865
    611   1529   4163   1307   1794    961   2579   1006   2291   2200
      1      0      1      1      0      0      0     -1      0      0
Train accuarcate: 98.35%
tensor([[ 83.,  85.,  95., 105.,  90.,  90.,  66., 148.,  82.,  83.],
        [ 97., 111., 147., 110.,  80., 106.,  98.,  87., 110.,  84.],
        [ 78., 130.,  94.,  86.,  95.,  78.,  81.,  97.,  91.,  73.],
        [134.,  89.,  95.,  85.,  86.,  82., 102., 104.,  70., 106.],
        [ 90., 101.,  80.,  74., 143.,  83.,  92.,  95.,  91.,  99.],
        [ 81., 136.,  94.,  79., 104.,  66.,  78., 105.,  90.,  75.],
        [ 68.,  81.,  71., 102., 134.,  97.,  89.,  99., 104.,  99.],
        [ 78.,  82., 101.,  94.,  96.,  98.,  75.,  87.,  87., 137.],
        [ 96.,  92., 101.,  67., 107., 115., 132.,  96., 109.,  98.],
        [ 94.,  74.,  86.,  88., 120.,  82.,  72., 113., 108., 132.],
        [154.,  81., 104.,  96.,  80., 102.,  98., 103., 100.,  98.],
        [109.,  93., 114.,  83., 109.,  94., 143.,  92., 105.,  79.],
        [ 81.,  84.,  78.,  81., 116.,  87.,  68.,  94.,  78., 140.],
        [132.,  88., 103.,  91.,  90.,  81.,  95., 102.,  98.,  95.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  84.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  92.,  92., 111., 110.],
        [ 80.,  73.,  75.,  87., 107.,  85.,  81., 101., 113., 134.],
        [ 86.,  86., 110., 106.,  76.,  86.,  60., 137.,  71., 101.],
        [ 85.,  95., 105., 130.,  95., 100.,  86.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  81.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.03%



iteration:
  372
    0  1424   bit_w:-1  loss: 0.05858
    1   439   bit_w:-1  loss: 0.05849
    2  1095   bit_w:-1  loss: 0.05853
    3   386   bit_w:-1  loss: 0.05845
    4  1566   bit_w: 1  loss: 0.05846
   1214   4878   3440   2673   1637   2170   1035   4321   2860   3762
      0      1      0      0      0      0     -1      0      1      1
Train accuarcate: 98.37%
tensor([[ 83.,  86.,  95., 105.,  90.,  90.,  66., 148.,  83.,  84.],
        [ 97., 112., 147., 110.,  80., 106.,  98.,  87., 111.,  85.],
        [ 78., 131.,  94.,  86.,  95.,  78.,  81.,  97.,  92.,  74.],
        [134.,  90.,  95.,  85.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  74., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  94.,  79., 104.,  66.,  78., 105.,  91.,  76.],
        [ 68.,  81.,  71., 102., 134.,  97.,  90.,  99., 104.,  99.],
        [ 78.,  82., 101.,  94.,  96.,  98.,  76.,  87.,  87., 137.],
        [ 96.,  93., 101.,  67., 107., 115., 132.,  96., 110.,  99.],
        [ 94.,  74.,  86.,  88., 120.,  82.,  73., 113., 108., 132.],
        [154.,  81., 104.,  96.,  80., 102.,  99., 103., 100.,  98.],
        [109.,  93., 114.,  83., 109.,  94., 144.,  92., 105.,  79.],
        [ 81.,  85.,  78.,  81., 116.,  87.,  68.,  94.,  79., 141.],
        [132.,  88., 103.,  91.,  90.,  81.,  96., 102.,  98.,  95.],
        [ 72., 143.,  87.,  85.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 105.,  80., 138.,  93.,  92., 111., 110.],
        [ 80.,  74.,  75.,  87., 107.,  85.,  81., 101., 114., 135.],
        [ 86.,  87., 110., 106.,  76.,  86.,  60., 137.,  72., 102.],
        [ 85.,  95., 105., 130.,  95., 100.,  87.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  83., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.95%



iteration:
  373
    0  1342   bit_w:-1  loss: 0.05840
    1   821   bit_w:-1  loss: 0.05833
    2   829   bit_w: 1  loss: 0.05832
    3  1365   bit_w:-1  loss: 0.05827
    4  1301   bit_w:-1  loss: 0.05822
   4831   3538   4630   3194   1255   4217   5463    935   3320   1133
      0      0      1     -1      0      1      0      0      0      0
Train accuarcate: 98.36%
tensor([[ 83.,  86.,  95., 106.,  90.,  90.,  66., 148.,  83.,  84.],
        [ 97., 112., 148., 110.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  95.,  86.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 68.,  81.,  71., 103., 134.,  97.,  90.,  99., 104.,  99.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 105.,  96.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 81.,  85.,  79.,  81., 116.,  88.,  68.,  94.,  79., 141.],
        [132.,  88., 103.,  92.,  90.,  81.,  96., 102.,  98.,  95.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 138.,  93.,  92., 111., 110.],
        [ 80.,  74.,  75.,  88., 107.,  85.,  81., 101., 114., 135.],
        [ 86.,  87., 110., 107.,  76.,  86.,  60., 137.,  72., 102.],
        [ 85.,  95., 106., 130.,  95., 101.,  87.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  374
    0  1574   bit_w:-1  loss: 0.05815
    1  1499   bit_w: 1  loss: 0.05811
    2  1020   bit_w: 1  loss: 0.05809
    3   399   bit_w: 1  loss: 0.05806
    4   717   bit_w:-1  loss: 0.05805
   5111   5620   4338   5394   5186   4813   4322   5610   4729   5416
      0     -1      0     -1     -1      0     -1      0     -1      0
Train accuarcate: 98.39%
tensor([[ 83.,  86.,  95., 106.,  90.,  90.,  66., 148.,  83.,  84.],
        [ 97., 112., 148., 110.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  95.,  86.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 68.,  82.,  71., 104., 135.,  97.,  91.,  99., 105.,  99.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 105.,  96.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 81.,  85.,  79.,  81., 116.,  88.,  68.,  94.,  79., 141.],
        [132.,  89., 103.,  93.,  91.,  81.,  97., 102.,  99.,  95.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 138.,  93.,  92., 111., 110.],
        [ 80.,  74.,  75.,  88., 107.,  85.,  81., 101., 114., 135.],
        [ 86.,  87., 110., 107.,  76.,  86.,  60., 137.,  72., 102.],
        [ 85.,  95., 106., 130.,  95., 101.,  87.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  375
    0  1076   bit_w:-1  loss: 0.05801
    1  1185   bit_w:-1  loss: 0.05794
    2   603   bit_w: 1  loss: 0.05792
    3  1510   bit_w:-1  loss: 0.05787
    4  1490   bit_w: 1  loss: 0.05788
   2026    558   1913   1800   3294   1143   4040   2301   1209   2442
      1      1      0      0      1      0      0      0      1      0
Train accuarcate: 98.40%
tensor([[ 83.,  86.,  95., 106.,  90.,  90.,  66., 148.,  83.,  84.],
        [ 97., 112., 148., 110.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  95.,  86.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  97.,  91.,  99., 106.,  99.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 105.,  96.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 103.,  93.,  91.,  81.,  97., 102.,  99.,  95.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 138.,  93.,  92., 111., 110.],
        [ 81.,  75.,  75.,  88., 108.,  85.,  81., 101., 115., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 85.,  95., 106., 130.,  95., 101.,  87.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  376
    0    99   bit_w:-1  loss: 0.05785
    1   263   bit_w: 1  loss: 0.05780
    2   455   bit_w:-1  loss: 0.05778
    3   882   bit_w:-1  loss: 0.05773
    4   814   bit_w: 1  loss: 0.05773
   3129   6555   3701   2094   4388   3812   2441   6072   4965   5515
      0      0     -1     -1      0      0      0      0      0      0
Train accuarcate: 98.40%
tensor([[ 83.,  86.,  95., 106.,  90.,  90.,  66., 148.,  83.,  84.],
        [ 97., 112., 149., 111.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  96.,  87.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  97.,  91.,  99., 106.,  99.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 106.,  97.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 104.,  94.,  91.,  81.,  97., 102.,  99.,  95.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 138.,  93.,  92., 111., 110.],
        [ 81.,  75.,  75.,  88., 108.,  85.,  81., 101., 115., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 85.,  95., 107., 131.,  95., 101.,  87.,  93., 111.,  92.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  377
    0  1059   bit_w:-1  loss: 0.05768
    1  1348   bit_w: 1  loss: 0.05763
    2  1468   bit_w:-1  loss: 0.05762
    3  1118   bit_w:-1  loss: 0.05757
    4   189   bit_w:-1  loss: 0.05759
   3505   5994   4375   3383   4052   2685   4950   4401   3885   4880
      0      0      0      0      0     -1      0     -1      0     -1
Train accuarcate: 98.41%
tensor([[ 83.,  86.,  95., 106.,  90.,  91.,  66., 149.,  83.,  85.],
        [ 97., 112., 149., 111.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  96.,  87.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  98.,  91., 100., 106., 100.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 106.,  97.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 104.,  94.,  91.,  82.,  97., 103.,  99.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 111.],
        [ 81.,  75.,  75.,  88., 108.,  85.,  81., 101., 115., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 85.,  95., 107., 131.,  95., 102.,  87.,  94., 111.,  93.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  378
    0  1128   bit_w:-1  loss: 0.05754
    1  1105   bit_w: 1  loss: 0.05751
    2   120   bit_w: 1  loss: 0.05752
    3   737   bit_w:-1  loss: 0.05748
    4   103   bit_w: 1  loss: 0.05751
   1248    108    864    544    165   1512   1344    813    497    377
      1      1      1      0      0      0      1      0      1      0
Train accuarcate: 98.41%
tensor([[ 83.,  86.,  95., 106.,  90.,  91.,  66., 149.,  83.,  85.],
        [ 97., 112., 149., 111.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [134.,  90.,  96.,  87.,  86.,  82., 102., 104.,  71., 107.],
        [ 90., 102.,  80.,  75., 143.,  83.,  92.,  95.,  92., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  98.,  91., 100., 106., 100.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 96.,  93., 102.,  67., 107., 116., 132.,  96., 110.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 106.,  97.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 104.,  94.,  91.,  82.,  97., 103.,  99.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 111.],
        [ 81.,  75.,  75.,  88., 108.,  85.,  81., 101., 115., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 86.,  96., 108., 131.,  95., 102.,  88.,  94., 112.,  93.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  379
    0  1105   bit_w:-1  loss: 0.05747
    1  1474   bit_w:-1  loss: 0.05744
    2   485   bit_w: 1  loss: 0.05743
    3  1486   bit_w: 1  loss: 0.05739
    4   134   bit_w: 1  loss: 0.05739
   2360    231   1966    329   1776    401   1956    416   1598   1233
      1      0      0      0      1      0      0      0      1      0
Train accuarcate: 98.41%
tensor([[ 83.,  86.,  95., 106.,  90.,  91.,  66., 149.,  83.,  85.],
        [ 97., 112., 149., 111.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [135.,  90.,  96.,  87.,  87.,  82., 102., 104.,  72., 107.],
        [ 91., 102.,  80.,  75., 144.,  83.,  92.,  95.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  98.,  91., 100., 106., 100.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  81., 106.,  97.,  80., 103.,  99., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 104.,  94.,  91.,  82.,  97., 103.,  99.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 111.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 86.,  96., 108., 131.,  95., 102.,  88.,  94., 112.,  93.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.04%



iteration:
  380
    0   941   bit_w:-1  loss: 0.05735
    1   994   bit_w: 1  loss: 0.05728
    2   525   bit_w: 1  loss: 0.05729
    3  1485   bit_w:-1  loss: 0.05723
    4   650   bit_w: 1  loss: 0.05726
   1649   1687   2173   3074   1415   2321   2741    158   3041    697
      0      1      0      0      0      1      1      0      0      0
Train accuarcate: 98.41%
tensor([[ 83.,  86.,  95., 106.,  90.,  91.,  66., 149.,  83.,  85.],
        [ 97., 112., 149., 111.,  80., 107.,  98.,  87., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  74.],
        [135.,  90.,  96.,  87.,  87.,  82., 102., 104.,  72., 107.],
        [ 91., 102.,  80.,  75., 144.,  83.,  92.,  95.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  76.],
        [ 69.,  83.,  71., 104., 136.,  98.,  91., 100., 106., 100.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 137.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111.,  99.],
        [ 94.,  74.,  87.,  88., 120.,  83.,  73., 113., 108., 132.],
        [154.,  82., 106.,  97.,  80., 104., 100., 103., 100.,  98.],
        [109.,  93., 115.,  83., 109.,  95., 144.,  92., 105.,  79.],
        [ 82.,  86.,  79.,  81., 117.,  88.,  68.,  94.,  80., 141.],
        [132.,  89., 104.,  94.,  91.,  82.,  97., 103.,  99.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  88.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 111.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 135.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 102.],
        [ 86.,  96., 108., 131.,  95., 102.,  88.,  94., 112.,  93.],
        [ 78.,  86.,  84.,  84., 139.,  79.,  82.,  98.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.03%



iteration:
  381
    0  1351   bit_w:-1  loss: 0.05721
    1  1004   bit_w:-1  loss: 0.05713
    2  1516   bit_w:-1  loss: 0.05716
    3  1173   bit_w:-1  loss: 0.05710
    4  1491   bit_w:-1  loss: 0.05712
   1030   6335   3762   3532   4211   3115   2935   3714   3447   3903
      0      0      0     -1      0      0      0     -1      0      1
Train accuarcate: 98.42%
tensor([[ 83.,  86.,  95., 107.,  90.,  91.,  66., 150.,  83.,  85.],
        [ 97., 112., 149., 112.,  80., 107.,  98.,  88., 111.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  90.,  96.,  88.,  87.,  82., 102., 105.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  71., 105., 136.,  98.,  91., 101., 106., 100.],
        [ 78.,  82., 102.,  94.,  96.,  99.,  76.,  87.,  87., 138.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  87.,  89., 120.,  83.,  73., 114., 108., 132.],
        [154.,  82., 106.,  98.,  80., 104., 100., 104., 100.,  98.],
        [109.,  93., 115.,  84., 109.,  95., 144.,  93., 105.,  79.],
        [ 82.,  86.,  79.,  82., 117.,  88.,  68.,  95.,  80., 141.],
        [132.,  89., 104.,  95.,  91.,  82.,  97., 104.,  99.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 112.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 86.,  96., 108., 131.,  95., 102.,  88.,  94., 112.,  94.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  382
    0  1371   bit_w:-1  loss: 0.05705
    1   102   bit_w:-1  loss: 0.05699
    2   986   bit_w: 1  loss: 0.05700
    3  1080   bit_w: 1  loss: 0.05696
    4   191   bit_w: 1  loss: 0.05697
   2589   1614   2494   1250   1474   2147    639   1261   2769    958
      1      0      1      0      1      0      0      0      1      0
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [ 98., 112., 150., 112.,  81., 107.,  98.,  88., 112.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  90.,  96.,  88.,  87.,  82., 102., 105.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  71., 105., 136.,  98.,  91., 101., 106., 100.],
        [ 79.,  82., 103.,  94.,  97.,  99.,  76.,  87.,  88., 138.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  87.,  89., 120.,  83.,  73., 114., 108., 132.],
        [154.,  82., 106.,  98.,  80., 104., 100., 104., 100.,  98.],
        [109.,  93., 115.,  84., 109.,  95., 144.,  93., 105.,  79.],
        [ 82.,  86.,  79.,  82., 117.,  88.,  68.,  95.,  80., 141.],
        [133.,  89., 105.,  95.,  92.,  82.,  97., 104., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 112.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 87.,  96., 109., 131.,  96., 102.,  88.,  94., 113.,  94.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.92%



iteration:
  383
    0  1573   bit_w:-1  loss: 0.05693
    1  1177   bit_w:-1  loss: 0.05688
    2  1049   bit_w: 1  loss: 0.05689
    3   706   bit_w: 1  loss: 0.05684
    4   146   bit_w:-1  loss: 0.05687
   4262   6634   4455   5474   5372   3811   5245   5176   3629   5511
      0     -1      0      0      0     -1     -1     -1      0      0
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [ 98., 113., 150., 112.,  81., 108.,  99.,  89., 112.,  85.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  71., 105., 136.,  98.,  91., 101., 106., 100.],
        [ 79.,  82., 103.,  94.,  97.,  99.,  76.,  87.,  88., 138.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  87.,  89., 120.,  83.,  73., 114., 108., 132.],
        [154.,  82., 106.,  98.,  80., 104., 100., 104., 100.,  98.],
        [109.,  94., 115.,  84., 109.,  96., 145.,  94., 105.,  79.],
        [ 82.,  86.,  79.,  82., 117.,  88.,  68.,  95.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 112.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 87.,  97., 109., 131.,  96., 103.,  89.,  95., 113.,  94.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  384
    0  1550   bit_w:-1  loss: 0.05684
    1  1426   bit_w:-1  loss: 0.05679
    2  1069   bit_w:-1  loss: 0.05679
    3  1072   bit_w: 1  loss: 0.05676
    4  1029   bit_w: 1  loss: 0.05677
   2772     96   2152   1091    512    743    442    178    409    834
      1      1      1      0      0      1      0      0      0      1
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [ 99., 114., 151., 112.,  81., 109.,  99.,  89., 112.,  86.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  71., 105., 136.,  98.,  91., 101., 106., 100.],
        [ 80.,  83., 104.,  94.,  97., 100.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  87.,  89., 120.,  83.,  73., 114., 108., 132.],
        [155.,  83., 107.,  98.,  80., 105., 100., 104., 100.,  99.],
        [110.,  95., 116.,  84., 109.,  97., 145.,  94., 105.,  80.],
        [ 82.,  86.,  79.,  82., 117.,  88.,  68.,  95.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 106.,  80., 139.,  93.,  93., 111., 112.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 88.,  98., 110., 131.,  96., 104.,  89.,  95., 113.,  95.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.96%



iteration:
  385
    0  1136   bit_w:-1  loss: 0.05671
    1   853   bit_w:-1  loss: 0.05667
    2    95   bit_w: 1  loss: 0.05668
    3   682   bit_w:-1  loss: 0.05663
    4  1011   bit_w:-1  loss: 0.05664
   2263    963   1308   1647    589   1104   2492    662   1704    263
      0      0      0      1      0      0      1      0      1      0
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [ 99., 114., 151., 112.,  81., 109.,  99.,  89., 112.,  86.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  71., 105., 136.,  98.,  91., 101., 106., 100.],
        [ 80.,  83., 104.,  94.,  97., 100.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  87.,  90., 120.,  83.,  74., 114., 109., 132.],
        [155.,  83., 107.,  99.,  80., 105., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  79.,  82., 117.,  88.,  68.,  95.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 107.,  80., 139.,  94.,  93., 112., 112.],
        [ 82.,  75.,  75.,  88., 109.,  85.,  81., 101., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 88.,  98., 110., 131.,  96., 104.,  89.,  95., 113.,  95.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 95.97%



iteration:
  386
    0  1419   bit_w:-1  loss: 0.05660
    1   463   bit_w: 1  loss: 0.05654
    2   275   bit_w: 1  loss: 0.05652
    3  1353   bit_w:-1  loss: 0.05651
    4   686   bit_w: 1  loss: 0.05649
    231   1061    829    657   1842    379    307   1963   2109   1868
      0      0      1      1      1      0      0      1      0      0
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [ 99., 114., 151., 112.,  81., 109.,  99.,  89., 112.,  86.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  72., 106., 137.,  98.,  91., 102., 106., 100.],
        [ 80.,  83., 104.,  94.,  97., 100.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [155.,  83., 107.,  99.,  80., 105., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 96.,  94.,  91., 107.,  80., 139.,  94.,  93., 112., 112.],
        [ 82.,  75.,  76.,  89., 110.,  85.,  81., 102., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 88.,  98., 110., 131.,  96., 104.,  89.,  95., 113.,  95.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  387
    0  1548   bit_w:-1  loss: 0.05646
    1   601   bit_w:-1  loss: 0.05641
    2   294   bit_w: 1  loss: 0.05639
    3  1332   bit_w: 1  loss: 0.05634
    4   582   bit_w: 1  loss: 0.05633
    335   1531    872   1449    473    654    624    245    779    372
      1      0      0      0      1      0      0      0      1      1
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 114., 151., 112.,  82., 109.,  99.,  89., 113.,  87.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  72., 106., 137.,  98.,  91., 102., 106., 100.],
        [ 80.,  83., 104.,  94.,  97., 100.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [155.,  83., 107.,  99.,  80., 105., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  94.,  91., 107.,  81., 139.,  94.,  93., 113., 113.],
        [ 82.,  75.,  76.,  89., 110.,  85.,  81., 102., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 88.,  98., 110., 131.,  96., 104.,  89.,  95., 113.,  95.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  388
    0   637   bit_w:-1  loss: 0.05630
    1   555   bit_w: 1  loss: 0.05626
    2   146   bit_w: 1  loss: 0.05627
    3   163   bit_w:-1  loss: 0.05623
    4  1531   bit_w: 1  loss: 0.05625
    703    684   1909    666    308    364   1533    366    290     48
      0      1      1      0      0      0      1      1      0      1
Train accuarcate: 98.41%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [135.,  91.,  96.,  88.,  87.,  83., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  72., 106., 137.,  98.,  91., 102., 106., 100.],
        [ 80.,  83., 104.,  94.,  97., 100.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [155.,  83., 107.,  99.,  80., 105., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [133.,  90., 105.,  95.,  92.,  83.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  95.,  92., 107.,  81., 139.,  95.,  94., 113., 114.],
        [ 82.,  75.,  76.,  89., 110.,  85.,  81., 102., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 88.,  99., 111., 131.,  96., 104.,  90.,  96., 113.,  96.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  389
    0   637   bit_w:-1  loss: 0.05622
    1  1561   bit_w:-1  loss: 0.05620
    2   469   bit_w:-1  loss: 0.05617
    3   924   bit_w:-1  loss: 0.05613
    4  1072   bit_w: 1  loss: 0.05614
   3327   6220   4472   4697   5347   4367   3637   6112   5001   5774
     -1     -1      0     -1     -1     -1      0      0      0      0
Train accuarcate: 98.42%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  96.,  89.,  88.,  84., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  72., 106., 137.,  98.,  91., 102., 106., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 102.,  67., 108., 116., 132.,  96., 111., 100.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [156.,  84., 107., 100.,  81., 106., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [134.,  91., 105.,  96.,  93.,  84.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  95.,  92., 107.,  81., 139.,  95.,  94., 113., 114.],
        [ 82.,  75.,  76.,  89., 110.,  85.,  81., 102., 116., 136.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 89., 100., 111., 132.,  97., 105.,  90.,  96., 113.,  96.],
        [ 78.,  86.,  84.,  85., 139.,  79.,  82.,  99.,  88.,  99.]],
       device='cuda:0')
Train accuarcate: 96.04%



iteration:
  390
    0   688   bit_w:-1  loss: 0.05611
    1  1420   bit_w:-1  loss: 0.05606
    2   707   bit_w:-1  loss: 0.05608
    3   277   bit_w: 1  loss: 0.05603
    4   397   bit_w:-1  loss: 0.05607
   5428   6558   5848   5612   4910   5036   5823   5071   5056   4901
      0      0     -1     -1      0      0     -1     -1      0     -1
Train accuarcate: 98.44%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  96.,  89.,  88.,  84., 103., 106.,  72., 107.],
        [ 91., 102.,  80.,  76., 144.,  83.,  92.,  96.,  93., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  83.,  72., 106., 137.,  98.,  91., 102., 106., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 101.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [156.,  84., 107., 100.,  81., 106., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [134.,  91., 105.,  96.,  93.,  84.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  95.,  92., 107.,  81., 139.,  95.,  94., 113., 114.],
        [ 82.,  75.,  77.,  90., 110.,  85.,  82., 103., 116., 137.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 89., 100., 111., 132.,  97., 105.,  90.,  96., 113.,  96.],
        [ 78.,  86.,  85.,  86., 139.,  79.,  83., 100.,  88., 100.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  391
    0  1482   bit_w:-1  loss: 0.05604
    1   239   bit_w: 1  loss: 0.05599
    2   660   bit_w:-1  loss: 0.05596
    3   937   bit_w:-1  loss: 0.05593
    4   710   bit_w:-1  loss: 0.05592
   5426   5171   5482   4635   3884   4755   5692   5541   4460   5387
      0     -1      0      0     -1      0      0      0     -1      0
Train accuarcate: 98.44%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  96.,  89.,  88.,  84., 103., 106.,  72., 107.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  84.,  72., 106., 138.,  98.,  91., 102., 107., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 101.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [156.,  84., 107., 100.,  81., 106., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [134.,  91., 105.,  96.,  93.,  84.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  96.,  92., 107.,  82., 139.,  95.,  94., 114., 114.],
        [ 82.,  76.,  77.,  90., 111.,  85.,  82., 103., 117., 137.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 89., 100., 111., 132.,  97., 105.,  90.,  96., 113.,  96.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 100.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  392
    0   716   bit_w:-1  loss: 0.05589
    1  1154   bit_w:-1  loss: 0.05587
    2   175   bit_w:-1  loss: 0.05587
    3  1080   bit_w:-1  loss: 0.05585
    4  1166   bit_w:-1  loss: 0.05585
   5827   6729   5180   4905   5318   5172   5818   4137   5576   4050
      0      0     -1      0      0     -1      0     -1      0      0
Train accuarcate: 98.44%
tensor([[ 84.,  86.,  96., 107.,  91.,  91.,  66., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  96.,  89.,  88.,  84., 103., 106.,  72., 107.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  84.,  72., 106., 138.,  98.,  91., 102., 107., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 101.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [156.,  84., 107., 100.,  81., 106., 101., 104., 101.,  99.],
        [110.,  95., 116.,  85., 109.,  97., 146.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [134.,  91., 105.,  96.,  93.,  84.,  98., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  96.,  92., 107.,  82., 139.,  95.,  94., 114., 114.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 137.],
        [ 87.,  88., 110., 107.,  77.,  86.,  60., 137.,  73., 103.],
        [ 89., 100., 112., 132.,  97., 106.,  90.,  97., 113.,  96.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 100.]],
       device='cuda:0')
Train accuarcate: 95.98%



iteration:
  393
    0   443   bit_w:-1  loss: 0.05583
    1  1508   bit_w: 1  loss: 0.05579
    2  1565   bit_w:-1  loss: 0.05580
    3   691   bit_w: 1  loss: 0.05574
    4   925   bit_w:-1  loss: 0.05578
   2865    707   2710   1487   1343   1962   3006   1866   1198   1127
      0      0      1      0      0      1      1      0      0      0
Train accuarcate: 98.44%
tensor([[ 84.,  86.,  97., 107.,  91.,  92.,  67., 150.,  84.,  85.],
        [100., 115., 152., 112.,  82., 109., 100.,  90., 113.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 107.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 101.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [156.,  84., 108., 100.,  81., 107., 102., 104., 101.,  99.],
        [110.,  95., 117.,  85., 109.,  98., 147.,  94., 106.,  80.],
        [ 82.,  86.,  80.,  83., 118.,  88.,  68.,  96.,  80., 141.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 97.,  96.,  92., 107.,  82., 139.,  95.,  94., 114., 114.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 137.],
        [ 87.,  88., 111., 107.,  77.,  87.,  61., 137.,  73., 103.],
        [ 89., 100., 113., 132.,  97., 107.,  91.,  97., 113.,  96.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 100.]],
       device='cuda:0')
Train accuarcate: 95.94%



iteration:
  394
    0   413   bit_w:-1  loss: 0.05573
    1  1567   bit_w: 1  loss: 0.05568
    2  1522   bit_w: 1  loss: 0.05567
    3   988   bit_w:-1  loss: 0.05562
    4  1485   bit_w:-1  loss: 0.05562
   2927   6281   4724   4284   5030   4740   4616   5056   4684   5188
     -1      0      0     -1      0      0      0     -1     -1      0
Train accuarcate: 98.44%
tensor([[ 84.,  86.,  97., 107.,  91.,  92.,  67., 150.,  84.,  85.],
        [101., 115., 152., 113.,  82., 109., 100.,  91., 114.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  75.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 107.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 100.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  77.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 100.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 139.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 101.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 132.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102.,  99.],
        [111.,  95., 117.,  86., 109.,  98., 147.,  95., 107.,  80.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 141.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  96.],
        [ 72., 143.,  87.,  86.,  84.,  81.,  85.,  96.,  96.,  89.],
        [ 98.,  96.,  92., 108.,  82., 139.,  95.,  95., 115., 114.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 137.],
        [ 87.,  88., 111., 107.,  77.,  87.,  61., 137.,  73., 103.],
        [ 89., 100., 113., 132.,  97., 107.,  91.,  97., 113.,  96.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 100.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  395
    0  1576   bit_w:-1  loss: 0.05558
    1   235   bit_w:-1  loss: 0.05551
    2   234   bit_w: 1  loss: 0.05554
    3  1081   bit_w:-1  loss: 0.05549
    4   662   bit_w: 1  loss: 0.05552
    589   3123   1822   1004   1127    844    484   1007   1000    893
      0      1      0      0      1      0      0      1      0     -1
Train accuarcate: 98.46%
tensor([[ 84.,  86.,  97., 107.,  91.,  92.,  67., 150.,  84.,  86.],
        [101., 116., 152., 113.,  83., 109., 100.,  92., 114.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  76.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 108.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 101.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  78.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 101.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 140.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 102.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 133.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102., 100.],
        [111.,  95., 117.,  86., 109.,  98., 147.,  95., 107.,  81.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 142.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  97.],
        [ 72., 144.,  87.,  86.,  85.,  81.,  85.,  97.,  96.,  89.],
        [ 98.,  96.,  92., 108.,  82., 139.,  95.,  95., 115., 115.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 138.],
        [ 87.,  88., 111., 107.,  77.,  87.,  61., 137.,  73., 104.],
        [ 89., 100., 113., 132.,  97., 107.,  91.,  97., 113.,  97.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 101.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  396
    0  1579   bit_w:-1  loss: 0.05546
    1   264   bit_w:-1  loss: 0.05540
    2   162   bit_w: 1  loss: 0.05539
    3  1127   bit_w:-1  loss: 0.05538
    4   132   bit_w: 1  loss: 0.05536
    481    725    798   1089   1163    845    553    311    532    562
      1      0      0      1      1      0      0      0      1      0
Train accuarcate: 98.47%
tensor([[ 84.,  86.,  97., 107.,  91.,  92.,  67., 150.,  84.,  86.],
        [101., 116., 152., 113.,  83., 109., 100.,  92., 114.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  76.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 108.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 101.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  78.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 101.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 140.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 102.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 133.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102., 100.],
        [111.,  95., 117.,  86., 109.,  98., 147.,  95., 107.,  81.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 142.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  97.],
        [ 72., 144.,  87.,  86.,  85.,  81.,  85.,  97.,  96.,  89.],
        [ 98.,  96.,  92., 108.,  82., 139.,  95.,  95., 115., 115.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 138.],
        [ 87.,  88., 111., 107.,  77.,  87.,  61., 137.,  73., 104.],
        [ 89., 100., 113., 132.,  97., 107.,  91.,  97., 113.,  97.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 101.]],
       device='cuda:0')
Train accuarcate: 96.00%



iteration:
  397
    0   610   bit_w:-1  loss: 0.05533
    1   204   bit_w: 1  loss: 0.05531
    2   397   bit_w: 1  loss: 0.05530
    3   343   bit_w:-1  loss: 0.05525
    4   962   bit_w:-1  loss: 0.05526
    549     37   2102   2448    495    346    984   1217    542    186
      0      0      1      1      0      0      0      0      0      0
Train accuarcate: 98.48%
tensor([[ 84.,  86.,  98., 108.,  91.,  92.,  67., 150.,  84.,  86.],
        [101., 116., 153., 114.,  83., 109., 100.,  92., 114.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  76.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 108.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 101.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  78.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 101.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 140.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 102.],
        [ 94.,  74.,  88.,  91., 121.,  83.,  74., 115., 109., 133.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102., 100.],
        [111.,  95., 118.,  87., 109.,  98., 147.,  95., 107.,  81.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 142.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  97.],
        [ 72., 144.,  87.,  86.,  85.,  81.,  85.,  97.,  96.,  89.],
        [ 98.,  96.,  93., 109.,  82., 139.,  95.,  95., 115., 115.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 138.],
        [ 87.,  88., 112., 108.,  77.,  87.,  61., 137.,  73., 104.],
        [ 89., 100., 114., 133.,  97., 107.,  91.,  97., 113.,  97.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 101.]],
       device='cuda:0')
Train accuarcate: 95.99%



iteration:
  398
    0  1557   bit_w:-1  loss: 0.05522
    1  1270   bit_w:-1  loss: 0.05517
    2  1176   bit_w:-1  loss: 0.05515
    3  1455   bit_w:-1  loss: 0.05510
    4  1013   bit_w:-1  loss: 0.05513
   2585    307   1514   1946    852   2002   3032    442   2265    637
      1      0      0      0      0      1      1      0      1      0
Train accuarcate: 98.48%
tensor([[ 84.,  86.,  98., 108.,  91.,  92.,  67., 150.,  84.,  86.],
        [101., 116., 153., 114.,  83., 109., 100.,  92., 114.,  88.],
        [ 78., 131.,  95.,  86.,  95.,  79.,  81.,  97.,  92.,  76.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 108.],
        [ 91., 103.,  80.,  76., 145.,  83.,  92.,  96.,  94., 101.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  78.],
        [ 69.,  84.,  73., 106., 138.,  99.,  92., 102., 107., 101.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 140.],
        [ 97.,  93., 103.,  68., 108., 116., 133.,  97., 111., 102.],
        [ 95.,  74.,  88.,  91., 121.,  84.,  75., 115., 110., 133.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102., 100.],
        [111.,  95., 118.,  87., 109.,  98., 147.,  95., 107.,  81.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 142.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  97.],
        [ 72., 144.,  87.,  86.,  85.,  81.,  85.,  97.,  96.,  89.],
        [ 98.,  96.,  93., 109.,  82., 139.,  95.,  95., 115., 115.],
        [ 82.,  76.,  78.,  90., 111.,  86.,  82., 104., 117., 138.],
        [ 87.,  88., 112., 108.,  77.,  87.,  61., 137.,  73., 104.],
        [ 89., 100., 114., 133.,  97., 107.,  91.,  97., 113.,  97.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 101.]],
       device='cuda:0')
Train accuarcate: 96.02%



iteration:
  399
    0   399   bit_w:-1  loss: 0.05510
    1  1406   bit_w: 1  loss: 0.05504
    2  1548   bit_w: 1  loss: 0.05504
    3   511   bit_w: 1  loss: 0.05497
    4  1549   bit_w:-1  loss: 0.05498
   5579   6139   5534   5884   3015   4600   4167   5291   5120   4507
      0      0      0      0     -1     -1      0      0     -1      0
Train accuarcate: 98.48%
tensor([[ 84.,  86.,  98., 108.,  91.,  92.,  67., 150.,  84.,  86.],
        [101., 116., 153., 114.,  83., 109., 100.,  92., 114.,  88.],
        [ 78., 131.,  95.,  86.,  96.,  80.,  81.,  97.,  93.,  76.],
        [136.,  92.,  97.,  89.,  88.,  85., 104., 106.,  72., 108.],
        [ 91., 103.,  80.,  76., 146.,  84.,  92.,  96.,  95., 101.],
        [ 81., 137.,  95.,  79., 104.,  67.,  78., 105.,  91.,  78.],
        [ 69.,  84.,  73., 106., 139., 100.,  92., 102., 108., 101.],
        [ 81.,  84., 104.,  95.,  98., 101.,  76.,  87.,  88., 140.],
        [ 97.,  93., 103.,  68., 109., 117., 133.,  97., 112., 102.],
        [ 95.,  74.,  88.,  91., 122.,  85.,  75., 115., 111., 133.],
        [157.,  84., 108., 101.,  81., 107., 102., 105., 102., 100.],
        [111.,  95., 118.,  87., 109.,  98., 147.,  95., 107.,  81.],
        [ 83.,  86.,  80.,  84., 118.,  88.,  68.,  97.,  81., 142.],
        [134.,  91., 106.,  96.,  93.,  85.,  99., 105., 100.,  97.],
        [ 72., 144.,  87.,  86.,  85.,  81.,  85.,  97.,  96.,  89.],
        [ 98.,  96.,  93., 109.,  83., 140.,  95.,  95., 116., 115.],
        [ 82.,  76.,  78.,  90., 112.,  87.,  82., 104., 118., 138.],
        [ 87.,  88., 112., 108.,  77.,  87.,  61., 137.,  73., 104.],
        [ 89., 100., 114., 133.,  97., 107.,  91.,  97., 113.,  97.],
        [ 78.,  87.,  85.,  86., 140.,  79.,  83., 100.,  89., 101.]],
       device='cuda:0')
Train accuarcate: 96.00%