�きいモデルから蒸留して小さなモデルにトレーニングを行うと、精度は 82%、精度は 2% 向上します。</p>

        </div>
        <div class='code'>
            <div class="highlight"><pre><span class="lineno">72</span><span></span><span class="kn">import</span> <span class="nn">torch</span>
<span class="lineno">73</span><span class="kn">import</span> <span class="nn">torch.nn.functional</span>
<span class="lineno">74</span><span class="kn">from</span> <span class="nn">torc