import{s as Wt,o as Bt,n as zt}from"../chunks/scheduler.37c15a92.js";import{S as Lt,i as Ft,g as f,s as c,r as J,A as Xt,h as T,f as n,c as M,j as Zt,u as U,x as b,k as Js,y as Yt,a,v as j,t as o,b as L,d as m,w,m as Pt,n as qt,p as F}from"../chunks/index.2bf4358c.js";import{T as Ht}from"../chunks/Tip.363c041f.js";import{Y as Rt}from"../chunks/Youtube.1e50a667.js";import{C as h}from"../chunks/CodeBlock.4f5fc1ad.js";import{C as St}from"../chunks/CourseFloatingBanner.06521e8b.js";import{F as Kt}from"../chunks/FrameworkSwitchCourse.8d4d4ab6.js";import{H as fl,E as Ot}from"../chunks/EditOnGithub.8916dc7c.js";function en(y){let s,p;return s=new St({props:{chapter:2,classNames:"absolute z-10 right-0 top-0",notebooks:[{label:"Google Colab",value:"https://colab.research.google.com/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_tf.ipynb"},{label:"Aws Studio",value:"https://studiolab.sagemaker.aws/import/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_tf.ipynb"}]}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function ln(y){let s,p;return s=new St({props:{chapter:2,classNames:"absolute z-10 right-0 top-0",notebooks:[{label:"Google Colab",value:"https://colab.research.google.com/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_pt.ipynb"},{label:"Aws Studio",value:"https://studiolab.sagemaker.aws/import/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_pt.ipynb"}]}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function sn(y){let s;return{c(){s=Pt("Это первый раздел, в котором содержание немного отличается в зависимости от того, используете ли вы PyTorch или TensorFlow. Переключите переключатель в верхней части заголовка, чтобы выбрать платформу, которую вы предпочитаете!")},l(p){s=qt(p,"Это первый раздел, в котором содержание немного отличается в зависимости от того, используете ли вы PyTorch или TensorFlow. Переключите переключатель в верхней части заголовка, чтобы выбрать платформу, которую вы предпочитаете!")},m(p,l){a(p,s,l)},d(p){p&&n(s)}}}function tn(y){let s,p;return s=new Rt({props:{id:"wVN12smEvqg"}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function nn(y){let s,p;return s=new Rt({props:{id:"1pedAIvTWXk"}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function an(y){let s,p;return s=new h({props:{code:"cmF3X2lucHV0cyUyMCUzRCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElNUQlMEFpbnB1dHMlMjAlM0QlMjB0b2tlbml6ZXIocmF3X2lucHV0cyUyQyUyMHBhZGRpbmclM0RUcnVlJTJDJTIwdHJ1bmNhdGlvbiUzRFRydWUlMkMlMjByZXR1cm5fdGVuc29ycyUzRCUyMnRmJTIyKSUwQXByaW50KGlucHV0cyk=",highlighted:`raw_inputs = [
    <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
    <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
]
inputs = tokenizer(raw_inputs, padding=<span class="hljs-literal">True</span>, truncation=<span class="hljs-literal">True</span>, return_tensors=<span class="hljs-string">&quot;tf&quot;</span>)
<span class="hljs-built_in">print</span>(inputs)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function pn(y){let s,p;return s=new h({props:{code:"cmF3X2lucHV0cyUyMCUzRCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElNUQlMEFpbnB1dHMlMjAlM0QlMjB0b2tlbml6ZXIocmF3X2lucHV0cyUyQyUyMHBhZGRpbmclM0RUcnVlJTJDJTIwdHJ1bmNhdGlvbiUzRFRydWUlMkMlMjByZXR1cm5fdGVuc29ycyUzRCUyMnB0JTIyKSUwQXByaW50KGlucHV0cyk=",highlighted:`raw_inputs = [
    <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
    <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
]
inputs = tokenizer(raw_inputs, padding=<span class="hljs-literal">True</span>, truncation=<span class="hljs-literal">True</span>, return_tensors=<span class="hljs-string">&quot;pt&quot;</span>)
<span class="hljs-built_in">print</span>(inputs)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function rn(y){let s,p="Вот как выглядят результаты в виде тензоров TensorFlow:",l,i,u;return i=new h({props:{code:"JTdCJTBBJTIwJTIwJTIwJTIwJ2lucHV0X2lkcyclM0ElMjAlM0N0Zi5UZW5zb3IlM0ElMjBzaGFwZSUzRCgyJTJDJTIwMTYpJTJDJTIwZHR5cGUlM0RpbnQzMiUyQyUyMG51bXB5JTNEJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwYXJyYXkoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwJTIwMTAxJTJDJTIwJTIwMTA0NSUyQyUyMCUyMDEwMDUlMkMlMjAlMjAyMzEwJTJDJTIwJTIwMjA0MiUyQyUyMCUyMDM0MDMlMkMlMjAlMjAyMDA1JTJDJTIwJTIwMTAzNyUyQyUyMDE3NjYyJTJDJTIwMTIxNzIlMkMlMjAlMjAyNjA3JTJDJTIwJTIwMjAyNiUyQyUyMCUyMDI4NzglMkMlMjAlMjAyMTY2JTJDJTIwJTIwMTAxMiUyQyUyMCUyMCUyMDEwMiU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QiUyMCUyMDEwMSUyQyUyMCUyMDEwNDUlMkMlMjAlMjA1MjIzJTJDJTIwJTIwMjAyMyUyQyUyMCUyMDIwNjElMkMlMjAlMjAyMTcyJTJDJTIwJTIwJTIwOTk5JTJDJTIwJTIwJTIwMTAyJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlNUQlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUQlMkMlMjBkdHlwZSUzRGludDMyKSUzRSUyQyUyMCUwQSUyMCUyMCUyMCUyMCdhdHRlbnRpb25fbWFzayclM0ElMjAlM0N0Zi5UZW5zb3IlM0ElMjBzaGFwZSUzRCgyJTJDJTIwMTYpJTJDJTIwZHR5cGUlM0RpbnQzMiUyQyUyMG51bXB5JTNEJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwYXJyYXkoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QjElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlNUQlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUQlMkMlMjBkdHlwZSUzRGludDMyKSUzRSUwQSU3RA==",highlighted:`{
    <span class="hljs-string">&#x27;input_ids&#x27;</span>: &lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>), dtype=int32, numpy=
        array([
            [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">1005</span>,  <span class="hljs-number">2310</span>,  <span class="hljs-number">2042</span>,  <span class="hljs-number">3403</span>,  <span class="hljs-number">2005</span>,  <span class="hljs-number">1037</span>, <span class="hljs-number">17662</span>, <span class="hljs-number">12172</span>,  <span class="hljs-number">2607</span>,  <span class="hljs-number">2026</span>,  <span class="hljs-number">2878</span>,  <span class="hljs-number">2166</span>,  <span class="hljs-number">1012</span>,   <span class="hljs-number">102</span>],
            [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">5223</span>,  <span class="hljs-number">2023</span>,  <span class="hljs-number">2061</span>,  <span class="hljs-number">2172</span>,   <span class="hljs-number">999</span>,   <span class="hljs-number">102</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>]
        ], dtype=int32)&gt;, 
    <span class="hljs-string">&#x27;attention_mask&#x27;</span>: &lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>), dtype=int32, numpy=
        array([
            [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>],
            [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>]
        ], dtype=int32)&gt;
}`,wrap:!1}}),{c(){s=f("p"),s.textContent=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-1x39ut3"&&(s.textContent=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function cn(y){let s,p="Вот как выглядят результаты в виде тензоров PyTorch:",l,i,u;return i=new h({props:{code:"JTdCJTBBJTIwJTIwJTIwJTIwJ2lucHV0X2lkcyclM0ElMjB0ZW5zb3IoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwJTIwMTAxJTJDJTIwJTIwMTA0NSUyQyUyMCUyMDEwMDUlMkMlMjAlMjAyMzEwJTJDJTIwJTIwMjA0MiUyQyUyMCUyMDM0MDMlMkMlMjAlMjAyMDA1JTJDJTIwJTIwMTAzNyUyQyUyMDE3NjYyJTJDJTIwMTIxNzIlMkMlMjAyNjA3JTJDJTIwJTIwMjAyNiUyQyUyMCUyMDI4NzglMkMlMjAlMjAyMTY2JTJDJTIwJTIwMTAxMiUyQyUyMCUyMCUyMDEwMiU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QiUyMCUyMDEwMSUyQyUyMCUyMDEwNDUlMkMlMjAlMjA1MjIzJTJDJTIwJTIwMjAyMyUyQyUyMCUyMDIwNjElMkMlMjAlMjAyMTcyJTJDJTIwJTIwJTIwOTk5JTJDJTIwJTIwJTIwMTAyJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlNUQlMEElMjAlMjAlMjAlMjAlNUQpJTJDJTIwJTBBJTIwJTIwJTIwJTIwJ2F0dGVudGlvbl9tYXNrJyUzQSUyMHRlbnNvciglNUIlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUIxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCU1RCUwQSUyMCUyMCUyMCUyMCU1RCklMEElN0Q=",highlighted:`{
    <span class="hljs-string">&#x27;input_ids&#x27;</span>: tensor([
        [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">1005</span>,  <span class="hljs-number">2310</span>,  <span class="hljs-number">2042</span>,  <span class="hljs-number">3403</span>,  <span class="hljs-number">2005</span>,  <span class="hljs-number">1037</span>, <span class="hljs-number">17662</span>, <span class="hljs-number">12172</span>, <span class="hljs-number">2607</span>,  <span class="hljs-number">2026</span>,  <span class="hljs-number">2878</span>,  <span class="hljs-number">2166</span>,  <span class="hljs-number">1012</span>,   <span class="hljs-number">102</span>],
        [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">5223</span>,  <span class="hljs-number">2023</span>,  <span class="hljs-number">2061</span>,  <span class="hljs-number">2172</span>,   <span class="hljs-number">999</span>,   <span class="hljs-number">102</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>]
    ]), 
    <span class="hljs-string">&#x27;attention_mask&#x27;</span>: tensor([
        [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>],
        [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>]
    ])
}`,wrap:!1}}),{c(){s=f("p"),s.textContent=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-19o7f9b"&&(s.textContent=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function Mn(y){let s,p="Мы можем загрузить нашу предварительно обученную модель так же, как мы это делали с нашим токенизатором. 🤗 Transformers предоставляет класс <code>TFAutoModel</code>, в котором также есть метод <code>from_pretrained</code>:",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGQXV0b01vZGVsJTBBJTBBY2hlY2twb2ludCUyMCUzRCUyMCUyMmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkLWZpbmV0dW5lZC1zc3QtMi1lbmdsaXNoJTIyJTBBbW9kZWwlMjAlM0QlMjBURkF1dG9Nb2RlbC5mcm9tX3ByZXRyYWluZWQoY2hlY2twb2ludCk=",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFAutoModel

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = TFAutoModel.from_pretrained(checkpoint)`,wrap:!1}}),{c(){s=f("p"),s.innerHTML=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-pxa9f2"&&(s.innerHTML=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function un(y){let s,p="Мы можем загрузить нашу предварительно обученную модель так же, как мы это делали с нашим токенизатором. 🤗 Transformers предоставляет класс <code>AutoModel</code>, у которого также есть метод <code>from_pretrained()</code>:",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Nb2RlbCUwQSUwQWNoZWNrcG9pbnQlMjAlM0QlMjAlMjJkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZC1maW5ldHVuZWQtc3N0LTItZW5nbGlzaCUyMiUwQW1vZGVsJTIwJTNEJTIwQXV0b01vZGVsLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoModel

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = AutoModel.from_pretrained(checkpoint)`,wrap:!1}}),{c(){s=f("p"),s.innerHTML=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-djyozh"&&(s.innerHTML=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function on(y){let s,p,l,i;return s=new h({props:{code:"b3V0cHV0cyUyMCUzRCUyMG1vZGVsKGlucHV0cyklMEFwcmludChvdXRwdXRzLmxhc3RfaGlkZGVuX3N0YXRlLnNoYXBlKQ==",highlighted:`outputs = model(inputs)
<span class="hljs-built_in">print</span>(outputs.last_hidden_state.shape)`,wrap:!1}}),l=new h({props:{code:"KDIlMkMlMjAxNiUyQyUyMDc2OCk=",highlighted:'(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>, <span class="hljs-number">768</span>)',wrap:!1}}),{c(){J(s.$$.fragment),p=c(),J(l.$$.fragment)},l(u){U(s.$$.fragment,u),p=M(u),U(l.$$.fragment,u)},m(u,r){j(s,u,r),a(u,p,r),j(l,u,r),i=!0},i(u){i||(m(s.$$.fragment,u),m(l.$$.fragment,u),i=!0)},o(u){o(s.$$.fragment,u),o(l.$$.fragment,u),i=!1},d(u){u&&n(p),w(s,u),w(l,u)}}}function mn(y){let s,p,l,i;return s=new h({props:{code:"b3V0cHV0cyUyMCUzRCUyMG1vZGVsKCoqaW5wdXRzKSUwQXByaW50KG91dHB1dHMubGFzdF9oaWRkZW5fc3RhdGUuc2hhcGUp",highlighted:`outputs = model(**inputs)
<span class="hljs-built_in">print</span>(outputs.last_hidden_state.shape)`,wrap:!1}}),l=new h({props:{code:"dG9yY2guU2l6ZSglNUIyJTJDJTIwMTYlMkMlMjA3NjglNUQp",highlighted:'torch.Size([<span class="hljs-number">2</span>, <span class="hljs-number">16</span>, <span class="hljs-number">768</span>])',wrap:!1}}),{c(){J(s.$$.fragment),p=c(),J(l.$$.fragment)},l(u){U(s.$$.fragment,u),p=M(u),U(l.$$.fragment,u)},m(u,r){j(s,u,r),a(u,p,r),j(l,u,r),i=!0},i(u){i||(m(s.$$.fragment,u),m(l.$$.fragment,u),i=!0)},o(u){o(s.$$.fragment,u),o(l.$$.fragment,u),i=!1},d(u){u&&n(p),w(s,u),w(l,u)}}}function yn(y){let s,p="Для нашего примера нам понадобится модель с головой классификации последовательности (чтобы иметь возможность классифицировать предложения как положительные или отрицательные). Поэтому мы будем использовать не класс <code>TFAutoModel</code>, а <code>TFAutoModelForSequenceClassification</code>:",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGQXV0b01vZGVsRm9yU2VxdWVuY2VDbGFzc2lmaWNhdGlvbiUwQSUwQWNoZWNrcG9pbnQlMjAlM0QlMjAlMjJkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZC1maW5ldHVuZWQtc3N0LTItZW5nbGlzaCUyMiUwQW1vZGVsJTIwJTNEJTIwVEZBdXRvTW9kZWxGb3JTZXF1ZW5jZUNsYXNzaWZpY2F0aW9uLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KSUwQW91dHB1dHMlMjAlM0QlMjBtb2RlbChpbnB1dHMp",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFAutoModelForSequenceClassification

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = TFAutoModelForSequenceClassification.from_pretrained(checkpoint)
outputs = model(inputs)`,wrap:!1}}),{c(){s=f("p"),s.innerHTML=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-1569s7m"&&(s.innerHTML=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function fn(y){let s,p="Для нашего примера нам понадобится модель с головой классификации последовательности (чтобы иметь возможность классифицировать предложения как положительные или отрицательные). Поэтому мы будем использовать не класс <code>AutoModel</code>, а <code>AutoModelForSequenceClassification</code>:",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Nb2RlbEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24lMEElMEFjaGVja3BvaW50JTIwJTNEJTIwJTIyZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQtZmluZXR1bmVkLXNzdC0yLWVuZ2xpc2glMjIlMEFtb2RlbCUyMCUzRCUyMEF1dG9Nb2RlbEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24uZnJvbV9wcmV0cmFpbmVkKGNoZWNrcG9pbnQpJTBBb3V0cHV0cyUyMCUzRCUyMG1vZGVsKCoqaW5wdXRzKQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoModelForSequenceClassification

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = AutoModelForSequenceClassification.from_pretrained(checkpoint)
outputs = model(**inputs)`,wrap:!1}}),{c(){s=f("p"),s.innerHTML=p,l=c(),J(i.$$.fragment)},l(r){s=T(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-17tdifq"&&(s.innerHTML=p),l=M(r),U(i.$$.fragment,r)},m(r,d){a(r,s,d),a(r,l,d),j(i,r,d),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),w(i,r)}}}function Tn(y){let s,p;return s=new h({props:{code:"KDIlMkMlMjAyKQ==",highlighted:'(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>)',wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function bn(y){let s,p;return s=new h({props:{code:"dG9yY2guU2l6ZSglNUIyJTJDJTIwMiU1RCk=",highlighted:'torch.Size([<span class="hljs-number">2</span>, <span class="hljs-number">2</span>])',wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function Jn(y){let s,p;return s=new h({props:{code:"JTNDdGYuVGVuc29yJTNBJTIwc2hhcGUlM0QoMiUyQyUyMDIpJTJDJTIwZHR5cGUlM0RmbG9hdDMyJTJDJTIwbnVtcHklM0QlMEElMjAlMjAlMjAlMjBhcnJheSglNUIlNUItMS41NjA2OTkxJTJDJTIwJTIwMS42MTIyODQyJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwNC4xNjkyMzElMjAlMkMlMjAtMy4zNDY0NDcyJTVEJTVEJTJDJTIwZHR5cGUlM0RmbG9hdDMyKSUzRQ==",highlighted:`&lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>), dtype=float32, numpy=
    array([[-<span class="hljs-number">1.5606991</span>,  <span class="hljs-number">1.6122842</span>],
           [ <span class="hljs-number">4.169231</span> , -<span class="hljs-number">3.3464472</span>]], dtype=float32)&gt;`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function Un(y){let s,p;return s=new h({props:{code:"dGVuc29yKCU1QiU1Qi0xLjU2MDclMkMlMjAlMjAxLjYxMjMlNUQlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUIlMjA0LjE2OTIlMkMlMjAtMy4zNDY0JTVEJTVEJTJDJTIwZ3JhZF9mbiUzRCUzQ0FkZG1tQmFja3dhcmQlM0Up",highlighted:`tensor([[-<span class="hljs-number">1.5607</span>,  <span class="hljs-number">1.6123</span>],
        [ <span class="hljs-number">4.1692</span>, -<span class="hljs-number">3.3464</span>]], grad_fn=&lt;AddmmBackward&gt;)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function jn(y){let s,p;return s=new h({props:{code:"aW1wb3J0JTIwdGVuc29yZmxvdyUyMGFzJTIwdGYlMEElMEFwcmVkaWN0aW9ucyUyMCUzRCUyMHRmLm1hdGguc29mdG1heChvdXRwdXRzLmxvZ2l0cyUyQyUyMGF4aXMlM0QtMSklMEFwcmludChwcmVkaWN0aW9ucyk=",highlighted:`<span class="hljs-keyword">import</span> tensorflow <span class="hljs-keyword">as</span> tf

predictions = tf.math.softmax(outputs.logits, axis=-<span class="hljs-number">1</span>)
<span class="hljs-built_in">print</span>(predictions)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function wn(y){let s,p;return s=new h({props:{code:"aW1wb3J0JTIwdG9yY2glMEElMEFwcmVkaWN0aW9ucyUyMCUzRCUyMHRvcmNoLm5uLmZ1bmN0aW9uYWwuc29mdG1heChvdXRwdXRzLmxvZ2l0cyUyQyUyMGRpbSUzRC0xKSUwQXByaW50KHByZWRpY3Rpb25zKQ==",highlighted:`<span class="hljs-keyword">import</span> torch

predictions = torch.nn.functional.softmax(outputs.logits, dim=-<span class="hljs-number">1</span>)
<span class="hljs-built_in">print</span>(predictions)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function dn(y){let s,p;return s=new h({props:{code:"dGYuVGVuc29yKCUwQSU1QiU1QjQuMDE5NTE2NzFlLTAyJTIwOS41OTgwNDgzM2UtMDElNUQlMEElMjAlNUI5Ljk5NDU1ODdlLTAxJTIwNS40NDE4NDI0ZS0wNCU1RCU1RCUyQyUyMHNoYXBlJTNEKDIlMkMlMjAyKSUyQyUyMGR0eXBlJTNEZmxvYXQzMik=",highlighted:`tf.Tensor(
[[<span class="hljs-number">4.01951671e-02</span> <span class="hljs-number">9.59804833e-01</span>]
 [<span class="hljs-number">9.9945587e-01</span> <span class="hljs-number">5.4418424e-04</span>]], shape=(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>), dtype=float32)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function hn(y){let s,p;return s=new h({props:{code:"dGVuc29yKCU1QiU1QjQuMDE5NWUtMDIlMkMlMjA5LjU5ODBlLTAxJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCOS45OTQ2ZS0wMSUyQyUyMDUuNDQxOGUtMDQlNUQlNUQlMkMlMjBncmFkX2ZuJTNEJTNDU29mdG1heEJhY2t3YXJkJTNFKQ==",highlighted:`tensor([[<span class="hljs-number">4.0195e-02</span>, <span class="hljs-number">9.5980e-01</span>],
        [<span class="hljs-number">9.9946e-01</span>, <span class="hljs-number">5.4418e-04</span>]], grad_fn=&lt;SoftmaxBackward&gt;)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){w(s,l)}}}function _n(y){let s,p="✏️ <strong>Попробуйте!</strong> Выберите два (или более) собственных текста и пропустите их через конвейер <code>sentiment-analysis</code>. Затем повторите описанные здесь шаги и убедитесь, что вы получили те же результаты!";return{c(){s=f("p"),s.innerHTML=p},l(l){s=T(l,"P",{"data-svelte-h":!0}),b(s)!=="svelte-2s98in"&&(s.innerHTML=p)},m(l,i){a(l,s,i)},p:zt,d(l){l&&n(s)}}}function $n(y){let s,p,l,i,u,r,d,bl,_,$,nl,X,Jl,C,k,al,K,As='Давайте начнем с полноценного примера и посмотрим, что произошло за кулисами, когда мы выполнили следующий код в <a href="../chapter1">Главе 1</a>:',Ul,O,jl,ee,xs="и получили:",wl,le,dl,se,vs="Как мы видели в [Главе 1] (../chapter1), этот конвейер объединяет три этапа: предобработку, пропуск входных данных через модель и постобработку:",hl,Y,Qs='<img class="block dark:hidden" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/full_nlp_pipeline.svg" alt="Полный конвейер NLP: токенизация текста, конвертация в идентификаторы, инференс через модель Transformer и голову модели."/> <img class="hidden dark:block" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/full_nlp_pipeline-dark.svg" alt="Полный конвейер NLP: токенизация текста, конвертация в идентификаторы, инференс через модель Transformer и голову модели."/>',_l,te,Ns="Давайте быстро пройдемся по каждому из них.",$l,ne,Cl,ae,Ds="Как и другие нейронные сети, модели Transformer не могут напрямую обрабатывать сырой текст, поэтому первым шагом нашего конвейера является преобразование текстовых данных в числа, которые сможет воспринимать модель. Для этого мы используем <em>токенизатор</em>, который будет отвечать за:",kl,pe,Es="<li>Разбиение входных данных на слова, подслова или символы (например, пунктуацию), которые называются <em>токенами</em></li> <li>Сопоставление каждого токена с целым числом</li> <li>Добавление дополнительных входных данных, которые могут быть полезны для модели</li>",Il,re,Gs='Вся эта предобработка должна быть выполнена точно так же, как и при предварительном обучении модели, поэтому сначала нам нужно загрузить эту информацию из <a href="https://huggingface.co/models" rel="nofollow">Model Hub</a>. Для этого мы используем класс <code>AutoTokenizer</code> и его метод <code>from_pretrained()</code>. Используя имя контрольной точки нашей модели, он автоматически получает данные, ассоциированные с токенизатором модели, и кэширует их (таким образом, они скачиваются только в первый раз, когда вы выполняете приведенный ниже код).',gl,ie,Vs='Поскольку контрольной точкой по умолчанию конвейера <code>sentiment-analysis</code> является <code>distilbert-base-uncased-finetuned-sst-2-english</code> (вы можете посмотреть ее карточку модели <a href="https://huggingface.co/distilbert-base-uncased-finetuned-sst-2-english" rel="nofollow">здесь</a>), мы выполняем следующее:',Al,ce,xl,Me,Zs="Когда у нас есть токенизатор, мы можем напрямую передать ему наши предложения и получить в ответ словарь, готовый к передаче в нашу модель! Осталось только преобразовать список входных идентификаторов в тензоры.",vl,ue,Hs="Вы можете использовать 🤗 Transformers, не задумываясь о том, какой ML-фреймворк используется в качестве бэкенда; это может быть PyTorch или TensorFlow, или Flax для некоторых моделей. Однако модели Transformer принимают на вход только <em>тензоры</em>. Если вы впервые слышите о тензорах, то можете считать их массивами NumPy. Массив NumPy может быть скаляром (0D), вектором (1D), матрицей (2D) или иметь больше измерений. По сути, это тензор; тензоры других ML-фреймворков ведут себя аналогично, и их обычно так же просто инстанцировать, как и массивы NumPy.",Ql,oe,Rs="Чтобы указать тип тензоров, которые мы хотим получить в ответ (PyTorch, TensorFlow или обычный NumPy), мы используем аргумент <code>return_tensors</code>:",Nl,I,g,pl,me,Ss="Не беспокойтесь пока о дополнении и усечении, мы расскажем об этом позже. Главное, что нужно запомнить: вы можете передать одно предложение или список предложений, а также указать тип тензоров, которые вы хотите получить в ответ (если тип не указан, то в результате вы получите список списков).",Dl,A,x,rl,ye,Ws="Сам результат представляет собой словарь, содержащий два ключа, <code>input_ids</code> и <code>attention_mask</code>. <code>input_ids</code> содержит две строки целых чисел (по одной на каждое предложение), которые являются уникальными идентификаторами токенов в каждом предложении. Мы объясним, что такое <code>attention_mask</code> позже в этой главе.",El,fe,Gl,v,Q,il,Te,Bs="В этом фрагменте кода мы загрузили ту же контрольную точку, которую использовали в нашем конвейере ранее (на самом деле она уже должна была быть кэширована), и инстанцировали модель с ее помощью.",Vl,be,zs="Эта архитектура содержит только базовый модуль Transformer: при наличии некоторых входных данных он выводит то, что мы будем называть <em>скрытыми состояниями (hidden states)</em>, также известными как <em>признаки (features)</em>. Для каждого входа модели мы получим многомерный вектор, представляющий <strong>контекстное понимание этого входа моделью Transformer</strong>.",Zl,Je,Ls="Если вы не поняли смысла, не волнуйтесь. Мы объясним всё это позже.",Hl,Ue,Fs='Хотя эти скрытые состояния могут быть полезны сами по себе, обычно они являются входными данными для другой части модели, известной как <em>голова (head)</em>. В <a href="../chapter1">Главе 1</a> различные задачи могли быть выполнены с помощью одной и той же архитектуры, но каждая из этих задач будет связана с разной головой.',Rl,je,Sl,we,Xs="Вектор, возвращаемый модулем Transformer, обычно большой. Обычно он имеет три измерения:",Wl,de,Ys="<li><strong>Размер батча (Batch size)</strong>: Количество последовательностей, обрабатываемых за один раз (в нашем примере - 2).</li> <li><strong>Длина последовательности (Sequence length)</strong>: Длина числового представления последовательности (в нашем примере - 16).</li> <li><strong>Скрытый размер (Hidden size)</strong>: Размерность вектора каждого входа модели.</li>",Bl,he,Ps="О нем говорят как о “многомерном” из-за последнего значения. Скрытый размер может быть очень большим (768 - обычное явление для небольших моделей, а в больших моделях он может достигать 3072 и более).",zl,_e,qs="Мы можем убедиться в этом, если подадим в нашу модель входные данные, которые мы подвергли предобработке:",Ll,N,D,cl,$e,Ks="Обратите внимание, что выходы моделей 🤗 Transformers ведут себя как <code>именованные кортежи</code> или словари. Вы можете обращаться к элементам по атрибутам (как мы это делали), по ключу (<code>outputs[&quot;last_hidden_state&quot;]</code>) или даже по индексу, если вы точно знаете, где находится искомый элемент (<code>outputs[0]</code>).",Fl,Ce,Xl,ke,Os="Головы модели принимают на вход многомерный вектор скрытых состояний и проецируют его на другое измерение. Обычно они состоят из одного или нескольких линейных слоев:",Yl,P,et='<img class="block dark:hidden" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/transformer_and_head.svg" alt="Сеть-трансформер с головой."/> <img class="hidden dark:block" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/transformer_and_head-dark.svg" alt="Сеть-трансформер с головой."/>',Pl,Ie,lt="Выход модели Transformer передается непосредственно в голову модели для обработки.",ql,ge,st="На этой диаграмме модель представлена слоем эмбеддингов и последующими слоями. Слой эмбеддингов преобразует каждый входной идентификатор в токенизированном входе в вектор, который представляет соответствующий токен. Последующие слои манипулируют этими векторами с помощью механизма внимания, чтобы получить окончательное представление предложений.",Kl,Ae,tt="Существует множество различных архитектур 🤗 Transformers, каждая из которых предназначена для решения определенной задачи. Вот неполный список:",Ol,xe,nt="<li><code>*Model</code> (извлечение скрытых состояний)</li> <li><code>*ForCausalLM</code></li> <li><code>*ForMaskedLM</code></li> <li><code>*ForMultipleChoice</code></li> <li><code>*ForQuestionAnswering</code></li> <li><code>*ForSequenceClassification</code></li> <li><code>*ForTokenClassification</code></li> <li>и другие 🤗</li>",es,E,G,Ml,ve,at="Теперь, если мы посмотрим на форму наших выходов, размерность будет гораздо ниже: голова модели принимает на вход высокоразмерные векторы, которые мы видели ранее, и возвращает векторы, содержащие два значения (по одному на метку):",ls,Qe,ss,V,Z,ul,Ne,pt="Поскольку у нас всего два предложения и две метки, результат, полученный с помощью нашей модели, имеет форму 2 x 2.",ts,De,ns,Ee,rt="Значения, которые мы получаем на выходе из нашей модели, не всегда имеют смысл сами по себе. Давайте посмотрим:",as,Ge,ps,H,R,ol,Ve,it='Наша модель спрогнозировала <code>[-1.5607, 1.6123]</code> для первого предложения и <code>[ 4.1692, -3.3464]</code> для второго. Это не вероятности, а <em>логиты</em>, сырые, ненормированные оценки, выведенные последним слоем модели. Чтобы преобразовать их в вероятности, они должны пройти через слой <a href="https://en.wikipedia.org/wiki/Softmax_function" rel="nofollow">SoftMax</a> (все модели 🤗 Transformers выводят логиты, поскольку функция потерь для обучения обычно объединяет последнюю функцию активации, такую как SoftMax, с фактической функцией потерь, такой как кросс-энтропия):',rs,S,W,ml,B,z,yl,Ze,ct="Теперь мы видим, что модель спрогнозировала <code>[0.0402, 0.9598]</code> для первого предложения и <code>[0.9995, 0.0005]</code> для второго. Это узнаваемые оценки вероятности.",is,He,Mt="Чтобы получить метки, соответствующие каждой позиции, мы можем обратиться к атрибуту <code>id2label</code> в конфигурации модели ( более подробно об этом в следующем разделе):",cs,Re,Ms,Se,us,We,ut="Теперь мы можем сделать вывод, что модель спрогнозировала следующее:",os,Be,ot="<li>Первое предложение: NEGATIVE: 0.0402, POSITIVE: 0.9598</li> <li>Второе предложение: NEGATIVE: 0.9995, POSITIVE: 0.0005</li>",ms,ze,mt="Мы успешно воспроизвели три этапа конвейера: предобработку с помощью токенизаторов, прохождение входных данных через модель и постобработку! Теперь давайте уделим немного времени тому, чтобы углубиться в каждый из этих этапов.",ys,q,fs,Le,Ts,Tl,bs;u=new Kt({props:{fw:y[0]}}),d=new fl({props:{title:"За конвейером",local:"behind-the-pipeline",headingTag:"h1"}});const yt=[ln,en],Fe=[];function ft(e,t){return e[0]==="pt"?0:1}_=ft(y),$=Fe[_]=yt[_](y),X=new Ht({props:{$$slots:{default:[sn]},$$scope:{ctx:y}}});const Tt=[nn,tn],Xe=[];function bt(e,t){return e[0]==="pt"?0:1}C=bt(y),k=Xe[C]=Tt[C](y),O=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBY2xhc3NpZmllciUyMCUzRCUyMHBpcGVsaW5lKCUyMnNlbnRpbWVudC1hbmFseXNpcyUyMiklMEFjbGFzc2lmaWVyKCUwQSUyMCUyMCUyMCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElMjAlMjAlMjAlMjAlNUQlMEEp",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

classifier = pipeline(<span class="hljs-string">&quot;sentiment-analysis&quot;</span>)
classifier(
    [
        <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
        <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
    ]
)`,wrap:!1}}),le=new h({props:{code:"JTVCJTdCJ2xhYmVsJyUzQSUyMCdQT1NJVElWRSclMkMlMjAnc2NvcmUnJTNBJTIwMC45NTk4MDQ3MTM3MjYwNDM3JTdEJTJDJTBBJTIwJTdCJ2xhYmVsJyUzQSUyMCdORUdBVElWRSclMkMlMjAnc2NvcmUnJTNBJTIwMC45OTk0NTU4MDk1OTMyMDA3JTdEJTVE",highlighted:`[{<span class="hljs-string">&#x27;label&#x27;</span>: <span class="hljs-string">&#x27;POSITIVE&#x27;</span>, <span class="hljs-string">&#x27;score&#x27;</span>: <span class="hljs-number">0.9598047137260437</span>},
 {<span class="hljs-string">&#x27;label&#x27;</span>: <span class="hljs-string">&#x27;NEGATIVE&#x27;</span>, <span class="hljs-string">&#x27;score&#x27;</span>: <span class="hljs-number">0.9994558095932007</span>}]`,wrap:!1}}),ne=new fl({props:{title:"Предобработка с помощью токенизатора",local:"preprocessing-with-a-tokenizer",headingTag:"h2"}}),ce=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Ub2tlbml6ZXIlMEElMEFjaGVja3BvaW50JTIwJTNEJTIwJTIyZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQtZmluZXR1bmVkLXNzdC0yLWVuZ2xpc2glMjIlMEF0b2tlbml6ZXIlMjAlM0QlMjBBdXRvVG9rZW5pemVyLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoTokenizer

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
tokenizer = AutoTokenizer.from_pretrained(checkpoint)`,wrap:!1}});const Jt=[pn,an],Ye=[];function Ut(e,t){return e[0]==="pt"?0:1}I=Ut(y),g=Ye[I]=Jt[I](y);const jt=[cn,rn],Pe=[];function wt(e,t){return e[0]==="pt"?0:1}A=wt(y),x=Pe[A]=jt[A](y),fe=new fl({props:{title:"Проходя сквозь модель",local:"going-through-the-model",headingTag:"h2"}});const dt=[un,Mn],qe=[];function ht(e,t){return e[0]==="pt"?0:1}v=ht(y),Q=qe[v]=dt[v](y),je=new fl({props:{title:"Многомерный вектор?",local:"a-high-dimensional-vector",headingTag:"h3"}});const _t=[mn,on],Ke=[];function $t(e,t){return e[0]==="pt"?0:1}N=$t(y),D=Ke[N]=_t[N](y),Ce=new fl({props:{title:"Головы моделей: Извлечение смысла из чисел",local:"model-heads-making-sense-out-of-numbers",headingTag:"h3"}});const Ct=[fn,yn],Oe=[];function kt(e,t){return e[0]==="pt"?0:1}E=kt(y),G=Oe[E]=Ct[E](y),Qe=new h({props:{code:"cHJpbnQob3V0cHV0cy5sb2dpdHMuc2hhcGUp",highlighted:'<span class="hljs-built_in">print</span>(outputs.logits.shape)',wrap:!1}});const It=[bn,Tn],el=[];function gt(e,t){return e[0]==="pt"?0:1}V=gt(y),Z=el[V]=It[V](y),De=new fl({props:{title:"Постобработка вывода",local:"postprocessing-the-output",headingTag:"h2"}}),Ge=new h({props:{code:"cHJpbnQob3V0cHV0cy5sb2dpdHMp",highlighted:'<span class="hljs-built_in">print</span>(outputs.logits)',wrap:!1}});const At=[Un,Jn],ll=[];function xt(e,t){return e[0]==="pt"?0:1}H=xt(y),R=ll[H]=At[H](y);const vt=[wn,jn],sl=[];function Qt(e,t){return e[0]==="pt"?0:1}S=Qt(y),W=sl[S]=vt[S](y);const Nt=[hn,dn],tl=[];function Dt(e,t){return e[0]==="pt"?0:1}return B=Dt(y),z=tl[B]=Nt[B](y),Re=new h({props:{code:"bW9kZWwuY29uZmlnLmlkMmxhYmVs",highlighted:"model.config.id2label",wrap:!1}}),Se=new h({props:{code:"JTdCMCUzQSUyMCdORUdBVElWRSclMkMlMjAxJTNBJTIwJ1BPU0lUSVZFJyU3RA==",highlighted:'{<span class="hljs-number">0</span>: <span class="hljs-string">&#x27;NEGATIVE&#x27;</span>, <span class="hljs-number">1</span>: <span class="hljs-string">&#x27;POSITIVE&#x27;</span>}',wrap:!1}}),q=new Ht({props:{$$slots:{default:[_n]},$$scope:{ctx:y}}}),Le=new Ot({props:{source:"https://github.com/huggingface/course/blob/main/chapters/ru/chapter2/2.mdx"}}),{c(){s=f("meta"),p=c(),l=f("p"),i=c(),J(u.$$.fragment),r=c(),J(d.$$.fragment),bl=c(),$.c(),nl=c(),J(X.$$.fragment),Jl=c(),k.c(),al=c(),K=f("p"),K.innerHTML=As,Ul=c(),J(O.$$.fragment),jl=c(),ee=f("p"),ee.textContent=xs,wl=c(),J(le.$$.fragment),dl=c(),se=f("p"),se.textContent=vs,hl=c(),Y=f("div"),Y.innerHTML=Qs,_l=c(),te=f("p"),te.textContent=Ns,$l=c(),J(ne.$$.fragment),Cl=c(),ae=f("p"),ae.innerHTML=Ds,kl=c(),pe=f("ul"),pe.innerHTML=Es,Il=c(),re=f("p"),re.innerHTML=Gs,gl=c(),ie=f("p"),ie.innerHTML=Vs,Al=c(),J(ce.$$.fragment),xl=c(),Me=f("p"),Me.textContent=Zs,vl=c(),ue=f("p"),ue.innerHTML=Hs,Ql=c(),oe=f("p"),oe.innerHTML=Rs,Nl=c(),g.c(),pl=c(),me=f("p"),me.textContent=Ss,Dl=c(),x.c(),rl=c(),ye=f("p"),ye.innerHTML=Ws,El=c(),J(fe.$$.fragment),Gl=c(),Q.c(),il=c(),Te=f("p"),Te.textContent=Bs,Vl=c(),be=f("p"),be.innerHTML=zs,Zl=c(),Je=f("p"),Je.textContent=Ls,Hl=c(),Ue=f("p"),Ue.innerHTML=Fs,Rl=c(),J(je.$$.fragment),Sl=c(),we=f("p"),we.textContent=Xs,Wl=c(),de=f("ul"),de.innerHTML=Ys,Bl=c(),he=f("p"),he.textContent=Ps,zl=c(),_e=f("p"),_e.textContent=qs,Ll=c(),D.c(),cl=c(),$e=f("p"),$e.innerHTML=Ks,Fl=c(),J(Ce.$$.fragment),Xl=c(),ke=f("p"),ke.textContent=Os,Yl=c(),P=f("div"),P.innerHTML=et,Pl=c(),Ie=f("p"),Ie.textContent=lt,ql=c(),ge=f("p"),ge.textContent=st,Kl=c(),Ae=f("p"),Ae.textContent=tt,Ol=c(),xe=f("ul"),xe.innerHTML=nt,es=c(),G.c(),Ml=c(),ve=f("p"),ve.textContent=at,ls=c(),J(Qe.$$.fragment),ss=c(),Z.c(),ul=c(),Ne=f("p"),Ne.textContent=pt,ts=c(),J(De.$$.fragment),ns=c(),Ee=f("p"),Ee.textContent=rt,as=c(),J(Ge.$$.fragment),ps=c(),R.c(),ol=c(),Ve=f("p"),Ve.innerHTML=it,rs=c(),W.c(),ml=c(),z.c(),yl=c(),Ze=f("p"),Ze.innerHTML=ct,is=c(),He=f("p"),He.innerHTML=Mt,cs=c(),J(Re.$$.fragment),Ms=c(),J(Se.$$.fragment),us=c(),We=f("p"),We.textContent=ut,os=c(),Be=f("ul"),Be.innerHTML=ot,ms=c(),ze=f("p"),ze.textContent=mt,ys=c(),J(q.$$.fragment),fs=c(),J(Le.$$.fragment),Ts=c(),Tl=f("p"),this.h()},l(e){const t=Xt("svelte-u9bgzb",document.head);s=T(t,"META",{name:!0,content:!0}),t.forEach(n),p=M(e),l=T(e,"P",{}),Zt(l).forEach(n),i=M(e),U(u.$$.fragment,e),r=M(e),U(d.$$.fragment,e),bl=M(e),$.l(e),nl=M(e),U(X.$$.fragment,e),Jl=M(e),k.l(e),al=M(e),K=T(e,"P",{"data-svelte-h":!0}),b(K)!=="svelte-16befet"&&(K.innerHTML=As),Ul=M(e),U(O.$$.fragment,e),jl=M(e),ee=T(e,"P",{"data-svelte-h":!0}),b(ee)!=="svelte-1wiwec7"&&(ee.textContent=xs),wl=M(e),U(le.$$.fragment,e),dl=M(e),se=T(e,"P",{"data-svelte-h":!0}),b(se)!=="svelte-8am5v"&&(se.textContent=vs),hl=M(e),Y=T(e,"DIV",{class:!0,"data-svelte-h":!0}),b(Y)!=="svelte-1leh7vj"&&(Y.innerHTML=Qs),_l=M(e),te=T(e,"P",{"data-svelte-h":!0}),b(te)!=="svelte-1ec18ad"&&(te.textContent=Ns),$l=M(e),U(ne.$$.fragment,e),Cl=M(e),ae=T(e,"P",{"data-svelte-h":!0}),b(ae)!=="svelte-1fj8oje"&&(ae.innerHTML=Ds),kl=M(e),pe=T(e,"UL",{"data-svelte-h":!0}),b(pe)!=="svelte-1cq4itw"&&(pe.innerHTML=Es),Il=M(e),re=T(e,"P",{"data-svelte-h":!0}),b(re)!=="svelte-pfuzim"&&(re.innerHTML=Gs),gl=M(e),ie=T(e,"P",{"data-svelte-h":!0}),b(ie)!=="svelte-enqs18"&&(ie.innerHTML=Vs),Al=M(e),U(ce.$$.fragment,e),xl=M(e),Me=T(e,"P",{"data-svelte-h":!0}),b(Me)!=="svelte-1vdxe08"&&(Me.textContent=Zs),vl=M(e),ue=T(e,"P",{"data-svelte-h":!0}),b(ue)!=="svelte-1b9el8b"&&(ue.innerHTML=Hs),Ql=M(e),oe=T(e,"P",{"data-svelte-h":!0}),b(oe)!=="svelte-1wzd49y"&&(oe.innerHTML=Rs),Nl=M(e),g.l(e),pl=M(e),me=T(e,"P",{"data-svelte-h":!0}),b(me)!=="svelte-1s4cli6"&&(me.textContent=Ss),Dl=M(e),x.l(e),rl=M(e),ye=T(e,"P",{"data-svelte-h":!0}),b(ye)!=="svelte-e61cg2"&&(ye.innerHTML=Ws),El=M(e),U(fe.$$.fragment,e),Gl=M(e),Q.l(e),il=M(e),Te=T(e,"P",{"data-svelte-h":!0}),b(Te)!=="svelte-1qxnrxm"&&(Te.textContent=Bs),Vl=M(e),be=T(e,"P",{"data-svelte-h":!0}),b(be)!=="svelte-1fskn43"&&(be.innerHTML=zs),Zl=M(e),Je=T(e,"P",{"data-svelte-h":!0}),b(Je)!=="svelte-93rexp"&&(Je.textContent=Ls),Hl=M(e),Ue=T(e,"P",{"data-svelte-h":!0}),b(Ue)!=="svelte-17ffx5j"&&(Ue.innerHTML=Fs),Rl=M(e),U(je.$$.fragment,e),Sl=M(e),we=T(e,"P",{"data-svelte-h":!0}),b(we)!=="svelte-u286w9"&&(we.textContent=Xs),Wl=M(e),de=T(e,"UL",{"data-svelte-h":!0}),b(de)!=="svelte-1rhb374"&&(de.innerHTML=Ys),Bl=M(e),he=T(e,"P",{"data-svelte-h":!0}),b(he)!=="svelte-meobu0"&&(he.textContent=Ps),zl=M(e),_e=T(e,"P",{"data-svelte-h":!0}),b(_e)!=="svelte-ik4v9u"&&(_e.textContent=qs),Ll=M(e),D.l(e),cl=M(e),$e=T(e,"P",{"data-svelte-h":!0}),b($e)!=="svelte-16luh58"&&($e.innerHTML=Ks),Fl=M(e),U(Ce.$$.fragment,e),Xl=M(e),ke=T(e,"P",{"data-svelte-h":!0}),b(ke)!=="svelte-ez5t2s"&&(ke.textContent=Os),Yl=M(e),P=T(e,"DIV",{class:!0,"data-svelte-h":!0}),b(P)!=="svelte-p5gsup"&&(P.innerHTML=et),Pl=M(e),Ie=T(e,"P",{"data-svelte-h":!0}),b(Ie)!=="svelte-18w8t7f"&&(Ie.textContent=lt),ql=M(e),ge=T(e,"P",{"data-svelte-h":!0}),b(ge)!=="svelte-ytsad1"&&(ge.textContent=st),Kl=M(e),Ae=T(e,"P",{"data-svelte-h":!0}),b(Ae)!=="svelte-18m92ty"&&(Ae.textContent=tt),Ol=M(e),xe=T(e,"UL",{"data-svelte-h":!0}),b(xe)!=="svelte-11e5qmc"&&(xe.innerHTML=nt),es=M(e),G.l(e),Ml=M(e),ve=T(e,"P",{"data-svelte-h":!0}),b(ve)!=="svelte-g7lcx6"&&(ve.textContent=at),ls=M(e),U(Qe.$$.fragment,e),ss=M(e),Z.l(e),ul=M(e),Ne=T(e,"P",{"data-svelte-h":!0}),b(Ne)!=="svelte-4l0m88"&&(Ne.textContent=pt),ts=M(e),U(De.$$.fragment,e),ns=M(e),Ee=T(e,"P",{"data-svelte-h":!0}),b(Ee)!=="svelte-1590jf6"&&(Ee.textContent=rt),as=M(e),U(Ge.$$.fragment,e),ps=M(e),R.l(e),ol=M(e),Ve=T(e,"P",{"data-svelte-h":!0}),b(Ve)!=="svelte-1l9i46m"&&(Ve.innerHTML=it),rs=M(e),W.l(e),ml=M(e),z.l(e),yl=M(e),Ze=T(e,"P",{"data-svelte-h":!0}),b(Ze)!=="svelte-grggho"&&(Ze.innerHTML=ct),is=M(e),He=T(e,"P",{"data-svelte-h":!0}),b(He)!=="svelte-47uv30"&&(He.innerHTML=Mt),cs=M(e),U(Re.$$.fragment,e),Ms=M(e),U(Se.$$.fragment,e),us=M(e),We=T(e,"P",{"data-svelte-h":!0}),b(We)!=="svelte-704hex"&&(We.textContent=ut),os=M(e),Be=T(e,"UL",{"data-svelte-h":!0}),b(Be)!=="svelte-q6wm6e"&&(Be.innerHTML=ot),ms=M(e),ze=T(e,"P",{"data-svelte-h":!0}),b(ze)!=="svelte-vb6532"&&(ze.textContent=mt),ys=M(e),U(q.$$.fragment,e),fs=M(e),U(Le.$$.fragment,e),Ts=M(e),Tl=T(e,"P",{}),Zt(Tl).forEach(n),this.h()},h(){Js(s,"name","hf:doc:metadata"),Js(s,"content",Cn),Js(Y,"class","flex justify-center"),Js(P,"class","flex justify-center")},m(e,t){Yt(document.head,s),a(e,p,t),a(e,l,t),a(e,i,t),j(u,e,t),a(e,r,t),j(d,e,t),a(e,bl,t),Fe[_].m(e,t),a(e,nl,t),j(X,e,t),a(e,Jl,t),Xe[C].m(e,t),a(e,al,t),a(e,K,t),a(e,Ul,t),j(O,e,t),a(e,jl,t),a(e,ee,t),a(e,wl,t),j(le,e,t),a(e,dl,t),a(e,se,t),a(e,hl,t),a(e,Y,t),a(e,_l,t),a(e,te,t),a(e,$l,t),j(ne,e,t),a(e,Cl,t),a(e,ae,t),a(e,kl,t),a(e,pe,t),a(e,Il,t),a(e,re,t),a(e,gl,t),a(e,ie,t),a(e,Al,t),j(ce,e,t),a(e,xl,t),a(e,Me,t),a(e,vl,t),a(e,ue,t),a(e,Ql,t),a(e,oe,t),a(e,Nl,t),Ye[I].m(e,t),a(e,pl,t),a(e,me,t),a(e,Dl,t),Pe[A].m(e,t),a(e,rl,t),a(e,ye,t),a(e,El,t),j(fe,e,t),a(e,Gl,t),qe[v].m(e,t),a(e,il,t),a(e,Te,t),a(e,Vl,t),a(e,be,t),a(e,Zl,t),a(e,Je,t),a(e,Hl,t),a(e,Ue,t),a(e,Rl,t),j(je,e,t),a(e,Sl,t),a(e,we,t),a(e,Wl,t),a(e,de,t),a(e,Bl,t),a(e,he,t),a(e,zl,t),a(e,_e,t),a(e,Ll,t),Ke[N].m(e,t),a(e,cl,t),a(e,$e,t),a(e,Fl,t),j(Ce,e,t),a(e,Xl,t),a(e,ke,t),a(e,Yl,t),a(e,P,t),a(e,Pl,t),a(e,Ie,t),a(e,ql,t),a(e,ge,t),a(e,Kl,t),a(e,Ae,t),a(e,Ol,t),a(e,xe,t),a(e,es,t),Oe[E].m(e,t),a(e,Ml,t),a(e,ve,t),a(e,ls,t),j(Qe,e,t),a(e,ss,t),el[V].m(e,t),a(e,ul,t),a(e,Ne,t),a(e,ts,t),j(De,e,t),a(e,ns,t),a(e,Ee,t),a(e,as,t),j(Ge,e,t),a(e,ps,t),ll[H].m(e,t),a(e,ol,t),a(e,Ve,t),a(e,rs,t),sl[S].m(e,t),a(e,ml,t),tl[B].m(e,t),a(e,yl,t),a(e,Ze,t),a(e,is,t),a(e,He,t),a(e,cs,t),j(Re,e,t),a(e,Ms,t),j(Se,e,t),a(e,us,t),a(e,We,t),a(e,os,t),a(e,Be,t),a(e,ms,t),a(e,ze,t),a(e,ys,t),j(q,e,t),a(e,fs,t),j(Le,e,t),a(e,Ts,t),a(e,Tl,t),bs=!0},p(e,[t]){const Et={};t&1&&(Et.fw=e[0]),u.$set(Et);let Us=_;_=ft(e),_!==Us&&(F(),o(Fe[Us],1,1,()=>{Fe[Us]=null}),L(),$=Fe[_],$||($=Fe[_]=yt[_](e),$.c()),m($,1),$.m(nl.parentNode,nl));const Gt={};t&2&&(Gt.$$scope={dirty:t,ctx:e}),X.$set(Gt);let js=C;C=bt(e),C!==js&&(F(),o(Xe[js],1,1,()=>{Xe[js]=null}),L(),k=Xe[C],k||(k=Xe[C]=Tt[C](e),k.c()),m(k,1),k.m(al.parentNode,al));let ws=I;I=Ut(e),I!==ws&&(F(),o(Ye[ws],1,1,()=>{Ye[ws]=null}),L(),g=Ye[I],g||(g=Ye[I]=Jt[I](e),g.c()),m(g,1),g.m(pl.parentNode,pl));let ds=A;A=wt(e),A!==ds&&(F(),o(Pe[ds],1,1,()=>{Pe[ds]=null}),L(),x=Pe[A],x||(x=Pe[A]=jt[A](e),x.c()),m(x,1),x.m(rl.parentNode,rl));let hs=v;v=ht(e),v!==hs&&(F(),o(qe[hs],1,1,()=>{qe[hs]=null}),L(),Q=qe[v],Q||(Q=qe[v]=dt[v](e),Q.c()),m(Q,1),Q.m(il.parentNode,il));let _s=N;N=$t(e),N!==_s&&(F(),o(Ke[_s],1,1,()=>{Ke[_s]=null}),L(),D=Ke[N],D||(D=Ke[N]=_t[N](e),D.c()),m(D,1),D.m(cl.parentNode,cl));let $s=E;E=kt(e),E!==$s&&(F(),o(Oe[$s],1,1,()=>{Oe[$s]=null}),L(),G=Oe[E],G||(G=Oe[E]=Ct[E](e),G.c()),m(G,1),G.m(Ml.parentNode,Ml));let Cs=V;V=gt(e),V!==Cs&&(F(),o(el[Cs],1,1,()=>{el[Cs]=null}),L(),Z=el[V],Z||(Z=el[V]=It[V](e),Z.c()),m(Z,1),Z.m(ul.parentNode,ul));let ks=H;H=xt(e),H!==ks&&(F(),o(ll[ks],1,1,()=>{ll[ks]=null}),L(),R=ll[H],R||(R=ll[H]=At[H](e),R.c()),m(R,1),R.m(ol.parentNode,ol));let Is=S;S=Qt(e),S!==Is&&(F(),o(sl[Is],1,1,()=>{sl[Is]=null}),L(),W=sl[S],W||(W=sl[S]=vt[S](e),W.c()),m(W,1),W.m(ml.parentNode,ml));let gs=B;B=Dt(e),B!==gs&&(F(),o(tl[gs],1,1,()=>{tl[gs]=null}),L(),z=tl[B],z||(z=tl[B]=Nt[B](e),z.c()),m(z,1),z.m(yl.parentNode,yl));const Vt={};t&2&&(Vt.$$scope={dirty:t,ctx:e}),q.$set(Vt)},i(e){bs||(m(u.$$.fragment,e),m(d.$$.fragment,e),m($),m(X.$$.fragment,e),m(k),m(O.$$.fragment,e),m(le.$$.fragment,e),m(ne.$$.fragment,e),m(ce.$$.fragment,e),m(g),m(x),m(fe.$$.fragment,e),m(Q),m(je.$$.fragment,e),m(D),m(Ce.$$.fragment,e),m(G),m(Qe.$$.fragment,e),m(Z),m(De.$$.fragment,e),m(Ge.$$.fragment,e),m(R),m(W),m(z),m(Re.$$.fragment,e),m(Se.$$.fragment,e),m(q.$$.fragment,e),m(Le.$$.fragment,e),bs=!0)},o(e){o(u.$$.fragment,e),o(d.$$.fragment,e),o($),o(X.$$.fragment,e),o(k),o(O.$$.fragment,e),o(le.$$.fragment,e),o(ne.$$.fragment,e),o(ce.$$.fragment,e),o(g),o(x),o(fe.$$.fragment,e),o(Q),o(je.$$.fragment,e),o(D),o(Ce.$$.fragment,e),o(G),o(Qe.$$.fragment,e),o(Z),o(De.$$.fragment,e),o(Ge.$$.fragment,e),o(R),o(W),o(z),o(Re.$$.fragment,e),o(Se.$$.fragment,e),o(q.$$.fragment,e),o(Le.$$.fragment,e),bs=!1},d(e){e&&(n(p),n(l),n(i),n(r),n(bl),n(nl),n(Jl),n(al),n(K),n(Ul),n(jl),n(ee),n(wl),n(dl),n(se),n(hl),n(Y),n(_l),n(te),n($l),n(Cl),n(ae),n(kl),n(pe),n(Il),n(re),n(gl),n(ie),n(Al),n(xl),n(Me),n(vl),n(ue),n(Ql),n(oe),n(Nl),n(pl),n(me),n(Dl),n(rl),n(ye),n(El),n(Gl),n(il),n(Te),n(Vl),n(be),n(Zl),n(Je),n(Hl),n(Ue),n(Rl),n(Sl),n(we),n(Wl),n(de),n(Bl),n(he),n(zl),n(_e),n(Ll),n(cl),n($e),n(Fl),n(Xl),n(ke),n(Yl),n(P),n(Pl),n(Ie),n(ql),n(ge),n(Kl),n(Ae),n(Ol),n(xe),n(es),n(Ml),n(ve),n(ls),n(ss),n(ul),n(Ne),n(ts),n(ns),n(Ee),n(as),n(ps),n(ol),n(Ve),n(rs),n(ml),n(yl),n(Ze),n(is),n(He),n(cs),n(Ms),n(us),n(We),n(os),n(Be),n(ms),n(ze),n(ys),n(fs),n(Ts),n(Tl)),n(s),w(u,e),w(d,e),Fe[_].d(e),w(X,e),Xe[C].d(e),w(O,e),w(le,e),w(ne,e),w(ce,e),Ye[I].d(e),Pe[A].d(e),w(fe,e),qe[v].d(e),w(je,e),Ke[N].d(e),w(Ce,e),Oe[E].d(e),w(Qe,e),el[V].d(e),w(De,e),w(Ge,e),ll[H].d(e),sl[S].d(e),tl[B].d(e),w(Re,e),w(Se,e),w(q,e),w(Le,e)}}}const Cn='{"title":"За конвейером","local":"behind-the-pipeline","sections":[{"title":"Предобработка с помощью токенизатора","local":"preprocessing-with-a-tokenizer","sections":[],"depth":2},{"title":"Проходя сквозь модель","local":"going-through-the-model","sections":[{"title":"Многомерный вектор?","local":"a-high-dimensional-vector","sections":[],"depth":3},{"title":"Головы моделей: Извлечение смысла из чисел","local":"model-heads-making-sense-out-of-numbers","sections":[],"depth":3}],"depth":2},{"title":"Постобработка вывода","local":"postprocessing-the-output","sections":[],"depth":2}],"depth":1}';function kn(y,s,p){let l="pt";return Bt(()=>{const i=new URLSearchParams(window.location.search);p(0,l=i.get("fw")||"pt")}),[l]}class En extends Lt{constructor(s){super(),Ft(this,s,kn,$n,Wt,{})}}export{En as component};
