import{s as Wa,o as Ya}from"../chunks/scheduler.a045fce0.js";import{S as Ha,i as Na,e as o,s as t,c as p,q as Ea,h as Va,a as r,d as s,b as n,f as za,g as d,j as i,r as Ga,k as ia,l as Xa,m as l,n as u,t as c,o as m,p as M}from"../chunks/index.bc14ef44.js";import{T as Fa}from"../chunks/Tip.3a2ad1d6.js";import{C as Qa,H as ra,E as Sa}from"../chunks/MermaidChart.svelte_svelte_type_style_lang.1537ddec.js";import{C as y}from"../chunks/CodeBlock.78c3320f.js";function La(ce){let j;return{c(){j=Ea(`💡 Si una señal de audio ha sido grabada a una frecuencia de muestreo de 8kHz, de manera que cada segundo de la 
señal esta representado por 8000 muestras, sabemos tambien que el audio no contiene ninguna frecuencia por encima
de 4kHz. Esto esta garantizado por el teorema de Nyquist. Resamplear a una frecuencia de muestro mayor(Upsampling) 
consiste en estimar los puntos adicionales que irian entre las muestras existentes. El proceso de Downsampling, requiere en cambio,
que primero filtremos cualquier frecuencia que sea mayor al nuevo Limite de Nyquist antes de estimar las nuevas muestras.
En otras palabras, no puedes hacer downsampling por un facto de 2x solo descartando la mitad de muestras de la señal - Esto 
crearía distorsiones en la señal llamadas alias. Hacer resampliing de la manera correcta es complejo por lo que es mejor
usar librerias que han sido probadas a lo largo de los años como lo son librosa o 🤗 Datasets.`)},l(f){j=Ga(f,`💡 Si una señal de audio ha sido grabada a una frecuencia de muestreo de 8kHz, de manera que cada segundo de la 
señal esta representado por 8000 muestras, sabemos tambien que el audio no contiene ninguna frecuencia por encima
de 4kHz. Esto esta garantizado por el teorema de Nyquist. Resamplear a una frecuencia de muestro mayor(Upsampling) 
consiste en estimar los puntos adicionales que irian entre las muestras existentes. El proceso de Downsampling, requiere en cambio,
que primero filtremos cualquier frecuencia que sea mayor al nuevo Limite de Nyquist antes de estimar las nuevas muestras.
En otras palabras, no puedes hacer downsampling por un facto de 2x solo descartando la mitad de muestras de la señal - Esto 
crearía distorsiones en la señal llamadas alias. Hacer resampliing de la manera correcta es complejo por lo que es mejor
usar librerias que han sido probadas a lo largo de los años como lo son librosa o 🤗 Datasets.`)},m(f,U){l(f,j,U)},d(f){f&&s(j)}}}function Pa(ce){let j,f,U,me,h,Me,w,je,b,pa=`Cargar una base de datos con 🤗 Datasets es solo la mitad de la diversión. Si planeas usar los datos para entrenar un modelo, o
para hacer inferencia necesitarás preprocesar los datos primero. En general, esto involucra los siguientes pasos:`,ye,C,da="<li>Resamplear los datos de audio.</li> <li>Filtrar la base de datos.</li> <li>Convertir el audio a la entrada esperada por el modelo.</li>",fe,I,Je,g,ua=`La función <code>load_dataset</code> descarga los archivos de audio con la frecuencia de muestreo con la que fueron publicados. Esta frecuencia
no siempre coincide con la esperada por el modelo que planees usar para entrenar o realizar inferencia. Si existe una discrepancia
entre las frecuencias, puedes resamplear el audio a la frecuencia de muestreo que espera el modelo.`,Te,A,ca=`La mayoria de los modelos pre-entrenados disponibles han sido entrenados con audios a una frecuencia de muestreo de 16kHz.
Cuando exploramos los datos de MINDS-14, puedes haber notado que la frecuencia de muestreo era de 8kHz, por lo que seguramente
se tendrá que realizar un proceso de upsampling(Convertir de una frecuencia menor a una mayor).`,Ue,$,ma=`Para hacer esto, usa el método <code>cast_column</code> de 🤗 Datasets. Esta operación no altera el audio cuando se ejecuta, crea una
señal para que datasets haga el resampleo en el momento en que se carguen los audios. El siguiente código configura el proceso
de resampling a 16 kHz.`,he,x,we,q,Ma="Vuelve a cargar el primer ejemplo de audio en el conjunto de datos MINDS-14 y verifica que se haya re-muestreado al valor deseado de <code>sampling rate</code>:",be,v,Ce,_,ja="<strong>Output:</strong>",Ie,B,ge,Z,ya=`Puedes ver que los valores del array ahora son diferentes. Esto es porque ahora tenemos el doble de valores de amplitud de la longitud
original.`,Ae,J,$e,k,xe,R,fa=`Algunas veces necesitarás filtrar los datos en función de algunos criterios. Uno de los casos comunes implica limitar los ejemplos
de audio a una duración determinada. Por ejemplo, es posible que deseemos filtrar cualquier ejemplo que supere los 20 segundos para
evitar errores de falta de memoria al entrenar un modelo.`,qe,z,Ja=`Podemos hacer esto al usar el método <code>filter</code> que espera una función que contenga una lógica de filtrado. Empezemos por escribir
una función que indique cuales ejemplos conservar y cuales descartar. la función <code>is_audio_length_in_range</code>, retorna <code>True</code> si
un ejemplo tiene una duracióne menor a 20s y <code>False</code> si es mayor a 20s.`,ve,E,_e,G,Ta=`La función de filtrado se puede aplicar a una columna de un conjunto de datos, pero en este conjunto de datos no tenemos una columna
con la duración de la pista de audio. Sin embargo, podemos crear una columna, filtrar basándonos en los valores de esa columna y luego
eliminarla.`,Be,W,Ze,Y,Ua="<strong>Output:</strong>",ke,H,Re,N,ha="Podemos verificar que el dataset filtrado ahora tiene 624 ejemplos y no 654",ze,V,Ee,X,wa=`Uno de los aspectos más retadores de trabajar con datos de audio es preparar los datos en el formato correcto para el entrenamiento
de un modelo. Como has visto, los datos de audio se almacenan en un arreglo de muestras. Sin embargo, la mayoria de modelos pre-entrenados,
ya sea que los uses para inferencia o para fine-tuning, esperan que los datos en bruto sean convertidos en características de entrada.
Los requisitos para las características de entrada pueden variar de un modelo a otro, ya que dependen de la arquitectura del modelo y
los datos con los que fue preentrenado. La buena noticia es que, para cada modelo de audio compatible, 🤗 Transformers ofrece una clase
de extractor de características que puede convertir los datos de audio en bruto en las características de entrada que el modelo espera.`,Ge,F,ba=`Entonces, ¿qué hace un extractor de características con los datos de audio en bruto? Echemos un vistazo al extractor de características
de <a href="https://cdn.openai.com/papers/whisper.pdf" rel="nofollow">Whisper</a> para comprender algunas transformaciones comunes de extracción de características.
Whisper es un modelo preentrenado para el reconocimiento automático del habla (ASR) publicado en septiembre de 2022 por Alec Radford et al. de OpenAI.`,We,Q,Ca=`Primero, el extractor de característicasde whisper completa/recorta un conjunto de ejemplos de audios para que todos los ejemplos tengan
una longitud de 30s. Ejemplos con una duración menor son completados añadiendo ceros al final de la secuencia(Ceros en una secuencia de
audio corresponden a la ausencia de señal o silencio). Ejemplos mayores a 30 segundos son truncados hasta 30 segundos. Ya que todos los
elementos en el conjunto son completados/recortados a una longitud común, no hay necesidad de usar una mascara de atención. Whisper es único
en este aspecto, la mayoria de los otros modelos requieren una mascara de atención que indica donde las secuencias fueron completadas, y por
lo tanto sean ignoradas por el mecanismo de auto-atención. Whisper esta entrenado para trabajar sin un mecanismo de atención e inferir directamente
de la señal donde ignorar estos segmentos.`,Ye,S,Ia=`La segunda operación que realiza el extractor de whisper es convertir las señalas en espectrogramas logarítmicos de mel.
Como recordarás, estos espectrogramas describen cómo cambian las frecuencias de una señal con el tiempo, expresadas en la escala mel
y medidas en decibelios (la parte logarítmica) para hacer que las frecuencias y amplitudes sean más representativas de la audición humana.`,He,L,ga=`Todas estas transformaciones pueden ser aplicadas a tus datos de audio en bruto con unas pocas lineas de código. Carguemos ahora
el extractor de características de el modelo preentrenado de Whisper.`,Ne,P,Ve,D,Aa="A continuacióon, podemos escribir una función para preprocesar un ejemplo de audio al pasarlo a traves del <code>feature_extractor</code>.",Xe,O,Fe,K,$a="Podemos aplicar la función de preparación de datos a todos nuestros ejemplos de entrenamiento utilizando el método “map” de 🤗 Datasets:",Qe,ee,Se,ae,xa="<strong>Output:</strong>",Le,se,Pe,le,qa="Con tan solo hacer esto, tenemos los espectrogramas logarítmicos de mel como una columna de <code>input_features</code> en nuestro dataset.",De,te,va="Visualizemos ahora uno de los ejemplos del dataset <code>minds</code>:",Oe,ne,Ke,T,_a='<img src="https://huggingface.co/datasets/huggingface-course/audio-course-images/resolve/main/log_mel_whisper.png" alt="Log mel spectrogram plot"/>',ea,oe,Ba=`La clase de extractor de características del modelo se encarga de transformar los datos de audio en bruto al formato que el modelo espera.
Sin embargo, muchas tareas que involucran audio son multimodales, como el reconocimiento de voz. En tales casos, 🤗 Transformers también
ofrece tokenizadores específicos del modelo para procesar las entradas de texto. Para obtener más información sobre los tokenizadores,
consulta nuestro curso de <a href="https://huggingface.co/course/chapter2/4" rel="nofollow">NLP</a>.`,aa,re,Za=`Puedes cargar el extractor de características y el tokenizador para Whisper y otros modelos multimodales de forma separada, o puedes cargar
ambos usando el “procesador”. Para hacer las cosas aun más simples, usa el <code>AutoProcessor</code> para cargar el extractor de características
y el procesador de un modelo de la siguiente forma:`,sa,ie,la,pe,ka=`Aquí hemos ilustrado los pasos fundamentales de preparación de datos. Por supuesto, los datos personalizados pueden requerir una
preprocesamiento más complejo. En este caso, puedes ampliar la función prepare_dataset para realizar cualquier tipo de transformación
personalizada en los datos. Con 🤗 Datasets, si puedes escribirlo como una función de Python, ¡puedes aplicarlo a tu conjunto de datos!`,ta,de,na,ue,oa;return h=new Qa({props:{containerStyle:"float: right; margin-left: 10px; display: inline-flex; position: relative; z-index: 10;"}}),w=new ra({props:{title:"Preprocesamiento de un conjunto de datos de audio",local:"preprocesamiento-de-un-conjunto-de-datos-de-audio",headingTag:"h1"}}),I=new ra({props:{title:"Resamplear los datos de audio",local:"resamplear-los-datos-de-audio",headingTag:"h2"}}),x=new y({props:{code:"ZnJvbSUyMGRhdGFzZXRzJTIwaW1wb3J0JTIwQXVkaW8lMEElMEFtaW5kcyUyMCUzRCUyMG1pbmRzLmNhc3RfY29sdW1uKCUyMmF1ZGlvJTIyJTJDJTIwQXVkaW8oc2FtcGxpbmdfcmF0ZSUzRDE2XzAwMCkp",highlighted:`<span class="hljs-keyword">from</span> datasets <span class="hljs-keyword">import</span> Audio

minds = minds.cast_column(<span class="hljs-string">&quot;audio&quot;</span>, Audio(sampling_rate=<span class="hljs-number">16_000</span>))`,wrap:!1}}),v=new y({props:{code:"bWluZHMlNUIwJTVE",highlighted:'minds[<span class="hljs-number">0</span>]',wrap:!1}}),B=new y({props:{code:"JTdCJTBBJTIwJTIwJTIwJTIwJTIycGF0aCUyMiUzQSUyMCUyMiUyRnJvb3QlMkYuY2FjaGUlMkZodWdnaW5nZmFjZSUyRmRhdGFzZXRzJTJGZG93bmxvYWRzJTJGZXh0cmFjdGVkJTJGZjE0OTQ4ZTBlODRiZTYzOGRkNzk0M2FjMzY1MThhNGNmMzMyNGU4YjdhYTMzMWM1YWIxMTU0MTUxOGU5MzY4YyUyRmVuLUFVflBBWV9CSUxMJTJGcmVzcG9uc2VfNC53YXYlMjIlMkMlMEElMjAlMjAlMjAlMjAlMjJhdWRpbyUyMiUzQSUyMCU3QiUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMnBhdGglMjIlM0ElMjAlMjIlMkZyb290JTJGLmNhY2hlJTJGaHVnZ2luZ2ZhY2UlMkZkYXRhc2V0cyUyRmRvd25sb2FkcyUyRmV4dHJhY3RlZCUyRmYxNDk0OGUwZTg0YmU2MzhkZDc5NDNhYzM2NTE4YTRjZjMzMjRlOGI3YWEzMzFjNWFiMTE1NDE1MThlOTM2OGMlMkZlbi1BVX5QQVlfQklMTCUyRnJlc3BvbnNlXzQud2F2JTIyJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIyYXJyYXklMjIlM0ElMjBhcnJheSglMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUIlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAyLjA2MzQyNDNlLTA1JTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwMS45NDM3ODM3ZS0wNCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMDIuMjQxOTM0MGUtMDQlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAuLi4lMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjA5LjM4NTI4NjJlLTA0JTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwMS4xMzAyNDUyZS0wMyUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMDcuMTUzMTQyOWUtMDQlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUQlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjBkdHlwZSUzRGZsb2F0MzIlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjApJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIyc2FtcGxpbmdfcmF0ZSUyMiUzQSUyMDE2MDAwJTJDJTBBJTIwJTIwJTIwJTIwJTdEJTJDJTBBJTIwJTIwJTIwJTIwJTIydHJhbnNjcmlwdGlvbiUyMiUzQSUyMCUyMkklMjB3b3VsZCUyMGxpa2UlMjB0byUyMHBheSUyMG15JTIwZWxlY3RyaWNpdHklMjBiaWxsJTIwdXNpbmclMjBteSUyMGNhcmQlMjBjYW4lMjB5b3UlMjBwbGVhc2UlMjBhc3Npc3QlMjIlMkMlMEElMjAlMjAlMjAlMjAlMjJpbnRlbnRfY2xhc3MlMjIlM0ElMjAxMyUyQyUwQSU3RA==",highlighted:`{
    <span class="hljs-comment">&quot;path&quot;</span>: <span class="hljs-comment">&quot;/root/.cache/huggingface/datasets/downloads/extracted/f14948e0e84be638dd7943ac36518a4cf3324e8b7aa331c5ab11541518e9368c/en-AU~PAY_BILL/response_4.wav&quot;</span>,
    <span class="hljs-comment">&quot;audio&quot;</span>: {
        <span class="hljs-comment">&quot;path&quot;</span>: <span class="hljs-comment">&quot;/root/.cache/huggingface/datasets/downloads/extracted/f14948e0e84be638dd7943ac36518a4cf3324e8b7aa331c5ab11541518e9368c/en-AU~PAY_BILL/response_4.wav&quot;</span>,
        <span class="hljs-comment">&quot;array&quot;</span>: array(
            [
                <span class="hljs-number">2.0634243e-05</span>,
                <span class="hljs-number">1.9437837e-04</span>,
                <span class="hljs-number">2.2419340e-04</span>,
                ...,
                <span class="hljs-number">9.3852862e-04</span>,
                <span class="hljs-number">1.1302452e-03</span>,
                <span class="hljs-number">7.1531429e-04</span>,
            ],
            dtype=float32,
        ),
        <span class="hljs-comment">&quot;sampling_rate&quot;</span>: <span class="hljs-number">16000</span>,
    },
    <span class="hljs-comment">&quot;transcription&quot;</span>: <span class="hljs-comment">&quot;I would like to pay my electricity bill using my card can you please assist&quot;</span>,
    <span class="hljs-comment">&quot;intent_class&quot;</span>: <span class="hljs-number">13</span>,
}`,wrap:!1}}),J=new Fa({props:{$$slots:{default:[La]},$$scope:{ctx:ce}}}),k=new ra({props:{title:"Filtrando el conjunto de datos",local:"filtrando-el-conjunto-de-datos",headingTag:"h2"}}),E=new y({props:{code:"TUFYX0RVUkFUSU9OX0lOX1NFQ09ORFMlMjAlM0QlMjAyMC4wJTBBJTBBJTBBZGVmJTIwaXNfYXVkaW9fbGVuZ3RoX2luX3JhbmdlKGlucHV0X2xlbmd0aCklM0ElMEElMjAlMjAlMjAlMjByZXR1cm4lMjBpbnB1dF9sZW5ndGglMjAlM0MlMjBNQVhfRFVSQVRJT05fSU5fU0VDT05EUw==",highlighted:`MAX_DURATION_IN_SECONDS = <span class="hljs-number">20.0</span>


<span class="hljs-keyword">def</span> <span class="hljs-title function_">is_audio_length_in_range</span>(<span class="hljs-params">input_length</span>):
    <span class="hljs-keyword">return</span> input_length &lt; MAX_DURATION_IN_SECONDS`,wrap:!1}}),W=new y({props:{code:"JTIzJTIwdXNhciUyMGxpYnJvc2ElMjBwYXJhJTIwY2FsY3VsYXIlMjBsYSUyMGR1cmFjaSVDMyVCM24lMjBkZWwlMjBhdWRpbyUwQW5ld19jb2x1bW4lMjAlM0QlMjAlNUJsaWJyb3NhLmdldF9kdXJhdGlvbihmaWxlbmFtZSUzRHgpJTIwZm9yJTIweCUyMGluJTIwbWluZHMlNUIlMjJwYXRoJTIyJTVEJTVEJTBBbWluZHMlMjAlM0QlMjBtaW5kcy5hZGRfY29sdW1uKCUyMmR1cmF0aW9uJTIyJTJDJTIwbmV3X2NvbHVtbiklMEElMEElMjMlMjB1c2FyJTIwZWwlMjBtJUMzJUE5dG9kbyUyMCU2MGZpbHRlciU2MCUyMGRlJTIwJUYwJTlGJUE0JTk3JTIwRGF0YXNldHMnJTIwcGFyYSUyMGFwbGljYXIlMjBsYSUyMGZ1bmNpJUMzJUIzbiUyMGRlJTIwZmlsdHJhZG8lMEFtaW5kcyUyMCUzRCUyMG1pbmRzLmZpbHRlcihpc19hdWRpb19sZW5ndGhfaW5fcmFuZ2UlMkMlMjBpbnB1dF9jb2x1bW5zJTNEJTVCJTIyZHVyYXRpb24lMjIlNUQpJTBBJTBBJTIzJTIwZWxpbWluYXIlMjBsYSUyMGNvbHVtbmElMjB0ZW1wb3JhbCUyMGRlJTIwZHVyYWNpJUMzJUIzbiUwQW1pbmRzJTIwJTNEJTIwbWluZHMucmVtb3ZlX2NvbHVtbnMoJTVCJTIyZHVyYXRpb24lMjIlNUQpJTBBbWluZHM=",highlighted:`<span class="hljs-comment"># usar librosa para calcular la duración del audio</span>
new_column = [librosa.get_duration(filename=x) <span class="hljs-keyword">for</span> x <span class="hljs-keyword">in</span> minds[<span class="hljs-string">&quot;path&quot;</span>]]
minds = minds.add_column(<span class="hljs-string">&quot;duration&quot;</span>, new_column)

<span class="hljs-comment"># usar el método \`filter\` de 🤗 Datasets&#x27; para aplicar la función de filtrado</span>
minds = minds.<span class="hljs-built_in">filter</span>(is_audio_length_in_range, input_columns=[<span class="hljs-string">&quot;duration&quot;</span>])

<span class="hljs-comment"># eliminar la columna temporal de duración</span>
minds = minds.remove_columns([<span class="hljs-string">&quot;duration&quot;</span>])
minds`,wrap:!1}}),H=new y({props:{code:"RGF0YXNldCglN0JmZWF0dXJlcyUzQSUyMCU1QiUyMnBhdGglMjIlMkMlMjAlMjJhdWRpbyUyMiUyQyUyMCUyMnRyYW5zY3JpcHRpb24lMjIlMkMlMjAlMjJpbnRlbnRfY2xhc3MlMjIlNUQlMkMlMjBudW1fcm93cyUzQSUyMDYyNCU3RCk=",highlighted:'<span class="hljs-constructor">Dataset({<span class="hljs-params">features</span>: [<span class="hljs-string">&quot;path&quot;</span>, <span class="hljs-string">&quot;audio&quot;</span>, <span class="hljs-string">&quot;transcription&quot;</span>, <span class="hljs-string">&quot;intent_class&quot;</span>], <span class="hljs-params">num_rows</span>: 624})</span>',wrap:!1}}),V=new ra({props:{title:"Preprocesando los datos de audio",local:"preprocesando-los-datos-de-audio",headingTag:"h2"}}),P=new y({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdoaXNwZXJGZWF0dXJlRXh0cmFjdG9yJTBBJTBBZmVhdHVyZV9leHRyYWN0b3IlMjAlM0QlMjBXaGlzcGVyRmVhdHVyZUV4dHJhY3Rvci5mcm9tX3ByZXRyYWluZWQoJTIyb3BlbmFpJTJGd2hpc3Blci1zbWFsbCUyMik=",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> WhisperFeatureExtractor

feature_extractor = WhisperFeatureExtractor.from_pretrained(<span class="hljs-string">&quot;openai/whisper-small&quot;</span>)`,wrap:!1}}),O=new y({props:{code:"ZGVmJTIwcHJlcGFyZV9kYXRhc2V0KGV4YW1wbGUpJTNBJTBBJTIwJTIwJTIwJTIwYXVkaW8lMjAlM0QlMjBleGFtcGxlJTVCJTIyYXVkaW8lMjIlNUQlMEElMjAlMjAlMjAlMjBmZWF0dXJlcyUyMCUzRCUyMGZlYXR1cmVfZXh0cmFjdG9yKCUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMGF1ZGlvJTVCJTIyYXJyYXklMjIlNUQlMkMlMjBzYW1wbGluZ19yYXRlJTNEYXVkaW8lNUIlMjJzYW1wbGluZ19yYXRlJTIyJTVEJTJDJTIwcGFkZGluZyUzRFRydWUlMEElMjAlMjAlMjAlMjApJTBBJTIwJTIwJTIwJTIwcmV0dXJuJTIwZmVhdHVyZXM=",highlighted:`<span class="hljs-keyword">def</span> <span class="hljs-title function_">prepare_dataset</span>(<span class="hljs-params">example</span>):
    audio = example[<span class="hljs-string">&quot;audio&quot;</span>]
    features = feature_extractor(
        audio[<span class="hljs-string">&quot;array&quot;</span>], sampling_rate=audio[<span class="hljs-string">&quot;sampling_rate&quot;</span>], padding=<span class="hljs-literal">True</span>
    )
    <span class="hljs-keyword">return</span> features`,wrap:!1}}),ee=new y({props:{code:"bWluZHMlMjAlM0QlMjBtaW5kcy5tYXAocHJlcGFyZV9kYXRhc2V0KSUwQW1pbmRz",highlighted:`minds = minds.<span class="hljs-built_in">map</span>(prepare_dataset)
minds`,wrap:!1}}),se=new y({props:{code:"RGF0YXNldCglMEElMjAlMjAlMjAlMjAlN0IlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjBmZWF0dXJlcyUzQSUyMCU1QiUyMnBhdGglMjIlMkMlMjAlMjJhdWRpbyUyMiUyQyUyMCUyMnRyYW5zY3JpcHRpb24lMjIlMkMlMjAlMjJpbnRlbnRfY2xhc3MlMjIlMkMlMjAlMjJpbnB1dF9mZWF0dXJlcyUyMiU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMG51bV9yb3dzJTNBJTIwNjI0JTJDJTBBJTIwJTIwJTIwJTIwJTdEJTBBKQ==",highlighted:`Dataset(
    <span class="hljs-punctuation">{</span>
<span class="hljs-symbol">        features:</span> [<span class="hljs-string">&quot;path&quot;</span>, <span class="hljs-string">&quot;audio&quot;</span>, <span class="hljs-string">&quot;transcription&quot;</span>, <span class="hljs-string">&quot;intent_class&quot;</span>, <span class="hljs-string">&quot;input_features&quot;</span>],
<span class="hljs-symbol">        num_rows:</span> <span class="hljs-number">624</span>,
    <span class="hljs-punctuation">}</span>
)`,wrap:!1}}),ne=new y({props:{code:"aW1wb3J0JTIwbnVtcHklMjBhcyUyMG5wJTBBJTBBZXhhbXBsZSUyMCUzRCUyMG1pbmRzJTVCMCU1RCUwQWlucHV0X2ZlYXR1cmVzJTIwJTNEJTIwZXhhbXBsZSU1QiUyMmlucHV0X2ZlYXR1cmVzJTIyJTVEJTBBJTBBcGx0LmZpZ3VyZSgpLnNldF9maWd3aWR0aCgxMiklMEFsaWJyb3NhLmRpc3BsYXkuc3BlY3Nob3coJTBBJTIwJTIwJTIwJTIwbnAuYXNhcnJheShpbnB1dF9mZWF0dXJlcyU1QjAlNUQpJTJDJTBBJTIwJTIwJTIwJTIweF9heGlzJTNEJTIydGltZSUyMiUyQyUwQSUyMCUyMCUyMCUyMHlfYXhpcyUzRCUyMm1lbCUyMiUyQyUwQSUyMCUyMCUyMCUyMHNyJTNEZmVhdHVyZV9leHRyYWN0b3Iuc2FtcGxpbmdfcmF0ZSUyQyUwQSUyMCUyMCUyMCUyMGhvcF9sZW5ndGglM0RmZWF0dXJlX2V4dHJhY3Rvci5ob3BfbGVuZ3RoJTJDJTBBKSUwQXBsdC5jb2xvcmJhcigp",highlighted:`<span class="hljs-keyword">import</span> numpy <span class="hljs-keyword">as</span> np

example = minds[<span class="hljs-number">0</span>]
input_features = example[<span class="hljs-string">&quot;input_features&quot;</span>]

plt.figure().set_figwidth(<span class="hljs-number">12</span>)
librosa.display.specshow(
    np.asarray(input_features[<span class="hljs-number">0</span>]),
    x_axis=<span class="hljs-string">&quot;time&quot;</span>,
    y_axis=<span class="hljs-string">&quot;mel&quot;</span>,
    sr=feature_extractor.sampling_rate,
    hop_length=feature_extractor.hop_length,
)
plt.colorbar()`,wrap:!1}}),ie=new y({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Qcm9jZXNzb3IlMEElMEFwcm9jZXNzb3IlMjAlM0QlMjBBdXRvUHJvY2Vzc29yLmZyb21fcHJldHJhaW5lZCglMjJvcGVuYWklMkZ3aGlzcGVyLXNtYWxsJTIyKQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoProcessor

processor = AutoProcessor.from_pretrained(<span class="hljs-string">&quot;openai/whisper-small&quot;</span>)`,wrap:!1}}),de=new Sa({props:{source:"https://github.com/huggingface/audio-transformers-course/blob/main/chapters/es/chapter1/preprocessing.mdx"}}),{c(){j=o("meta"),f=t(),U=o("p"),me=t(),p(h.$$.fragment),Me=t(),p(w.$$.fragment),je=t(),b=o("p"),b.textContent=pa,ye=t(),C=o("ul"),C.innerHTML=da,fe=t(),p(I.$$.fragment),Je=t(),g=o("p"),g.innerHTML=ua,Te=t(),A=o("p"),A.textContent=ca,Ue=t(),$=o("p"),$.innerHTML=ma,he=t(),p(x.$$.fragment),we=t(),q=o("p"),q.innerHTML=Ma,be=t(),p(v.$$.fragment),Ce=t(),_=o("p"),_.innerHTML=ja,Ie=t(),p(B.$$.fragment),ge=t(),Z=o("p"),Z.textContent=ya,Ae=t(),p(J.$$.fragment),$e=t(),p(k.$$.fragment),xe=t(),R=o("p"),R.textContent=fa,qe=t(),z=o("p"),z.innerHTML=Ja,ve=t(),p(E.$$.fragment),_e=t(),G=o("p"),G.textContent=Ta,Be=t(),p(W.$$.fragment),Ze=t(),Y=o("p"),Y.innerHTML=Ua,ke=t(),p(H.$$.fragment),Re=t(),N=o("p"),N.textContent=ha,ze=t(),p(V.$$.fragment),Ee=t(),X=o("p"),X.textContent=wa,Ge=t(),F=o("p"),F.innerHTML=ba,We=t(),Q=o("p"),Q.textContent=Ca,Ye=t(),S=o("p"),S.textContent=Ia,He=t(),L=o("p"),L.textContent=ga,Ne=t(),p(P.$$.fragment),Ve=t(),D=o("p"),D.innerHTML=Aa,Xe=t(),p(O.$$.fragment),Fe=t(),K=o("p"),K.textContent=$a,Qe=t(),p(ee.$$.fragment),Se=t(),ae=o("p"),ae.innerHTML=xa,Le=t(),p(se.$$.fragment),Pe=t(),le=o("p"),le.innerHTML=qa,De=t(),te=o("p"),te.innerHTML=va,Oe=t(),p(ne.$$.fragment),Ke=t(),T=o("div"),T.innerHTML=_a,ea=Ea(`
Ahora puedes ver como se ve la entrada de audio al modelo de Whisper tras haber realizado el preprocesamiento.
`),oe=o("p"),oe.innerHTML=Ba,aa=t(),re=o("p"),re.innerHTML=Za,sa=t(),p(ie.$$.fragment),la=t(),pe=o("p"),pe.textContent=ka,ta=t(),p(de.$$.fragment),na=t(),ue=o("p"),this.h()},l(e){const a=Va("svelte-u9bgzb",document.head);j=r(a,"META",{name:!0,content:!0}),a.forEach(s),f=n(e),U=r(e,"P",{}),za(U).forEach(s),me=n(e),d(h.$$.fragment,e),Me=n(e),d(w.$$.fragment,e),je=n(e),b=r(e,"P",{"data-svelte-h":!0}),i(b)!=="svelte-fsnc85"&&(b.textContent=pa),ye=n(e),C=r(e,"UL",{"data-svelte-h":!0}),i(C)!=="svelte-15zcjp0"&&(C.innerHTML=da),fe=n(e),d(I.$$.fragment,e),Je=n(e),g=r(e,"P",{"data-svelte-h":!0}),i(g)!=="svelte-1qiz1wq"&&(g.innerHTML=ua),Te=n(e),A=r(e,"P",{"data-svelte-h":!0}),i(A)!=="svelte-3ayymi"&&(A.textContent=ca),Ue=n(e),$=r(e,"P",{"data-svelte-h":!0}),i($)!=="svelte-1puh94m"&&($.innerHTML=ma),he=n(e),d(x.$$.fragment,e),we=n(e),q=r(e,"P",{"data-svelte-h":!0}),i(q)!=="svelte-1d6gxxs"&&(q.innerHTML=Ma),be=n(e),d(v.$$.fragment,e),Ce=n(e),_=r(e,"P",{"data-svelte-h":!0}),i(_)!=="svelte-1mvdyro"&&(_.innerHTML=ja),Ie=n(e),d(B.$$.fragment,e),ge=n(e),Z=r(e,"P",{"data-svelte-h":!0}),i(Z)!=="svelte-1nuriub"&&(Z.textContent=ya),Ae=n(e),d(J.$$.fragment,e),$e=n(e),d(k.$$.fragment,e),xe=n(e),R=r(e,"P",{"data-svelte-h":!0}),i(R)!=="svelte-1ezmohh"&&(R.textContent=fa),qe=n(e),z=r(e,"P",{"data-svelte-h":!0}),i(z)!=="svelte-jc0e1c"&&(z.innerHTML=Ja),ve=n(e),d(E.$$.fragment,e),_e=n(e),G=r(e,"P",{"data-svelte-h":!0}),i(G)!=="svelte-1r1diwe"&&(G.textContent=Ta),Be=n(e),d(W.$$.fragment,e),Ze=n(e),Y=r(e,"P",{"data-svelte-h":!0}),i(Y)!=="svelte-1mvdyro"&&(Y.innerHTML=Ua),ke=n(e),d(H.$$.fragment,e),Re=n(e),N=r(e,"P",{"data-svelte-h":!0}),i(N)!=="svelte-1xt4w2d"&&(N.textContent=ha),ze=n(e),d(V.$$.fragment,e),Ee=n(e),X=r(e,"P",{"data-svelte-h":!0}),i(X)!=="svelte-tzzfkg"&&(X.textContent=wa),Ge=n(e),F=r(e,"P",{"data-svelte-h":!0}),i(F)!=="svelte-185o927"&&(F.innerHTML=ba),We=n(e),Q=r(e,"P",{"data-svelte-h":!0}),i(Q)!=="svelte-17flgfb"&&(Q.textContent=Ca),Ye=n(e),S=r(e,"P",{"data-svelte-h":!0}),i(S)!=="svelte-1fnn9p6"&&(S.textContent=Ia),He=n(e),L=r(e,"P",{"data-svelte-h":!0}),i(L)!=="svelte-7z483"&&(L.textContent=ga),Ne=n(e),d(P.$$.fragment,e),Ve=n(e),D=r(e,"P",{"data-svelte-h":!0}),i(D)!=="svelte-i6ag46"&&(D.innerHTML=Aa),Xe=n(e),d(O.$$.fragment,e),Fe=n(e),K=r(e,"P",{"data-svelte-h":!0}),i(K)!=="svelte-12bbgzd"&&(K.textContent=$a),Qe=n(e),d(ee.$$.fragment,e),Se=n(e),ae=r(e,"P",{"data-svelte-h":!0}),i(ae)!=="svelte-1mvdyro"&&(ae.innerHTML=xa),Le=n(e),d(se.$$.fragment,e),Pe=n(e),le=r(e,"P",{"data-svelte-h":!0}),i(le)!=="svelte-186u4tv"&&(le.innerHTML=qa),De=n(e),te=r(e,"P",{"data-svelte-h":!0}),i(te)!=="svelte-1hvs22p"&&(te.innerHTML=va),Oe=n(e),d(ne.$$.fragment,e),Ke=n(e),T=r(e,"DIV",{class:!0,"data-svelte-h":!0}),i(T)!=="svelte-csckl"&&(T.innerHTML=_a),ea=Ga(e,`
Ahora puedes ver como se ve la entrada de audio al modelo de Whisper tras haber realizado el preprocesamiento.
`),oe=r(e,"P",{"data-svelte-h":!0}),i(oe)!=="svelte-sxijka"&&(oe.innerHTML=Ba),aa=n(e),re=r(e,"P",{"data-svelte-h":!0}),i(re)!=="svelte-1kjq6s5"&&(re.innerHTML=Za),sa=n(e),d(ie.$$.fragment,e),la=n(e),pe=r(e,"P",{"data-svelte-h":!0}),i(pe)!=="svelte-1gymk79"&&(pe.textContent=ka),ta=n(e),d(de.$$.fragment,e),na=n(e),ue=r(e,"P",{}),za(ue).forEach(s),this.h()},h(){ia(j,"name","hf:doc:metadata"),ia(j,"content",Da),ia(T,"class","flex justify-center")},m(e,a){Xa(document.head,j),l(e,f,a),l(e,U,a),l(e,me,a),u(h,e,a),l(e,Me,a),u(w,e,a),l(e,je,a),l(e,b,a),l(e,ye,a),l(e,C,a),l(e,fe,a),u(I,e,a),l(e,Je,a),l(e,g,a),l(e,Te,a),l(e,A,a),l(e,Ue,a),l(e,$,a),l(e,he,a),u(x,e,a),l(e,we,a),l(e,q,a),l(e,be,a),u(v,e,a),l(e,Ce,a),l(e,_,a),l(e,Ie,a),u(B,e,a),l(e,ge,a),l(e,Z,a),l(e,Ae,a),u(J,e,a),l(e,$e,a),u(k,e,a),l(e,xe,a),l(e,R,a),l(e,qe,a),l(e,z,a),l(e,ve,a),u(E,e,a),l(e,_e,a),l(e,G,a),l(e,Be,a),u(W,e,a),l(e,Ze,a),l(e,Y,a),l(e,ke,a),u(H,e,a),l(e,Re,a),l(e,N,a),l(e,ze,a),u(V,e,a),l(e,Ee,a),l(e,X,a),l(e,Ge,a),l(e,F,a),l(e,We,a),l(e,Q,a),l(e,Ye,a),l(e,S,a),l(e,He,a),l(e,L,a),l(e,Ne,a),u(P,e,a),l(e,Ve,a),l(e,D,a),l(e,Xe,a),u(O,e,a),l(e,Fe,a),l(e,K,a),l(e,Qe,a),u(ee,e,a),l(e,Se,a),l(e,ae,a),l(e,Le,a),u(se,e,a),l(e,Pe,a),l(e,le,a),l(e,De,a),l(e,te,a),l(e,Oe,a),u(ne,e,a),l(e,Ke,a),l(e,T,a),l(e,ea,a),l(e,oe,a),l(e,aa,a),l(e,re,a),l(e,sa,a),u(ie,e,a),l(e,la,a),l(e,pe,a),l(e,ta,a),u(de,e,a),l(e,na,a),l(e,ue,a),oa=!0},p(e,[a]){const Ra={};a&2&&(Ra.$$scope={dirty:a,ctx:e}),J.$set(Ra)},i(e){oa||(c(h.$$.fragment,e),c(w.$$.fragment,e),c(I.$$.fragment,e),c(x.$$.fragment,e),c(v.$$.fragment,e),c(B.$$.fragment,e),c(J.$$.fragment,e),c(k.$$.fragment,e),c(E.$$.fragment,e),c(W.$$.fragment,e),c(H.$$.fragment,e),c(V.$$.fragment,e),c(P.$$.fragment,e),c(O.$$.fragment,e),c(ee.$$.fragment,e),c(se.$$.fragment,e),c(ne.$$.fragment,e),c(ie.$$.fragment,e),c(de.$$.fragment,e),oa=!0)},o(e){m(h.$$.fragment,e),m(w.$$.fragment,e),m(I.$$.fragment,e),m(x.$$.fragment,e),m(v.$$.fragment,e),m(B.$$.fragment,e),m(J.$$.fragment,e),m(k.$$.fragment,e),m(E.$$.fragment,e),m(W.$$.fragment,e),m(H.$$.fragment,e),m(V.$$.fragment,e),m(P.$$.fragment,e),m(O.$$.fragment,e),m(ee.$$.fragment,e),m(se.$$.fragment,e),m(ne.$$.fragment,e),m(ie.$$.fragment,e),m(de.$$.fragment,e),oa=!1},d(e){e&&(s(f),s(U),s(me),s(Me),s(je),s(b),s(ye),s(C),s(fe),s(Je),s(g),s(Te),s(A),s(Ue),s($),s(he),s(we),s(q),s(be),s(Ce),s(_),s(Ie),s(ge),s(Z),s(Ae),s($e),s(xe),s(R),s(qe),s(z),s(ve),s(_e),s(G),s(Be),s(Ze),s(Y),s(ke),s(Re),s(N),s(ze),s(Ee),s(X),s(Ge),s(F),s(We),s(Q),s(Ye),s(S),s(He),s(L),s(Ne),s(Ve),s(D),s(Xe),s(Fe),s(K),s(Qe),s(Se),s(ae),s(Le),s(Pe),s(le),s(De),s(te),s(Oe),s(Ke),s(T),s(ea),s(oe),s(aa),s(re),s(sa),s(la),s(pe),s(ta),s(na),s(ue)),s(j),M(h,e),M(w,e),M(I,e),M(x,e),M(v,e),M(B,e),M(J,e),M(k,e),M(E,e),M(W,e),M(H,e),M(V,e),M(P,e),M(O,e),M(ee,e),M(se,e),M(ne,e),M(ie,e),M(de,e)}}}const Da='{"title":"Preprocesamiento de un conjunto de datos de audio","local":"preprocesamiento-de-un-conjunto-de-datos-de-audio","sections":[{"title":"Resamplear los datos de audio","local":"resamplear-los-datos-de-audio","sections":[],"depth":2},{"title":"Filtrando el conjunto de datos","local":"filtrando-el-conjunto-de-datos","sections":[],"depth":2},{"title":"Preprocesando los datos de audio","local":"preprocesando-los-datos-de-audio","sections":[],"depth":2}],"depth":1}';function Oa(ce){return Ya(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class ts extends Ha{constructor(j){super(),Na(this,j,Oa,Pa,Wa,{})}}export{ts as component};
