<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD Journal Publishing DTD v3.0 20080202//EN" "journalpublishing3.dtd">
<article article-type="research-article" dtd-version="3.0" xml:lang="es" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink">
<front>
<journal-meta>
<journal-id journal-id-type="publisher-id">LOQ</journal-id>
<journal-title-group>
<journal-title>Loquens</journal-title>
</journal-title-group>
<issn pub-type="epub">2386-2637</issn>
<publisher>
<publisher-name>Consejo Superior de Investigaciones Cientificas</publisher-name>
</publisher>
</journal-meta>
<article-meta>
<article-id pub-id-type="publisher-id">loquens_058</article-id>
<article-id pub-id-type="doi">10.3989/loquens.2019.058</article-id>
<article-categories>
<subj-group subj-group-type="heading">
<subject>Articles</subject>
</subj-group>
</article-categories>
<title-group>
<article-title>Precisi&#x00F3;n diagn&#x00F3;stica del pico cepstral de mayor prominencia en el cepstrum suavizado (CPPS) en la detecci&#x00F3;n de la disfon&#x00ED;a en espa&#x00F1;ol</article-title>
<trans-title-group xml:lang="en">
<trans-title>Diagnostic accuracy of the Smoothed Cepstral Peak Prominence (CPPS) in the detection of dysphonia in the Spanish language</trans-title>
</trans-title-group>
<alt-title alt-title-type="running-head">Precisi&#x00F3;n diagn&#x00F3;stica del pico cepstral de mayor prominencia en el cepstrum suavizado (CPPS) en la detecci&#x00F3;n de la disfon&#x00ED;a en espa&#x00F1;ol</alt-title>
</title-group>
<contrib-group>
<contrib contrib-type="author" corresp="yes">
<name>
<surname>Delgado-Hern&#x00E1;ndez</surname>
<given-names>Jonathan</given-names>
</name>
<xref ref-type="aff" rid="aff0001">1</xref>
</contrib>
<contrib contrib-type="author" corresp="yes">
<name>
<surname>Le&#x00F3;n-G&#x00F3;mez</surname>
<given-names>Nieves</given-names>
</name>
<xref ref-type="aff" rid="aff0002">2</xref>
</contrib>
<contrib contrib-type="author" corresp="yes">
<name>
<surname>Jim&#x00E9;nez-&#x00C1;lvarez</surname>
<given-names>Alejandra</given-names>
</name>
<xref ref-type="aff" rid="aff0002">2</xref>
</contrib>
</contrib-group>
<aff id="aff0001"><label>1</label>CREN Salud (Espa&#x00F1;a)</aff>
<aff id="aff0002"><label>2</label>Hospital Universitario de Canarias (Espa&#x00F1;a)</aff>
<author-notes>
<corresp id="cor1"><email xlink:href="jonathandh79@gmail.com">jonathandh79@gmail.com</email> ORCID: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0002-4552-8920">https://orcid.org/0000-0002-4552-8920</ext-link></corresp>
<corresp id="cor2"><email xlink:href="nileon4@gmail.com">nileon4@gmail.com</email> ORCID: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0001-6785-9774">https://orcid.org/0000-0001-6785-9774</ext-link></corresp>
<corresp id="cor3"><email xlink:href="ale89tf@hotmail.com">ale89tf@hotmail.com</email> ORCID: <ext-link ext-link-type="uri" xlink:href="https://orcid.org/0000-0002-8837-3113">https://orcid.org/0000-0002-8837-3113</ext-link></corresp>
</author-notes>
<pub-date pub-type="epub">
<day>27</day>
<month>02</month>
<year>2019</year>
</pub-date>
<pub-date pub-type="collection">
<year>2019</year>
</pub-date>
<volume>6</volume>
<issue>1</issue>
<elocation-id content-type="doi">10.3989/loquens.2019.058</elocation-id>
<history>
<date date-type="received">
<day>06</day>
<month>08</month>
<year>2018</year>
</date>
<date date-type="accepted">
<day>16</day>
<month>11</month>
<year>2018</year>
</date>
</history>
<permissions>
<copyright-statement>&#x00A9; 2019 CSIC</copyright-statement>
<copyright-year>2019</copyright-year>
<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by/4.0/">
<license-p>This is an open-access article distributed under the terms of the Creative Commons Attribution 4.0 International (CC BY 4.0) License.</license-p>
</license>
</permissions>
<abstract>
<title>RESUMEN</title>
<p>Los par&#x00E1;metros derivados de la m&#x00E9;trica cepstral son cada vez m&#x00E1;s utilizados en la evaluaci&#x00F3;n ac&#x00FA;stica de la voz, ya sea como medidas &#x00FA;nicas o como parte de &#x00ED;ndices multivariados. El pico cepstral de mayor prominencia en el cepstrum suavizado (CPPS) ha demostrado en multitud de estudios ser la &#x00FA;nica medida ac&#x00FA;stica con la suficiente validez concurrente en la evaluaci&#x00F3;n de la severidad de las alteraciones de la voz tanto en muestras de vocal sostenida como en muestras de habla continua.</p>
<p>El objetivo de este trabajo es conocer la precisi&#x00F3;n diagn&#x00F3;stica del CPPS en la detecci&#x00F3;n de la disfon&#x00ED;a en espa&#x00F1;ol. Se utiliz&#x00F3; la configuraci&#x00F3;n que viene por defecto en Praat y la usada en el c&#x00E1;lculo del <italic>Acoustic Voice Quality Index</italic>.</p>
<p>Los resultados confirman que el CPPS es una medida ac&#x00FA;stica v&#x00E1;lida para detectar la disfon&#x00ED;a en espa&#x00F1;ol tanto con vocal sostenida como con frases.</p>
</abstract>
<trans-abstract xml:lang="en">
<p><italic>Diagnostic accuracy of the Smoothed Cepstral Peak Prominence (CPPS) in the detection of dysphonia in the Spanish language.&#x2013;</italic>The smoothed cepstral peak prominence (CPPS) is an acoustic measure that can be calculated in both sustained vowels and continuous speech. The goal of this work is to find out the diagnostic accuracy of CPPS in the detection of dysphonia in Spanish.</p>
<p>In this study 136 subjects with dysphonia and 47 healthy subjects participated. For each subject a sustained vowel and the reading of three phonetically balanced sentences were recorded. The CPPS was calculated with Praat using its default configuration (configuration 1), and also with the one used in the calculation of the Acoustic Voice Quality Index (configuration 2). Five experts perceptively assessed the voice of the subjects in the sample by means of the GRABS scale.</p>
<p>The CPPS has a great power of discrimination between the normal and the pathological voice, whether it is calculated from the sustained vowel /a/ (A<sub>ROC[config. 1]</sub> = 0.863 and A<sub>ROC[config. 2]</sub> = 0.841) or whether it is calculated from the sentences (A<sub>ROC[config. 1]</sub> = 0.884 and A<sub>ROC[config. 2]</sub> = 0.866).</p>
<p>The results confirm that CPPS is a valid acoustic measurement to detect dysphonia in the Spanish language.</p>
</trans-abstract>
<kwd-group xml:lang="es">
<title>Palabras clave</title>
<kwd>an&#x00E1;lisis ac&#x00FA;stico de la voz</kwd>
<kwd>CPPS</kwd>
<kwd>disfon&#x00ED;a</kwd>
<kwd>Praat</kwd>
</kwd-group>
<kwd-group xml:lang="en">
<title>Keywords</title>
<kwd>acoustic voice analysis</kwd>
<kwd>CPPS</kwd>
<kwd>dysphonia</kwd>
<kwd>Praat</kwd>
</kwd-group>
</article-meta>
</front>
<body>
<sec id="sec1" sec-type="intro">
<title>1. INTRODUCCI&#x00D3;N</title>
<p>El an&#x00E1;lisis ac&#x00FA;stico nos aporta informaci&#x00F3;n objetiva sobre la voz del paciente de manera no invasiva. Los par&#x00E1;metros derivados de la m&#x00E9;trica cepstral son cada vez m&#x00E1;s utilizados en la evaluaci&#x00F3;n ac&#x00FA;stica de la voz, ya sea como medidas &#x00FA;nicas (Awan y Roy, <xref ref-type="bibr" rid="cit0002">2006</xref>; Balasubramanium, Bhat, Fahim y Raju, 2011; Dejonckere, <xref ref-type="bibr" rid="cit0009">1998</xref>; Dejonckere y Wieneke, <xref ref-type="bibr" rid="cit0010">1996</xref>; Delgado, Le&#x00F3;n, Jim&#x00E9;nez y Izquierdo, 2017; Delgado-Hern&#x00E1;ndez, Le&#x00F3;n-G&#x00F3;mez, Izquierdo-Arteaga y Llanos-Fumero, <xref ref-type="bibr" rid="cit0021">2018</xref>; Eadie y Baylor, <xref ref-type="bibr" rid="cit0015">2006</xref>; Heman-Ackah <italic>et al</italic>., <xref ref-type="bibr" rid="cit0018">2003</xref>; Heman-Ackah, Michael y Goding, 2002; Heman-Ackah <italic>et al</italic>., <xref ref-type="bibr" rid="cit0020">2014</xref>; Hillenbrand, Cleveland y Erickson, <xref ref-type="bibr" rid="cit0022">1994</xref>; Hillenbrand y Houde, <xref ref-type="bibr" rid="cit0023">1996</xref>; de Krom, <xref ref-type="bibr" rid="cit0027">1993</xref>; Maryn, Roy, de Bodt, Van Cauwenberge y Corthals, <xref ref-type="bibr" rid="cit0033">2009</xref>; Sauder, Bretl y Eadie, <xref ref-type="bibr" rid="cit0035">2017</xref>; Wolfe y Martin, <xref ref-type="bibr" rid="cit0036">1997</xref>; Wolfe, Martin y Palmer, <xref ref-type="bibr" rid="cit0037">2000</xref>) o como parte de &#x00ED;ndices multivariados (Barsties y Maryn, <xref ref-type="bibr" rid="cit0004">2015</xref>; Barsties y Maryn, <xref ref-type="bibr" rid="cit0005">2016</xref>; Hern&#x00E1;ndez, G&#x00F3;mez, Jim&#x00E9;nez, Izquierdo y Latoszek, <xref ref-type="bibr" rid="cit0021">2018</xref>; Latoszek, Maryn, Gerrits y de Bolt, <xref ref-type="bibr" rid="cit0029">2017</xref>; Maryn, De Bolt, Barsties y Roy, <xref ref-type="bibr" rid="cit0031">2014</xref>; Maryn, De Bolt y Roy, <xref ref-type="bibr" rid="cit0032">2010</xref>). El cepstrum es la transformada inversa de Fourier del logaritmo de la potencia espectral de la se&#x00F1;al (Awan, <xref ref-type="bibr" rid="cit0001">2008</xref>). El an&#x00E1;lisis cepstral permite determinar la frecuencia fundamental (<italic>f</italic>
<sub>0</sub>) a partir de la periodicidad del componente arm&#x00F3;nico de un sonido, representado por el pico cepstral de la regi&#x00F3;n alta del cepstrum. La amplitud del pico de cepstrum da informaci&#x00F3;n del grado de periodicidad de la se&#x00F1;al de m&#x00E1;s baja frecuencia en relaci&#x00F3;n con otros componentes peri&#x00F3;dicos o ruidosos presentes (Cecconello, Far&#x00ED;as y Gurlekian, <xref ref-type="bibr" rid="cit0008">2008</xref>). Por tanto, no necesita de la detecci&#x00F3;n exacta de los ciclos de la <italic>f</italic>
<sub>0</sub>, una ventaja importante sobre todo en el an&#x00E1;lisis de las voces m&#x00E1;s disf&#x00F3;nicas o aperi&#x00F3;dicas, donde los programas de detecci&#x00F3;n autom&#x00E1;tica no pueden extraer de forma fiable la <italic>f</italic>
<sub>0</sub>. Con relaci&#x00F3;n al tipo de muestra de voz, el an&#x00E1;lisis cepstral se puede utilizar tanto con vocales sostenidas como con habla continua, aportando validez ecol&#x00F3;gica a la evaluaci&#x00F3;n ac&#x00FA;stica (Delgado-Hern&#x00E1;ndez <italic>et al</italic>., <xref ref-type="bibr" rid="cit0012">2018</xref>). Maryn <italic>et al</italic>. (<xref ref-type="bibr" rid="cit0033">2009</xref>) realizaron un metaan&#x00E1;lisis donde estudiaron 69 medidas ac&#x00FA;sticas en vocal sostenida y 26 en habla continua. Encontraron que el pico cepstral de mayor prominencia en el cepstrum suavizado (<italic>smoothed cepstral peak prominence</italic> o CPPS) fue la &#x00FA;nica medida ac&#x00FA;stica estudiada con la suficiente validez concurrente en la evaluaci&#x00F3;n de la severidad de la disfon&#x00ED;a en ambas muestras de voz.</p>
<p>El CPPS es una medida ac&#x00FA;stica cepstral que representa la diferencia entre el pico cepstral m&#x00E1;s prominente, o primer <italic>rahmonic,</italic> y el punto con la misma <italic>quefrency</italic> sobre la l&#x00ED;nea de regresi&#x00F3;n a trav&#x00E9;s del cepstrum suavizado (<xref ref-type="fig" rid="f0001">Figura 1</xref>). Se expresa en decibelios (dB).</p>
<fig id="f0001">
<label>Figura 1</label>
<caption>
<p>Representaci&#x00F3;n gr&#x00E1;fica del cepstrum y del c&#x00E1;lculo del CPPS.</p>
</caption>
<graphic xlink:href="loquens_058-g001.tif" xmlns:xlink="http://www.w3.org/1999/xlink"/>
</fig>
<p>Los estudios realizados hasta el momento muestran su utilidad tanto en el diagn&#x00F3;stico de las alteraciones de la voz (Heman-Ackah <italic>et al</italic>., <xref ref-type="bibr" rid="cit0020">2014</xref>; Sauder, Bretl y Eadie, <xref ref-type="bibr" rid="cit0035">2017</xref>) como en la evaluaci&#x00F3;n de la severidad de la disfon&#x00ED;a (Awan y Roy, <xref ref-type="bibr" rid="cit0002">2006</xref>; Balasubramanium <italic>et al</italic>., <xref ref-type="bibr" rid="cit0003">2011</xref>; Dejonckere, <xref ref-type="bibr" rid="cit0009">1998</xref>; Dejonckere y Wieneke, <xref ref-type="bibr" rid="cit0010">1996</xref>; Delgado-Hern&#x00E1;ndez <italic>et al</italic>., <xref ref-type="bibr" rid="cit0012">2018</xref>; Eadie y Baylor, <xref ref-type="bibr" rid="cit0015">2006</xref>; Heman-Ackah <italic>et al</italic>., <xref ref-type="bibr" rid="cit0018">2003</xref>; Heman-Ackah, Michael y Goding, <xref ref-type="bibr" rid="cit0019">2002</xref>; Hillenbrand, Cleveland y Erickson, <xref ref-type="bibr" rid="cit0022">1994</xref>; Hillenbrand y Houde, <xref ref-type="bibr" rid="cit0023">1996</xref>; de Krom, <xref ref-type="bibr" rid="cit0027">1993</xref>; Maryn <italic>et al</italic>., <xref ref-type="bibr" rid="cit0033">2009</xref>; Wolfe y Martin, <xref ref-type="bibr" rid="cit0036">1997</xref>; Wolfe, Martin y Palmer, <xref ref-type="bibr" rid="cit0037">2000</xref>).</p>
<p>El objetivo de este trabajo es conocer la precisi&#x00F3;n diagn&#x00F3;stica del CPPS en la detecci&#x00F3;n de la disfon&#x00ED;a en espa&#x00F1;ol. Para ello se estudiar&#x00E1;n los valores del CPPS obtenidos a trav&#x00E9;s de vocales sostenidas y frases, as&#x00ED; como diferentes configuraciones para el c&#x00E1;lculo de esta medida en Praat.</p>
</sec>
<sec id="sec2" sec-type="material|methods">
<title>2. MATERIAL Y M&#x00C9;TODO</title>
<sec id="sec2.1">
<title>2.1. Sujetos</title>
<p>En este estudio participaron voluntariamente 183 sujetos hablantes de espa&#x00F1;ol: 136 sujetos disf&#x00F3;nicos con distintos grados de severidad y diferentes etiolog&#x00ED;as valorados otorrinolaringol&#x00F3;gicamente y 47 sujetos normof&#x00F3;nicos sin antecedentes de patolog&#x00ED;a vocal. En total participaron 56 hombres con una media de edad de 47.83 a&#x00F1;os (<italic>DT</italic> 16.04) y 127 mujeres con una media de edad de 44.81 a&#x00F1;os (<italic>DT</italic> 14.26). En la <xref ref-type="table" rid="t0001">Tabla 1</xref> se resume los detalles del grupo disf&#x00F3;nico.</p>
<table-wrap id="t0001">
<label>Tabla 1</label>
<caption>
<p>Datos descriptivos del grupo disf&#x00F3;nico.</p>
</caption>
<table frame="hsides" rules="groups">
<thead>
<tr>
<th align="left">Patolog&#x00ED;a del grupo disf&#x00F3;nico</th>
<th align="center">N&#x00FA;mero de pacientes</th>
</tr>
</thead>
<tbody>
<tr>
<td align="left">Disfon&#x00ED;a funcional</td>
<td align="center">37</td>
</tr>
<tr>
<td align="left">N&#x00F3;dulo</td>
<td align="center">33</td>
</tr>
<tr>
<td align="left">Edema</td>
<td align="center">18</td>
</tr>
<tr>
<td align="left">Quiste</td>
<td align="center">9</td>
</tr>
<tr>
<td align="left">Par&#x00E1;lisis</td>
<td align="center">8</td>
</tr>
<tr>
<td align="left">Presbifon&#x00ED;a</td>
<td align="center">5</td>
</tr>
<tr>
<td align="left">Sulcus vocalis</td>
<td align="center">5</td>
</tr>
<tr>
<td align="left">P&#x00F3;lipo</td>
<td align="center">4</td>
</tr>
<tr>
<td align="left">Disfon&#x00ED;a espasm&#x00F3;dica</td>
<td align="center">4</td>
</tr>
<tr>
<td align="left">Laringitis cr&#x00F3;nica</td>
<td align="center">3</td>
</tr>
<tr>
<td align="left">Post-cirug&#x00ED;a</td>
<td align="center">3</td>
</tr>
<tr>
<td align="left">Tumor</td>
<td align="center">2</td>
</tr>
<tr>
<td align="left">Trauma</td>
<td align="center">1</td>
</tr>
<tr>
<td align="left">Laringitis aguda</td>
<td align="center">1</td>
</tr>
<tr>
<td align="left">Leucoplasia</td>
<td align="center">1</td>
</tr>
<tr>
<td align="left">Otros trastornos benignos de la voz</td>
<td align="center">2</td>
</tr>
</tbody>
</table>
</table-wrap>
</sec>
<sec id="sec2.2">
<title>2.2. Grabaci&#x00F3;n de las voces</title>
<p>Se obtuvieron dos muestras de voz diferentes para cada sujeto de estudio, un total de 366 muestras: una vocal sostenida /a/ durante 3 segundos aproximadamente y la lectura en voz alta de tres frases fon&#x00E9;ticamente balanceadas del <italic>Spanish matrix sentences test</italic> (Hochmuth, Brand, Zokoll, Zenker Castro, Wardenga y Kollmeier, <xref ref-type="bibr" rid="cit0025">2012</xref>). Se escogieron las tres frases utilizadas en el estudio de Hern&#x00E1;ndez <italic>et al</italic>. (<xref ref-type="bibr" rid="cit0021">2018</xref>), con un total de 33 s&#x00ED;labas. Las voces fueron grabadas con un micr&#x00F3;fono de condensador de diadema AKG C544L y un interfaz de audio alesis i/o2 express. Se utiliz&#x00F3; el programa Praat (Boersma y Weenink, <xref ref-type="bibr" rid="cit0006">2016</xref>, v. 5.4.04) con una frecuencia de muestreo de 44.1 Khz y 16 bits de resoluci&#x00F3;n. En todos los audios fue calculada post hoc la ratio se&#x00F1;al-ruido (<italic>signal-to-noise ratio</italic> [SNR]) propuesta por Deliyski, Shaw y Evans (<xref ref-type="bibr" rid="cit0013">2005</xref>) y Deliyski, Shaw, Evans y Vesselinov (<xref ref-type="bibr" rid="cit0014">2006</xref>). Se incluyeron en el estudio las grabaciones con los valores de SNR recomendados para el an&#x00E1;lisis ac&#x00FA;stico, es decir, los superiores a 30 dB (Deliyski, Shaw y Evans, <xref ref-type="bibr" rid="cit0013">2005</xref>).</p>
</sec>
<sec id="sec2.3">
<title>2.3. Evaluaci&#x00F3;n ac&#x00FA;stico-perceptual</title>
<p>Para la evaluaci&#x00F3;n ac&#x00FA;stico-perceptiva se utiliz&#x00F3; la combinaci&#x00F3;n de la grabaci&#x00F3;n de las frases y de la vocal sostenida de cada sujeto con un segundo de silencio entre ellas, con el objetivo de obtener el mayor grado de representaci&#x00F3;n de la voz diaria de los sujetos del estudio. Cinco logopedas expertos en rehabilitaci&#x00F3;n de la voz (con una experiencia media de 10.6 a&#x00F1;os) evaluaron perceptualmente la calidad de la voz de los sujetos de la muestra a trav&#x00E9;s de la escala GRABS (Hirano, <xref ref-type="bibr" rid="cit0024">1981</xref>). En esta escala perceptiva se punt&#x00FA;a de 0 a 3 la severidad de 5 par&#x00E1;metros: G <italic>(grade)</italic> indica el grado de afectaci&#x00F3;n general y global de la voz; R <italic>(roughness)</italic> muestra el grado de ronquera de la voz; A <italic>(asthenics)</italic> indica el grado de astenia, fatiga o cansancio detectado en la voz; B <italic>(breathiness)</italic> revela la p&#x00E9;rdida de aire a trav&#x00E9;s de las cuerdas, la voz a&#x00E9;rea o soplada, y S <italic>(strain)</italic> indica el grado de tensi&#x00F3;n o dureza de la voz. Cada evaluador puntu&#x00F3; el grado de calidad global de la voz de cada sujeto (G) siguiendo la recomendaci&#x00F3;n de Wuyts <italic>et al</italic>. (<xref ref-type="bibr" rid="cit0038">2000</xref>) (G0 = normal o ausencia de alteraci&#x00F3;n; G1 = alteraci&#x00F3;n ligera; G2 = alteraci&#x00F3;n moderada; G3 = alteraci&#x00F3;n severa). Las grabaciones se presentaron individualmente con auriculares Beyerdynamic DT 770 PRO 80&#x2126; en una habitaci&#x00F3;n con un nivel de ruido ambiental por debajo de 40 dB<sub>A</sub>, medido por un son&#x00F3;metro calibrado PCE-322A. Cada evaluador pudo escuchar cada grabaci&#x00F3;n las veces que fueran necesarias hasta tener una decisi&#x00F3;n final. Para evaluar la fiabilidad intra-evaluador se utiliz&#x00F3; la metodolog&#x00ED;a usada en el trabajo de Hern&#x00E1;ndez <italic>et al</italic>. (<xref ref-type="bibr" rid="cit0021">2018</xref>), donde se estudia la precisi&#x00F3;n diagn&#x00F3;stica y la validez concurrente del <italic>Acoustic Voice Quality Index v. 03.01 y el Acoustic Breathiness Index</italic> en espa&#x00F1;ol. Se seleccionaron al azar 19 grabaciones, aproximadamente el 10 % de las 183 muestras. Estas grabaciones se volvieron a presentar al finalizar la evaluaci&#x00F3;n perceptiva sin informar al evaluador que eran muestras repetidas. Para controlar factores como la fatiga, la atenci&#x00F3;n y la concentraci&#x00F3;n se realizaron pausas cada 25 muestras de voz siguiendo la recomendaci&#x00F3;n de Kreiman, Gerratt, Kempster, Erman y Berke (<xref ref-type="bibr" rid="cit0026">1993</xref>).</p>
</sec>
<sec id="sec2.4">
<title>2.4. An&#x00E1;lisis ac&#x00FA;stico</title>
<p>Se obtuvieron con el programa Praat (Boersma y Weenink, <xref ref-type="bibr" rid="cit0006">2016</xref>, v. 5.4.04) los valores del CPPS (en dB) de todos los sujetos de la muestra tanto en las grabaciones de la vocal sostenida como en las de las frases. Para el c&#x00E1;lculo del CPPS se utilizaron dos configuraciones diferentes. La primera (CPPS<sub>conf.1</sub>) es la que viene por defecto en Praat. La segunda (CPPS<sub>conf.2</sub>) es la utilizada en el c&#x00E1;lculo del <italic>Acoustic Voice Quality Index,</italic> versi&#x00F3;n 03.01 (Barsties y Maryn, <xref ref-type="bibr" rid="cit0005">2016</xref>).</p>
</sec>
<sec id="sec2.5">
<title>2.5. An&#x00E1;lisis estad&#x00ED;stico</title>
<p>El an&#x00E1;lisis estad&#x00ED;stico se realiz&#x00F3; con el programa SPSS (v. 21.0), excepto la fiabilidad intra-evaluador e inter-evaluadores, que fue analizada mediante el programa R Studio (v. 3.0.1).</p>
<p>La fiabilidad intra-evaluador se calcul&#x00F3; a trav&#x00E9;s del coeficiente kappa de Cohen (Ck). Este estad&#x00ED;stico aporta un &#x00ED;ndice de acuerdo entre dos jueces o dos calificaciones; en este caso, el grado de acuerdo entre la puntuaci&#x00F3;n del par&#x00E1;metro G de la escala ac&#x00FA;stico-perceptiva en las 19 muestras repetidas de cada evaluador. Los valores var&#x00ED;an de 0 a 1, donde Ck = 1 corresponder&#x00ED;a a un acuerdo perfecto y Ck = 0, a un acuerdo explicable por la casualidad (Everitt, <xref ref-type="bibr" rid="cit0016">2002</xref>). El Ck se considera razonablemente fiable con valores superiores a 0.41 porque este valor presenta una fuerza de acuerdo moderada (Landis y Koch, <xref ref-type="bibr" rid="cit0028">1977</xref>)</p>
<p>Para evaluar la fiabilidad inter-evaluadores se calcul&#x00F3; el coeficiente kappa de Fleiss (Fk) (Fleiss, <xref ref-type="bibr" rid="cit0017">1971</xref>), que es una extensi&#x00F3;n del Ck para m&#x00E1;s de dos jueces/evaluadores. Al igual que el Ck, el Fk se consider&#x00F3; razonablemente fiable a partir del valor 0.41 (Landis y Koch, <xref ref-type="bibr" rid="cit0028">1977</xref>).</p>
<p>La precisi&#x00F3;n diagn&#x00F3;stica del CPPS se evalu&#x00F3; por su sensibilidad (la probabilidad de obtener un resultado positivo cuando el individuo es disf&#x00F3;nico) y especificidad (la probabilidad de obtener un resultado negativo cuando el individuo no es disf&#x00F3;nico). Esta relaci&#x00F3;n entre sensibilidad y especificidad puede representarse gr&#x00E1;ficamente generando la curva caracter&#x00ED;stica operativa del receptor (<italic>receiver operating characteristic</italic>, ROC). La tasa de verdaderos positivos (sensibilidad) se muestra en la ordenada y, la tasa de falsos positivos (1&#x2013; especificidad), en la abscisa. Siguiendo la recomendaci&#x00F3;n de Barsties y Maryn (<xref ref-type="bibr" rid="cit0005">2016</xref>) se consideraron voces normales todas las que presentaron una media en la calificaci&#x00F3;n de la escala perceptiva menor a 0.5 (G<sub>media</sub> &#x003C; 0.5) y voces disf&#x00F3;nicas todas aquellas que presentaban una media mayor o igual a 0.50 en la evaluaci&#x00F3;n perceptiva (G<sub>media</sub> &#x2265; 0.50 a &#x2264; 3).</p>
<p>Para estimar el poder de discriminaci&#x00F3;n del CPPS entre voz normal y patol&#x00F3;gica se us&#x00F3; el &#x00E1;rea bajo de la curva ROC (A<sub>ROC</sub>). Un valor de A<sub>ROC</sub> = 1 corresponder&#x00ED;a a una prueba perfecta, es decir, que clasificar&#x00ED;a al 100 % de los disf&#x00F3;nicos como disf&#x00F3;nicos y al 100 % de los normof&#x00F3;nicos como sujetos exentos de alteraci&#x00F3;n en la voz. Con un valor de A<sub>ROC</sub> = 0.5 existir&#x00ED;a la misma probabilidad de clasificar a un sujeto con alteraciones en la voz como sano que como disf&#x00F3;nico (Portney y Watkins, <xref ref-type="bibr" rid="cit0034">2000</xref>).</p>
<p>Dependiendo del umbral de CPPS escogido para considerar una voz como disf&#x00F3;nica pueden variar tanto la sensibilidad como la especificidad de esta medida ac&#x00FA;stica. Por ello, el umbral &#x00F3;ptimo de CPPS fue calculado a trav&#x00E9;s del &#x00ED;ndice Youden (la coordenada con el m&#x00E1;ximo de sensibilidad + especificidad &#x2013; 1).</p>
</sec>
</sec>
<sec id="sec3" sec-type="results">
<title>3. RESULTADOS</title>
<sec id="sec3.1">
<title>3.1. Fiabilidad intra e inter-evaluador</title>
<p>La fiabilidad de los cinco evaluadores se evalu&#x00F3; a partir de las puntuaciones del par&#x00E1;metro G de la escala ac&#x00FA;stico-perceptiva. Los valores del Ck se encuentran entre 0.55 y 0.71 (media = 0.618), lo que demuestra una fiabilidad intra-evaluador aceptable en todos los evaluadores (Landis y Koch, <xref ref-type="bibr" rid="cit0028">1977</xref>). Por otro lado, se obtuvo un valor de Fk de 0.434, lo que indica que la evaluaci&#x00F3;n ac&#x00FA;stico-perceptiva presenta una suficiente fiabilidad inter-evaluador (Landis y Koch, <xref ref-type="bibr" rid="cit0028">1977</xref>). La <xref ref-type="fig" rid="f0002">Figura 2</xref> muestra la frecuencia del par&#x00E1;metro G<sub>media</sub> valorado por los cinco evaluadores.</p>
<fig id="f0002">
<label>Figura 2</label>
<caption>
<p>Distribuci&#x00F3;n de la frecuencia de la puntuaci&#x00F3;n de la escala ac&#x00FA;stico-perceptiva (media de la puntuaciones del par&#x00E1;metro G de los cinco evaluadores) de las 183 muestras de voz.</p>
</caption>
<graphic xlink:href="loquens_058-g002.tif" xmlns:xlink="http://www.w3.org/1999/xlink"/>
</fig>
</sec>
<sec id="sec3.2">
<title>3.2. Estad&#x00ED;stica descriptiva</title>
<p>En la <xref ref-type="table" rid="t0002">Tabla 2</xref> se muestra la estad&#x00ED;stica descriptiva de los valores del CPPS con las dos configuraciones estudiadas. Se puede observar valores sistem&#x00E1;ticamente m&#x00E1;s altos en la CPPS<sub>conf.1</sub> tanto con la vocal sostenida como con las frases. La diferencia entre los valores medios del CPPS de las dos configuraciones del total de la muestra fue de 9.76 dB en la vocal y de 9.63 dB en las frases.</p>
<table-wrap id="t0002">
<label>Tabla 2</label>
<caption>
<p>Medias <italic>(M)</italic> y desviaciones t&#x00ED;picas <italic>(DT)</italic> del CPPS (en dB).</p>
</caption>
<table frame="hsides" rules="groups">
<thead>
<tr>
<th align="left" rowspan="2">Grupo</th>
<th colspan="2" align="center">Vocal<hr/></th>
<th colspan="2" align="center">Frases<hr/></th>
</tr>
<tr>
<th align="center">Conf.1</th>
<th align="center">Conf.2</th>
<th align="center">Conf.1</th>
<th align="center">Conf.2</th>
</tr>
</thead>
<tbody>
<tr>
<td align="left">Normof&#x00F3;nicos <italic>(M)</italic></td>
<td align="center">26.09</td>
<td align="center">15.22</td>
<td align="center">19.16</td>
<td align="center">9.42</td>
</tr>
<tr>
<td align="left">Normof&#x00F3;nicos <italic>(DT)</italic></td>
<td align="center">2.94</td>
<td align="center">2.39</td>
<td align="center">0.95</td>
<td align="center">0.99</td>
</tr>
<tr>
<td align="left">Disf&#x00F3;nicos <italic>(M)</italic></td>
<td align="center">21.75</td>
<td align="center">12.37</td>
<td align="center">17.28</td>
<td align="center">7.69</td>
</tr>
<tr>
<td align="left">Disf&#x00F3;nicos <italic>(DT)</italic></td>
<td align="center">3.91</td>
<td align="center">3.13</td>
<td align="center">1.51</td>
<td align="center">1.63</td>
</tr>
<tr>
<td align="left">Total <italic>(M)</italic></td>
<td align="center">22.86</td>
<td align="center">13.10</td>
<td align="center">17.77</td>
<td align="center">8.14</td>
</tr>
<tr>
<td align="left">Total <italic>(DT)</italic></td>
<td align="center">4.14</td>
<td align="center">3.20</td>
<td align="center">1.61</td>
<td align="center">1.67</td>
</tr>
</tbody>
</table>
</table-wrap>
</sec>
<sec id="sec3.3">
<title>3.3. Precisi&#x00F3;n diagn&#x00F3;stica</title>
<p>Se utilizaron curvas ROC para evaluar la precisi&#x00F3;n diagnostica del CPPS, es decir, la capacidad de esta medida de distinguir entre voces patol&#x00F3;gicas y normales.</p>
<p>Los resultados muestran que el CPPS es una medida ac&#x00FA;stica con una buena capacidad para distinguir entre voces normales y patol&#x00F3;gicas (<xref ref-type="table" rid="t0003">Tabla 3</xref>).</p>
<table-wrap id="t0003">
<label>Tabla 3</label>
<caption>
<p>Valores del &#x00E1;rea bajo la curva ROC del CPPS y umbrales patol&#x00F3;gicos con el balance de sensibilidad y especificidad.</p>
</caption>
<table frame="hsides" rules="groups">
<thead>
<tr>
<th align="center" rowspan="2">&#x00A0;</th>
<th colspan="2" align="center">Vocal<hr/></th>
<th colspan="2" align="center">Frases<hr/></th>
</tr>
<tr>
<th align="center">Conf.1</th>
<th align="center">Conf.2</th>
<th align="center">Conf.1</th>
<th align="center">Conf.2</th>
</tr>
</thead>
<tbody>
<tr>
<td align="left">A<sub>ROC</sub></td>
<td align="center">0.863</td>
<td align="center">0.841</td>
<td align="center">0.884</td>
<td align="center">0.866</td>
</tr>
<tr>
<td align="left">Umbral (dB)</td>
<td align="center">23.62</td>
<td align="center">13.96</td>
<td align="center">18.40</td>
<td align="center">8.37</td>
</tr>
<tr>
<td align="left">Sensibilidad</td>
<td align="center">87.5%</td>
<td align="center">76.8%</td>
<td align="center">82.1%</td>
<td align="center">89.3%</td>
</tr>
<tr>
<td align="left">Especificidad</td>
<td align="center">75.6%</td>
<td align="center">77.2%</td>
<td align="center">86.6%</td>
<td align="center">70.9%</td>
</tr>
</tbody>
</table>
</table-wrap>
<p>En vocales sostenidas se obtuvo una A<sub>ROC</sub> de 0.863 con la CPPS<sub>conf.1</sub> y de 0.841 con la CPPS<sub>conf.2</sub> (<xref ref-type="fig" rid="f0003">Figura 3</xref>). El umbral &#x00F3;ptimo para el CPPS, calculado a trav&#x00E9;s del &#x00ED;ndice Youden, fue de 23.62 dB para el CPPS<sub>conf.1</sub> y de 13.96 dB para el CPPS<sub>conf.2</sub>.</p>
<fig id="f0003">
<label>Figura 3</label>
<caption>
<p>Curvas ROC del CPPS en la vocal (izquierda) y en las frases (derecha).</p>
</caption>
<graphic xlink:href="loquens_058-g003.tif" xmlns:xlink="http://www.w3.org/1999/xlink"/>
</fig>
<p>En habla continua se obtuvo una A<sub>ROC</sub> de 0.884 con el CPPS<sub>conf.1</sub> y de 0.866 con el CPPS<sub>conf.2</sub> (<xref ref-type="fig" rid="f0003">Figura 3</xref>). Los umbrales con mejor balance entre sensibilidad y especificidad fueron de 18.40 dB para el CPPS<sub>conf.1</sub> y de 8.37 dB para el CPPS<sub>conf.2</sub>.</p>
</sec>
</sec>
<sec id="sec4" sec-type="discussion">
<title>4. DISCUSI&#x00D3;N</title>
<p>El objetivo de este trabajo fue conocer la precisi&#x00F3;n diagn&#x00F3;stica del CPPS en la detecci&#x00F3;n de la disfon&#x00ED;a en espa&#x00F1;ol.</p>
<p>Se ha demostrado en multitud de estudios la alta correlaci&#x00F3;n del CPPS con el grado de severidad de la disfon&#x00ED;a (Awan y Roy, <xref ref-type="bibr" rid="cit0002">2006</xref>; Balasubramanium <italic>et al</italic>., <xref ref-type="bibr" rid="cit0003">2011</xref>; Dejonckere, <xref ref-type="bibr" rid="cit0009">1998</xref>; Dejonckere y Wieneke, <xref ref-type="bibr" rid="cit0010">1996</xref>; Delgado-Hern&#x00E1;ndez <italic>et al</italic>., <xref ref-type="bibr" rid="cit0012">2018</xref>; Eadie y Baylor, <xref ref-type="bibr" rid="cit0015">2006</xref>; Heman-Ackah <italic>et al</italic>., <xref ref-type="bibr" rid="cit0018">2003</xref>; Heman-Ackah, Michael y Goding, <xref ref-type="bibr" rid="cit0019">2002</xref>; Hillenbrand, Cleveland y Erickson, <xref ref-type="bibr" rid="cit0022">1994</xref>; Hillenbrand y Houde, <xref ref-type="bibr" rid="cit0023">1996</xref>; de Krom, <xref ref-type="bibr" rid="cit0027">1993</xref>; Maryn <italic>et al</italic>., <xref ref-type="bibr" rid="cit0033">2009</xref>; Wolfe y Martin, <xref ref-type="bibr" rid="cit0036">1997</xref>; Wolfe, Martin y Palmer, <xref ref-type="bibr" rid="cit0037">2000</xref>). A medida que se incrementa la severidad de las alteraciones en la voz, disminuye el valor del CPPS y viceversa. Las voces m&#x00E1;s peri&#x00F3;dicas muestran una configuraci&#x00F3;n arm&#x00F3;nica bien definida dentro del espectro y, por tanto, un pico cepstral m&#x00E1;s prominente. Por el contrario, las voces de menor calidad vocal presentan una disminuci&#x00F3;n de este pico cepstral (Delgado-Hern&#x00E1;ndez <italic>et al</italic>., <xref ref-type="bibr" rid="cit0012">2018</xref>).</p>
<p>Respecto a la capacidad del CPPS para detectar la voz patol&#x00F3;gica, los resultados de este trabajo muestran una gran precisi&#x00F3;n diagn&#x00F3;stica de esta medida ac&#x00FA;stica en vocales sostenidas (A<sub>ROC[config.1]</sub> = 0.863 y A<sub>ROC[config.2]</sub> = 0.841) y en habla continua (A<sub>ROC[config.1]</sub> = 0.884 y A<sub>ROC[config.2]</sub> = 0.866). El CPPS obtenido a partir de las frases tiene un mayor poder discriminatorio entre voz la normal y patol&#x00F3;gica que el obtenido a partir de vocales. El CPPS en habla continua est&#x00E1; condicionado por el tipo de muestra de habla utilizada, por las variedades dialectales y por la fluidez lectora de la muestra de estudio (Brinca, Batista, Tavares, Gon&#x00E7;alves y Moreno, <xref ref-type="bibr" rid="cit0007">2014</xref>), por lo que es recomendable la validaci&#x00F3;n de esta medida ac&#x00FA;stica en los diferentes idiomas. El umbral obtenido en espa&#x00F1;ol en este trabajo a partir de la configuraci&#x00F3;n 1 es muy similar al encontrado por Sauder, Breatl y Eadie (<xref ref-type="bibr" rid="cit0035">2017</xref>) en lengua inglesa con la misma configuraci&#x00F3;n (umbral espa&#x00F1;ol = 18.40 dB; umbral ingl&#x00E9;s = 19.10 dB).</p>
<p>Por &#x00FA;ltimo, un aspecto importante a tener en cuenta en la interpretaci&#x00F3;n de esta medida ac&#x00FA;stica es la configuraci&#x00F3;n elegida en Praat (Delgado <italic>et al</italic>., <xref ref-type="bibr" rid="cit0011">2017</xref>). Los resultados de este trabajo muestran que el umbral por debajo del cual se puede determinar la voz patol&#x00F3;gica es aproximadamente 10 dB menos en el CPPS<sub>conf.2</sub>, tanto en vocales (CPPS<sub>conf.1</sub> = 23.62 dB, CPPS<sub>conf.2</sub> = 13.96 dB) como en habla continua (CPPS<sub>conf.1</sub> = 18.40 dB, CPPS<sub>conf.2</sub> = 8.37 dB).</p>
</sec>
<sec id="sec5" sec-type="conclusions">
<title>5. CONCLUSIONES</title>
<p>Los resultados del presente estudio confirman que el CPPS es una medida ac&#x00FA;stica v&#x00E1;lida para detectar las alteraciones en la voz en espa&#x00F1;ol, tanto con vocal sostenida como con frases.</p>
</sec>
<sec id="sec6">
<title>NOTA ACLARATORIA</title>
<p>Este trabajo es la continuaci&#x00F3;n del art&#x00ED;culo &#x00AB;An&#x00E1;lisis cepstral de la voz normal y patol&#x00F3;gica en adultos espa&#x00F1;oles. Medida de la prominencia del pico cepstral suavizado en vocales sostenidas versus habla conectada&#x00BB;, publicado en la <italic>Revista Otorrinolaringol&#x00F3;gica Espa&#x00F1;ola</italic> (n&#x00FA;mero 69, pp. 134-140), donde se examinaba la validez concurrente de esta medida ac&#x00FA;stica en la evaluaci&#x00F3;n de la severidad de la disfon&#x00ED;a.</p>
</sec>
</body>
<back>
<ref-list>
<title>REFERENCIAS</title>
<ref id="cit0001">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Awan</surname>
<given-names>S. N.</given-names>
</name>
</person-group>
<year>2008</year>
<chapter-title>Instrumental analysis of phonation</chapter-title>
<person-group person-group-type="editor">
<name>
<surname>Ball</surname>
<given-names>M. J.</given-names>
</name>
<name>
<surname>Perkins</surname>
<given-names>M. R.</given-names>
</name>
<name>
<surname>M&#x00FC;ller</surname>
<given-names>N.</given-names>
</name>
<name>
<surname>Howard</surname>
<given-names>S.</given-names>
</name>
</person-group>
<source>The handbook of clinical linguistics</source>
<fpage>347</fpage>
<publisher-name>Oxford: Blackwell</publisher-name>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1002/9781444301007.ch21">https://doi.org/10.1002/9781444301007.ch21</ext-link>
</comment>
</mixed-citation>
</ref>
<ref id="cit0002">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Awan</surname>
<given-names>S. N.</given-names>
</name>
<name>
<surname>Roy</surname>
<given-names>N.</given-names>
</name>
</person-group>
<article-title>Toward the development of an objective index of dysphonia severity: A four-factor acoustic model</article-title>
<source>Clinical Linguistics &#x0026; Phonetics</source>
<year>2006</year>
<volume>20</volume>
<fpage>35</fpage>
<lpage>49</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1080/02699200400008353">https://doi.org/10.1080/02699200400008353</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0003">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Balasubramanium</surname>
<given-names>R. K.</given-names>
</name>
<name>
<surname>Bhat</surname>
<given-names>J. S.</given-names>
</name>
<name>
<surname>Fahim</surname>
<given-names>S.</given-names>
<suffix>III</suffix>
</name>
<name>
<surname>Raju</surname>
<given-names>R.</given-names>
<suffix>III</suffix>
</name>
</person-group>
<article-title>Cepstral analysis of voice in unilateral adductor vocal fold palsy</article-title>
<source>Journal of Voice</source>
<year>2011</year>
<volume>25</volume>
<issue>3</issue>
<fpage>326</fpage>
<lpage>329</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2009.12.010">https://doi.org/10.1016/j.jvoice.2009.12.010</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0004">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Barsties</surname>
<given-names>B.</given-names>
</name>
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
</person-group>
<article-title>The improvement of internal consistency of the Acoustic Voice Quality Index</article-title>
<source>American Journal of Otolaryngology</source>
<year>2015</year>
<volume>36</volume>
<issue>5</issue>
<fpage>647</fpage>
<lpage>656</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.amjoto.2015.04.012">https://doi.org/10.1016/j.amjoto.2015.04.012</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0005">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Barsties</surname>
<given-names>B.</given-names>
</name>
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
</person-group>
<article-title>External validation of the Acoustic Voice Quality Index version 03.01 with extended representativity</article-title>
<source>Annals of Otology, Rhinology &#x0026; Laryngology</source>
<year>2016</year>
<volume>125</volume>
<issue>7</issue>
<fpage>571</fpage>
<lpage>583</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1177/0003489416636131">https://doi.org/10.1177/0003489416636131</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0006">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Boersma</surname>
<given-names>P.</given-names>
</name>
<name>
<surname>Weenink</surname>
<given-names>D.</given-names>
</name>
</person-group>
<year>2016</year>
<source>Praat: Doing phonetics by computer</source>
<comment>[programa inform&#x00E1;tico, versi&#x00F3;n 6.0.22]</comment>
<comment>
<ext-link ext-link-type="uri" xlink:href="http://www.praat.org/">http://www.praat.org/</ext-link>
</comment>
</mixed-citation>
</ref>
<ref id="cit0007">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Brinca</surname>
<given-names>L. F.</given-names>
</name>
<name>
<surname>Batista</surname>
<given-names>A. P. F.</given-names>
</name>
<name>
<surname>Tavares</surname>
<given-names>A. I.</given-names>
</name>
<name>
<surname>Gon&#x00E7;alves</surname>
<given-names>I. C.</given-names>
</name>
<name>
<surname>Moreno</surname>
<given-names>M. L.</given-names>
</name>
</person-group>
<article-title>Use of cepstral analyses for differentiating normal from dysphonic voices: A comparative study of connected speech versus sustained vowel in European Portuguese female speakers</article-title>
<source>Journal of Voice</source>
<year>2014</year>
<volume>28</volume>
<fpage>282</fpage>
<lpage>286</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2013.10.001">https://doi.org/10.1016/j.jvoice.2013.10.001</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0008">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Cecconello</surname>
<given-names>L.</given-names>
</name>
<name>
<surname>Far&#x00ED;as</surname>
<given-names>P.</given-names>
</name>
<name>
<surname>Gurlekian</surname>
<given-names>J. A.</given-names>
</name>
</person-group>
<article-title>Aplicaci&#x00F3;n del cepstrum en la cl&#x00ED;nica vocal</article-title>
<source>Revista de la Federaci&#x00F3;n Argentina de Sociedades de Otorrinolaringolog&#x00ED;a. Edici&#x00F3;n especial, 30.&#x00BA; Congreso Argentino de Otorrinolaringolog&#x00ED;a</source>
<year>2008</year>
<volume>15</volume>
<issue>1</issue>
<fpage>12</fpage>
<lpage>14</lpage>
</nlm-citation>
</ref>
<ref id="cit0009">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Dejonckere</surname>
<given-names>P. H.</given-names>
</name>
</person-group>
<article-title>Cepstral voice analysis: Link with perception and stroboscopy</article-title>
<source>Revue de Laryngologie, Otologie, Rhinologie (Bord)</source>
<year>1998</year>
<volume>119</volume>
<fpage>245</fpage>
<lpage>246</lpage>
</nlm-citation>
</ref>
<ref id="cit0010">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Dejonckere</surname>
<given-names>P. H.</given-names>
</name>
<name>
<surname>Wieneke</surname>
<given-names>G.</given-names>
</name>
</person-group>
<year>1996</year>
<chapter-title>Cepstra of normal and pathological voices in correlation with acoustic, aerodynamic and perceptual data</chapter-title>
<person-group person-group-type="editor">
<name>
<surname>Ball</surname>
<given-names>M. J.</given-names>
</name>
<name>
<surname>Duckworth</surname>
<given-names>M.</given-names>
</name>
</person-group>
<source>Advances in Clinical Phonetics</source>
<volume>6</volume>
<fpage>217</fpage>
<lpage>226</lpage>
<publisher-loc>Amsterdam</publisher-loc>
<publisher-name>John Benjamins</publisher-name>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1075/sspcl.6.13dej">https://doi.org/10.1075/sspcl.6.13dej</ext-link>
</comment>
</mixed-citation>
</ref>
<ref id="cit0011">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Delgado</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Le&#x00F3;n</surname>
<given-names>N. M.</given-names>
</name>
<name>
<surname>Jim&#x00E9;nez</surname>
<given-names>A.</given-names>
</name>
<name>
<surname>Izquierdo</surname>
<given-names>L. M.</given-names>
</name>
</person-group>
<article-title>An&#x00E1;lisis ac&#x00FA;stico de la voz: medidas temporales, espectrales y cepstrales en la voz normal con el Praat en una muestra de hablantes de espa&#x00F1;ol</article-title>
<source>Revista de Investigaci&#x00F3;n en Logopedia</source>
<year>2017</year>
<volume>7</volume>
<issue>2</issue>
<fpage>108</fpage>
<lpage>127</lpage>
</nlm-citation>
</ref>
<ref id="cit0012">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Delgado-Hern&#x00E1;ndez</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Le&#x00F3;n-G&#x00F3;mez</surname>
<given-names>N. M.</given-names>
</name>
<name>
<surname>Izquierdo-Arteaga</surname>
<given-names>L. M.</given-names>
</name>
<name>
<surname>Llanos-Fumero</surname>
<given-names>Y.</given-names>
</name>
</person-group>
<article-title>An&#x00E1;lisis cepstral de la voz normal y patol&#x00F3;gica en adultos espa&#x00F1;oles. Medida de la prominencia del pico cepstral suavizado en vocales sostenidas versus habla conectada</article-title>
<source>Acta Otorrinolaringol&#x00F3;gica Espa&#x00F1;ola</source>
<year>2018</year>
<volume>69</volume>
<fpage>134</fpage>
<lpage>140</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.otorri.2017.05.006">https://doi.org/10.1016/j.otorri.2017.05.006</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0013">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Deliyski</surname>
<given-names>D. D.</given-names>
</name>
<name>
<surname>Shaw</surname>
<given-names>H. S.</given-names>
</name>
<name>
<surname>Evans</surname>
<given-names>M. K.</given-names>
</name>
</person-group>
<article-title>Adverse effects of environmental noise on acoustic voice quality measurements</article-title>
<source>Journal of Voice</source>
<year>2005</year>
<volume>19</volume>
<issue>1</issue>
<fpage>15</fpage>
<lpage>28</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2004.07.003">https://doi.org/10.1016/j.jvoice.2004.07.003</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0014">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Deliyski</surname>
<given-names>D. D.</given-names>
</name>
<name>
<surname>Shaw</surname>
<given-names>H. S.</given-names>
</name>
<name>
<surname>Evans</surname>
<given-names>M. K.</given-names>
</name>
<name>
<surname>Vesselinov</surname>
<given-names>R.</given-names>
</name>
</person-group>
<article-title>Regression tree approach to studying factors influencing acoustic voice analysis</article-title>
<source>Folia Phoniatrica et Logopaedica</source>
<year>2006</year>
<volume>58</volume>
<fpage>274</fpage>
<lpage>288</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1159/000093184">https://doi.org/10.1159/000093184</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0015">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Eadie</surname>
<given-names>T. L.</given-names>
</name>
<name>
<surname>Baylor</surname>
<given-names>C. R.</given-names>
</name>
</person-group>
<article-title>The effect of perceptual training on inexperienced listeners&#x2019; judgments of dysphonic voice</article-title>
<source>Journal of Voice</source>
<year>2006</year>
<volume>20</volume>
<fpage>527</fpage>
<lpage>544</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2005.08.007">https://doi.org/10.1016/j.jvoice.2005.08.007</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0016">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Everitt</surname>
<given-names>B. S.</given-names>
</name>
</person-group>
<year>2002</year>
<source>The Cambridge Dictionary of Statistics.</source>
<edition>2</edition>
<publisher-loc>New York</publisher-loc>
<publisher-name>Cambridge University Press</publisher-name>
</mixed-citation>
</ref>
<ref id="cit0017">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Fleiss</surname>
<given-names>J. L.</given-names>
</name>
</person-group>
<article-title>Measuring nominal scale agreement among many raters</article-title>
<source>Psychological Bulletin</source>
<year>1971</year>
<volume>76</volume>
<fpage>378</fpage>
<lpage>382</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1037/h0031619">https://doi.org/10.1037/h0031619</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0018">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Heman-Ackah</surname>
<given-names>Y. D.</given-names>
</name>
<name>
<surname>Michael</surname>
<given-names>D. D.</given-names>
</name>
<name>
<surname>Baroody</surname>
<given-names>M. M.</given-names>
</name>
<name>
<surname>Ostrowski</surname>
<given-names>R.</given-names>
</name>
<name>
<surname>Hillenbrand</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Heuer</surname>
<given-names>R. J.</given-names>
</name>
<name>
<surname>Staloff</surname>
<given-names>R. T.</given-names>
</name>
</person-group>
<article-title>Cepstral peak prominence: A more reliable measure of dysphonia</article-title>
<source>Annals of Otology, Rhinology &#x0026; Laryngology</source>
<year>2003</year>
<volume>112</volume>
<fpage>324</fpage>
<lpage>333</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1177/000348940311200406">https://doi.org/10.1177/000348940311200406</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0019">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Heman-Ackah</surname>
<given-names>Y. D.</given-names>
</name>
<name>
<surname>Michael</surname>
<given-names>D. D.</given-names>
</name>
<name>
<surname>Goding</surname>
<given-names>G. S.</given-names>
<suffix>Jr</suffix>
</name>
</person-group>
<article-title>The relationship between cepstral peak prominence and selected parameters of dysphonia</article-title>
<source>Journal of Voice</source>
<year>2002</year>
<volume>16</volume>
<fpage>20</fpage>
<lpage>27</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/S0892-1997(02)00067-X">https://doi.org/10.1016/S0892-1997(02)00067-X</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0020">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Heman-Ackah</surname>
<given-names>Y. D.</given-names>
</name>
<name>
<surname>Sataloff</surname>
<given-names>R. T.</given-names>
</name>
<name>
<surname>Laureyns</surname>
<given-names>G.</given-names>
</name>
<name>
<surname>Lurie</surname>
<given-names>D.</given-names>
</name>
<name>
<surname>Michael</surname>
<given-names>D. D.</given-names>
</name>
<name>
<surname>Heuer</surname>
<given-names>R.</given-names>
</name>
<name>
<surname>Hillenbrand</surname>
<given-names>J.</given-names>
</name>
</person-group>
<article-title>Quantifying the cepstral peak prominence, a measure of dysphonia</article-title>
<source>Journal of Voice</source>
<year>2014</year>
<volume>28</volume>
<fpage>783</fpage>
<lpage>788</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2014.05.005">https://doi.org/10.1016/j.jvoice.2014.05.005</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0021">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Hern&#x00E1;ndez</surname>
<given-names>J. D.</given-names>
</name>
<name>
<surname>Le&#x00F3;n-G&#x00F3;mez</surname>
<given-names>M. L.</given-names>
</name>
<name>
<surname>Jim&#x00E9;nez</surname>
<given-names>A.</given-names>
</name>
<name>
<surname>Izquierdo</surname>
<given-names>L. M.</given-names>
</name>
<name>
<surname>Latoszek</surname>
<given-names>B. B. v.</given-names>
</name>
</person-group>
<article-title>Validation of the Acoustic Voice Quality Index Version 03.01 and the Acoustic Breathiness Index in the Spanish language</article-title>
<source>Annals of Otology, Rhinology &#x0026; Laryngology</source>
<year>2018</year>
<volume>127</volume>
<fpage>317</fpage>
<lpage>326</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1177/0003489418761096">https://doi.org/10.1177/0003489418761096</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0022">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Hillenbrand</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Cleveland</surname>
<given-names>R. A.</given-names>
</name>
<name>
<surname>Erickson</surname>
<given-names>R. L.</given-names>
</name>
</person-group>
<article-title>Acoustic correlates of breathy vocal quality</article-title>
<source>Journal of Speech, Language, and Hearing Research</source>
<year>1994</year>
<volume>37</volume>
<fpage>769</fpage>
<lpage>778</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jshr.3704.769">https://doi.org/10.1044/jshr.3704.769</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0023">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Hillenbrand</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Houde</surname>
<given-names>R. A.</given-names>
</name>
</person-group>
<article-title>Acoustic correlates of breathy vocal quality: Dysphonic voices and continuous speech</article-title>
<source>Journal of Speech, Language, and Hearing Research</source>
<year>1996</year>
<volume>39</volume>
<fpage>311</fpage>
<lpage>321</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jshr.3902.311">https://doi.org/10.1044/jshr.3902.311</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0024">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Hirano</surname>
<given-names>M.</given-names>
</name>
</person-group>
<year>1981</year>
<chapter-title>Psycho-acoustic evaluation of voice</chapter-title>
<person-group person-group-type="editor">
<name>
<surname>Arnold</surname>
<given-names>G. E.</given-names>
</name>
<name>
<surname>Winckel</surname>
<given-names>F.</given-names>
</name>
<name>
<surname>Wyke</surname>
<given-names>B. D.</given-names>
</name>
</person-group>
<source>Disorders of Human Communication 5. Clinical Examination of Voice</source>
<fpage>81</fpage>
<lpage>84</lpage>
<publisher-loc>Vienna</publisher-loc>
<publisher-name>Springer</publisher-name>
</mixed-citation>
</ref>
<ref id="cit0025">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Hochmuth</surname>
<given-names>S.</given-names>
</name>
<name>
<surname>Brand</surname>
<given-names>T.</given-names>
</name>
<name>
<surname>Zokoll</surname>
<given-names>M. A.</given-names>
</name>
<name>
<surname>Zenker Castro</surname>
<given-names>F.</given-names>
</name>
<name>
<surname>Wardenga</surname>
<given-names>N.</given-names>
</name>
<name>
<surname>Kollmeier</surname>
<given-names>B.</given-names>
</name>
</person-group>
<article-title>. A Spanish matrix sentence test for assessing speech reception thresholds in noise</article-title>
<source>International Journal of Audiology</source>
<year>2012</year>
<volume>51</volume>
<fpage>536</fpage>
<lpage>544</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.3109/14992027.2012.670731">https://doi.org/10.3109/14992027.2012.670731</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0026">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Kreiman</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Gerratt</surname>
<given-names>B. R.</given-names>
</name>
<name>
<surname>Kempster</surname>
<given-names>G. B.</given-names>
</name>
<name>
<surname>Erman</surname>
<given-names>A.</given-names>
</name>
<name>
<surname>Berke</surname>
<given-names>G. S.</given-names>
</name>
</person-group>
<article-title>Perceptual evaluation of voice quality: Review, tutorial, and a framework for future research</article-title>
<source>Journal of Speech, Language, and Hearing Research</source>
<year>1993</year>
<volume>36</volume>
<fpage>21</fpage>
<lpage>40</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jshr.3601.21">https://doi.org/10.1044/jshr.3601.21</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0027">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Krom</surname>
<given-names>G. de</given-names>
</name>
</person-group>
<article-title>A cepstrum-based technique for determining a harmonics-to- noise ratio in speech signals</article-title>
<source>Journal of Speech, Langauge, and Hearing Research</source>
<year>1993</year>
<volume>36</volume>
<fpage>254</fpage>
<lpage>266</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jshr.3602.254">https://doi.org/10.1044/jshr.3602.254</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0028">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Landis</surname>
<given-names>J. R.</given-names>
</name>
<name>
<surname>Koch</surname>
<given-names>G. G.</given-names>
</name>
</person-group>
<article-title>The measurement of observer agreement for categorical data</article-title>
<source>Biometrics</source>
<year>1977</year>
<volume>33</volume>
<fpage>159</fpage>
<lpage>174</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.2307/2529310">https://doi.org/10.2307/2529310</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0029">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Latoszek</surname>
<given-names>B. B.</given-names>
</name>
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
<name>
<surname>Gerrit</surname>
<given-names>E.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M.</given-names>
</name>
</person-group>
<article-title>The Acoustic Breathiness Index (ABI): A multivariate acoustic model for breathiness</article-title>
<source>Journal of Voice</source>
<year>2017</year>
<volume>31</volume>
<fpage>511e11</fpage>
<lpage>511e27</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2016.11.017">https://doi.org/10.1016/j.jvoice.2016.11.017</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0030">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
<name>
<surname>Corthals</surname>
<given-names>P.</given-names>
</name>
<name>
<surname>Van Cauwenberge</surname>
<given-names>P.</given-names>
</name>
<name>
<surname>Roy</surname>
<given-names>N.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M.</given-names>
</name>
</person-group>
<article-title>Toward improved ecological validity in the acoustic measurement of overall voice quality: Combining continuous speech and sustained vowels</article-title>
<source>Journal of Voice</source>
<year>2010</year>
<volume>24</volume>
<fpage>540</fpage>
<lpage>555</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2008.12.014">https://doi.org/10.1016/j.jvoice.2008.12.014</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0031">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M.</given-names>
</name>
<name>
<surname>Barsties</surname>
<given-names>B.</given-names>
</name>
<name>
<surname>Roy</surname>
<given-names>N.</given-names>
</name>
</person-group>
<article-title>The value of the Acoustic Voice Quality Index as a measure of dysphonia severity in subjects speaking different languages</article-title>
<source>European Archives of Oto-Rhino-Laryngology</source>
<year>2014</year>
<volume>271</volume>
<fpage>1609</fpage>
<lpage>1619</lpage>
</nlm-citation>
</ref>
<ref id="cit0032">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M.</given-names>
</name>
<name>
<surname>Roy</surname>
<given-names>N.</given-names>
</name>
</person-group>
<article-title>The Acoustic Voice Quality Index: Toward improved treatment outcomes assessment in voice disorders</article-title>
<source>Journal of Communication Disorders</source>
<year>2010</year>
<volume>43</volume>
<fpage>161</fpage>
<lpage>174</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jcomdis.2009.12.004">https://doi.org/10.1016/j.jcomdis.2009.12.004</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0033">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Maryn</surname>
<given-names>Y.</given-names>
</name>
<name>
<surname>Roy</surname>
<given-names>N.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M.</given-names>
</name>
<name>
<surname>Van Cauwenberge</surname>
<given-names>P.</given-names>
</name>
<name>
<surname>Corthals</surname>
<given-names>P.</given-names>
</name>
</person-group>
<article-title>Acoustic measurement of overall voice quality: A meta-analysis</article-title>
<source>Journal of the Acoustic Society of America</source>
<year>2009</year>
<volume>126</volume>
<fpage>2619</fpage>
<lpage>2634</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1121/1.3224706">https://doi.org/10.1121/1.3224706</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0034">
<mixed-citation publication-type="book">
<person-group person-group-type="author">
<name>
<surname>Portney</surname>
<given-names>L. G.</given-names>
</name>
<name>
<surname>Watkins</surname>
<given-names>M. P.</given-names>
</name>
</person-group>
<year>2000</year>
<source>Foundations of clinical research: Applications to practice</source>
<edition>2</edition>
<publisher-loc>Upper Saddle River, NJ</publisher-loc>
<publisher-name>Prentice Hall</publisher-name>
</mixed-citation>
</ref>
<ref id="cit0035">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Sauder</surname>
<given-names>C.</given-names>
</name>
<name>
<surname>Bretl</surname>
<given-names>M.</given-names>
</name>
<name>
<surname>Eadie</surname>
<given-names>T.</given-names>
</name>
</person-group>
<article-title>Predicting voice disorder status from smoothed measures of cepstral peak prominence using Praat and Analysis of Dysphonia in Speech and Voice (ADSV)</article-title>
<source>Journal of Voice</source>
<year>2017</year>
<volume>31</volume>
<fpage>557</fpage>
<lpage>566</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/j.jvoice.2017.01.006">https://doi.org/10.1016/j.jvoice.2017.01.006</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0036">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Wolfe</surname>
<given-names>V.</given-names>
</name>
<name>
<surname>Martin</surname>
<given-names>D.</given-names>
</name>
</person-group>
<article-title>Acoustic correlates of dysphonia: Type and severity</article-title>
<source>Journal of Communication Disorders</source>
<year>1997</year>
<volume>30</volume>
<fpage>403</fpage>
<lpage>415</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1016/S0021-9924(96)00112-8">https://doi.org/10.1016/S0021-9924(96)00112-8</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0037">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Wolfe</surname>
<given-names>V. I.</given-names>
</name>
<name>
<surname>Martin</surname>
<given-names>D. P.</given-names>
</name>
<name>
<surname>Palmer</surname>
<given-names>C. I.</given-names>
</name>
</person-group>
<article-title>Perception of dysphonic voice quality by naive listeners</article-title>
<source>Journal of Speech, Language, and Hearing Research</source>
<year>2000</year>
<volume>43</volume>
<fpage>697</fpage>
<lpage>705</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jslhr.4303.697">https://doi.org/10.1044/jslhr.4303.697</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0038">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Wuyts</surname>
<given-names>F. L.</given-names>
</name>
<name>
<surname>De Bodt</surname>
<given-names>M. S.</given-names>
</name>
<name>
<surname>Molenberghs</surname>
<given-names>G.</given-names>
</name>
<name>
<surname>Remacle</surname>
<given-names>M.</given-names>
</name>
<name>
<surname>Heylen</surname>
<given-names>L.</given-names>
</name>
<name>
<surname>Millet</surname>
<given-names>B.</given-names>
</name>
<name>
<surname>Van de Heyning</surname>
<given-names>P. H.</given-names>
</name>
</person-group>
<article-title>The Dysphonia Severity Index: An objective measure of vocal quality based on a multiparameter approach</article-title>
<source>Journal of Speech, Language, and Hearing Research</source>
<year>2000</year>
<volume>43</volume>
<fpage>796</fpage>
<lpage>809</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1044/jslhr.4303.796">https://doi.org/10.1044/jslhr.4303.796</ext-link>
</comment>
</nlm-citation>
</ref>
<ref id="cit0039">
<nlm-citation publication-type="journal">
<person-group person-group-type="author">
<name>
<surname>Yiu</surname>
<given-names>E.</given-names>
</name>
<name>
<surname>Worrall</surname>
<given-names>L.</given-names>
</name>
<name>
<surname>Longland</surname>
<given-names>J.</given-names>
</name>
<name>
<surname>Mitchell</surname>
<given-names>C.</given-names>
</name>
</person-group>
<article-title>Analysing vocal quality of connected speech using Kay&#x2019;s Computerized Speech Lab: a preliminary finding</article-title>
<source>Clinical Linguistics &#x0026; Phonetics</source>
<year>2000</year>
<volume>14</volume>
<issue>4</issue>
<fpage>295</fpage>
<lpage>305</lpage>
<comment>
<ext-link ext-link-type="uri" xlink:href="https://doi.org/10.1080/02699200050023994">https://doi.org/10.1080/02699200050023994</ext-link>
</comment>
</nlm-citation>
</ref>
</ref-list>
</back>
</article>