<?xml version="1.0" encoding="ISO-8859-1"?><article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
<front>
<journal-meta>
<journal-id>0185-2760</journal-id>
<journal-title><![CDATA[Revista de la educación superior]]></journal-title>
<abbrev-journal-title><![CDATA[Rev. educ. sup]]></abbrev-journal-title>
<issn>0185-2760</issn>
<publisher>
<publisher-name><![CDATA[Asociación Nacional de Universidades e Instituciones de Educación Superior de la República Mexicana A.C.]]></publisher-name>
</publisher>
</journal-meta>
<article-meta>
<article-id>S0185-27602008000200009</article-id>
<title-group>
<article-title xml:lang="es"><![CDATA[Eficiencia terminal en la educación superior, la necesidad de un nuevo paradigma]]></article-title>
</title-group>
<contrib-group>
<contrib contrib-type="author">
<name>
<surname><![CDATA[López Suárez]]></surname>
<given-names><![CDATA[Adolfo]]></given-names>
</name>
<xref ref-type="aff" rid="A01"/>
</contrib>
<contrib contrib-type="author">
<name>
<surname><![CDATA[Albíter Rodríguez]]></surname>
<given-names><![CDATA[Ángel]]></given-names>
</name>
<xref ref-type="aff" rid="A02"/>
</contrib>
<contrib contrib-type="author">
<name>
<surname><![CDATA[Ramírez Revueltas]]></surname>
<given-names><![CDATA[Laura]]></given-names>
</name>
<xref ref-type="aff" rid="A03"/>
</contrib>
</contrib-group>
<aff id="A01">
<institution><![CDATA[,Universidad Nacional Autónoma de México (UNAM)  ]]></institution>
<addr-line><![CDATA[ ]]></addr-line>
</aff>
<aff id="A02">
<institution><![CDATA[,Universidad Nacional Autónoma de México (UNAM)  ]]></institution>
<addr-line><![CDATA[ ]]></addr-line>
</aff>
<aff id="A03">
<institution><![CDATA[,Universidad Autónoma del Estado de México  ]]></institution>
<addr-line><![CDATA[ ]]></addr-line>
</aff>
<pub-date pub-type="pub">
<day>00</day>
<month>06</month>
<year>2008</year>
</pub-date>
<pub-date pub-type="epub">
<day>00</day>
<month>06</month>
<year>2008</year>
</pub-date>
<volume>37</volume>
<numero>146</numero>
<fpage>135</fpage>
<lpage>151</lpage>
<copyright-statement/>
<copyright-year/>
<self-uri xlink:href="http://www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid=S0185-27602008000200009&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://www.scielo.org.mx/scielo.php?script=sci_abstract&amp;pid=S0185-27602008000200009&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://www.scielo.org.mx/scielo.php?script=sci_pdf&amp;pid=S0185-27602008000200009&amp;lng=en&amp;nrm=iso"></self-uri></article-meta>
</front><body><![CDATA[ <p align="justify"><font face="verdana" size="4">Estad&iacute;sticas</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="center"><font face="verdana" size="4"><b>Eficiencia terminal en la educaci&oacute;n superior, la necesidad de un nuevo paradigma</b></font></p>     <p align="center"><font face="verdana" size="2">&nbsp;</font></p>     <p align="center"><font face="verdana" size="2"><b>Adolfo L&oacute;pez Su&aacute;rez*, &Aacute;ngel Alb&iacute;ter Rodr&iacute;guez** y Laura Ram&iacute;rez Revueltas***</b></font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><i>* Doctor en Pedagog&iacute;a UNAM, </i>Correo e: <a href="mailto:adolfolopezsuarez@yahoo.com.mx">adolfolopezsuarez@yahoo.com.mx</a></font></p>     <p align="justify"><font face="verdana" size="2"><i>** Maestro en Ingenier&iacute;a (Mec&aacute;nica de Suelos) UNAM,</i> Correo e: <a href="mailto:aira48@hotmail.com">aira48@hotmail.com</a></font></p>     <p align="justify"><font face="verdana" size="2"><i>*** Ingeniera Civil UAEM&eacute;x</i>, Correo e: <a href="mailto:inglaura2003@yahoo.com.mx.">inglaura2003@yahoo.com.mx.</a></font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">Ingreso: 08/08/07    <br> Aprobado: 27/09/07</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Introducci&oacute;n</b></font></p>     <p align="justify"><font face="verdana" size="2">El trabajo humano produce riqueza, pero &eacute;ste siempre es limitado. A lo largo de la historia las sociedades han buscado aumentar la cantidad de productos obtenidos por unidad de trabajo invertido. Si el incremento de la producci&oacute;n no reduce la calidad, entonces tenemos la noci&oacute;n de eficiencia. Su aplicaci&oacute;n al campo de la educaci&oacute;n superior es directa: la principal funci&oacute;n de una instituci&oacute;n de educaci&oacute;n superior (IES) es la docencia y, por tanto, su eficiencia depende principalmente de la proporci&oacute;n de alumnos que logran egresar o titularse, respecto a aquellos que ingresaron. A este indicador se le ha llamado eficiencia terminal (ET) y constituye el concepto central de este trabajo. Luego de dos d&eacute;cadas de crecimiento explosivo de la matr&iacute;cula de educaci&oacute;n superior en M&eacute;xico, en la &uacute;ltima d&eacute;cada del siglo pasado la calidad comenz&oacute; a situarse como la primera prioridad. Para controlarla se crearon instancias como los Comit&eacute;s Interinstitucionales de Evaluaci&oacute;n de Educaci&oacute;n Superior en 1991, el Centro Nacional para la Evaluaci&oacute;n de la Educaci&oacute;n Superior en 1994, el Consejo para la Acreditaci&oacute;n de la Educaci&oacute;n Superior en 2000 y, en el &aacute;rea que aqu&iacute; nos interesa, el Consejo de Acreditaci&oacute;n de la Ense&ntilde;anza de la Ingenier&iacute;a en 1994. Asumiendo que la calidad puede al menos comenzar a ser controlada, podemos pasar a la eficiencia.</font></p>     <p align="justify"><font face="verdana" size="2">En el contexto internacional, la eficiencia de un sistema educativo <i>(educational efficiency) </i>ha sido definida por la Organizaci&oacute;n de las Naciones Unidas para la Educaci&oacute;n, la Ciencia y la Cultura de manera sucinta: "Grado en el cual un sistema educativo consigue optimizar la relaci&oacute;n inversi&oacute;n&#150;resultado en la educaci&oacute;n" (UNESCO, 2007). Observamos que son dos las variables que determinan la eficiencia de un sistema educativo: cu&aacute;nto se gasta en &eacute;l y qu&eacute; resultados se obtienen de su funcionamiento. La primera variable depende de la contralor&iacute;a administrativa, pero es en la segunda variable donde centramos la atenci&oacute;n en este trabajo, en la medici&oacute;n de cu&aacute;ntos productos aceptablemente terminados (egresados o titulados, en el caso de la educaci&oacute;n superior), obtiene una IES en relaci&oacute;n con los alumnos que en su momento ingresaron.</font></p>     <p align="justify"><font face="verdana" size="2">Entonces, si queremos evaluar la productividad de las IES, la ET es la medida reina. Es claro que si se trata de incrementarla, cualquier pol&iacute;tica de est&iacute;mulos debe partir de una definici&oacute;n operativa y de aplicaci&oacute;n uniforme en el sistema mexicano de educaci&oacute;n superior.</font></p>     <p align="justify"><font face="verdana" size="2">&iquest;Cu&aacute;l es la ET de las IES en M&eacute;xico? Echemos un vistazo a la danza de las cifras. En un estudio de 1997 la Organizaci&oacute;n para la Cooperaci&oacute;n y el Desarrollo Econ&oacute;micos (OCDE) sigui&oacute; durante veinte a&ntilde;os a una cohorte y encontr&oacute; que de los alumnos que ingresaron a primaria en 1976, 60% la terminaron, 40% concluy&oacute; la secundaria, 15% la educaci&oacute;n media superior y 2.5% la licenciatura (citado por Flores, 2006). Seg&uacute;n estimaci&oacute;n del mismo autor, en M&eacute;xico la eficiencia terminal de la primaria es del 91.8% y de secundaria del 79%. Seg&uacute;n la ANUIES, el promedio nacional de ET de la educaci&oacute;n superior, considerando titulaci&oacute;n, es del 39%, pero seg&uacute;n D&iacute;az de Coss&iacute;o ser&iacute;a del 12% (ambos citados en Mart&iacute;nez Rizo, 2001). Ahora veamos la carrera que aqu&iacute; nos interesa; tomando datos de los anuarios estad&iacute;sticos de la ANUIES, P&eacute;rez (2006) encuentra que en 2002 el &aacute;rea de ingenier&iacute;a civil tuvo una matr&iacute;cula de primer ingreso de 7,603 alumnos, egresaron 4,339 y se titularon 3,624. Por su parte, Romo (2005) reporta que dicha licenciatura tuvo un promedio de 44% de ET en el periodo 1999&#150;2003. &iquest;Qu&eacute; nos dicen estas cifras? &iquest;C&oacute;mo leerlas?</font></p>     <p align="justify"><font face="verdana" size="2">Veremos que aunque la noci&oacute;n de la ET es clara, su aplicaci&oacute;n concreta dista mucho de ser simple y, en ocasiones, a&uacute;n de demostrar coherencia l&oacute;gica. Nos interesa analizar c&oacute;mo se ha aplicado operativamente el concepto y qu&eacute; implicaciones tiene seguirlo utilizando as&iacute; en un sistema de educaci&oacute;n superior como el mexicano, que en los &uacute;ltimos a&ntilde;os ha sufrido profundas transformaciones, las cuales parecen lejos de detenerse. Observaremos que el enfoque que a&uacute;n sigue aplic&aacute;ndose en las estad&iacute;sticas de la educaci&oacute;n superior mexicana presenta serias deficiencias que lo han vuelto obsoleto e inadecuado, y que tales deficiencias han sido agudizadas por una pol&iacute;tica educativa que promueve la flexibilidad curricular y la movilidad estudiantil, por s&oacute;lo citar dos paradigmas educativos que pr&aacute;cticamente estuvieron ausentes en las IES mexicanas a lo largo de su historia, pero que se vienen imponiendo en los &uacute;ltimos a&ntilde;os.</font></p>     <p align="justify"><font face="verdana" size="2">El prop&oacute;sito de este art&iacute;culo consiste en proponer elementos para una nueva definici&oacute;n operacional de la eficiencia terminal aplicable a la educaci&oacute;n superior. Para evitar que todo concluya en un an&aacute;lisis meramente te&oacute;rico, aplicaremos ambos enfoques, el que ha venido aplic&aacute;ndose y el que se propone, y compararemos sus resultados mediante el estudio de un caso concreto: la licenciatura en ingenier&iacute;a civil de la UAEM&eacute;x a lo largo del medio siglo de vida que acaba de cumplir.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>&iquest;C&oacute;mo calculamos actualmente la eficiencia terminal?</b></font></p>     <p align="justify"><font face="verdana" size="2">Para comprender c&oacute;mo se ha venido aplicando este concepto en M&eacute;xico, conviene comenzar por una definici&oacute;n normativa. La Direcci&oacute;n General de Planeaci&oacute;n, Programaci&oacute;n y Presupuesto de la Secretar&iacute;a de Educaci&oacute;n P&uacute;blica (DGPPP/SEP) la define algebraicamente como 'la relaci&oacute;n porcentual entre los egresados de un nivel educativo dado y el n&uacute;mero de estudiantes que ingresaron al primer grado de este nivel educativo <i>n </i>a&ntilde;os antes." Con el fin de controlar el sesgo de estimaci&oacute;n por alumnos reprobados (repitencia), a <i>n </i>se le resta uno. En la evaluaci&oacute;n de instituciones educativas se ha dado tal importancia a la ET as&iacute; definida, que la DGPPP afirma que "...es sin lugar a dudas la manifestaci&oacute;n de la eficiencia del sistema educativo" (SEP, 1977).</font></p>     <p align="justify"><font face="verdana" size="2">Veamos la aplicaci&oacute;n de esta definici&oacute;n. En el caso que estudiaremos nos interesa un programa de licenciatura cuya duraci&oacute;n regular es actualmente de nueve semestres, aunque hace algunos a&ntilde;os fue de diez; para los c&aacute;lculos asumiremos una duraci&oacute;n de cinco a&ntilde;os. Ahora, tomemos como ejemplo a la generaci&oacute;n que egres&oacute; en 2006, aplicando la definici&oacute;n de la DGPPP/SEP tendr&iacute;amos:</font></p>     <p align="center"><font face="verdana" size="2">EficienciaTerminal(2006) = (Egreso(2006) / Ingreso(2002)) * 100</font></p>     <p align="justify"><font face="verdana" size="2">N&oacute;tese que la generaci&oacute;n realmente ingres&oacute; en 2001, pero para corregir por sesgo se toma a la generaci&oacute;n siguiente, con lo que la duraci&oacute;n del programa se reduce en un a&ntilde;o (n&#150;1) y, en consecuencia, para el c&aacute;lculo debemos tomar el a&ntilde;o siguiente, 2002. Por otra parte, multiplicamos por cien para obtener porcentajes, m&aacute;s f&aacute;ciles y directos de interpretar que las proporciones.</font></p>     <p align="justify"><font face="verdana" size="2">Para el caso de la educaci&oacute;n superior se han hecho propuestas ligeramente diferentes. Por ejemplo, puesto que sus programas educativos tienen distintas duraciones, para unificar el criterio de c&aacute;lculo otra dependencia de la misma Secretar&iacute;a, la Subsecretar&iacute;a Educaci&oacute;n Superior (SES/SEP) define a la eficiencia terminal, para el caso de carreras de cuatro a&ntilde;os o m&aacute;s, como el n&uacute;mero de egresados en un a&ntilde;o dado, dividido por el n&uacute;mero de alumnos de nuevo ingreso seis a&ntilde;os antes (SEP, 2006). Aqu&iacute; se procede al rev&eacute;s, en lugar de reducir en un a&ntilde;o la duraci&oacute;n del programa, a &eacute;sta se le aumenta un a&ntilde;o.</font></p>     <p align="justify"><font face="verdana" size="2">Ahora veamos un criterio internacional. Para evaluar la eficiencia terminal en la educaci&oacute;n terciaria de nivel 5 en la Clasificaci&oacute;n Internacional Normalizada de la Educaci&oacute;n (correspondiente a los estudios de t&eacute;cnico superior, licenciatura y maestr&iacute;a en el sistema educativo mexicano), la OCDE propone un &iacute;ndice de sobrevivencia <i>(Survival rate), </i>que en el nivel terciario se define como la proporci&oacute;n de alumnos de nuevo ingreso que completan con &eacute;xito un programa dado y se calcula dividiendo el n&uacute;mero de estudiantes que se grad&uacute;an entre los que ingresaron <i>n </i>a&ntilde;os antes, siendo <i>n </i>los a&ntilde;os de estudio a tiempo completo necesarios para acabar el programa (OECD, 2006). Nuevamente estamos ante un m&eacute;todo de cohorte transversal, aunque en este caso ni se aumentan ni se restan a&ntilde;os a la duraci&oacute;n regular del programa.</font></p>     <p align="justify"><font face="verdana" size="2">Las tres definiciones que hemos visto comparten el mismo concepto b&aacute;sico para el c&aacute;lculo de la ET: tomar el n&uacute;mero de graduados en un a&ntilde;o dado y dividirlo por <i>n, </i>que es la duraci&oacute;n regular del programa educativo. Lo que cambia entre las tres definiciones es precisamente el &uacute;ltimo valor: para la DGPPP/SEP <i>n </i>es la duraci&oacute;n regular del programa educativo menos uno; para la SES/SEP <i>n </i>vale seis a&ntilde;os (uno m&aacute;s que el promedio de duraci&oacute;n de un programa de licenciatura); y para la OCDE <i>n </i>es la duraci&oacute;n regular del programa educativo.</font></p>     <p align="justify"><font face="verdana" size="2">En nuestro caso de estudio tomaremos el enfoque DGPPP/SEP para analizar los problemas de aplicar este concepto. Sin embargo, aunque el espacio disponible no nos permite demostrarlo aqu&iacute;, afirmamos que con cualquiera de los tres m&eacute;todos que acabamos de ver se obtienen resultados que presentan las mismas anomal&iacute;as.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Limitaciones del m&eacute;todo de c&aacute;lculo actual</b></font></p>     <p align="justify"><font face="verdana" size="2">Las definiciones que han venido aplic&aacute;ndose suponen la existencia de cohortes transversales del tama&ntilde;o de una generaci&oacute;n regular. Desde hace un lustro, en un estudio sobre deserci&oacute;n, rezago y eficiencia terminal en la educaci&oacute;n superior, Mart&iacute;nez Rizo (2001) reconoce la dificultad de identificar cohortes reales y propone usar el t&eacute;rmino "cohortes aparentes", pues al contabilizar egresados en un periodo dado necesariamente se incluye a alumnos pertenecientes a otras generaciones. A&uacute;n m&aacute;s, tendr&iacute;amos que preguntarnos, hoy en d&iacute;a, ante la generalizaci&oacute;n del curriculum flexible en las IES, que supone el avance acad&eacute;mico a un ritmo individual, &iquest;cu&aacute;l es el concepto de generaci&oacute;n? &iquest;Cu&aacute;nto dura una generaci&oacute;n? Parece que aun el concepto de cohorte aparente ya no resulta viable.</font></p>     <p align="justify"><font face="verdana" size="2">Adem&aacute;s, debemos observar una constante: en todos los casos la ET se ha venido midiendo a partir de datos agrupados, en el mejor de los casos, de distribuciones de frecuencias. As&iacute;, por ejemplo, la SEP obtiene sus datos del Cuestionario 911, pero este instrumento, ya sea que se aplique al inicio o a fin de cursos, no identifica alumnos individuales. La ANUIES lo hace de los reportes que le env&iacute;a cada IES y tampoco identifica alumnos individuales. Incluso al interior de cada IES, tambi&eacute;n sus organismos acad&eacute;micos reportan datos agrupados. En ning&uacute;n caso se dispone de bases de datos en que los registros sean individualizados y, en consecuencia, no es posible controlar variables que afectan determinantemente el c&aacute;lculo de la ET. En general, con el esquema actual no es posible controlar la trayectoria de cada estudiante individual a lo largo del programa.</font></p>     <p align="justify"><font face="verdana" size="2">Veamos algunos ejemplos de las variables que afectan al c&aacute;lculo de la ET en la educaci&oacute;n superior.</font></p>     <p align="justify"><font face="verdana" size="2">Una primera variable es la tasa de crecimiento de la matr&iacute;cula. Durante al menos dos d&eacute;cadas, a partir de los setenta del siglo pasado, la matr&iacute;cula de educaci&oacute;n superior creci&oacute; a tasas enormes, pero despu&eacute;s, como producto de una s&oacute;lida pol&iacute;tica que estableci&oacute; l&iacute;mites al ingreso (llamados techos) para cada programa educativo, el crecimiento se redujo notablemente hasta estabilizar la matr&iacute;cula. La etapa de crecimiento acelerado produjo bajas tasas de titulaci&oacute;n, fen&oacute;meno que se agudiz&oacute; hasta llegar a reconocerse a nivel nacional como un problema prioritario de la educaci&oacute;n superior. Para tratar de estimular el incremento de las tasas de titulaci&oacute;n, se crearon nuevas opciones y programas para alentar la obtenci&oacute;n del t&iacute;tulo por quienes ten&iacute;an incluso d&eacute;cadas de haber egresado sin titularse. Todo esto condujo a situaciones t&eacute;cnicamente absurdas, como el hecho de que una IES presente tasas de ET superiores al 100%, como veremos en nuestro caso de estudio. Debemos insistir en una deficiencia adicional: con el m&eacute;todo de c&aacute;lculo actual, en ning&uacute;n caso podemos saber cu&aacute;nto tiempo se tard&oacute; cada individuo, o todo el grupo en promedio, en titularse.</font></p>     <p align="justify"><font face="verdana" size="2">Otra variable que afecta al c&aacute;lculo de la ET es la flexibilidad curricular, que supone como una precondici&oacute;n b&aacute;sica la libertad del alumno &#150;desde luego dentro de rangos determinados&#150; de elegir la carga acad&eacute;mica que tomar&aacute; en cada ciclo. Un alumno dotado y motivado puede tomar cargas m&aacute;ximas y concluir un programa educativo en mucho menos tiempo que la media de la poblaci&oacute;n, mientras que otro podr&aacute; tomar cargas acad&eacute;micas m&iacute;nimas y por tanto tardar&aacute; mucho m&aacute;s en concluir el programa. Si la flexibilidad curricular se aplica realmente, entonces llegamos a una situaci&oacute;n sorprendente: ya no tiene sentido seguir hablando de que, por ejemplo, un programa de licenciatura dura cuatro a&ntilde;os, o cinco, o nueve semestres. M&aacute;s a&uacute;n, se torna contradictorio establecer plazos para obtener el t&iacute;tulo. Y resulta que la ET se ha venido calculando, en todos los casos, en funci&oacute;n del n&uacute;mero de a&ntilde;os que dura el programa.</font></p>     <p align="justify"><font face="verdana" size="2">En tercer lugar mencionaremos a la movilidad estudiantil. Quiz&aacute; la mejor forma de apreciar la naturaleza e importancia de este concepto sea referirnos al <i>European Community Action Scheme for the Mobility of University Students, </i>mejor conocido por su acr&oacute;nimo como el Programa Erasmus, creado en 1987 por la asociaci&oacute;n estudiantil <i>Aegee Europe </i>con el objetivo de mejorar la calidad y fortalecer la dimensi&oacute;n europea de la educaci&oacute;n superior, fomentando la cooperaci&oacute;n transnacional entre universidades, estimulando la movilidad en Europa y mejorando la transparencia y el pleno reconocimiento de los estudios (Aegee, 2007). Posiblemente inspirados en esta experiencia pionera, desde hace a&ntilde;os en M&eacute;xico se realizan esfuerzos por desarrollar programas &#150;a&uacute;n incipientes&#150; de movilidad estudiantil. Un requisito m&iacute;nimo para alcanzar una aut&eacute;ntica movilidad estudiantil consiste en favorecer la revalidaci&oacute;n mediante la homologaci&oacute;n &#150;nacional e internacional&#150; de los curricula de los programas educativos. Pero a&uacute;n en nuestras condiciones actuales, no son pocos los alumnos que inician sus estudios en una IES y, por diversas condiciones personales, deben concluirlos en otra diferente mediante la revalidaci&oacute;n de estudios. Lo importante aqu&iacute; es que impulsar la movilidad estudiantil supone que los estudiantes puedan &#151;realmente deban&#151; tomar cursos en diferentes IES durante su tr&aacute;nsito por el programa educativo, lo que aumentar&aacute; el caso de alumnos que cambien de instituci&oacute;n para concluir sus estudios. Esto afecta al c&aacute;lculo de la ET, pues un estudiante que revalide digamos dos a&ntilde;os, terminar&aacute; el programa en menos tiempo del regular y, lo m&aacute;s importante, no contar&aacute; como nuevo ingreso dentro de su cohorte, lo que naturalmente infla el valor de la ET.</font></p>     <p align="justify"><font face="verdana" size="2">Una &uacute;ltima variable que analizaremos aqu&iacute; es un concepto que hasta ahora no se ha formalizado en nuestras IES. La transferencia de egresados de programas de T&eacute;cnico Superior Universitario (tambi&eacute;n llamados Profesional Asociado) que funcionan principalmente en las Universidades Tecnol&oacute;gicas, pero tambi&eacute;n en las universidades, hacia programas de licenciatura, lo que supone &#151;en Nuestros t&eacute;rminos actuales&#150; revalidar de cinco a seis semestres al alumno transferido. Aunque la mayor&iacute;a de legislaciones universitarias no permitan revalidar en bloque hasta las dos terceras partes de cr&eacute;ditos de un programa, la transferencia de t&eacute;cnicos superiores universitarios hacia programas de licenciatura, formal o informalmente, ya viene funcionando en el IPN y en varias otras IES. Por supuesto que la transferencia afecta dr&aacute;sticamente al c&aacute;lculo de la ET cuando se aplican los m&eacute;todos actuales, pues sin disponer de datos individualizados resulta imposible determinar cu&aacute;ntos egresados entraron al programa desde el principio y cu&aacute;ntos fueron transferidos.</font></p>     <p align="justify"><font face="verdana" size="2">El hecho es que sin controlar variables como estas no pueden conseguirse m&aacute;s que estimaciones muy gruesas de la ET, que a veces incluso no tienen sentido. En tales condiciones, hablar de controlar el sesgo se convierte en un eufemismo. Parece que requerimos un nuevo paradigma.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Un enfoque alternativo</b></font></p>     <p align="justify"><font face="verdana" size="2">En un estudio realizado en la California State University (CSU), Garc&iacute;a (1994) presenta un perfil de tasas de graduaci&oacute;n y tiempo para graduarse realizado con estudiantes que ingresaron desde el inicio del programa <i>(freshmen) </i>y con otros provenientes de <i>community college (transfer), </i>modalidad similar a nuestros programas de t&eacute;cnico superior universitario. El perfil propuesto incluye: 1. La proporci&oacute;n de estudiantes de nuevo ingreso que logran graduarse, que ser&iacute;a la ET de toda la cohorte; 2. La distribuci&oacute;n de grados por a&ntilde;o; 3. El promedio de tiempo para graduarse y; 4. El promedio de tiempo por suspensi&oacute;n de estudios (Garc&iacute;a, 1994). A partir de este trabajo propondremos un enfoque alternativo para evaluar la ET.</font></p>     <p align="justify"><font face="verdana" size="2">Consideradas las diferencias con nuestros programas de educaci&oacute;n superior, el modelo puede ser aplicado a nuestro caso de estudio, con excepci&oacute;n de la cuarta categor&iacute;a, pues definitivamente no disponemos de los datos sobre abandono temporal necesarios para el an&aacute;lisis; de hecho, el abandono temporal de estudios no es una figura reconocida en la mayor&iacute;a de nuestras IES.</font></p>     <p align="justify"><font face="verdana" size="2">Sin embargo, debemos insistir en la naturaleza de los datos insumo. Los c&aacute;lculos necesarios para este enfoque no pueden realizarse a partir de distribuciones de frecuencias. Se requiere contar con una base de datos en la que cada registro corresponda a un alumno individual. En los &uacute;ltimos a&ntilde;os las IES han venido desarrollando en mayor o menor medida, y con una gran variabilidad de criterios, bases de datos de este tipo para sus sistemas de control escolar, pero a&uacute;n no disponemos de un sistema normalizado.</font></p>     <p align="justify"><font face="verdana" size="2">Pasemos, entonces, a comparar ambos enfoques en el an&aacute;lisis de la ET en un caso concreto.</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Estudio de un caso: ingenier&iacute;a civil en la UAEM&eacute;x </b></font></p>     <p align="justify"><font face="verdana" size="2"><b>El m&eacute;todo y los datos</b></font></p>     <p align="justify"><font face="verdana" size="2">Al resumir las reglas para el pensamiento racional, R. Descartes (1996) afirm&oacute; que casi cualquier controversia entre fil&oacute;sofos podr&iacute;a resolverse si siempre estuvieran de acuerdo en el significado de las palabras. En t&eacute;rminos m&aacute;s actuales podr&iacute;amos decir que las controversias t&eacute;cnicas pueden resolverse con la definici&oacute;n operacional de las variables.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">Una definici&oacute;n operacional especifica las operaciones necesarias para observar, medir y registrar una variable con criterios uniformes, aporta claridad conceptual al facilitar la comprensi&oacute;n uniforme de lo que entendemos por la variable y al indicar c&oacute;mo se midi&oacute; y, de este modo, posibilita que otros puedan medirla para replicar un estudio y comprobar sus resultados, condici&oacute;n indispensable en la ciencia. Sin embargo, como todo, definir operacionalmente tiene un costo que hay que pagar, y en este caso es la restricci&oacute;n del significado. A mayor polisemia, menor precisi&oacute;n. En este sentido se ha afirmado que definir es rodear con un muro de hechos un laberinto de palabras.</font></p>     <p align="justify"><font face="verdana" size="2">Independientemente del tipo de variable de que se trate, una definici&oacute;n operacional incluye al menos cuatro elementos: 1. Una definici&oacute;n constitutiva, similar a la que proporcionan los diccionarios de la lengua, que indique c&oacute;mo conceptuamos la variable; 2. La fuente de la que se obtuvieron los datos (no podemos dar la misma confianza al mero reporte verbal que a los documentos duros); 3. Si la variable es continua o discreta y si fue transformada al medirla y; 4. El nivel en que se midi&oacute; la variable (nominal, ordinal, intervalar o de raz&oacute;n); los dos &uacute;ltimos elementos indicar&aacute;n qu&eacute; operaciones aritm&eacute;ticas pueden realizarse sobre ella y nos librar&aacute;n de errores como calcular la media del sexo <i>(cf. </i>L&oacute;pez, 2007).</font></p>     <p align="justify"><font face="verdana" size="2">Antes de presentar los datos, comencemos por definir la poblaci&oacute;n que involucr este estudio.</font></p>     <p align="justify"><font face="verdana" size="2"><b>Universo de estudio</b></font></p>     <p align="justify"><font face="verdana" size="2">Se trabaj&oacute; con 3,634 expedientes de personas que en alg&uacute;n momento y, como veremos al analizar las fuentes de datos, bajo diversas circunstancias, han estado matriculados en la licenciatura en ingenier&iacute;a civil desde su creaci&oacute;n en 1956 hasta el 31 de diciembre de 2006.</font></p>     <p align="justify"><font face="verdana" size="2">Ahora pasemos a definir operacionalmente las variables medidas. Se trabaj&oacute; con cinco variables. Definiremos su concepto, tipo y nivel de medici&oacute;n; para facilitar la exposici&oacute;n, las fuentes se definen despu&eacute;s.</font></p>     <p align="justify"><font face="verdana" size="2"><b>Ingreso</b></font></p>     <p align="justify"><font face="verdana" size="2">Estudiantes que formaron parte de una nueva generaci&oacute;n o promoci&oacute;n. De 1956 hasta 1969 hubo una nueva cada a&ntilde;o, pero a partir de 1970 ha habido una por semestre; en este &uacute;ltimo periodo se sumaron las dos para unificar un dato de nuevo ingreso por a&ntilde;o. Se trata de a&ntilde;os escolares, cuyo inicio ha variado desde enero hasta marzo en el periodo que se estudia. Algunos estudiantes se encontraron m&aacute;s de una vez en los registros consultados, en cuyo caso se captur&oacute; el a&ntilde;o m&aacute;s antiguo, eliminando el o los registros duplicados. Por otra parte, el sistema de control escolar no permite identificar a los alumnos que revalidaron asignaturas ni a los de transferencia (aquellos que no ingresaron desde el primer ciclo escolar, sino que pasaron de programas de t&eacute;cnico superior universitario), por lo que en nueve expedientes se carece de este dato. Adem&aacute;s, en la facultad funciona un tronco com&uacute;n para varias licenciaturas, por lo que si no dispusi&eacute;ramos de datos personalizados ser&iacute;a imposible hacer c&aacute;lculos directos, y habr&iacute;a que recurrir a c&aacute;lculos de ET para varias carreras agrupadas o a estimaciones. Es una variable discreta medida en el nivel nominal.</font></p>     <p align="justify"><font face="verdana" size="2"><b>Egreso</b></font></p>     <p align="justify"><font face="verdana" size="2">Son personas que recibieron certificado de estudios completo. Se midi&oacute; con los mismos criterios que el ingreso.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2"><b>Titulaci&oacute;n</b></font></p>     <p align="justify"><font face="verdana" size="2">Son personas que recibieron t&iacute;tulo profesional de ingeniero civil expedido por la universidad. En este caso se mide por a&ntilde;os calendario, pues no resultar&iacute;a viable ajustarlo a ciclos escolares, en virtud de los cambios que ha sufrido, y sigue sufriendo, el calendario escolar. Es una variable discreta medida en el nivel nominal y fue categorizada seg&uacute;n la opci&oacute;n de titulaci0n, a saber: 1. Tesis individual; 2. Excepci&oacute;n (opci&oacute;n no contemplada en la reglamentaci&oacute;n vigente de la UAEM&eacute;x al momento de la titulaci&oacute;n); 3. Memoria; 4. Tesina; 5. Examen general de egreso de licenciatura (EGEL) aplicado por Ceneval; 6. Tesis en grupo (2&#150;3 personas) y; 7. Ensayo</font></p>     <p align="justify"><font face="verdana" size="2"><b>Fecha de nacimiento</b></font></p>     <p align="justify"><font face="verdana" size="2">D&iacute;a, mes y a&ntilde;o en que naci&oacute; la persona. En 92 casos ocurri&oacute; que en las fuentes s&oacute;lo pudo localizarse el a&ntilde;o y entonces, para salvar el registro y reducir el error en los c&aacute;lculos, se anot&oacute; 30 de junio en la base de datos. Es una variable continua medida a nivel de raz&oacute;n. Los tiempos obtenidos a partir de esta variable se calcularon en a&ntilde;os con aproximaci&oacute;n a un decimal.</font></p>     <p align="justify"><font face="verdana" size="2"><b>Sexo</b></font></p>     <p align="justify"><font face="verdana" size="2">Condici&oacute;n de la persona, que en este trabajo se identific&oacute; por su nombre, pues el sexo del alumno no se registra en la mayor&iacute;a de las fuentes estudiadas. Es una variable discreta medida a nivel nominal en las categor&iacute;as: masculino, femenino.</font></p>     <p align="justify"><font face="verdana" size="2">Fuente de los datos: Las fuentes de que se obtuvieron los datos se muestran en la <a href="/img/revistas/resu/v37n146/a9t1.jpg" target="_blank">Tabla 1</a>.</font></p>     <p align="justify"><font face="verdana" size="2">Una simple mirada a este resumen deja claras nuestras deficiencias administrativas, al concentrar datos sobre medio siglo de existencia de la facultad, encontramos que ninguna fuente contiene los datos completos del universo de estudio. Esto apunta, desde ya, a la necesidad de revisar nuestros sistemas de control escolar, al menos en lo referente a su base de datos. En todo caso, ahora tenemos elementos para juzgar la confiabilidad de los datos a partir de los cuales realizaremos los an&aacute;lisis.</font></p>     <p align="justify"><font face="verdana" size="2">Ahora presentemos los principales datos obtenidos en el estudio. La <a href="/img/revistas/resu/v37n146/a9t2.jpg" target="_blank">Tabla 2</a> contiene el concentrado de datos sobre ingreso, egreso y titulaci&oacute;n por sexo.</font></p>     <p align="justify"><font face="verdana" size="2">Estos datos ser&aacute;n el insumo para muchos de los c&aacute;lculos que haremos. Por cierto, en la distribuci&oacute;n por sexo vemos que apenas 9.8% del total de la matr&iacute;cula es femenina. Desde la creaci&oacute;n de la carrera tuvieron que pasar seis a&ntilde;os para que ingresara la primera mujer y ocho m&aacute;s para lo hiciera la segunda; s&oacute;lo a los 23 a&ntilde;os de creada la carrera una mujer obtuvo el t&iacute;tulo de ingeniero civil. Pero pasemos a la ET.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>La eficiencia terminal desde el enfoque vigente</b></font></p>     <p align="justify"><font face="verdana" size="2">Comencemos por aplicar la definici&oacute;n de la DGPPP/SEP a los datos de la <a href="/img/revistas/resu/v37n146/a9t2.jpg" target="_blank">Tabla 2</a>. Tomando el ejemplo que ya vimos arriba, calculemos la ET como la relaci&oacute;n Egreso/Titulaci&oacute;n:</font></p>     <p align="center"><font face="verdana" size="2">EficienciaTermmal(2006) = (Egreso(2006) / Ingreso(2002)) * 100</font></p>     <p align="center"><font face="verdana" size="2"><b>Sustituyendo literales por valores tomados de la Tabla 1 tenemos:</b></font></p>     <p align="center"><font face="verdana" size="2">EficienciaTerminal(2006) = (20/115)* 100 = 17.4%</font></p>     <p align="justify"><font face="verdana" size="2">Esto es, los alumnos que egresaron en 2006 representan el 17.4% de la matr&iacute;cula de nuevo ingreso correspondiente a cuatro a&ntilde;os antes. Si afirm&aacute;semos que 82.6% del ingreso de esta cohorte no egres&oacute;, que se perdi&oacute;, estar&iacute;amos ante una interpretaci&oacute;n muy cuestionable, pues algunos estudiantes pudieron egresar m&aacute;s tarde. Si, por otro lado, afirm&aacute;ramos que todos los alumnos que egresaron en 2006 ingresaron en 2002, tampoco ser&iacute;a cierto. &iquest;Qu&eacute; significa entonces, en t&eacute;rminos estrictos, el valor obtenido de 17.4% para la ET?</font></p>     <p align="justify"><font face="verdana" size="2">Ahora calculemos la ET como la relaci&oacute;n Titulaci&oacute;n/Ingreso, aplicando la misma f&oacute;rmula, en cuyo caso encontramos ET=20.9%, que es mayor que la correspondiente al egreso. Tendr&iacute;amos que interpretar este porcentaje diciendo que la ET en titulaci&oacute;n fue mayor que la ET en egreso. Comienzan los problemas de coherencia l&oacute;gica.</font></p>     <p align="justify"><font face="verdana" size="2">M&aacute;s a&uacute;n, podemos aplicar la misma f&oacute;rmula para la relaci&oacute;n Titulaci&oacute;n/Egreso, obteniendo para los a&ntilde;os del ejemplo ET=63.2%, que ser&iacute;a la proporci&oacute;n de egresados en 2002 que llega a titularse cuatro a&ntilde;os despu&eacute;s. Los cuestionamientos posibles son los mismos que en los dos casos anteriores.</font></p>     <p align="justify"><font face="verdana" size="2">Pero al analizar todas las cohortes posibles en el periodo de medio siglo que estudiamos los problemas de interpretaci&oacute;n aumentan. Los resultados de aplicar el enfoque de la DGPPP/SEP a nuestro caso se resumen en la <a href="/img/revistas/resu/v37n146/a9t3.jpg" target="_blank">Tabla 3</a>. Las celdas vac&iacute;as indican que no procede el c&aacute;lculo, ya sea porque el dividendo o el divisor es cero.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">Un simple vistazo nos deja ver, ahora de manera contundente, las deficiencias insalvables de este m&eacute;todo al aplicarlo a un estudio de caso. Son varios los a&ntilde;os que tienen porcentajes de ET superiores al 100%. El caso extremo es 1968, a&ntilde;o en que la relaci&oacute;n Titulaci&oacute;n/Egreso alcanza el 466.7% (!) pues en ese a&ntilde;o se otorgaron 14 t&iacute;tulos y cuatro a&ntilde;os antes s&oacute;lo egresaron 3 alumnos. Podr&iacute;amos pensar que este tipo de errores se compensar&iacute;a al estabilizarse el crecimiento, pero los promedios de todo el periodo (sin considerar las celdas vac&iacute;as, pues si las incluy&eacute;ramos con valor de cero sesgar&iacute;amos el resultado, ahora hacia la izquierda) demuestran que no es as&iacute;, seg&uacute;n se observa al pie de la Tabla 3. Encontramos que el promedio de ET en el periodo, calculada como relaci&oacute;n titulaci&oacute;n/egreso es superior al 100%, lo que, necesariamente, tendr&iacute;a que interpretarse diciendo que en promedio se titularon m&aacute;s estudiantes de los que egresaron dentro su cohorte.</font></p>     <p align="justify"><font face="verdana" size="2">M&aacute;s adelante, cuando contrastemos con el otro enfoque, comprobaremos que los porcentajes de ET simplemente est&aacute;n inflados por el m&eacute;todo de c&aacute;lculo.</font></p>     <p align="justify"><font face="verdana" size="2">En resumen, aplicado a nuestro caso, es claro que el m&eacute;todo de c&aacute;lculo propuesto por la DGPPP/SEP eleva artificialmente las tasas de eficiencia terminal hasta llegar a la incoherencia. Es claro que aplicando las definiciones de la SES y de la OCDE llegar&iacute;amos a resultados similares. Se justifica buscar un nuevo enfoque.</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Probemos un enfoque alternativo</b></font></p>     <p align="justify"><font face="verdana" size="2">Ahora, sobre los mismos datos de nuestro caso de estudio, realicemos un an&aacute;lisis adaptando a nuestras condiciones el enfoque que Garc&iacute;a utiliz&oacute; en la Universidad Estatal de California, citado arriba. Las limitaciones de espacio nos impiden presentar completa la base de datos, que contiene 3,634 registros. Tendremos que limitarnos a presentar los resultados. Comencemos pues a construir el perfil de ET para nuestro caso de estudio.</font></p>     <p align="justify"><font face="verdana" size="2"><b>1. Proporciones de estudiantes que egresan y que se titulan</b></font></p>     <p align="justify"><font face="verdana" size="2">De la <a href="/img/revistas/resu/v37n146/a9t2.jpg" target="_blank">Tabla 2</a> conocemos los siguientes totales para el periodo 1956&#150;2006:</font></p>     <p align="center"><font face="verdana" size="2"><img src="/img/revistas/resu/v37n146/a9c1.jpg"></font></p>     <p align="justify"><font face="verdana" size="2">De donde obtenemos directamente los siguientes valores de ET para todo el periodo:</font></p>     ]]></body>
<body><![CDATA[<p align="center"><font face="verdana" size="2"><img src="/img/revistas/resu/v37n146/a9c2.jpg"></font></p>     <p align="justify"><font face="verdana" size="2">Cuya interpretaci&oacute;n ser&iacute;a ahora simple y directa: en el medio siglo que ha cumplido la licenciatura en ingenier&iacute;a civil de la UAEM&Eacute;X, 32.2% de los alumnos que ingresaron lograron terminarla recibiendo certificado de estudios completo y 23.2% ganaron su t&iacute;tulo profesional; de los que terminaron la carrera, 72.0% lograron titularse.</font></p>     <p align="justify"><font face="verdana" size="2">Aqu&iacute; podr&iacute;a cuestionarse que al incluir a todos los alumnos de nuevo ingreso se reducen las tasas Egreso/Ingreso y Titulaci&oacute;n/Ingreso. Para corregir este sesgo bastar&iacute;a con eliminar de la suma de alumnos de nuevo ingreso a las &uacute;ltimas cuatro generaciones (2003&#150;2006), con lo que obtendr&iacute;an tasas mayores, a saber:</font></p>     <p align="center"><font face="verdana" size="2"><img src="/img/revistas/resu/v37n146/a9c3.jpg"></font></p>     <p align="justify"><font face="verdana" size="2">Pero cuidado. Aplicar esta correcci&oacute;n supone asumir las suposiciones que ya demostramos como inv&aacute;lidas. M&aacute;s a&uacute;n, el periodo no tiene que abarcar toda la historia del programa, como ocurre en nuestro caso de estudio, lo que compensar&iacute;a el efecto de tomar la suma completa.</font></p>     <p align="justify"><font face="verdana" size="2">Evaluar la ET con estas simples relaciones supone necesariamente hacer estimaciones con un cierto grado de error. En todo caso, para reducir el margen de error creemos conveniente normalizar los par&aacute;metros de ET entre diferentes programas y diferentes IES tomando los totales sin introducir correcciones como las que acabamos de ver.</font></p>     <p align="justify"><font face="verdana" size="2">Pero existen alternativas para mejorar la evaluaci&oacute;n de la ET. Continuemos construyendo el perfil.</font></p>     <p align="justify"><font face="verdana" size="2"><b>2. Ingreso, egreso y de la titulaci&oacute;n por a&ntilde;o</b></font></p>     <p align="justify"><font face="verdana" size="2">Una segunda categor&iacute;a de an&aacute;lisis se puede obtener transformando en porcentajes por a&ntilde;o respecto al total del periodo los datos de la <a href="/img/revistas/resu/v37n146/a9t2.jpg" target="_blank">Tabla 2</a>. En la <a href="/img/revistas/resu/v37n146/a9g1.jpg" target="_blank">Gr&aacute;fica 1</a> se muestra el comportamiento del ingreso, egreso y titulaci&oacute;n durante el periodo.</font></p>     <p align="justify"><font face="verdana" size="2">Puesto que las tres variables est&aacute;n transformadas a una misma escala, podemos compararlas directamente. As&iacute;, aunque compleja e intrincada a primera vista por la gran cantidad de informaci&oacute;n que contiene, esta gr&aacute;fica nos permite ver claramente que existe una gran estabilidad en los tres momentos de la trayectoria acad&eacute;mica.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">En el ingreso s&oacute;lo se aprecian dos cambios relativamente fuertes, una ca&iacute;da en 1978 y un salto en 1981, que pronto se estabilizaron. Aparte de estas fluctuaciones puntuales, es realmente notable la estabilidad de la matr&iacute;cula. Basta con recordar que en 1956 la matr&iacute;cula nacional de educaci&oacute;n superior era de 23 mil quinientos alumnos y cincuenta a&ntilde;os despu&eacute;s rebasaba los 2.1 millones s&oacute;lo en la modalidad universitaria: se multiplic&oacute; casi 90 veces en el periodo que abarca este estudio. Un simple vistazo a la gr&aacute;fica que analizamos nos permite ver que la carrera de ingenier&iacute;a civil en la UAEMEX se mantuvo completamente al margen de este explosivo crecimiento que sufri&oacute; la educaci&oacute;n superior en M&eacute;xico.</font></p>     <p align="justify"><font face="verdana" size="2">Como pod&iacute;a esperarse por el comportamiento del ingreso, el egreso tambi&eacute;n muestra un comportamiento estable, una vez que se estabiliz&oacute; a finales de los 60's &#150;en el periodo de una sola generaci&oacute;n.</font></p>     <p align="justify"><font face="verdana" size="2">La titulaci&oacute;n muestra ca&iacute;das moderadas en 1980, 1981 y 1995, pero en general mantiene la misma tendencia que el ingreso y el egreso.</font></p>     <p align="justify"><font face="verdana" size="2">De hecho, a partir de la segunda mitad de la d&eacute;cada de los sesentas se observa que las tres l&iacute;neas &#150;ingreso, egreso y titulaci&oacute;n&#150; se mezclan entre si, indicando que sus tendencias son muy similares y caracteriz&aacute;ndose por la estabilidad. En todo caso, debemos resaltarlo, esta carrera es un caso de excepci&oacute;n en la evoluci&oacute;n de las IES mexicanas en la segunda mitad del siglo XX.</font></p>     <p align="justify"><font face="verdana" size="2">La ET se ha vuelto un concepto m&aacute;s claro y objetivo.</font></p>     <p align="justify"><font face="verdana" size="2"><b>3. El tiempo en la trayectoria escolar</b></font></p>     <p align="justify"><font face="verdana" size="2">Como tercera categor&iacute;a del perfil analizaremos el tiempo que consume el estudiante para egresar y para titularse, ambos contados en a&ntilde;os desde el primer ingreso a la carrera. Aqu&iacute; termina la posibilidad de utilizar las distribuciones de frecuencias de la <a href="/img/revistas/resu/v37n146/a9t2.jpg" target="_blank">Tabla 2 </a>con las que hemos venido trabajando. Ahora se requiere calcular para cada estudiante, a partir de los registros de la base de datos, el tiempo que requiri&oacute; para egresar y para titularse. Para esto basta con restar del a&ntilde;o de egreso el a&ntilde;o de ingreso. Debe observarse que con este simple m&eacute;todo se controlan los casos de revalidaci&oacute;n o transferencia a que hemos venido haciendo referencia, lo que da como resultado que haya alumnos que egresaron en un tiempo menor a la duraci&oacute;n regular de la carrera. Lo mismo ocurre con la titulaci&oacute;n.</font></p>     <p align="justify"><font face="verdana" size="2">Puesto que disponemos de una base de datos en que se registra para cada estudiante, en los casos procedentes, los a&ntilde;os que tard&oacute; en egresar y en titularse, podr&iacute;amos calcular la tendencia central, variabilidad o cualquier otro par&aacute;metro. Pero para simplificar el an&aacute;lisis presentamos solamente el siguiente de la <a href="#t4">Tabla 4</a>.</font></p>     <p align="center"><font size="2" face="verdana"><a name="t4"></a></font></p>     <p align="center"><font face="verdana" size="2"><img src="/img/revistas/resu/v37n146/a9t4.jpg"></font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">Vemos que tanto en el egreso como en el ingreso es clara la tendencia de las proporciones a acumularse en la parte superior, lo que indica que la gran mayor&iacute;a de los estudiantes tiene una trayectoria escolar de corta duraci&oacute;n. La duraci&oacute;n regular de la carrera ha oscilado entre nueve y diez semestres. Pues bien, los datos muestran que tres de cada cuatro egresados (74.5%) termin&oacute; su carrera en seis a&ntilde;os o menos y 92.0% lo hizo en ocho o menos a&ntilde;os.</font></p>     <p align="justify"><font face="verdana" size="2">En cuanto a la titulaci&oacute;n, el reglamento actual establece que para titularse el estudiante dispone de dos veces la duraci&oacute;n regular de la carrera, contando desde su primer ingreso; si consideramos que la carrera dura nueve semestres, entonces 64.7% de los titulados cumplieron el plazo al titularse en nueve a&ntilde;os o menos; si aceptamos que dura diez semestres, entonces la proporci&oacute;n sube al 72.1%.</font></p>     <p align="justify"><font face="verdana" size="2">Detendremos aqu&iacute; el an&aacute;lisis de este elemento.</font></p>     <p align="justify"><font face="verdana" size="2"><b>4. Las opciones de titulaci&oacute;n</b></font></p>     <p align="justify"><font face="verdana" size="2">Terminaremos con una cuarta categor&iacute;a del perfil, analizando la modalidad mediante la cual han obtenido su t&iacute;tulo los ingenieros civiles formados en la UAEM&eacute;x. A partir de la hip&oacute;tesis de que una de las causas m&aacute;s importantes del bajo &iacute;ndice de titulaci&oacute;n era que la elaboraci&oacute;n de tesis y la presentaci&oacute;n del examen profesional constitu&iacute;a entonces casi la &uacute;nica modalidad que establec&iacute;an las IES para la obtenci&oacute;n del t&iacute;tulo, L&oacute;pez, Salvo y Garc&iacute;a (1989) reportaron un estudio en el que se planteaba la necesidad de diversificar las opciones de titulaci&oacute;n. Este estudio es representativo de la tendencia que durante los noventas se present&oacute; en las IES y que generaliz&oacute; la creaci&oacute;n de nuevas modalidades para obtener el t&iacute;tulo.</font></p>     <p align="justify"><font face="verdana" size="2">Est&aacute; tendencia lleg&oacute; a la UAEM&eacute;x a finales del a&ntilde;o 2000 con la publicaci&oacute;n de un nuevo reglamento que aumentaba a diez el n&uacute;mero de opciones de titulaci&oacute;n. Actualmente el estudiante de ingenier&iacute;a dispone de nueve opciones para titularse, s&oacute;lo una (obra art&iacute;stica) no aplica en la carrera. La <a href="#t5">Tabla 5</a> muestra las opciones que se han elegido durante el periodo estudiado.</font></p>     <p align="center"><font face="verdana" size="2"><a name="t5"></a></font></p>     <p align="center"><font face="verdana" size="2"><img src="/img/revistas/resu/v37n146/a9t5.jpg"></font></p>     <p align="justify"><font face="verdana" size="2">Estos datos son contundentes. M&aacute;s de la mitad de egresados se ha titulado con una tesis individual y nueve de cada diez egresados ha obtenido su t&iacute;tulo con una tesis. Pero agregando las opciones de memoria, tesina y ensayo, entonces tenemos que el 95.5% de los t&iacute;tulos se ha obtenido elaborando un trabajo escrito. Apenas 3.1% de los egresados se han titulado presentando el Examen General de Egreso de Licenciatura.</font></p>     <p align="justify"><font face="verdana" size="2">Resalta el hecho de que s&oacute;lo la opci&oacute;n de titulaci&oacute;n por aprovechamiento acad&eacute;mico no se ha hecho efectiva en la licenciatura en ingenier&iacute;a civil. Queda clara la tendencia a asignar bajas calificaciones, que es una caracter&iacute;stica proverbial de la carrera: en los corrillos acad&eacute;micos dentro de la facultad suele decirse que "m&aacute;s de seis, es vanidad", y vemos que no es una simple broma.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">Con esto concluimos de bosquejar, realmente de ejemplificar, los elementos que podr&iacute;an configurar un perfil de ET para un programa de educaci&oacute;n superior.</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Conclusiones</b></font></p>     <p align="justify"><font face="verdana" size="2">Desde luego podr&iacute;an realizarse muchos m&aacute;s an&aacute;lisis que los que presentamos aqu&iacute;. Ser&iacute;a interesante obtener indicadores por sexo, por procedencia geogr&aacute;fica, por edad del estudiante al ingreso, egreso y titulaci&oacute;n, por s&oacute;lo citar algunos ejemplos. Pero el espacio disponible es limitado y lo que hemos visto es suficiente para lograr nuestro prop&oacute;sito. Encontramos que el enfoque de la DGPPP/SEP, dependencia normativa en el campo, que por otra parte es el enfoque que ha dominado los estudios sobre ET en las &uacute;ltimas d&eacute;cadas, produce resultados incoherentes y limitados.</font></p>     <p align="justify"><font face="verdana" size="2">La ET es una medida crucial de la capacidad de las IES para utilizar los recursos que la sociedad les provee. Tambi&eacute;n es una medida de su capacidad para formar los ciudadanos altamente calificados que la naci&oacute;n requiere para su desarrollo. Deviene, entonces, insoslayable la necesidad de desarrollar un perfil de indicadores que permita evaluar en forma suficiente y fehaciente a las IES y a cada uno de sus programas educativos. Disponiendo de un perfil de ET v&aacute;lido y confiable podr&aacute;n aplicarse pol&iacute;ticas racionales para asignar est&iacute;mulos y corregir desviaciones en el desarrollo institucional.</font></p>     <p align="justify"><font face="verdana" size="2">Desde un punto de vista t&eacute;cnico, la tarea inicial para desarrollar tal perfil es clara y est&aacute; bien definida: deben desarrollarse bases de datos con registros individualizados para el total de la matr&iacute;cula de cada programa educativo. Si simplemente se normalizara la estructura de los actuales sistemas de control escolar y cada alumno se identificara mediante su Clave &Uacute;nica del Registro de Poblaci&oacute;n (CURP), que por ley todo ciudadano mexicano debe tener, se dispondr&iacute;a de un registro duro de datos tan importantes como el nombre, la fecha de nacimiento, el sexo y la entidad donde naci&oacute; cada uno de los alumnos. Con tales datos &#151;que hoy estamos lejos de tener para toda la matr&iacute;cula&#151; vinculados a la historia acad&eacute;mica, podr&iacute;an realizarse todos los an&aacute;lisis que aqu&iacute; vimos, y muchos m&aacute;s, que nos permitir&iacute;an evaluar en forma completa la ET de cada programa educativo, en lugar de seguir dependiendo de porcentajes demasiado agregados y, al final de cuentas, incoherentes.</font></p>     <p align="justify"><font face="verdana" size="2">Si realmente se trata de evaluar a las IES en forma transparente, de rendir cuentas con responsabilidad social, necesitamos precisar qu&eacute; es lo que debe medirse y acordar como naci&oacute;n las definiciones operacionales de conceptos tan importantes como la ET. Esperamos que con este trabajo hayamos aportado algo de inter&eacute;s en esa discusi&oacute;n.</font></p>     <p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Agradecimientos</b></font></p>     <p align="justify"><font face="verdana" size="2">Este trabajo fue apoyado por la Universidad Aut&oacute;noma del Estado de M&eacute;xico, mediante el proyecto de investigaci&oacute;n SIEA/UAEMEX&#150;2360/2006&#150;2.</font></p>     ]]></body>
<body><![CDATA[<p align="justify"><font face="verdana" size="2">&nbsp;</font></p>     <p align="justify"><font face="verdana" size="2"><b>Referencias</b></font></p>     <!-- ref --><p align="justify"><font face="verdana" size="2">Aegee (2007). <i>Programa Erasmus, </i>European Student's Forum. Disponible en <a href="http://www.karl.aegee.org/" target="_blank">http://www.karl.aegee.org/</a>, recuperado en junio de 2007.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849624&pid=S0185-2760200800020000900001&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">Descartes, R. (1996). "Rules for the direction of mind", <i>Great Books of the Western World, </i>No. 28, Chicago, Encyclopedia Brit&aacute;nica, pp. 223&#150;262.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849625&pid=S0185-2760200800020000900002&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">Flores, P. (2006). <i>Los retos de M&eacute;xico en el futuro de la educaci&oacute;n. </i>M&eacute;xico, Consejo de especialistas para la educaci&oacute;n.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849626&pid=S0185-2760200800020000900003&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">Garc&iacute;a, P. (1994). "Graduation and time to degree: A research note from the California State University", Thirty&#150;Fourth Annual Forum of the Association for Institutional Research, New Orleans, Louisiana, Mayo 29 &#150;Junio 29.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849627&pid=S0185-2760200800020000900004&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">L&oacute;pez Bedoya, M., Salvo Aguilera, B. y Garc&iacute;a Castro, G. (1989). "Consideraciones en torno a la titulaci&oacute;n en las instituciones de educaci&oacute;n superior", <i>Revista de la Educaci&oacute;n Superior, Vol. </i>18, No. 1 (69) enero&#150;marzo 1989.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849628&pid=S0185-2760200800020000900005&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">L&oacute;pez Su&aacute;rez, A. (2007). <i>El m&eacute;todo en ciencias del comportamiento, </i>M&eacute;xico, Universidad Aut&oacute;noma del Estado de M&eacute;xico.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849629&pid=S0185-2760200800020000900006&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">Mart&iacute;nez Rizo, F. (2001). "Estudio de la eficiencia en cohortes aparentes", <i>Deserci&oacute;n, rezago y eficiencia terminal en las IES. Propuesta metodol&oacute;gica para su estudio, </i>Serie Investigaciones, M&eacute;xico, ANUIES, cap&iacute;tulo I.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849630&pid=S0185-2760200800020000900007&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">OECD (2006). <i>Education at a Glance, OECD Indicators 2006, </i>Organisation de Coop&eacute;ration et de D&eacute;veloppement &Eacute;conomiques, Paris.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849631&pid=S0185-2760200800020000900008&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">P&eacute;rez Gonz&aacute;lez, J. (2006). "La eficiencia terminal en programas de licenciatura y su relaci&oacute;n con la calidad educativa". <i>Revista Electr&oacute;nica Iberoamericana sobre Calidad, Eficacia y Cambio en Educaci&oacute;n. </i>Vol. 4, No. 001, Espa&ntilde;a.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849632&pid=S0185-2760200800020000900009&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">Romo, A. (2005). "Deserci&oacute;n y repitencia en la educaci&oacute;n superior en M&eacute;xico". Observatorio de la Educaci&oacute;n Superior en Am&eacute;rica latina y el Caribe. IESALC&#150;UNESCO. M&eacute;xico.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849633&pid=S0185-2760200800020000900010&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">SEP (1977). <i>Formulario de indicadores, </i>M&eacute;xico, Direcci&oacute;n General de Planeaci&oacute;n, Programaci&oacute;n y Presupuesto de la Secretar&iacute;a de Educaci&oacute;n P&uacute;blica.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849634&pid=S0185-2760200800020000900011&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">SEP (2006). <i>Estudio de la eficiencia terminal de las IES mexicanas, </i>Subsecretar&iacute;a de Educaci&oacute;n Superior. Disponible en <a href="http://www.ses4.sep.gob.mx/aye/f1.htm/" target="_blank">http://www.ses4.sep.gob.mx/aye/f1.htm/</a>, recuperado en diciembre 2006.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849635&pid=S0185-2760200800020000900012&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --><!-- ref --><p align="justify"><font face="verdana" size="2">UNESCO (2007). <i>Thesaurus, </i>United Nations Education, Science and Culture Organization. Disponible en <a href="http://databases.unesco.org/thesaurus/" target="_blank">http://databases.unesco.org/thesaurus/</a>, recuperado en mayo de 2007.</font>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;[&#160;<a href="javascript:void(0);" onclick="javascript: window.open('/scielo.php?script=sci_nlinks&ref=6849636&pid=S0185-2760200800020000900013&lng=','','width=640,height=500,resizable=yes,scrollbars=1,menubar=yes,');">Links</a>&#160;]<!-- end-ref --> ]]></body><back>
<ref-list>
<ref id="B1">
<nlm-citation citation-type="book">
<collab>Aegee</collab>
<source><![CDATA[Programa Erasmus]]></source>
<year>2007</year>
<publisher-name><![CDATA[European Student's Forum]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B2">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Descartes]]></surname>
<given-names><![CDATA[R.]]></given-names>
</name>
</person-group>
<source><![CDATA[Rules for the direction of mind]]></source>
<year>1996</year>
<volume>28</volume>
<page-range>223-262</page-range><publisher-loc><![CDATA[Chicago ]]></publisher-loc>
<publisher-name><![CDATA[Encyclopedia Británica]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B3">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Flores]]></surname>
<given-names><![CDATA[P.]]></given-names>
</name>
</person-group>
<source><![CDATA[Los retos de México en el futuro de la educación]]></source>
<year>2006</year>
<publisher-name><![CDATA[Consejo de especialistas para la educación]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B4">
<nlm-citation citation-type="confpro">
<person-group person-group-type="author">
<name>
<surname><![CDATA[García]]></surname>
<given-names><![CDATA[P.]]></given-names>
</name>
</person-group>
<source><![CDATA[Graduation and time to degree: A research note from the California State University]]></source>
<year>1994</year>
<conf-name><![CDATA[Thirty-Fourth Annual Forum]]></conf-name>
<conf-loc>New Orleans Louisiana</conf-loc>
</nlm-citation>
</ref>
<ref id="B5">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[López Bedoya]]></surname>
<given-names><![CDATA[M.]]></given-names>
</name>
<name>
<surname><![CDATA[Salvo Aguilera]]></surname>
<given-names><![CDATA[B.]]></given-names>
</name>
<name>
<surname><![CDATA[García Castro]]></surname>
<given-names><![CDATA[G.]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Consideraciones en torno a la titulación en las instituciones de educación superior]]></article-title>
<source><![CDATA[Revista de la Educación Superior]]></source>
<year>1989</year>
<month>en</month>
<day>er</day>
<volume>18</volume>
<numero>69</numero>
<issue>69</issue>
</nlm-citation>
</ref>
<ref id="B6">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[López Suárez]]></surname>
<given-names><![CDATA[A.]]></given-names>
</name>
</person-group>
<source><![CDATA[El método en ciencias del comportamiento]]></source>
<year>2007</year>
<publisher-name><![CDATA[Universidad Autónoma del Estado de México]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B7">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Martínez Rizo]]></surname>
<given-names><![CDATA[F.]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[Estudio de la eficiencia en cohortes aparentes]]></article-title>
<source><![CDATA[Deserción, rezago y eficiencia terminal en las IES: Propuesta metodológica para su estudio]]></source>
<year>2001</year>
<publisher-name><![CDATA[ANUIES]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B8">
<nlm-citation citation-type="book">
<collab>OECD</collab>
<source><![CDATA[Education at a Glance, OECD Indicators 2006]]></source>
<year>2006</year>
<publisher-loc><![CDATA[Paris ]]></publisher-loc>
<publisher-name><![CDATA[Organisation de Coopération et de Développement Économiques]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B9">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Pérez González]]></surname>
<given-names><![CDATA[J.]]></given-names>
</name>
</person-group>
<article-title xml:lang="es"><![CDATA[La eficiencia terminal en programas de licenciatura y su relación con la calidad educativa]]></article-title>
<source><![CDATA[Revista Electrónica Iberoamericana sobre Calidad, Eficacia y Cambio en Educación]]></source>
<year>2006</year>
<volume>4</volume>
<numero>001</numero>
<issue>001</issue>
</nlm-citation>
</ref>
<ref id="B10">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Romo]]></surname>
<given-names><![CDATA[A.]]></given-names>
</name>
</person-group>
<source><![CDATA[Deserción y repitencia en la educación superior en México]]></source>
<year>2005</year>
<publisher-name><![CDATA[Observatorio de la Educación Superior en América latina y el CaribeIESALC-UNESCO]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B11">
<nlm-citation citation-type="book">
<collab>SEP</collab>
<source><![CDATA[Formulario de indicadores]]></source>
<year>1977</year>
<publisher-name><![CDATA[Dirección General de Planeación, Programación y Presupuesto de la Secretaría de Educación Pública]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B12">
<nlm-citation citation-type="book">
<collab>SEP</collab>
<source><![CDATA[Estudio de la eficiencia terminal de las IES mexicanas]]></source>
<year>2006</year>
<publisher-name><![CDATA[Subsecretaría de Educación Superior]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B13">
<nlm-citation citation-type="book">
<collab>UNESCO</collab>
<source><![CDATA[Thesaurus]]></source>
<year>2007</year>
<publisher-name><![CDATA[United Nations Education, Science and Culture Organization]]></publisher-name>
</nlm-citation>
</ref>
</ref-list>
</back>
</article>
