El uso de la encuesta en las ciencias sociales 9788499696867, 9788499694580

Table of contents :
Presentación
Tipos de encuesta
Planeación de la encuesta
Los componentes de la encuesta
Elaboración de la basede datos y análisis
Interpretación y elaboración del informede la investigación o evaluación

Citation preview

EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

LaEncuestaCorregido15x215.indd 3

6/28/2013 1:51:00 PM

DIRECTORIO UATX

Víctor Job Paredes Cuahquentzi RECTOR

René Elizalde Salazar SECRETARIO ACADÉMICO

Dora Juárez Ortiz SECRETARIA DE INVESTIGACIÓN CIENTÍFICA Y POSGRADO

Felipe Hernández Hernández SECRETARIO ADMINISTRATIVO

Efraín Ortiz Linares SECRETARIO DE EXTENSIÓN UNIVERSITARIA Y DIFUSIÓN CULTURAL

Sergio Eduardo Algarra Cerezo SECRETARIO TÉCNICO

Mauro Sánchez Ibarra SECRETARIO DE AUTORREALIZACIÓN

Samantha Viñas Landa COORDINADORA DE LA DIVISIÓN DE CIENCIAS Y HUMANIDADES

Rosa Ortega Landeros DIRECTORA DE LA FACULTAD DE CIENCIAS DE LA EDUCACIÓN

LaEncuestaCorregido15x215.indd 4

6/28/2013 1:51:00 PM

EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES Aníbal Quispe Limaylla

LaEncuestaCorregido15x215.indd 5

6/28/2013 1:51:01 PM

Primera edición, 2013

©Anibal Quispe Limaylla ©Ediciones Díaz de Santos ©Universidad Autónoma de Tlaxcala ©Colegio de Postgraduados

Reservados todos los derechos. No está permitida la reproducción total o parcial de este libro, ni su tratamiento informático, ni la transmisión de ninguna forma o por cualquier medio, ya sea electrónico, mecánico, por fotocopia, por registro u otros métodos, sin el permiso previo y por escrito de los titulares del Copyright.

Ediciones Díaz de Santos C/Albasanz 2, 28037, Madrid España [email protected] www.editdiazdesantos.com Ediciones D. D. S. México Elisa 161, Col. nativitas, C. P. 03500 Delegación benito Juárez, MEXICO, D.F. http://www.diazdesantosmexico.com.mx/

ISBN: 978-84-9969-686-7 (Libro electrónico) ISBN: 978-84-9969-458-0 (Libro en papel)

Índice

Presentación UʙÊU Capítulo I. Tipos de encuesta UÊ££ÊU Capítulo II. Planeación de la encuesta UÊ£ÇÊU Capítulo III. Los componentes de la encuesta UÊÓÇÊU Capítulo IV. Elaboración de la base de datos y análisis UÊÇ£ÊU Capítulo V. Interpretación y elaboración del informe de la investigación o evaluación UʙÇÊU Bibliografía UÊ£äxÊU

LaEncuestaCorregido15x215.indd 7

6/28/2013 1:51:01 PM

LaEncuestaCorregido15x215.indd 8

6/28/2013 1:51:01 PM

Presentación

E

l presente material es producto de más de 20 años de hacer investigación y evaluación de programas socioeconómicos usando la encuesta como uno de los métodos principales para obtener y analizar los datos de campo. El propósito de esta guía es compartir con los interesados en el tema los conocimientos y experiencias logrados. Aun cuando en la literatura existen libros y guías para hacer encuestas, no siempre encontramos respuestas a las necesidades de estudio que deseamos. Esta es otra de las razones por las cuales decidimos elaborar este material, con la intención de que el o la interesado(a) tenga las herramientas necesarias para diseñar e implementar encuestas de calidad. El método de la encuesta es de gran versatilidad. Pese a las críticas de algunos investigadores, la encuesta como método de investigación, a la fecha, ha sido de gran utilidad para evidenciar hechos y fenómenos sociales que difícilmente se lograría a través de otros métodos. De acuerdo con nuestra experiencia, en una investigación, el uso exclusivo de la encuesta no es recomendable, por lo que se sugiere usar también otros métodos, como las entrevistas, la observación directa, historias de vida, testimonios, entre otros. A través de la encuesta se pueden obtener y manejar datos cualitativos y cuantitativos. El uso del cuestionario, que es uno de los instrumentos de la encuesta, permite obtener datos de diversa naturaleza, desde hechos existenciales concretos hasta fenómenos subjetivos difíciles de evidenciar. El diseño del cuestionario es clave para lograr los datos requeridos y tener las evidencias que la investigación nos exige. Habiendo obtenido los datos requeridos a través de los cuestionarios, al igual que en el método experimental, ahora se pueden hacer los análisis estadísticos necesarios usando las herramientas computacionales 9 

LaEncuestaCorregido15x215.indd 9

6/28/2013 1:51:01 PM

10  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

actuales, con el objetivo de lograr una mejor interpretación y explicación de los hechos y fenómenos en estudio. Con la finalidad de que el o la interesado(a) logre un entendimiento y las habilidades para usar la encuesta, el contenido de este material lo dividimos en cinco secciones: 1) Concepto y tipos de encuesta; 2) Planeación y administración de la encuesta; 3) Las componentes de la encuesta: diseño del cuestionario, definición de la población y muestra y aplicación del cuestionario; 4) Elaboración de la base de datos y análisis; y 5) Interpretación de los datos y elaboración del informe de la investigación o evaluación. Finalmente, agradecemos a todas las personas que de una u otra forma contribuyeron en la elaboración y publicación de este material. Aníbal Quispe Limaylla

LaEncuestaCorregido15x215.indd 10

6/28/2013 1:51:01 PM

Capítulo I. Tipos de encuesta

L

a encuesta es una de las formas más populares de obtención de datos para la investigación y evaluación de programas sociales. La principal característica es que a través de la encuesta se puede obtener información de un gran número de personas sobre aspectos de interés de los investigadores. Si bien el deseo de los investigadores es obtener datos de toda una población completa, esto no siempre es posible por distintas razones, que más adelante se explicarán. El obtener datos de una parte de la población para luego inferirlos a toda la población es válido, siempre y cuando se reúnan los requisitos metodológicos establecidos. Si se estudia a toda la población es un censo y si es sólo de una parte, es una encuesta.

¿Qué es una encuesta? La encuesta es una forma de obtener datos directamente de la gente en una forma sistemática y estandarizada, por lo cual se aplica una serie de preguntas, las cuales deben ser estructuradas previamente. Las preguntas por lo general se presentan escritas en un formato llamado cuestionario. Éste es aplicado en la misma forma a todas las personas de una parte de la población. Los datos obtenidos de la encuesta son usados para hacer inferencias a toda la población de interés (productores de una determinada región o participantes en un proyecto, profesores que asistieron a un curso de capacitación, amas de casa que participaron en un curso sobre higiene y nutrición de niños, por mencionar algunos ejemplos). La información puede ser sobre la opinión, conocimientos, actitudes de la gente, creencias, comportamientos, planes y antecedentes 11 

LaEncuestaCorregido15x215.indd 11

6/28/2013 1:51:01 PM

12  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

de las personas y también de lo que poseen. La encuesta casi siempre es empleada para hacer diagnósticos de necesidades, determinar inclinaciones políticas y también evaluar procesos, resultados e impactos de las acciones de un proyecto o programa.

¿Por qué usar la encuesta? El principal propósito de la encuesta es describir las características de una población. En esencia, lo que los investigadores desean averiguar es cómo los miembros de una población se distribuyen entre ellos en una o más variables, como la edad, escolaridad, ingresos, tipo de empleo, preferencias políticas o religiosas, actitudes y comportamientos. Como en otros métodos de investigación, raras veces se estudia a toda la población en su conjunto. En estos casos, sólo se analiza una parte de la población (muestra), la cual es seleccionada cuidadosamente para ser aplicado un cuestionario previamente diseñado y cuyos datos son inferidos a toda la población.

¿Cuándo es apropiada una encuesta? Una encuesta es apropiada cuando no es posible usar formas para obtener datos directamente de la población y ésta es numerosa o está localizada en áreas geográficas amplias y distintas. Por lo general, queremos información de las opiniones y conductas de la gente, proporcionadas por los propios sujetos. Asimismo, a menudo hay cosas que no podemos ver de forma directa, como las actitudes y creencias; o no somos capaces de observar ciertas acciones, por ejemplo, el consumo diario de leche de los niños, la frecuencia de visitas de los técnicos agropecuarios a las familias, entre otros. Para conocer dicha información, tenemos que preguntar. Sin embargo, no toda la información requerida en una investigación o evaluación es obtenida a través de la encuesta. La información faltante puede ser obtenida a través de otros métodos, como las historias

LaEncuestaCorregido15x215.indd 12

6/28/2013 1:51:01 PM

CAPÍTULO I. TIPOS DE ENCUESTA  13

de vida, testimonios, análisis documental, entre otros. Existe una gran variedad de métodos, cuya explicación y descripción rebasa los objetivos de este trabajo. Para decidir sobre el método a utilizar, es importante, como ya se explicó, tener claro el tipo de datos que se requieren. Un análisis sobre el tipo de datos requeridos ayudará a decidir si una respuesta es apropiada o no. Si el propósito es averiguar sobre los porcentajes de opinión de uno de los líderes campesinos de una comunidad, sobre algún aspecto en particular, y la información no existe, entonces es probable que la encuesta sea el método más apropiado.

Tipos de encuestas En nuestro medio, por lo general se usan dos tipos de encuestas: 1) encuesta de corte seccional, y 2) encuesta longitudinal. Encuesta de corte seccional. Consiste en obtener datos de una muestra que ha sido extraída de una predeterminada población. Además, la información es obtenida en una sola ocasión en tiempo y forma, aunque el tiempo puede tardar algunas semanas o más. Por ejemplo, en una comunidad rural de aproximadamente 1 500 familias, el interés de estudio fuera conocer el nivel de alfabetismo y escolaridad de los mayores de 15 años, sean mujeres o varones. Para ello se obtendría una muestra, y de quienes integran la muestra, se obtendría la información en un periodo que puede abarcar unos días o semanas, hasta terminar. La información obtenida en ese lapso, vendría a ser el resultado del estudio deseado. Encuesta longitudinal. La encuesta longitudinal, en cambio, consiste en aplicar la encuesta más de una vez, en diferentes puntos de tiempo, según los objetivos del estudio. En nuestro medio, son tres los tipos de encuesta más conocidas en la investigación: i) estudios de tendencias, ii) estudio de grupos especiales (cohorte), y iii) estudio de panel. i) En un estudio de tendencias, diferentes muestras de una misma población son seleccionadas para la encuesta en diferentes

LaEncuestaCorregido15x215.indd 13

6/28/2013 1:51:01 PM

14  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

puntos de tiempo. Por ejemplo, una investigadora puede estar interesada en las variaciones de actitudes de los directores de las secundarias de un determinado municipio hacia las nuevas normas contra el bullying. La investigadora puede seleccionar una muestra cada año de una lista actualizada de directores de las secundarias del mismo municipio. La representatividad y, por tanto, los resultados del estudio, serían válidos aun cuando la población pudiera haber cambiado y los mismos individuos ya no estuvieran en la muestra, siempre y cuando la selección de los individuos de la muestra se haya hecho de forma aleatoria. La investigadora, entonces, puede examinar y comparar las respuestas de cada año para ver si hay alguna tendencia de cambio y si éstas son significativas o no. ii) En un estudio de grupo especial, una población específica es seguida a través del tiempo que dura el estudio. Mientras que en un estudio de tendencias las muestras son obtenidas de una población, en la que sus miembros cambian a través del tiempo, las muestras de un estudio de grupo especial son obtenidas de una misma población, cuyos miembros no cambian sin importar las veces que se obtienen las muestras para las encuestas. Por ejemplo, un investigador puede estar interesado en estudiar el crecimiento de la efectividad de la enseñanza en todos los primeros grados de las preparatorias de un municipio. Para este estudio, los nombres de todos lo(a)s maestro(a)s serían listados desde el primer momento, entonces, muestras distintas pueden ser obtenidas de la lista en diferentes momentos para las encuestas. iii) En un estudio de panel, una muestra obtenida al inicio del estudio, los mismos miembros de dicha muestra son encuestados en los diferentes momentos del estudio. Dado que el investigador está estudiando a los mismos miembros, él puede notar cambios en sus características o comportamientos y explorar las razones de los cambios. Por ejemplo, si tomamos el caso anterior, un investigador puede obtener una muestra de todos los maestros/as del primer grado de las preparatorias del municipio, en la que

LaEncuestaCorregido15x215.indd 14

6/28/2013 1:51:01 PM

CAPÍTULO I. TIPOS DE ENCUESTA  15

los miembros son los mismos cada vez que se hace la encuesta. La pérdida de los miembros es un problema frecuente en estos casos, debido a que no siempre son los mismos maestro/as a través del tiempo. De todos modos, el estudio es válido mientras que al menos 50% de los miembros sea el mismo desde el inicio.

LaEncuestaCorregido15x215.indd 15

6/28/2013 1:51:01 PM

LaEncuestaCorregido15x215.indd 16

6/28/2013 1:51:01 PM

Capítulo II. Planeación de la encuesta

U

na vez que se decide llevar a cabo una encuesta, es necesario planearla bien y de este modo no desperdiciar tiempo ni recursos. Taylor, Steele y Douglas (1996) remarcan que hay varios aspectos a considerar cuando se va a aplicar una encuesta. Lo que a continuación se sugiere nos indica que el plan debe ser un proceso ordenado paso a paso. Varios de los siguientes factores serán considerados de manera simultánea para el plan de una encuesta efectiva. Sin embargo, un buen inicio se da cuando el problema a investigar está bien definido, esto es, el problema a investigar mediante una encuesta debe ser suficientemente interesante e importante para motivar a las personas que serán encuestadas. Temas o preguntas triviales pueden desanimar a los encuestados a responder las preguntas del cuestionario. Los investigadores deben definir claramente sus objetivos para llevar a cabo el procedimiento.

Decidir quién debería ser involucrado en el proceso Es importante involucrar a la mayoría posible de usuarios y audiencias claves en la planeación de una encuesta. Esto conduce hacia un compromiso y ayuda a asegurar que la encuesta sea relevante y exitosa. Deberían ser involucradas algunas personas claves en las distintas etapas de la encuesta: elaboración del cuestionario, obtención de los datos, análisis e interpretación. Ellas pueden fungir como buenas consejeras o decididas participantes en las diferentes etapas de la encuesta. 17 

LaEncuestaCorregido15x215.indd 17

6/28/2013 1:51:01 PM

18  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

¿Quiénes asumirían mayor interés en la encuesta? ¿Quiénes pueden estar más interesados en el proceso y los resultados de ésta? ¿Cómo pueden ser mejor involucrados? Las respuestas a estas preguntas pueden ayudar a seleccionar el personal que apoyará la encuesta y su posterior uso. En la medida en que se establecen las tareas y se detecten las necesidades por atender, uno puede delegar ciertas responsabilidades a las personas involucradas en el grupo.

Definir el contenido de la encuesta Definir el contenido específico y tópicos de la encuesta es dificultoso, pero necesario, de lo contrario, pueden incluirse preguntas innecesarias que no responden a nuestras necesidades. Definir el contenido de la encuesta significa establecer los límites de tal modo que uno pueda delimitar las preguntas correctas. Hay que empezar con la determinación de lo que uno desea conocer y clarificar los términos que son vagos y ambiguos. Por ejemplo, uno puede querer conocer si los que recibieron un curso de capacitación sobre un determinado aspecto, mejoraron sus conocimientos y habilidades. El término capacitación puede ser expresado en varias formas. ¿Qué significa capacitación dentro del proyecto? ¿Qué aspectos de la capacitación son de interés? ¿En qué se diferenciarían las personas que tuvieron mayor capacidad que otras? Las preguntas pueden estar dirigidas a conocer sobre los resultados, impacto, proceso, acciones y el contexto. En segundo término, es necesario enfocar las preguntas dentro de las necesidades de información, es decir, hacer una distinción entre cuál sería fácil conocer y cuáles son necesarios conocer. En tercer término, habría que asegurarse de que los potenciales encuestados pueden proveer la información. A veces la gente no está dispuesta a ser encuestada o no responder algunos tópicos. Puede ser que ellos se hayan olvidado, no conozcan o no tengan la suficiente información para responder con exactitud a las preguntas. En estos casos, es mejor decidirse por otros recursos de información, y eliminar el tópico de la encuesta.

LaEncuestaCorregido15x215.indd 18

6/28/2013 1:51:01 PM

CAPÍTULO II. PLANEACIÓN DE LA ENCUESTA  19

Por último, es recomendable no incluir tópicos en la encuesta que no se usarán ni se tomarán en cuenta posteriormente.

Identificar a los posibles encuestados ¿De quiénes se obtendrán la información requerida? Es necesario identificar a toda la población que será considerada en la encuesta para obtener la información necesaria. O puede ser que haya alguna consideración en especial que obligue o evite que toda la población sea considerada para la encuesta. Por otro lado, en la operación de un proyecto a menudo existen diferencias entre la población que participa, ya sea por razones geográficas, étnicas y grados de involucramiento en el proyecto. Si la intención es conocer las diferencias en los resultados del proyecto y sus causas, antes de la encuesta hay que tomar en cuenta estos aspectos. Asimismo, a menudo, en las encuestas no se incluye a toda la población, de lo contrario, esto sería un censo. Por tanto, si la población es grande, es necesario obtener una muestra, para lo cual se debe determinar su tamaño y el tipo de muestreo a utilizar. Este punto será tratado más adelante con mayor detalle.

Decidir sobre quiénes participarán en la aplicación de la encuesta En la aplicación de las encuestas, sobre todo cuando se usa el método de entrevistas frente a frente, es necesario definir quiénes ayudarán en la obtención de la información. No siempre se tiene disponible a la gente con experiencia en estos asuntos. De preferencia, hay que contratar a personas que ya hayan tenido alguna experiencia en el levantamiento de encuestas y que estén familiarizadas con el tema del proyecto y de la evaluación. Aun cuando tengan experiencia en encuestas, es necesario ofrecer unas horas de orientación y explicación sobre la naturaleza del estudio, sus propósitos y la importancia de los datos a obtener para la evaluación. En el caso de encuestas a campesinos de lugares alejados y con

LaEncuestaCorregido15x215.indd 19

6/28/2013 1:51:01 PM

20  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

idiomas y costumbres distintos a nuestro medio, es recomendable acudir a personas oriundas de la región, que hablen su mismo idioma y conozcan sus costumbres y valores. En estos casos, la experiencia sugiere que quienes pueden participar en la encuesta podrían ser los estudiantes de los últimos años de las escuelas de medio superior, tecnológicos o normales existentes en la región. En estos casos, lograr que los estudiantes adquieran entusiasmo e interés para su propia formación y su contribución a la obtención de datos de calidad para la evaluación.

Diseño del cuestionario Toda encuesta usa cuestionario. Sin embargo, el número y tipo de preguntas, el formato, su estructura y la organización de las preguntas variarán según el tipo de encuesta seleccionado. El desarrollo de un cuestionario es más un arte que ciencia y requiere de un tiempo de dedicación. De preferencia, hay que hacer varios borradores. Se debe tener en cuenta el tiempo para su diseño; hacer preguntas claras y concretas. Trabajar con otros en la elaboración del cuestionario que puede ayudar a elaborar un buen instrumento. Cuando uno está elaborando el cuestionario, es necesario revisar el contenido específico de la encuesta para cuidar que las preguntas estén dirigidas a la obtención de los datos que requerimos para estar seguros de cubrir el contenido completo que se consideró como importante para la encuesta. Con frecuencia es bueno escribir más preguntas de las que se usarán y después descartar las que no se adecúan o no son relevantes. Además, para facilitar el análisis de los datos, el formato debe tener una estructura que permita “capturar” los datos en una computadora usando alguno de los programas de análisis estadísticos correspondientes. Existen varias formas de escribir preguntas y elaborar formatos de cuestionarios. La calidad del cuestionario influye mucho en la utilidad para obtener los resultados de la encuesta. Para mayor información sobre cómo elaborar un cuestionario de calidad, véase la sección correspondiente.

LaEncuestaCorregido15x215.indd 20

6/28/2013 1:51:02 PM

CAPÍTULO II. PLANEACIÓN DE LA ENCUESTA  21

Prueba del cuestionario o piloteo El piloteo del cuestionario es otro paso importante en el proceso de la encuesta para asegurar una buena calidad de información. El piloteo debería ser hecho con un número pequeño de personas, quienes deben tener similares características a aquellos que realmente serán encuestados. La prueba del cuestionario nos ayuda a responder las siguientes preguntas: U ¿Los encuestados entienden las preguntas? U ¿Las palabras usadas en el cuestionario tienen el mismo significado para todos los encuestados? U ¿Las preguntas generan el tipo de información que uno desea? U ¿Los encuestados entienden bien las instrucciones para responder las preguntas? U ¿Cuánto demora una encuesta? En ocasiones necesitamos pilotear varias veces antes de llegar a una situación satisfactoria del cuestionario. Por tanto, uno necesita considerar un poco de tiempo extra para corregir el cuestionario y volver a pilotearlo. Hay que tomar en cuenta que la información obtenida del piloteo no debe ser mezclada con los datos de la encuesta definitiva. Asimismo, quienes participaron en el piloteo no deben ser incluidos en la encuesta definitiva.

Definición de la población y la muestra Antes de aplicar el cuestionario se deben definir la población de estudio y la muestra. Sobre estos puntos, más adelante se abordan con mayor detalle. Como se mencionó con anterioridad, la encuesta, a diferencia del censo, estudia a una parte de la población. El deseo es que la muestra sea representativa de la población en las características de interés para el estudio. Para ello, se deben seguir ciertas reglas metodológicas establecidas en cuanto a, por ejemplo, el tamaño de la muestra, que dependerá de

LaEncuestaCorregido15x215.indd 21

6/28/2013 1:51:02 PM

22  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

ciertas variables, como la homogeneidad o heterogeneidad de la población, el grado de precisión de la representatividady la aleatoriedad en la selección de los miembros de la muestra a ser encuestados, entre otros.

Decisión sobre el método de encuesta y aplicación del cuestionario Seleccione el método que más se adecúe al tópico, características de las personas a ser encuestadas, tiempo requerido, experiencias y recursos disponibles. Como se indicó en una sección previa, un método de encuesta no es mejor que otros. Sin embargo, un método puede ser más apropiado que otro, dependiendo de la situación. En nuestro medio, como se señaló anteriormente, los más utilizados son el método de entrevista frente a frente, entrega y devolución del formato en persona para su llenado por el propio encuestado, y últimamente los electrónicos, ya sea por correo electrónico o sitios electrónicos.

Pensando en el análisis de los datos A veces es útil elaborar un reporte hipotético o un esquema general, incluso antes de haber iniciado con la obtención de los datos. Esto ayuda a enfocar sobre lo que uno necesita conocer, qué es lo que uno es capaz de decir y qué análisis se requerirán para decirlo. El análisis de datos requerido debería ser considerado al mismo tiempo que cuando uno escogió el método y el diseño de la muestra a ser empleado. ¿Necesitamos sólo frecuencias y porcentajes?, ¿se tienen datos que para su análisis requieren más de la media? ¿Será necesario subdividir el grupo para fines de análisis? Por lo general, en estos tiempos los análisis de los datos se realizan usando paquetes computacionales, por lo que uno debe estar familiarizado con ellos. Además, hay que definir el tipo de análisis y las pruebas a ser usadas, según el tipo de datos obtenidos y la profundidad de los análisis. Hay varios métodos de análisis de datos cuya descripción rebasa los objetivos de esta guía.

LaEncuestaCorregido15x215.indd 22

6/28/2013 1:51:02 PM

CAPÍTULO II. PLANEACIÓN DE LA ENCUESTA  23

Presupuesto y calendarización de la aplicación de la encuesta Toda encuesta implica gastos, por lo que debe hacerse un presupuesto en forma detallada. Los puntos que a continuación se indican son para el caso de una encuesta por entrevista frente a frente, que es el más común en nuestro medio. Entre los principales rubros a considerar se tienen: pago de personal que coordine, pago de encuestadores, pago de personal que capturará y analizará los datos, viáticos, transporte, materiales (papeles, lápices, impresión, copias, por ejemplo), capacitación de encuestadores y gastos de comunicación (llamadas telefónicas, fax y correos). En el caso del pago de encuestadores y de quienes analizarán los datos, cuando es personal contratado sólo para estos trabajos, se puede hacer por honorarios o por cuestionario, aunque lo más recomendable es hacerlo por cuestionarios, por la efectividad y calidad del producto. La contratación de los servicios puede hacerse en forma individual o por grupo; si es en grupo, será a través de la institución u organización a la que pertenecen. En la estimación del presupuesto se deben considerar también los casos fortuitos que pueden acontecer, sobre todo cuando las encuestas que se van aplicar son a campesinos que habitan en comunidades alejadas. En estos casos, el transporte y el contacto con los posibles encuestados son los más críticos. Para el caso del calendario de actividades y administración de la encuesta, se recomienda hacer una lista detallada de las actividades a realizar, con el tiempo indicado y las responsabilidades asignadas. Esto ayudará a hacer el seguimiento en forma precisa. En toda evaluación, por lo general, se tiene una fecha límite para entregar los resultados de la evaluación, por lo que esto ayudará a iniciar el plan de la encuesta. Cuando sea el caso, uno puede trabajar hacia atrás desde la fecha final, para estimar el tiempo asociado con cada tarea e ir ajustando cuando sea posible para cumplir con la fecha límite. Por el contrario, uno puede trabajar hacia delante desde que inicia el plan y dar flexibilidad al acercarse la fecha límite. Para tener un panorama objetivo del plan, es recomendable utilizar la gráfica de Gant, como se ejemplificará en el cuadro 1. Este plan cronogramado ayudará al seguimiento y cumplimiento de lo programado.

LaEncuestaCorregido15x215.indd 23

6/28/2013 1:51:02 PM

24  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

CUADRO 1. EJEMPLO DE UNA GRÁFICA DE GANT Actividades

Semanas 1

Elaboración del cuestionario Prueba del cuestionario Capacitación de encuestadores Aplicación de cuestionarios

2 3 4

5

6

7

8

9

10 11 12

/// /// /// /// /// /// //// ///

Revisión de datos de los cuestionarios Captura de datos Análisis de los datos Interpretación de los datos Elaboración del informe

/// ///// ///// //

/// /////

Fuente: elaboración propia.

Revisión de los datos del cuestionario Después de obtenidos los datos de campo, es conveniente revisar los datos de los cuestionarios uno por uno. Con frecuencia se encuentran errores, falta de datos o datos confusos. Es el momento preciso para corregirlos o, en su caso, regresar al campo para corregirlos o complementarlos. Si hay incongruencia en los datos, es preferible eliminar la categoría. La revisión de los datos en esta etapa garantizará su calidad, para ello deberá asignar a una o dos personas responsables para hacer este trabajo.

LaEncuestaCorregido15x215.indd 24

6/28/2013 1:51:02 PM

CAPÍTULO II. PLANEACIÓN DE LA ENCUESTA  25

Algunas sugerencias para la estructuración del cuestionario Todo cuestionario debe tener una carta o nota dirigida a los encuestados, en la que se precise el objetivo de la encuesta, quiénes la hacen, por qué la hacen, en qué beneficiará a los encuestados, qué se hará con los datos y el compromiso de cuidar el anonimato y la confidencialidad de quienes respondan. Asimismo, se recomienda: U U U U U

Ordenar las preguntas lógicamente. Usar los espacios suficientes para el llenado. Exponer instrucciones breves sobre cómo llenar los datos. Utilizar letras claras y muy visibles que sean totalmente legibles. Colocar títulos y subtítulos, cuando sea necesario, para diferenciar entre los tópicos de las preguntas, lo que facilitará el análisis. U No atiborrar de preguntas en una sola página. U Hacer que el cuestionario sea atractivo para el encuestado, sobre todo cuando será enviado por correo o entregado para su llenado por el propio encuestado.

Lograr apoyos para contactar con la gente a ser encuestada Cuando la población a ser encuestada está muy alejada y se tiene poco contacto con ella, para lograr la confianza de la gente a ser encuestada es necesario solicitar apoyo de las autoridades locales, maestros de las escuelas y, desde luego, de los promotores y técnicos del proyecto, en caso de que la población objetivo sea de productores rurales. Esto garantizará que los encuestados proporcionen los datos con sinceridad y confianza y, por tanto, que la información proporcionada sea de buena calidad.

LaEncuestaCorregido15x215.indd 25

6/28/2013 1:51:02 PM

LaEncuestaCorregido15x215.indd 26

6/28/2013 1:51:02 PM

Capítulo III. Los componentes de la encuesta

E

l proceso de la encuesta, como se indicó, implica varias fases y acciones concretas; si bien en el capítulo anterior se hizo referencia a los pasos a seguir en el proceso de la encuesta, en éste se describen con detalle los componentes principales relativos al cuestionario, el muestreo y la aplicación del cuestionario.

Diseño del cuestionario y prueba ¿Qué es un cuestionario y cómo estructurarlo? El cuestionario en una encuesta es una herramienta debidamente diseñada para obtener datos de una parte de la población en estudio. De acuerdo con Taylor, Steele y Douglas (1996), el cuestionario es un formato de preguntas debidamente ordenadas y organizadas para obtener la información que se requiere y que permita la sistematización y tabulación para su posterior interpretación. En muchas evaluaciones e investigaciones, el cuestionario constituye el principal recurso de obtención de información. A menudo, hacer preguntas y diseñar un cuestionario requiere de tiempo y atención. Antes de iniciar con la construcción de un cuestionario, lo esencial es saber qué tipo de evidencias se necesitan para cumplir con el propósito del estudio y conocer cómo será utilizada la información. Algunas de las siguientes pautas pueden ayudarle a elaborar un buen cuestionario:

27 

LaEncuestaCorregido15x215.indd 27

6/28/2013 1:51:02 PM

28  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Hacer una lista de qué es lo que desea conocer. Qué es lo que realmente se quiere indagar; qué es lo que se pretende lograr con el cuestionario. Verificar si la información que se necesita ya existe y está disponible en algún lugar. No haga preguntas, a menos de que tengan un uso; esto es, que al menos tenga relación con el propósito del estudio. Obtener demasiada información significa mayor gasto y tiempo y puede producir una sobrecarga de información. Así, hay que eliminar preguntas e ítems que no son esenciales, además de las preguntas ambiguas. Desde el inicio, hay que pensar en qué es lo que se hará con cada pieza de información que se obtenga. Por ejemplo, qué tipo de análisis estadístico se usará. ¿Se emplearán frecuencias, porcentajes, rangos, análisis multivariados, correlaciones u otro tipo de análisis estadísticos? Cuando elabore preguntas, debe hacerlas pensando como si usted fuera el que responderá las preguntas. ¿Las preguntas son vistas como razonables? ¿Afecta la privacidad del o la encuestado(a)? ¿El o la encuestado(a) será capaz y estará dispuesto(a) a responder la pregunta? Ser realista y selectivo. Saber qué información es requerida, por qué y cuál es el plan para usarla.

Tipos de información que se puede obtener a través del cuestionario Un cuestionario puede ayudarnos a obtener información sobre qué es lo que hace la gente, qué es lo que tiene, qué es lo que piensa, conoce, siente o desea. De acuerdo con nuestra experiencia, se pueden distinguir cuatro diferentes tipos de información: conocimiento, creencias, actitudes y

LaEncuestaCorregido15x215.indd 28

6/28/2013 1:51:02 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  29

opiniones, conducta y atributos. Cualesquiera de éstos o en combinación entre ellos pueden ser obtenidos a través de un cuestionario. La información que se requiere y obtiene puede ser: De conocimiento. Se refiere a qué es lo que la gente conoce y qué tan bien la gente conoce algo. Las preguntas de conocimiento ofrecen oportunidades de selección, como correcto vs. incorrecto, exacto vs. inexacto. Puede preguntar qué entrevistados creen que algo es verdadero o acerca de su conocimiento sobre algo. Por ejemplo: ¿Cuál es la mayor causa de las muertes por accidentes en las calles de las principales ciudades del país? ¿Qué métodos de enseñanza son los más usados en la secundaria? La temperatura ideal de un refrigerador es... De creencias, actitudes y opiniones. Estos conceptos se refieren a estados psicológicos de la gente: las percepciones que tienen sobre algo, sus pensamientos, sentimientos, ideas, juicios o formas de pensar. Las preguntas pueden permitir esclarecer la percepción de la realidad del pasado, presente y futuro de los entrevistados, de sus sentimientos o sus opiniones. Por ejemplo: ¿Está usted en favor o en contra del cambio de horario de verano? ¿Cuál es su opinión sobre el presupuesto asignado para la educación en el país? ¿Usted piensa que al bajar los precios de la carne de res, la gente podrá consumir más? ¿Cuál es su expectativa del nuevo presidente de la República? ¿Cuál considera usted que es el mayor reto para la comunidad en los próximos cinco años?

LaEncuestaCorregido15x215.indd 29

6/28/2013 1:51:02 PM

30  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

De conducta. Se refiere a qué es lo que hace la gente. Las preguntas están relacionadas con el comportamiento de la gente, es decir, con qué es lo que hizo en el pasado, lo que hace en el presente y lo que hará en el futuro. Por ejemplo: ¿Votó usted en las últimas elecciones para designar autoridades locales? ¿Cuántas veces asistió a cursos de capacitación sobre planeación educativa? ¿Actualmente está usted usando los conocimientos y habilidades logrados en el curso de capacitación sobre métodos de evaluación? ¿Se postulará usted para ocupar el cargo de director de la Facultad de Sociología? De atributos. Está relacionado con cómo es la gente y qué es lo que tiene. Atributos son los que se refieren a las características personales y demográficas de la gente, como educación, edad, salud, ocupación e ingresos. Las preguntas de atributo se hacen sobre quiénes de ellos, en vez de qué es lo que hacen. Por ejemplo: ¿Dónde vive usted actualmente? ¿Cuántos hijos tiene usted? ¿Cuántas hectáreas de tierra ejidal trabaja usted? ¿Hasta qué grado estudió usted? Para escribir preguntas significativas, es necesario tener claros los objetivos y tipo de información deseada; sea información sobre conocimiento, actitud, opinión, creencia, conducta o atributo. De no ser así, el cuestionario puede documentar información no esperada, como por ejemplo, en lugar de obtener información sobre conducta, puede ofrecer sobre opinión. Asimismo, preguntas relacionadas con cada tipo de información presentan diferentes problemas de escritura. Así, preguntas concernientes a

LaEncuestaCorregido15x215.indd 30

6/28/2013 1:51:02 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  31

actitudes tienden a ser más dificultosas para escribir, dada la complejidad que comprenden las actitudes. Es indispensable poner mucha atención en la escritura. En contraste, las preguntas acerca de conocimiento, conducta y atributos son menos dificultosas porque se perciben con mayor facilidad. Recuerde: la respuesta o información que se obtiene será buena en la medida en que la pregunta también sea clara. Si usted no obtiene la información que desea, es probable que sea porque no hizo la pregunta adecuada.

¿Cómo deben ser las preguntas? Escribir las preguntas para obtener la información deseada y para que sea entendida por los encuestados es un verdadero desafío. Cuando escriba preguntas, considere tres cosas: U La gente en particular a quien están dirigidas las preguntas, U El propósito particular del cuestionario, y U Ubicación de las preguntas dentro del cuestionario. Para una buena escritura de las preguntas, a continuación se ofrecen algunas sugerencias. 1. Use palabras simples. Adaptar las palabras al vocabulario y habilidades de lectura del entrevistado, pero no exagerar. ¿Hay alguna palabra confusa? ¿Alguna de las palabras tiene doble significado? 2. Evite el uso de abreviaturas, jergas o frases foráneas. Tanto en educación como extensión agrícola, a menudo se usan jergas, como estudios de posgrado, adopción de tecnología, aprendizajes de la experiencia o “grupos foco”. 3. Ser específico. Una pregunta acerca de un joven mayor debería especificar qué edad o grado debe tener para ser considerado “joven mayor”. Asimismo, en la pregunta: “¿Cuántas veces viajó al extranjero el año pasado?”, hay que precisar si “el año pasado”

LaEncuestaCorregido15x215.indd 31

6/28/2013 1:51:02 PM

32  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

4.

5.

6.

7.

8.

9.

se refiere a 2011, 2010-2011, los últimos 12 meses o septiembre 2010-agosto 2011. Use terminología clara. Palabras como “regularmente” y “ocasionalmente” significa diferentes cosas para personas distintas. Algunos términos vagos pueden ser: mayoría (¿más de la mitad de qué?); a menudo (¿diario?, ¿dos veces a la semana?, ¿semanalmente?); gobierno (¿federal?, ¿estatal?, ¿municipal?); persona mayor (¿de qué edad?). Incluir toda la información necesaria. En algunos casos, los entrevistados pueden no conocer lo suficiente para responder adecuadamente una pregunta. Por ejemplo: “¿Está usted de acuerdo o no con el plan del presidente municipal de la comunidad?”. Los encuestados pueden no saber en qué consiste el plan. En estos casos se recomienda agregar una breve explicación sobre el plan. Evite preguntas que pueden ser muy precisas. La vida de la gente por lo general no es tan ordenada como para que ellos puedan recordar exactamente cuántas veces tomaron medicina alguna el último año o cuántas veces asistió a reuniones de profesores en 2011. Para ayudarles a formular sus respuestas, deben sugerirse categorías de respuestas para que tenga la oportunidad de escoger, por ejemplo: 0-5, 6-10, 11-15... Tratar con delicadeza las preguntas personales o incriminatorias. Preguntas relativas al uso de drogas, alcoholismo, niveles de ingreso o estado civil, pueden ser objetadas a responder o ser mentiras. Una forma de evitar estos inconvenientes es presentar a los encuestados una serie de posibles respuestas o hacer preguntas indirectas, a través de varias preguntas relativas al tema. Evitar preguntas que demandan mucho tiempo. Ejemplos de este tipo de preguntas pueden ser: “Por favor, escoja el número de su preferencia del 1 al 5 de los 20 items en orden de importancia para usted”, “En 25 palabras o menos enuncie la misión de la universidad donde trabaja”. Utilice categorías mutuamente excluyentes. Hay que estar seguro de que sólo hay una respuesta posible. En el ejemplo: “¿Cómo se enteró de la beca de Pronim?”, las categorías de respuesta son:

LaEncuestaCorregido15x215.indd 32

6/28/2013 1:51:02 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  33

“a través de un amigo, de un familiar, por periódico, en el trabajo, a través de una carta de invitación, en una reunión de profesores”. Por ejemplo, la persona encuestada puede haberse enterado a través de un amigo en el centro de trabajo, por lo que, en este caso, es posible más de una respuesta. 10. Evite las suposiciones. Preguntas como: ¿Cuántos hijos tiene usted?, o ¿Cuántas veces viajó al extranjero? En estos casos, se asume que la persona entrevistada tiene hijos y que viajó al extranjero. Tal persona puede no tener hijos o no haber viajado al extranjero ninguna vez. Por tanto, primero debe preguntarse si tiene hijos, en el primer caso, y si viajó alguna vez al extranjero, en el segundo. 11. Evite preguntas sesgadas. Las preguntas sesgadas influyen en una forma tal que la respuesta no refleja con claridad la posición de la persona encuestada. Una pregunta puede ser sesgada en varias formas: 1) cuando se da a entender que la respuesta debería ser incluida en una determinada conducta; 2) cuando las categorías de respuestas son desiguales o cargadas en una dirección; 3) cuando son empleadas palabras con fuerte interés emocional positivo o negativo, tal como “libertad”, “igualdad”, “jefe”, “burocracia”, “moderno”, entre otros. Ejemplos de preguntas sesgadas: La mayoría de los campesinos del Distrito 6 del Estado de México usa la variedad H-504 de maíz más que otras variedades. ¿Usted utiliza la variedad H-504? Esta pregunta sugiere que la respuesta sea a favor del uso de la variedad H-504. ¿Cómo cataloga usted la casa donde vive? 1. Satisfactorio 2. Bueno 3. Excelente

LaEncuestaCorregido15x215.indd 33

6/28/2013 1:51:02 PM

34  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

En estas alternativas de respuesta no se proporcionan opciones negativas. ¿Está usted de acuerdo con que el presupuesto para su escuela debe ser incrementado? 1. Sí 2. No Ésta es una pregunta sesgada. Una buena pregunta sería: ¿Está usted de acuerdo o no con que el presupuesto para su escuela debe ser incrementado? (Encierre en un círculo la respuesta de su preferencia). 1. Completamente en desacuerdo 2. En desacuerdo 3. Neutro 4. De acuerdo 5. Completamente de acuerdo. 12. Evite preguntas que sugieran doble respuesta. “¿El seminario de producción de pollos le ayudó a usted a identificar formas para mejorar la sanidad e incrementar la nutrición de sus pollos?”. Es mejor preguntar sobre la “sanidad” y la “nutrición” por separado. Otras preguntas pueden ser demasiado ambiguas, por ejemplo: “¿Está usted a favor del aborto cuando la madre es violada o en caso de enfermedad?”. Esta pregunta no da oportunidad a la gente a responder en contra del aborto en todos los casos ni señalar otras opciones. 13. Hacer claras y lógicas las categorías de respuestas. Con frecuencia, las categorías de respuestas son confusas, no son lógicas ni debidamente espaciadas o numeradas para permitir una fácil interpretación. Ejemplo:

LaEncuestaCorregido15x215.indd 34

6/28/2013 1:51:02 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  35

¿Cuántas hectáreas posee su familia? Rangos incorrectos 0.0 has 2.1-5 has 5.1-10 has 10.1 -15 has 15.1-20 has 20 o más has Ineficiente lógica 1) 1,000 hectáreas 2) 999-500 hectáreas 3) 499-100 hectáreas 4) 99-10 hectáreas 5) 9-1 hectáreas 6) 0 hectáreas Lógica mejorada 1) 0 hectáreas 2) 0.1-50 hectáreas 3) 50.1-100 hectáreas 4) 100.1-150 hectáreas 5) 150.1-200 hectáreas 6) 200.1-250 hectáreas 7) Más de 250 hectáreas 14. Use oraciones completas. Trate de hacer preguntas simples y concisas, de lo contrario pueden resultar en misteriosas o mal entendidas. 15. Planear con anticipación. Identificar cada pregunta y cada respuesta con un número o letra para su fácil registro, captura y análisis.

LaEncuestaCorregido15x215.indd 35

6/28/2013 1:51:02 PM

36  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Tipos de preguntas Las preguntas pueden ser abiertas o cerradas. A continuación se explican por qué y cuándo puede ser empleada cada una de ellas. Preguntas abiertas. Las preguntas abiertas permiten a las personas encuestadas proveer sus propias respuestas. Éstas les dan la oportunidad para expresar sus propios pensamientos, pero también requieren de mayor esfuerzo para responder. Las preguntas abiertas tienden a producir variedades de respuestas y son más dificultosas para analizar. Una pregunta abierta es a menudo una forma fácil para preguntar por información, pero las respuestas no son tan fáciles para ser analizadas. Las respuestas tienden a ser variadas, por lo que necesitan ser categorizadas y resumidas. Uno debe pensar cómo serán analizados los datos en forma narrativa. Las respuestas abiertas pueden ser usadas para: U Estimular un pensamiento libre, solicitar sugerencias creativas o recordar información aprendida. U Obtener información en detalle. Ejemplos: ¿Qué es lo que se haría para mejorar el plan de estudios de su facultad? Nombre los cinco grupos de alimentos básicos. Por favor, indique cómo intentará usar la información obtenida durante el taller. Estamos interesados en los comentarios que usted puede tener respecto a su papel como coordinadora de orientación educativa en su plantel. Por favor, escriba en el espacio de abajo lo que usted cree que puede compartir con nosotros. Al solicitar una respuesta numérica, incluya la unidad de medida a ser empleada.

LaEncuestaCorregido15x215.indd 36

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  37

Por favor coloque el número de hectáreas (en la lista de abajo) que usted sembró en el ciclo agrícola de 2010-2011. A. B. C. D. E. F.

ha de maíz ha de frijol ha de trigo ha de cebada ha de alfalfa Otros ha (por favor especificar)

Las preguntas abiertas son también apropiadas cuando se solicita a los encuestados proporcionar respuesta específica y cuando se espera un número grande de respuestas o cuando todas las respuestas posibles no son conocidas. Este tipo de preguntas son hechas generalmente al final del cuestionario, para conocer comentarios adicionales del encuestado. Preguntas cerradas. Las preguntas cerradas proporcionan una lista de posibles respuestas para ser seleccionadas, una o varias. Estas preguntas producen uniformes respuestas, pero requieren que se incluya una lista de respuestas relevantes. Las respuestas a preguntas cerradas deben ser exhaustivas y también mutuamente excluyentes para la selección de una sola respuesta. Existe una gran variedad de formas para escribir preguntas cerradas. Algunas requieren respuestas que estén dentro de algo ordenado, como en una escala de razón; otras proveen respuestas de múltiples opciones; otras proveen respuestas relevantes y permiten a los encuestados agregar otras que no están en la lista. En la siguiente sección se ofrecen ejemplos de preguntas cerradas. Respuestas con dos opciones. Éste es el más simple formato de respuestas. Las opciones pueden incluir: 1) Sí 1) De acuerdo 1) Falso 1) A favor

LaEncuestaCorregido15x215.indd 37

2) No ; 2) En desacuerdo 2) Verdadero ; 2) En contra .

;

6/28/2013 1:51:03 PM

38  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Ejemplo. ¿Conoce usted el programa Oportunidades? 2) No 1) Sí Dependiendo de la información que uno desea, éste puede ser el formato más apropiado. A menudo es usado como la primera pregunta en una serie de preguntas sobre un tópico. Sin embargo, usando una escala de razón o un rango determinado, proporciona más información. Respuesta de la mejor opción. Estas preguntas pueden ser usadas para solicitar información o comprobar el conocimiento de alguien. Son apropiadas cuando todas las opciones relevantes son conocidas y enlistadas. Las preguntas van con una lista de respuestas y los encuestados son solicitados a marcar lo que creen que es mejor. Las respuestas son independientes entre ellas, a no ser que estén ordenadas entre sí. Ejemplo. ¿Qué significa la palabra “nutrición” para usted? (Encierre en un círculo el número de su elección). 1. Consumir suficientes vitaminas. 2. El alimento que uno come y el cuerpo cómo lo usa. 3. Consumir alimentos, lo que uno desea. 4. Tener buena salud.

Construyendo escalas A menudo, a los entrevistados se les solicita indicar sus opciones en el punto más apropiado de una escala. Se usa una escala de tres, cuatro o más categorías dependiendo de la pregunta, la cantidad de diferenciación que es posible y deseable y la capacidad de los entrevistados para responder. Ejemplo. ¿Qué tanto está usted de acuerdo o en desacuerdo con el nuevo horario de verano? (Encierre en un círculo su mejor opción). 1. Muy en desacuerdo. 2. Medianamente en desacuerdo. 3. En duda. 4. Medianamente de acuerdo. 5. Muy de acuerdo.

LaEncuestaCorregido15x215.indd 38

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  39

Cuando compra algún vestido, ¿qué tan importante considera las siguientes características para su selección? (marque el número por cada característica según el grado de su preferencia). Características Durabilidad Modelo Color Marca

Nada importante 1 1 1 1

Neutro 2 2 2 2

3 3 3 3

4 4 4 4

5 5 5 5

6 6 6 6

Muy importante 7 7 7 7

Para una diferenciación más clara, use una escala numérica de 1 a algún número. Una serie de cinco puntos de opción parece ser la mejor para medir actitudes; una serie de cuatro puntos de opción parece ser útil en rangos de preferencias, como: excelente, bueno, más o menos y pobre. A veces pueden resultar mejor escalas de nueve u once puntos. Las escalas deben ser, de preferencia, impares para evitar sesgos. A continuación presentamos algunos ejemplos de categorías de respuestas. 1) Muy insatisfecho, 2) Insatisfecho, 3) Neutro, 4) Satisfecho, 5) Muy satisfecho 1) Nada provechoso, 2) Algo provechoso, 3) Provechoso, 4) Muy provechoso 1) Muy desfavorable, 2) Desfavorable, 3) Incierto, 4) Favorable, 5) Muy favorable 1) Muy en desacuerdo, 2) En desacuerdo, 3) Incierto, 4) De acuerdo, 5) Muy de acuerdo 1) Nada interesante, 2) Poco interesante, 3) Interesante, 4) Muy interesante 1) Muy malo, 2) Malo, 3) Regular, 4) Bueno, 5) Muy bueno De preferencia, úsense escalas de cinco categorías cuando se enlistan palabras en las respuestas. No olvide usar opciones positivas y negativas para lograr un balance.

LaEncuestaCorregido15x215.indd 39

6/28/2013 1:51:03 PM

40  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Alternativas de respuestas ordenadas. En este caso, los entrevistados tratan de medir el grado o intensidad de algo en una escala o una secuencia ordenada de respuestas. Preguntas con alternativas de respuestas ordenadas son particularmente convenientes para evaluar actitudes. Éstas son apropiadas cuando el tópico está bien definido y las alternativas de respuestas representan una graduación a lo largo de una sola dimensión. Ejemplos. Señale qué tanto fue usted incluido en la toma de decisiones de su organización sindical (marque el número de respuesta). 1) Nunca 2) Raras veces 3) Algunas veces 4) Siempre ¿Cómo percibe usted la siguiente declaración? “Yo desearía que esta ciudad tuviera más centros recreativos” (Marque el número de su respuesta de preferencia). 1) Muy en desacuerdo 2) En desacuerdo 3) Neutral 4) De acuerdo 5) Muy de acuerdo Las respuestas deben reflejar una diferencia clara y un balance tanto positivo como negativo. Un grupo de respuestas erróneas sería: “decrecido, permanece igual, ligeramente crecido, algo crecido, muy crecido” (se observan sólo una negativa y tres positivas). No es necesario usar la misma categoría de respuestas para cada pregunta, pero se puede hacer cuando sea necesario. Lo más importante es seleccionar respuestas que sean apropiadas a las preguntas. “Otras, por favor especifique”. En este caso, a los encuestados se les ofrece una alternativa de respuesta adicional para que tenga la oportunidad de anotar su propia respuesta, con la frase: “Otra, por favor especifique”. Esto favorece a que no se deje de lado alguna posibilidad de respuesta importante. Esto significa también que se hará un texto narrativo al analizar este tipo de respuestas. Pensar qué se hará con este tipo de respuestas. A menudo, este tipo de información nunca es usada porque no es incluida.

LaEncuestaCorregido15x215.indd 40

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  41

Ejemplo. ¿Cuál considera que es la principal responsabilidad de el o la promotor(a) de salud de su municipio? (Marque el número de su selección). 1. Trabajar con la gente que lo necesite 2. Trabajar con las amas de casa 3. Trabajar con voluntarios(as) líderes en salud de los pueblos 4. Planear y organizar actividades de salud con los(as) jóvenes 5. Otro (Por favor especifique) Cuando alguien de su familia se enferma, ¿a qué tipo de servicios de salud acude? (Marque el número de su preferencia). 1. Clínica más cercana 2. Hospital 3. Médico particular 4. Curandero(a) 5. Otro (Por favor especifique) Ítems en series. Cuando varias preguntas poseen la misma categoría de respuesta, es posible presentar las respuestas en un cuadro, antes que escribir las preguntas separadamente para cada una. Ejemplo. ¿Qué tan frecuente consume su familia los siguientes tipos de carne? (Marque el número de la frecuencia seleccionada por cada uno de los tipos de carne).

Tipo de carne

Nunca (1)

Raras veces (2)

Una Más de Una vez vez una por por mes por mes semana (3) (4) (5)

Más de una por semana (6)

Diario (7)

Res Carnero Cerdo Pollo Pescado

LaEncuestaCorregido15x215.indd 41

6/28/2013 1:51:03 PM

42  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Comparación por pares. Algunas veces a los encuestados se les solicita comparar un ítem contra otro, usualmente expresados en términos de “éste o el otro” o “éste versus el otro”. Ejemplo. Al comparar la carne de res respecto a otras carnes. ¿Cuál de ellas consume con mayor frecuencia? (Escoja una por cada pareja y marque el número que corresponde). 1) Res o 2) Pollo 3) Res o 4) Carnero 5) Res o 6) Cerdo 7) Res o 8) Pescado

Estableciendo parejas entre preguntas y respuestas Otras veces, a los encuestados se les puede solicitar hacer corresponder las respuestas de acuerdo con las preguntas o lista de ítems. Ejemplo. Coloque en el espacio en blanco de la columna de la izquierda la letra de la columna de la derecha según el color del metal a que corresponde. Oro a. Marrón claro A) B) Plata b. Amarillo brillante C) Cobre c. Gris claro D) Plomo d. Pardo oscuro E) Fierro f. Pardo oscuro F) Zinc

Preguntas cerradas con múltiples opciones de respuestas: marque todas las posibles respuestas Este tipo de formato común de respuestas es en realidad una serie de ítems de “sí” o “no”. Es una forma fácil y rápida para obtener la información requerida y también ahorrar espacio. No se debe hacer la lista muy larga, porque al ser respondidas, algunos pueden no ser considerados.

LaEncuestaCorregido15x215.indd 42

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  43

Ejemplo. ¿De qué institución u organización recibió capacitación en horticultura el año pasado? (Marque todas las respuestas posibles). 1) De la Secretaría de Agricultura 2) Del gobierno del estado 3) Del gobierno local 4) De una organización no gubernamental 5) De una empresa privada 6) De otra (especifique) 7) De ninguno ¿Qué información quisiera que se le dé en el próximo taller de cultivo de hortalizas? (Marque todas las respuestas posibles). 1) Prácticas de control de malezas 2) Prácticas de control de enfermedades 3) Prácticas de manejo de invernaderos 4) Control de enfermedades fungosas 5) Mercado de hortalizas 6) Planeación comunitaria participativa 7) Otras (especifique)

Listas Una lista provee una serie de respuestas. Los encuestados pueden escoger una o más respuestas dependiendo de las instrucciones. Ejemplos: En la lista que sigue hay algunos adjetivos que pueden ser usados para describir a una persona. Por favor indique el o los adjetivos que pueden o no describirlo a usted (marque la respuesta de su selección). Adjetivos

Me describe (1)

No me describe (2)

Desconozco (3)

1. Ambiguo 2. Feliz 3. Idealista 4. Extrovertido (a)

LaEncuestaCorregido15x215.indd 43

6/28/2013 1:51:03 PM

44  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

De la lista proporcionada a continuación, seleccione tres adjetivos que lo describan mejor (por favor marque la o las respuestas de su preferencia). a. Ambiguo 1) b. Feliz 2) 3) c. Idealista 4) d. Extrovertido (a)

Estableciendo rangos Ordenación de rangos es una opción de respuestas múltiples. Para las respuestas se proporcionan varias alternativas y los encuestados son solicitados a seleccionarlas en orden de importancia o indicar los tres primeros de su preferencia. Ejemplos: ¿Sobre qué tema quisiera usted conocer más? Seleccione tres respuestas de la lista proporcionada y márquelas en orden de importancia en 1, 2 y 3. 1) 2) 3)

a. ¿Qué comer para verse mejor? b. ¿Cómo afectan a uno los alimentos? c. Control de peso d. Alimentos saludables e. Condición física a través de la dieta f. Vitaminas

¿Sobre qué tema quisiera usted conocer más? Seleccione tres respuestas de la lista proporcionada y escriba las letras en orden de importancia. a. Higiene familiar 1) Primero 2) Segundo b. Primeros auxilios 3) Tercero c. Calidad de los alimentos d. Orientación sexual e. Hábitos alimenticios f. Planificación familiar

LaEncuestaCorregido15x215.indd 44

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  45

El formato de un cuestionario Después de haber seleccionado las preguntas, se requiere tomar una serie de decisiones acerca del formato del cuestionario, su apariencia, la extensión y el orden que tendrán las preguntas. El cuestionario debe ser atractivo a los ojos del encuestado y de fácil llenado. Las siguientes pautas ofrecen algunas sugerencias para ayudar a elaborar un buen cuestionario. U Empiece con una introducción que incluya los propósitos del cuestionario, identifique sus recursos, explique cómo será usada la información obtenida y asegure confidencialidad a las personas encuestadas. En caso de que el cuestionario sea enviado por correo, refuerce los puntos que hizo en la carta de presentación. U Las primeras preguntas deben ser de fácil respuesta, evite tópicos confidenciales. Escriba preguntas interesantes que estén claramente relacionadas con el propósito del cuestionario. Al inicio del cuestionario no use preguntas abiertas o preguntas con largas opciones de respuestas. U Haga las preguntas más importantes al inicio del cuestionario y no al final. U Haga preguntas que fluyan naturalmente y sigan un orden lógico. Procure que las preguntas de un mismo tema estén juntas. Inicie con preguntas de tipo general para luego pasar a lo específico. U Procure usar el mismo tipo de preguntas y respuestas cuando se trata de una serie de preguntas sobre un mismo tópico en particular. Por ejemplo, no cambie innecesariamente la concentración del encuestado usando un formato de respuestas múltiples seguido por preguntas de respuestas “Sí” y “No” y luego preguntas de respuesta abierta. U Escriba las preguntas con letra de fácil lectura. U Una respuesta numerada debería significar la misma cosa a través del cuestionario. Ejemplo:

LaEncuestaCorregido15x215.indd 45

6/28/2013 1:51:03 PM

46  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Si usted empieza con: 1) Sí 2) Sí .

2) No

, no cambie a: 1) No

U Evite que una parte de la pregunta o las respuestas a una pregunta queden en una u otra página. U Asegúrese de que la pregunta sea distinguible de las instrucciones y respuestas. Las instrucciones podrían escribirse en negritas o con letras itálicas. U Las preguntas y respuestas son de fácil lectura si se escriben verticalmente. Si se ubican las opciones de respuestas debajo de las preguntas (antes que de lado a lado) los encuestados seguirán las preguntas con facilidad. Si usted cree que el formato que usa ocupa mucho espacio, debería reorganizar las preguntas. Ejemplo: 1) 2) 3) 4) 5)

Muy bueno Bueno Regular Malo Muy malo

En lugar de: 1) Excelente 5) Muy malo

2) Bueno

3) Regular

4) Malo

U Dar suficiente explicaciones acerca de cómo responder. Incluir instrucciones en paréntesis inmediatamente después de las preguntas. Es mejor repetir las instrucciones las veces que sea necesario. Estos son algunos ejemplos sobre instrucciones específicas que se pueden usar: “Encierre en un círculo el número de su selección, marque una sola opción; marque todas las respuestas de su preferencia; por favor, llene el espacio en blanco; marque todos los números; por favor, no use decimales o fracciones”, entre otras.

LaEncuestaCorregido15x215.indd 46

6/28/2013 1:51:03 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  47

Codificación de las preguntas para registrar la información y elaborar la base de datos en forma electrónica Durante el diseño del cuestionario, se debe contemplar la codificación de todos los ítems y categorías de respuestas como sea posible para ayudar a tabular y registrar los datos para su posterior análisis. Cuando los datos están codificados es más fácil su captura en la computadora directamente del cuestionario. Trate de ubicar los espacios en blanco en la misma dirección de la página para capturar los datos con mayor facilidad. La codificación dependerá del programa estadístico a utilizar: Excel, SPSS, SAS, Statview, entre otros. Para usar Excel, de acuerdo con nuestra experiencia, los códigos usados son los siguientes: X para datos cuantitativos y Y para los datos cualitativos, aunque los datos que usamos siempre son numéricos. Cuando las respuestas son mutuamente excluyentes se usará sólo un código, en cambio, cuando son de múltiples respuestas, se empleará un código por cada alternativa de respuesta. Por ejemplo: Por favor indique la extensión de superficie que usted trabaja, según el tipo de tenencia y calidad. Tipo de tenencia

1) Temporal

2) Humedad 3) Riego

4) Otro

Ejidal

X1

X2

X3

X4

Propiedad privada

X5

X6

X7

X8

Comunal

X9

X10

X11

X12

Rentada

X13

X14

X15

X16

Prestada

X17

X18

X19

X20

Otro

X21

X22

X23

X24

Como se puede ver en este ejemplo, los datos esperados son cuantitativos (superficie de tierra en has), los códigos están representados por X y el encuestado puede elegir más de una respuesta.

LaEncuestaCorregido15x215.indd 47

6/28/2013 1:51:04 PM

48  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

¿Qué tan útil fue la capacitación recibida sobre control de enfermedades? 1) Nada 2) Poco 3) Regular 4) Bastante Y1 En este caso, el dato esperado es cualitativo, para lo cual usamos el código con la letra Y, y el o la encuestado(a), para responder, tiene una sola opción. ¿De qué institución u organización recibió la asistencia técnica para el cultivo de maíz? Y2 1) De la Secretaría de Agricultura Y3 2) Del gobierno del estado Y4 3) De una organización no gubernamental Y5 4) De un despacho de servicios Y6 5) De una empresa privada Y7 6) De otros (especifique) En este ejemplo, los datos esperados son cualitativos, como código usamos la Y, y quien responde tiene más de una opción de respuesta.

Otras sugerencias para que el cuestionario sea entendible U Use enunciados transicionales para reforzar la continuidad. Los enunciados transicionales tienen tres funciones: 1) señalar que un nuevo tópico va empezar; 2) iniciar una nueva página; y 3) romper la monotonía de una larga serie de preguntas. Ejemplos: Quisiéramos hacerle varias preguntas acerca de las organizaciones a las que usted pertenece en su comunidad. Otro propósito importante de esta encuesta es conocer cómo percibe usted los servicios que las organizaciones brindan en su comunidad.

LaEncuestaCorregido15x215.indd 48

6/28/2013 1:51:04 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  49

Finalmente, quisiéramos hacerle algunas preguntas sobre su ayuda para interpretar los resultados. U En tal caso, hay que estar seguros de que los encuestados se están refiriendo al mismo proyecto mencionado en el cuestionario y lo definan como tal. Cuando se evalúa un proyecto o programa, un “ítem de validación” (Bennett, 1982; citado por Taylor, Steele y Douglas, 1996) al inicio del cuestionario identifica al proyecto o programa y establece los pasos a seguir con las preguntas. Es un resumen muy breve de las actividades del programa y el involucramiento de la gente. Ejemplo: El programa de Capacitación y Extensión Agropecuaria implementado en el estado incluyó una variedad de actividades durante 2010 que incluyeron servicios de capacitación y asistencia técnica para la mejora de la producción de traspatio. Las actividades consistieron en pláticas y visitas demostrativas a módulos sobre el manejo y cuidados sanitarios de animales, como gallinas y cerdos, así como de los huertos hortícolas. A estas actividades asistieron numerosas personas, especialmente amas de casa. U Hacer claras y transparentes las preguntas. Algunas preguntas pueden no adecuarse a todos los encuestados. En estos casos, se deben hacer aclaraciones sobre quiénes y cómo deberían responder las preguntas. También es importante estar seguros de dar instrucciones claras para aquellos que no responderán las preguntas. Ejemplos: Con respecto a usted, ¿qué tipo de propiedad es la casa donde vive? Si ésta es su respuesta, 1) Propietario pase a la pregunta… 2) Rentada 3) Prestada 4) Otra

LaEncuestaCorregido15x215.indd 49

6/28/2013 1:51:04 PM

50  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Si usted renta la casa, ¿cuánto paga al mes? 1) Menos de $ 500 2) Entre $500 a $799 3) Entre $800 a $999 4) $1000 o más

Prueba del cuestionario o piloteo La prueba es una parte indispensable del diseño del cuestionario. Probar el cuestionario significa que uno debe examinar con sumo cuidado el instrumento pregunta por pregunta y en general todo el formato. Esto nos debe permitir corregir errores, detalles e incorporar faltantes. Desafortunadamente, mucha gente cree que el piloteo es innecesario e involucra desgaste de tiempo y recursos. De acuerdo con Salanty y Dillman (1994), para cualquier piloteo se requiere contestar las siguientes preguntas: 1. ¿Cada pregunta mide lo que pretende medir? 2. ¿Los encuestados entienden todas las palabras escritas? 3. ¿Las preguntas son interpretadas de la misma manera por todos los encuestados? 4. ¿Las preguntas abiertas tienen una respuesta que se adecúa a cada encuestado(a)? 5. ¿El cuestionario crea una impresión positiva en los encuestados para que respondan con motivación? 6. ¿Las alternativas de respuestas están bien elaboradas de tal modo que los encuestados puedan usarlas sin problemas? (¿falta alguna posible respuesta?, ¿hay alguna pregunta que no permite respuestas claras?). 7. ¿En algún aspecto del cuestionario se notan sesgos por parte del evaluador o investigador? Una vez revisado el contenido del cuestionario, tome en consideración las siguientes sugerencias:

LaEncuestaCorregido15x215.indd 50

6/28/2013 1:51:04 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  51

U Solicite a un colega que revise el cuestionario con mirada crítica. U Escoja a gente similar a los encuestados definitivos para probar el cuestionario. U Hacer un simulacro de encuesta. U Evalúe si las preguntas generarán la información que se necesita. U Intente elaborar la base de datos y procedimientos de análisis. U Revise con atención la última versión del cuestionario.

Definición de la población y muestra Otro componente de la encuesta es el muestreo, no es posible concebir una encuesta sin él. La mayoría de las investigaciones en las Ciencias Sociales y evaluaciones socioeconómicas de programas son conducidas para estudiar poblaciones a través del uso de muestras, porque estudiar una población es a menudo demasiado costoso y requiere de bastante tiempo. La muestra, la cual se asume que es representativa de la población, provee los datos sobre los cuales el investigador elaborará conclusiones. Obtener una muestra es útil y necesario para hacer inferencias acerca de una población. Cuando se va a obtener datos de una población grande, a través de una encuesta, es recomendable obtenerlos de una muestra. En muchos casos es imposible obtener datos de toda una población cuando los recursos de tiempo y dinero son escasos. El tamaño de la muestra debe ser representativo, para lo cual debe usarse la técnica de muestreo apropiado según las características de la población. El tema del muestreo es tan amplio que su tratamiento escapa a los propósitos de esta guía. En esta sección abordaremos sólo algunos aspectos que pueden ser de utilidad para hacer evaluaciones tanto cuantitativas como cualitativas.

Población y muestra Una muestra es un grupo de individuos sobre el cual se desea obtener información. Una población es el grupo sobre el cual se intenta inferir a

LaEncuestaCorregido15x215.indd 51

6/28/2013 1:51:04 PM

52  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

partir de los resultados del estudio. En casi toda evaluación o investigación la muestra es más pequeña que la población, ya que los evaluadores o investigadores raras veces tienen acceso a todos los miembros de la población. En esta sección hablaremos lo relativo a muestras de una población; discutiremos tanto el muestreo probabilístico como el no probabilístico y describiremos varios tipos de diseños de muestreo. Por último, discutiremos cuándo es apropiado generalizar los resultados de un estudio. Cuando deseamos conocer algún aspecto sobre un cierto grupo de personas, por lo general encontramos pocos miembros del grupo que conoceremos y los estudiamos. Después de haber finalizado el estudio de estos individuos, casi siempre llegamos a una conclusión acerca del grupo mayor, del cual ellos son parte. Muchas observaciones de sentido común, en los hechos, son basadas en observaciones de relativamente pocas personas. No es raro, por ejemplo, escuchar declaraciones como: “La mayoría de las amas de casa de una comunidad campesina participan en proyecto de desarrollo”, “la mayoría de jóvenes rurales prefieren irse a las ciudades”.

¿Qué es una muestra? La mayoría de los investigadores o evaluadores obtienen sus conclusiones acerca de un grupo de personas (campesinos, mujeres, estudiantes, entre otros) basados en la experiencia que ellos tienen con grupos pequeños o muestras de miembros individuales. A veces, tales conclusiones son una representación exacta de cómo grupos grandes de gente actúan, o eso es lo que ellos creen, pero a menudo se equivocan. Para el caso del muestreo probabilístico, como se verá más adelante, todo depende de qué tan representativa (qué tan similar) es la muestra del grupo mayor. Uno de los más importantes pasos en el proceso de un estudio evaluativo es seleccionar la muestra de individuos que participarán (sea observado o preguntado) como parte del estudio. Muestreo se refiere a los procesos de seleccionar a estos individuos.

LaEncuestaCorregido15x215.indd 52

6/28/2013 1:51:04 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  53

Muestra vs. población En una evaluación o investigación, una muestra se refiere a cualquier grupo sobre el cual la información es obtenida o se desea obtener. El grupo más grande sobre el cual uno espera aplicar los resultados es llamado población. Todos los 400 productores de una comunidad rural, por ejemplo, constituyen una población; 85 de estos productores constituyen una muestra. Los profesores de las escuelas rurales de un municipio conforman otra población, como lo son los estudiantes de los centros bachilleratos agropecuarios de un estado. Nótese que un grupo puede ser al mismo tiempo una muestra y población; todos los estudiantes de bachilleratos agropecuarios de un estado constituyen una población, sin embargo, ellos constituyen una muestra de todos los estudiantes que cursan el bachillerato en un determinado estado. Cuando es posible, los investigadores preferirían estudiar toda la población en la cual están interesados. Usualmente, sin embargo, esto resulta difícil, la mayoría de las veces la población de interés es grande, diversa y dispersa en una amplia superficie geográfica. Encontrar y contactar a todos los miembros puede ser muy tedioso y costoso. Por esta razón, por necesidad, los investigadores a menudo escogen una muestra para estudiarla. Algunos ejemplos de muestras seleccionadas de poblaciones se indican a continuación. Un investigador está interesado en estudiar el impacto de la introducción de una tecnología para mejorar la producción de arroz en un determinado municipio. Existen 1 500 productores que usaron esta tecnología. El investigador selecciona 150 de estos productores, 30 de cada comunidad (en total son 5) como una muestra de estudio. El director de la oficina regional de desarrollo rural de la Secretaría de Agricultura está interesado en determinar la opinión de los productores rurales acerca de la efectividad del Programa de Asistencia y Capacitación en la región sureste del país. Son 6 estados y 24 000 productores en dicha región. De una lista de todos los productores que participaron en el programa, se seleccionó una muestra de 1 200 productores, aproximadamente 200 de cada estado, a quienes se les hará una entrevista.

LaEncuestaCorregido15x215.indd 53

6/28/2013 1:51:04 PM

54  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

El director de educación primaria de un distrito desea investigar la efectividad de un nuevo texto sobre geografía usado por algunos profesores del estado. De un total de 240 maestros, quienes están usando este texto, el director selecciona una muestra de 12. Él planea comparar los logros de los estudiantes en las clases de estos profesores con otros de 12 profesores que no usaron el texto.

Definición de la población La primera tarea cuando uno selecciona una muestra es definir la población de interés. ¿En qué grupo, exactamente, está interesado el investigador? ¿A qué grupo quiere que los resultados del estudio sean aplicados? En otras palabras, la población es el grupo de interés para el investigador, el grupo a quien el investigador quisiera generalizar los resultados del estudio. Estos son algunos ejemplos de población. U Todos los productores que participaron en el programa de apoyo al desarrollo rural. U Todos los directores de las escuelas primarias del área rural del estado de Oaxaca. U Todos los promotores agropecuarios del estado de Tlaxcala que participaron en el programa de extensión y capacitación en el periodo 2001-2002. U Todos los estudiantes de la última generación del CBTA No. 54. Estos ejemplos revelan que una población puede ser de cualquier tamaño y que tendrá al menos una o varias características que la distinguen de otra. Nótese que una población está siempre constituida por todos los individuos que poseen cierta característica o grupo de ellas.

Muestreo probabilístico y no probabilístico Cuando se habla de muestreo se da por hecho, sin más, que éste debe ser “estadísticamente representativo”, que es lo que, efectivamente,

LaEncuestaCorregido15x215.indd 54

6/28/2013 1:51:04 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  55

caracteriza al muestreo probabilístico. Sin embargo, para la investigación o evaluación, los investigadores han generado otros métodos de muestreo, sobre todo aquellos que emplean la investigación o evaluación cualitativa (Fraenkel y Wallen, 1990). El criterio de confianza que se elija para garantizar la representatividad de la muestra es la característica que distingue a los diversos tipos de muestra. Éstos se dividen en dos grandes familias: las que usan las leyes probabilísticas del azar para garantizar la confianza de la muestra, que se llaman probabilísticas, y las que se sirven de algún otro criterio, que suelen denominarse intencionales. Es necesario reconocer la existencia de estos dos tipos de muestreo. Muestreo probabilístico. Se apoya en la “ley de los grandes números” y en la “ley del límite central”, lo que permite establecer al investigador que lo utiliza adecuadamente: a) el grado de representatividad con la que una muestra reproduce el universo del que se ha extraído, b) el margen de error con el que los datos de aquélla se pueden extrapolar a éste, y c) el nivel de confianza con el que se puede efectuar esta operación. Por ejemplo, el coordinador de un proyecto de desarrollo rural de carácter microrregional desea averiguar sobre la opinión de los campesinos participantes en dicho proyecto, acerca de los microcréditos de apoyo. El coordinador anota en un papel los 240 nombres de los campesinos participantes y los coloca en un sombrero, los revuelve y luego extrae, uno a uno, los papeles con los nombres de unos 40 individuos para ser entrevistados. Muestreo no probabilístico o intencionado. Es aquel en el que los sujetos de la muestra no son elegidos siguiendo las leyes del azar, sino de alguna forma intencional. En él no hay modo de estimar la probabilidad de que cada elemento de la población tenga alguna oportunidad de ser incluido en la muestra. El investigador selecciona las unidades de la muestra, no al azar ni siguiendo un cálculo o ley de probabilidades, sino por otros métodos. Ejemplo: el director del programa Supera desea conocer la opinión de los profesores jóvenes menores de 40 años, de los estados del sur-este del país, acerca de la política de selección para que los profesores sean acreedores de la beca Supera. Para ello, él selecciona una muestra de 30 del total de la población de 2 550 para hablar

LaEncuestaCorregido15x215.indd 55

6/28/2013 1:51:04 PM

56  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

con ellos; seis profesores de cada entidad federativa que conforman la región sur-este son seleccionados. El criterio de selección fue el siguiente: que los profesores tengan, al menos, 15 años de experiencia en el magisterio; que hayan obtenido un puntaje mayor de 60 en la última evaluación y pertenezcan a la asociación de profesores de la localidad. En el primer ejemplo, 40 nombres fueron seleccionados del sombrero después de que los papeles fueron revueltos: esto es muestreo aleatorio porque cada miembro de la población (240 campesinos) tuvo igual oportunidad de ser seleccionado. Existen formas más sofisticadas de determinar una muestra aleatoria, pero tienen la misma intención: obtener una muestra representativa de la población. La idea básica es que los individuos seleccionados tuvieran la misma oportunidad que aquellos que no fueron seleccionados. Uno nunca puede estar seguro de esto, pero si la muestra es obtenida al azar, y es suficientemente grande (más adelante se abordará el tamaño de la muestra), la representatividad del grupo no debería generar duda. La mejor forma para asegurar la representatividad es estar seguro de que no se haya cometido ningún sesgo en el proceso de selección. Más adelante se hablará sobre cómo minimizar los sesgos. En el segundo ejemplo, el director del programa Supera desea representatividad, pero no tanto porque quiere estar seguro de que haya ciertos tipos de profesores en su muestra. Así, se aseguró de que cada individuo seleccionado reuniera todos los criterios mencionados. Entonces, los miembros de la población (profesores de la región sur-este) no tienen una oportunidad igual de ser escogidos; algunos, incluso, no tienen ninguna oportunidad. Por tanto, éste es un ejemplo de muestreo no probabilístico, a veces denominado “muestreo intencionado”.

Métodos del muestreo probabilístico De acuerdo con Fraenkel y Wallen (1990), los métodos más comunes para obtener muestras aleatorias son los siguientes: 1) el muestreo estratificado aleatorio, y 2) el muestreo por conglomerados.

LaEncuestaCorregido15x215.indd 56

6/28/2013 1:51:04 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  57

El muestreo simple aleatorio. Éste consiste en que cada miembro de la población tenga una oportunidad igual e independiente de ser seleccionado. Si la muestra es grande, es la mayor forma que el ser humano haya inventado para obtener una muestra que sea representativa de la población de la cual ha sido seleccionado (figura 1). Cuanto más grande sea la muestra en tamaño, la probabilidad de que sea representativa es mayor. Cualquier diferencia que exista entre la muestra y la población debería ser pequeña y no sistemática. Cualquier diferencia que ocurra es debido a la oportunidad antes que al sesgo por parte del investigador. La clave para obtener una muestra aleatoria es asegurar que cada miembro de la población tenga una oportunidad igual e independiente de ser seleccionado. Este puede ser hecho usando la tabla de números aleatorios. Muestreo estratificado aleatorio. En el muestreo simple aleatorio se asume que la población es generalmente homogénea, sin embargo, una población puede ser contrariamente heterogénea, compuesta por varias sub-poblaciones o estratos. Por ejemplo, el director de desarrollo rural desea conocer el impacto de los apoyos a través del programa de Apoyo Directo al Campo (Procampo) en los productores del estado de Veracruz. Es conocido que la población de los productores no es homogénea en cuanto a niveles de ingreso y producción. Por previos estudios se determinó que existían cuatro grupos de productores: con altos, medianos, bajos y muy bajos ingresos (figura 1). Para propósitos del estudio, éstos vendrían a ser las sub-poblaciones o estratos, de los cuales se seleccionarán, al azar, los miembros de cada uso. Cuando es usado el muestreo estratificado aleatorio, el investigador determina no sólo el estrato, sino también cómo incluir en la muestra a los miembros de cada estrato. El procedimiento más común para determinar el número de miembros por cada estrato se da en forma provisional. Por ejemplo, si 25% de productores del estado de Veracruz que participaron en el Programa de Apoyo para el Desarrollo Rural es del grupo con los más bajos ingresos, entonces, 25% de la muestra corresponderá a este grupo de los más bajos ingresos, entonces, 25% de la

LaEncuestaCorregido15x215.indd 57

6/28/2013 1:51:04 PM

58  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

FIGURA 1. MÉTODOS DE MUESTREO ALEATORIO F A

I G

D H L

C B J

M N

ABCDE 25%

R

E

Q

F G H I J K LMNOPQ 50%

K S

P

O

R ST UV 25%

T

U

BD 25% FMOJ 50%

H D L

T

P N

Simple aleatorio

RT 25%

Aleatorio Estratificado

Fuente: elaboración propia.

muestra corresponderá a este último grupo de productores. Con la forma proporcional, entonces, cada estrato contribuye a la muestra con un número de miembros en correspondencia con su tamaño en relación con los otros estratos de la población. En resumen, en el muestreo estratificado aleatorio la población es dividida en subpoblaciones llamadas estratos. Todos los estratos son representados en la muestra, a menudo, en forma proporcional a su tamaño. Muestreo aleatorio por conglomerados. Tanto en el muestreo estratificado aleatorio como en el simple aleatorio, los investigadores desean asegurar que ciertos tipos de individuos sean incluidos en la muestra, pero a veces esto no es posible cuando se desea seleccionar una muestra de individuos de una población. A veces, por ejemplo, no es posible obtener una lista completa de todos los miembros de la población de interés. Obviamente, cuando esto sucede, no es posible usar el muestreo simple aleatorio ni el estratificado aleatorio.

LaEncuestaCorregido15x215.indd 58

6/28/2013 1:51:05 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  59

Con frecuencia, los miembros de una población se presentan naturalmente formando grupos (clusters). Por ejemplo, un salón de clases de niños en una escuela, o incluso toda la escuela, constituye un grupo. Cuando existen grupos como éstos y no es muy dificultoso seleccionar a los miembros para la muestra, podemos usar el procedimiento denominado muestreo al azar por racimos o grupos. En muestreo por racimos o grupos —no miembros individuales— los sujetos son seleccionados en forma aleatoria de entre la población de grupos. Cada miembro de la población debe pertenecer sólo a un grupo, pero éstos pueden tener diferente número de miembros. Una vez que un grupo es seleccionado, todos sus miembros son incluidos en la muestra. Supongamos que el director de una numerosa escuela es solicitado para encuestar a los padres de familia acerca de los servicios de consejería disponibles en dicha escuela. Sería muy dificultoso utilizar el muestreo simple aleatorio, en cambio, sería relativamente fácil seleccionar un tercero, cuarto o quinto grado de alumnos y luego entrevistar a los padres de los alumnos del grado o clase seleccionados. En este caso, el grado o clase seleccionado es el grupo. Supongamos ahora que cada grado promedia 30 alumnos y el director decide que el total en la muestra debería ser 250. Entonces el director seleccionará, al azar (250/30= 8.3) a 8 clases de todos los terceros, cuartos o quintos grados de la referida escuela. Después de que las 8 clases son seleccionadas, los padres de familia de esos estudiantes serán entrevistados o se les entregará un cuestionario o formato para que contesten las preguntas (figura 2). En síntesis, el muestreo al azar por grupos incluye la selección aleatoria de grupos en lugar de los miembros de una población. Cuando un grupo es seleccionado para la muestra, todos los miembros del grupo son incluidos en ella. Muestreo aleatorio biotápico. En muchos casos es útil combinar el muestreo aleatorio por grupos con el muestreo simple aleatorio. En vez de seleccionar al azar 100 estudiantes de una población de 3 000 estudiantes del 6º. grado en 100 clases, el investigador puede decidir escoger 25 clases, al azar, de la población de 100 clases y luego seleccionar 4 estudiantes de cada clase. Este sistema es mucho menos laborioso que entrevistar a más de 100 clases (casi todos serían incluidos en una

LaEncuestaCorregido15x215.indd 59

6/28/2013 1:51:05 PM

60  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

muestra simple aleatoria). ¿Por qué aplicar este método sería mejor que usar a todos los estudiantes de cuatro clases seleccionados al azar? Porque las cuatro clases son pocas para asegurar la representatividad, aun cuando ellos fueran seleccionados al azar (figura 2). FIGURA 2. OTROS MÉTODOS DE MUESTRO ALEATORIOS Muestreo aleatorio por grupo

Muestreo aleatorio en dos etapas

CD STU

AB

AB

EFG NOP LM QR

JK

CD STU

EFG NOP LM

HI

QR

HI

JK

Muestra de grupos

QR

JK

AB QR

CD

EFG

Muestra de individuos

A, J, Q

Fuente: elaboración propia.

Métodos de muestreo no probabilísticos Dentro de lo que es el muestreo no probabilístico hay varios métodos que pueden ser usados dependiendo de la naturaleza de la población y las situaciones para tener acceso a los individuos de interés. En esta sección se describen tres métodos de los más comunes en nuestro medio. Muestreo por conveniencia. Muchas veces es extremadamente dificultoso (a veces imposible) escoger ya sea una muestra aleatoria o una

LaEncuestaCorregido15x215.indd 60

6/28/2013 1:51:05 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  61

muestra sistemática no aleatoria. En tales circunstancias, el investigador se decidirá por una muestra por conveniencia. Una muestra por conveniencia se integra con un grupo de individuos quienes (convenientemente) están disponibles para el estudio. Así, un investigador puede decidir estudiar dos grupos del tercero de una preparatoria cercana, porque un funcionario de la Secretaría de Educación Pública está interesado en conocer la efectividad de un texto sobre computación. A continuación se presentan ejemplos de muestreo por conveniencia. U La profesora de orientación educativa de una preparatoria entrevista a todos los estudiantes que acuden a ella para recibir orientación sobre sus planes para cursar una carrera. U Un investigador de extensión rural desea conocer de la importancia de los recursos de Procampo para el productor y su familia. Para ello, entrevista a todos los que asistieron al banco a recibir el cheque de lunes a viernes de una de las semanas más concurridas. U Un profesor universitario compara las reacciones de los estudiantes a dos diferentes libros de texto en su clase de métodos estadísticos. En cada uno de los anteriores ejemplos, un cierto grupo de personas fueron escogidas para el estudio porque estuvieron accesibles. La obvia ventaja de este tipo de muestreo es que es conveniente, pero obviamente, posee una mayor desventaja en que la muestra tendrá un sesgo en algún grado. En términos generales, el muestreo por conveniencia no puede ser considerado representativo de cualquier población y debería ser evitado en lo posible. Sin embargo, a veces, para el investigador no existe otra alternativa. Cuando éste es el caso, el estudio debería ser replicado, esto es, repetido con un tamaño de muestra similar para disminuir la probabilidad de que los resultados no sean simplemente una ocurrencia de una sola vez (figura 3). Muestreo intencionado. En ocasiones, basados en conocimientos previos sobre una población y el propósito de la investigación, los

LaEncuestaCorregido15x215.indd 61

6/28/2013 1:51:05 PM

62  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

investigadores utilizan juicios personales para seleccionar una muestra. Los investigadores asumen que ellos pueden usar sus conocimientos de la población para juzgar si una determinada muestra será representativa. Éstos son algunos ejemplos. 1) En un proyecto de micro-crédito, el director de dicho proyecto desea conocer sobre el manejo de los fondos de 80 grupos de cajas de ahorro. Cada grupo está conformado por 15 o 25 socios. En vista de que es dificultoso tener acceso para entrevistar a cada socio de los 80 grupos, el director decide entrevistar sólo a los responsables de cada grupo. 2) Una profesora de ciencias sociales del tercer grado de una preparatoria escoge a dos estudiantes con las más altas calificaciones de la clase; dos de quienes sus calificaciones se acercan al promedio de toda la clase; y dos que tuvieron las más bajas calificaciones en la clase para conocer sus opiniones acerca de incluir una discusión sobre los eventos más recientes (figura 3).

Modalidades del muestreo intencionado Según Fraenkel y Wallen (1990), el muestreo intencionado puede tener dos modalidades, a saber: Muestreo por opinión. Es cuando el investigador selecciona los elementos que han de componer la muestra siguiendo un criterio estratégico personal: los más fáciles (para ahorrar tiempo y dinero…), los que voluntaria o fortuitamente le salen al encuentro (son los únicos que puede lograr para una entrevista…), los que por su conocimiento de la situación o del problema a investigar pueden ser los más idóneos y representativos de la población a estudiar, o entran en contacto con el investigador a través de sujetos entrevistados previamente (muestreo de bola de nieve). Muestreo teórico. Es aquel que se utiliza para generar teorías en donde el analista colecciona, codifica y analiza sus datos y decide qué datos colectar en adelante y dónde encontrarlos para desarrollar una

LaEncuestaCorregido15x215.indd 62

6/28/2013 1:51:05 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  63

teoría mejor a medida que va perfeccionándola. Esto le permite encontrar aquellas categorías de personas o sucesos que desea explorar con mayor profundidad, qué grupos analizar, dónde y cuándo encontrarlos y qué datos requerir de ellos. Más que preocuparse del número correcto o de su selección al azar, se preocupa por recoger la información más relevante para el concepto o teoría buscada (el investigador se coloca en la situación que mejor le permite recoger la información relevante para el concepto o teoría buscada). El muestreo teórico no acaba hasta que dejan de aparecer nuevos conceptos y categorías, es decir, hasta que se alcanza el nivel de saturación, mientras que el probabilístico acaba cuando una muestra seleccionada de antemano ha sido analizada. El muestreo teórico es juzgado por la validez de su teoría alcanzada, mientras que el probabilístico es juzgado a la luz de la teoría de las probabilidades. FIGURA 3. TIPOS DE MUESTREO NO ALEATORIOS MUESTREO POR CONVENIENCIA B E W C G H R D J L Q X P M K O V I N T S A

U

Fácilmente accesibles KNI M S

MUESTREO INTENCIONADO D A C B F H I S L T

G O W E K P J N V M R Q U

MUESTREO SISTEMÁTICO

A F K P U Z

B G L Q V

C H M R W

D I N S X

E J O T Y

Especialmente calificados B HU ON

BG L QV

Fuente: elaboración propia.

Muestreo sistemático. En un muestreo sistemático, cada nuevo individuo en la lista de la población es seleccionado por inclusión en la muestra. Por ejemplo, en una lista de población de 5 000 nombres, para seleccionar una muestra de 500, el investigador seleccionaría cada

LaEncuestaCorregido15x215.indd 63

6/28/2013 1:51:05 PM

64  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

10 nombres de la lista hasta que un total de 500 nombres sean seleccionados. A continuación se presenta un ejemplo de este tipo de muestreo. El coordinador de un proyecto de caja de crédito, en el cual participan 1 000 personas (hombres y mujeres), desea conocer cómo se sienten estas personas acerca de la nueva tasa de intereses para el caso de los préstamos. El coordinador cuenta con una lista de todos los socios y socias ordenada en forma alfabética y escoge una de cada 10 nombres de la lista para conformar la muestra. Para evitar cualquier sesgo, el coordinador escribe del 1 al 10 en papeles y los coloca en un sombrero; luego extrae un papel al azar. El papel extraído tiene escrito el número 3, entonces él escoge a los nombres enumerados 3, 13, 23, 33, 43 y así, sucesivamente, hasta completar 100 nombres de los socios para que sean entrevistados. El método descrito es técnicamente conocido como muestreo sistemático con un inicio al azar. Además, hay dos términos que son frecuentemente usados cuando nos referimos al muestreo sistemático. El intervalo muestra es la distancia que existe entre cada individuo seleccionado para la muestra. En el ejemplo anterior, el intervalo muestra fue 10. Para determinar este intervalo muestral se usa la siguiente fórmula: Tamaño de la población/tamaño de la muestra deseada La razón muestra es la proporción de individuos en la población que son seleccionados para la muestra. En el ejemplo anterior, la razón fue 0.10 o 10%. Una simple forma para determinar la razón muestra es la siguiente: Tamaño de la población/tamaño de la población A veces puede resultar inapropiado el uso del muestreo sistemático. Éste puede darse cuando los nombres de la población son ordenados y en este ordenamiento, por accidente, ciertos tipos de patrones coinciden con la muestra de intervalo, lo cual puede resultar en una muestra marcadamente sesgada (figura 3).

LaEncuestaCorregido15x215.indd 64

6/28/2013 1:51:05 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  65

¿Cómo evitar errores? Cuando se está planeando seleccionar una muestra de una lista de alguna clase, hay que examinar con mucho cuidado la lista y estar seguro de que no hay patrones cíclicos. Si la lista ha sido arreglada bajo un orden particular, el investigador debe de estar seguro de que al reordenamiento no favorecerá algún sesgo en la muestra que pueda distorsionar los resultados. Si tal pareciera suceder, debería asegurarse la representatividad; por ejemplo, seleccionando al azar a los individuos de cada porción cíclica. Además, si la lista de la población es ordenada aleatoriamente, una muestra sistemática obtenida de dicha lista sería una muestra aleatoria (figura 3). A menudo, los investigadores que usan el muestreo no probabilístico son criticados por dos razones fundamentales: 1) no pocos investigadores cualitativos utilizan muestreos imperfectos con pretensiones de representatividad estadística, cuando objetivamente tales muestreos no cumplen con una situación, unos pocos individuos o unas reducidas situaciones. En lugar de generalizar, como se hace en el cuantitativo, en éste se profundiza. Su orientación es hacia la sabiduría vertical y no la horizontal; su obsesión es la validez interna más cuando el único tipo de muestreo es el probabilístico. Ello sobre-simplifica la situación porque el muestreo no probabilístico es tan útil y válido como el probabilístico y su aplicación resulta, con frecuencia, insustituible en los resultados llamados cualitativos.

El tamaño de la muestra en un muestreo probabilístico Una pregunta que frecuentemente se hacen los evaluadores es: ¿qué tan grande deberá ser la muestra? Dada la frecuencia y relevancia de esta pregunta, uno puede asumir que hay una respuesta simple. Sin embargo, debido a que muchos factores están incluidos, Hinkle, Wiersma y Jurs (1988) nos dicen que no existe una respuesta única ni definitiva; pero la respuesta a la pregunta del tamaño de la muestra es crucial por la relación entre el tamaño de la muestra y la significancia estadística de la prueba inferencial aplicada a los datos.

LaEncuestaCorregido15x215.indd 65

6/28/2013 1:51:05 PM

66  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Existen procedimientos para determinar un tamaño de muestra apropiada, desde el uso de simples tablas previamente calculadas hasta el empleo de fórmulas complicadas. La discusión sobre este punto rebasa los propósitos de este manual, sin embargo, a manera de información, a continuación se señalan los factores que deben ser considerados para determinar un tamaño de muestra apropiado. 1) El nivel de significancia (Į); 2) el poder de la prueba (1-ȕ); 3) la varianza de la población (ࢽ²); y 4) el tamaño del efecto (ES). Para mayor información sobre estos puntos, acudir a la bibliografía pertinente, como la de Gómez (1985). Aunque existen varios métodos para determinar al tamaño de la muestra, a manera de ilustración, a continuación se presenta una fórmula general para determinar el tamaño de muestra. Esta fórmula debe ser aplicada cuando no se tiene información sobre alguna de las variables de interés de la población en estudio para determinar la varianza (Gómez, 1985). En estos casos, el autor sugiere usar la fórmula de varianza máxima. Para mayor explicación sobre este punto, acudir a la fuente del autor citado. La fórmula general para determinar la varianza máxima es: S2 , la cual, por deducciones matemáticas, se convierte en: , que ; en la cual, n es el fue deducida de la fórmula general: tamaños de la muestra; N tamaño de la población; d índice estandarizado, que tiene valor 0.1; Į el nivel de significancia de los valores zeta; pn es la proporción de la muestra que posee la característica y su valor es 0.5 y qn que no posee la característica, igualmente, su valor es 0.5.

Aplicación de los cuestionarios Como se explicó en párrafos anteriores, hay dos métodos de encuesta más conocidos: 1) cuando quien hace la encuesta anota las respuestas en el formato, las cuales pueden hacerse en forma directa frente a frente con la persona encuestada o por teléfono; 2) cuando, una vez obtenido el formato, la persona encuestada escribe sus respuestas, para lo cual, la entrega como la devolución del formato puede ser realizada en

LaEncuestaCorregido15x215.indd 66

6/28/2013 1:51:05 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  67

persona, por correo convencional o correo electrónico. En nuestro medio, los más usados han sido a través de entrevistas, aunque la vía electrónica se va convirtiendo en una de las formas preferidas, sobre todo en aquellos que tienen acceso a este tipo de medios. Cada método tiene sus ventajas y desventajas; cada uno necesita ser evaluado en términos del contenido de la encuesta, las características de la gente, el tiempo y los recursos disponibles (personas, materiales y económicos). Los siguientes aspectos pueden ser útiles para seleccionar el método o la forma más conveniente para aplicarlos: 1) Contenido de la encuesta U ¿Qué tipo de preguntas serán hechas? ¿Qué tan complejas o sensibles son para la gente? U ¿Qué tan capaz será la gente para entender y responder a las preguntas hechas oralmente o en forma impresa? ¿En forma anónima o en persona? 2) Características de la gente a ser encuestada U ¿De quién se va a obtener la información? U ¿Cuál es la forma más fácil para obtener acceso a ellas? U ¿Algunas personas al ser encuestadas tienen alguna dificultad para responder las preguntas? Ejemplo: analfabetos, carecen de teléfono, entre otros. 3) Tiempo disponible U ¿Qué tan pronto se requiere la información? 4) Recursos disponibles U ¿Quiénes participarán en la encuesta? U ¿Se cuenta con apoyo de expertos en planeación e implementación de la encuesta?

LaEncuestaCorregido15x215.indd 67

6/28/2013 1:51:06 PM

68  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

U ¿Qué recursos materiales y logísticos se requieren? ¿De los existentes, están disponibles? U ¿De qué tanto dinero se dispone para solventar los gastos? A continuación se describen tres de las formas más comunes en nuestro medio.

Encuesta a través de entrevistas frente a frente La encuesta por entrevista frente a frente es el más comúnmente usado en la evaluación de los proyectos o programas en nuestro medio. Los estudiantes lo usan con frecuencia para obtener datos para su tesis. Este método a menudo permite obtener los mejores resultados, pero tiene la desventaja de que requiere bastante tiempo y es costoso para su implementación. La encuesta es apropiada cuando las personas a ser encuestadas tienen dificultades para responder las preguntas escritas, cuando no hay teléfono ni los medios apropiados para hacerles llegar las preguntas o los formatos. Además, en nuestro medio, para la gente resulta familiar que se les hagan las preguntas por medio de entrevistas. Sin embargo, otra de las desventajas de este método es que para la encuesta frente a frente se requiere que la persona que entreviste tenga las habilidades necesarias. Para ello es necesario que las personas que van a participar en la encuesta se capaciten. En síntesis, la encuesta frente a frente es apropiada cuando: U Se prevé que la gente no responderá con disposición y exactitud. U Las preguntas son complejas y se hace necesaria la explicación de una persona. U No existen formas de hacerles llegar el formato de cuestionario a las personas a ser encuestadas. U La gente no tiene teléfono o existen dificultades con el correo. U No hay limitaciones de presupuesto. Si bien la encuesta frente a frente puede ser costosa, como se indicó, tiene sus ventajas. Una de ellas es que puede ser más certera cuando la

LaEncuestaCorregido15x215.indd 68

6/28/2013 1:51:06 PM

CAPÍTULO III. LOS COMPONENTES DE LA ENCUESTA  69

persona que responderá las preguntas sea quien efectivamente la haga. Uno puede explicar la importancia de la encuesta y asegurar a la persona que su información será estrictamente confidencial. Se pueden usar varios apoyos para que la gente responda las preguntas en forma correcta, sobre todo cuando la persona entrevistada no habla o no domina el idioma del entrevistador. La persona que entrevista, según sus habilidades, puede ayudar a la persona entrevistada a proporcionar toda la información requerida.

Encuesta con formato para ser llenado por el propio encuestado Este método es mayormente utilizado al final de un curso regular, capacitación, un evento en particular o un programa para obtener una retroalimentación inmediata. Este método es recomendable cuando: U Se desea aprovechar la presencia de encuestados disponibles, por ejemplo, al finalizar una conferencia, una feria, una visita de campo. U Se requiere o desea una rápida retroalimentación. U Se dispone de recursos escasos. U No hay otra oportunidad para contactar a la gente otra vez. Cuando se use este método, se puede comunicar el propósito de la encuesta a las personas a ser encuestadas. Muchos pueden estar dispuestos a responder las preguntas cuando son consultados directamente. Se deberá estar dispuesto a responder preguntas que los encuestados planteen. Encuestas por medio electrónicos. Con el avance de la tecnología, ahora se pueden hacer encuestas usando medios electrónicos, como el correo electrónico o internet. Para usar este método se debe disponer de una computadora y estar conectado a internet. Para encuestas simples, uno puede usar el correo electrónico para comunicarnos con los posibles encuestados. Las encuestas a través de los sitios web utilizan

LaEncuestaCorregido15x215.indd 69

6/28/2013 1:51:06 PM

70  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

procedimientos más avanzados y permiten crear instrumentos usando la multimedia y características interactivas.

La encuesta por correo electrónico En la actualidad, dado que casi todo el mundo usa internet y correo electrónico, la encuesta por este medio electrónico se va convirtiendo en el más usado. La encuesta por correo electrónico es conveniente cuando: U Es posible contactar por correo electrónico a los sujetos a ser encuestados. U La encuesta es corta y simple. U Uno necesita los resultados con prontitud. La encuesta usando el sitio web es apropiada cuando: U Las personas a ser encuestadas son usuarios regulares de internet. U La encuesta es más compleja. U Se tiene acceso a los servicios de un consultor que puede ayudarnos con los aspectos tecnológicos para diseñar una encuesta en la página electrónica.

LaEncuestaCorregido15x215.indd 70

6/28/2013 1:51:06 PM

Capítulo IV. Elaboración de la base de datos y análisis

L

as investigaciones y evaluaciones por lo general involucran tratamiento de enormes cantidades de datos que, si no son organizados adecuadamente, su análisis e interpretación pueden ser muy tediosos, hasta imposible de usarlos, por tanto, inservibles. En el caso de la encuesta, en que también se manejan grandes cantidades de datos, la ventaja es que, debido a que se usa cuestionarios previamente estructurados y codificados, los datos, que en su totalidad son números, pueden ser fácilmente organizados y sistematizados. En la actualidad, con la ayuda de los programas computacionales, se pueden organizar los datos para su respectivo análisis e interpretación. Como se mencionó en párrafos anteriores, a nuestro alcance tenemos varios programas computacionales para manejar los datos; entre los más conocidos en nuestro medio tenemos: Excel, SPSS, SAS y otros tanto para las PC como para la marca Apple.

Elaboración de la base de datos a partir de los cuestionarios Para el análisis e interpretación de los datos, se requiere que éstos estén previamente organizados bajo una lógica computacional, al que se denomina base de datos, asimismo, es necesario transcribir o capturar los datos extraídos de los cuestionarios a un formato establecido de manera previa, el cual depende de la lógica de cada programa computacional. La explicación sobre los detalles de este tema rebasa el objetivo de 71 

LaEncuestaCorregido15x215.indd 71

6/28/2013 1:51:06 PM

72  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

este material. Se sugiere, a los interesados en este tópico, acudir a los manuales de los programas computacionales, según su preferencia. De acuerdo con nuestra experiencia, los programas computacionales más usados y comunes en nuestro medio han sido Excel y SPSS. Este último es más versátil en el sentido de que datos eminentemente cualitativos pueden ser registrados para su posterior análisis. Este programa fue creado precisamente para ayudar a las investigaciones de las Ciencias Sociales, como su nombre mismo lo menciona: Statistical Package for Social Sciences (SPSS). Cabe mencionar que la base de datos hecha en Excel puede ser usada con dicho programa. Cuando se usa Excel, previamente debe ser elaborado el formato con base en los códigos del cuestionario. Los códigos se colocan en fila en la primera hilera superior de la llamada hoja de cálculo, teniendo cuidado de que haya una secuencia ordenada, tal como se estableció en los cuestionarios. Cada fila subsiguiente a los códigos se usará para registrar los datos de cada cuestionario. Como recordará, los datos de un cuestionario corresponden a cada individuo encuestado. Para diferenciar los datos de un individuo de otro, los cuestionarios deben tener una identificación, la que se registrará en la o las primeras columnas de la hoja de cálculo. En la página siguiente, a manera de ilustración, presentamos una porción de formato de base de datos de Excel debidamente llenado (figura 4). Como se puede observar, no en todos los casilleros hay datos; esto es debido a que no todos dieron información sobre las opciones de respuesta establecidas. Para elaborar el formato de la base de datos de SPSS es necesario seguir las instrucciones del programa.

Consideraciones para el análisis de datos La intención del análisis de datos es reducir y sintetizar la información para hacer que tenga sentido y permita inferencias acerca de la población. El propósito de la interpretación es combinar los resultados del

LaEncuestaCorregido15x215.indd 72

6/28/2013 1:51:06 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  73

FIGURA 4. EJEMPLO DE UNA BASE DE DATOS ID

Y1

X1

X2

1

2

44

9

2

2

26

18

3

1

29

4

1

67

5

2

65

6

1

78

7

2

41

11

8

1

57

12

9

2

34

10

1

11

1

12 13

Y2

X3

Y3

5

3

Y4

Y5

Y6

Y7

Y8

1

4

1

18

3

1

1

12

1

1

1

6

1

4

1

2

3

4

1

2

1

4

1

2

4

3

1

12

3

3

3

58

7

20

3

3

59

6

50

3

3

1

20

12

2

2

1

28

17

5

1

2

1

2

1

14

2

16

6

16

3

3

3

3

3

1

3

1

1

15

1

48

6

50

1

1

3

1

1

1

1

1

1

16

2

38

17

3

3

1

2

1

1

1

2

1

1

17

2

38

12

50

2

3

3

1

18

1

16

9

50

3

3

3

3

1

3

3

1

1

19

1

61

8

2

3

3

3

20

1

40

12

50

3

3

Y9 Y10 Y11 3

2

8

1 1 3

2

1

3

1

2

3

1

1

9

1 2

3 3 3

3

Fuente: elaboración propia.

análisis de datos con los valores de las declaraciones, criterios y estándares, con el propósito de generar conclusiones, juicios y recomendaciones. Tanto el análisis como la interpretación de datos descansan en métodos empíricos y lógicos. La valoración también desempeña un papel importante en ambos casos. Para el análisis e interpretación de datos, por lo general nos referimos a dos tipos: cuantitativo y cualitativo. Estos términos son usados para distinguir entre el uso del lenguaje natural (narrativo o cualitativo) y el empleo de valores numéricos (cuantitativo) para grabar los hechos

LaEncuestaCorregido15x215.indd 73

6/28/2013 1:51:06 PM

74  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

y observaciones. Cada tipo de dato requiere de análisis sistemáticos y su respectiva interpretación. En este capítulo discutiremos cómo analizar e interpretar ambos tipos de datos, aunque, por la naturaleza de la encuesta, se da énfasis al análisis e interpretación de datos cuantitativos. Es de reconocer, sin embargo, que lo que aquí se presenta es en forma introductoria. Para obtener mayor información sobre ambos métodos, se puede recurrir a libros o manuales especializados en cada caso.

Consideraciones para la selección de métodos estadísticos Los métodos para el análisis e interpretación de datos deben ser seleccionados en el momento de las decisiones hechas sobre qué y cómo será obtenida la información y qué preguntas y consideraciones guiarán la investigación o evaluación. Para el análisis es necesario tener en cuenta los datos por cada aspecto y de todo en su conjunto. Ninguno de los aspectos de la investigación o evaluación deberían ser tratados sin pensar en los otros; y todas las partes deberían relacionarse con el propósito y objetivos de la investigación. Al considerar los métodos alternativos para el análisis e interpretación de datos, el investigador debería hacerse las siguientes preguntas: 1. ¿Qué métodos de análisis e interpretación de datos son apropiados para las preguntas que intentamos responder, la información que intentamos obtener y el método que usaremos para obtener la información? 2. ¿Qué métodos de análisis e interpretación de datos son más probables a ser entendidos y ser creíbles por quienes recibirán los informes? 3. Para los datos cuantitativos, ¿qué escalas de medida deberían ser usadas cuando las observaciones son cuantificadas y qué métodos de análisis son apropiados para tales escalas?

LaEncuestaCorregido15x215.indd 74

6/28/2013 1:51:06 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  75

4. Para los datos cualitativos, ¿cómo serán grabadas y evidenciadas las observaciones? 5. ¿Quiénes deberían ser involucrados en el análisis e interpretación de datos? Las respuestas a estas preguntas ayudarán al investigador o evaluador a seleccionar los métodos apropiados de análisis e interpretación de datos. Además, para el análisis de los datos, se debe determinar la escala de medición a la que corresponde cada dato (Hinkle, Wiersma y Jurs, 1988).

Escalas de medición Los datos obtenidos son resultados de mediciones. Medición, como se explicó en el capítulo I de esta guía, es el proceso de asignar números a las características de acuerdo con una regla definida. Por ejemplo, la adopción de una tecnología por parte de un productor puede ser medida a través de los resultados de la aplicación de dicha tecnología. Aquí la calificación de los resultados de la aplicación de la tecnología representa la medida de la característica de la adopción. La calificación es determinada usando una regla por la cual los números o valores son asignados a los resultados de la aplicación de la tecnología. El puntaje más alto significará la mayor adopción de algunos de los productores. Por supuesto, no toda medida es la misma. Algunas mediciones son más precisas que otras. Si nosotros decimos que un individuos es alto, esto no es tan preciso como decir que dicha persona tiene 1.70 m de estatura. Algunas escalas de medición son más precisas que otras, y algunas características son más susceptibles para precisar la medición que otras. Si tuviéramos una balanza con alta precisión, podríamos determinar el peso de dicha persona en una forma muy precisa. Pero es más dificultoso medir niveles de ansiedad u opiniones en forma precisa. La precisión de medida de una variable es importante para determinar qué métodos estadísticos deberían ser usados para analizar los datos de un estudio. Las escalas de medición de las variables son clasificadas

LaEncuestaCorregido15x215.indd 75

6/28/2013 1:51:06 PM

76  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

en una jerarquía basadas en sus grados de precisión. Esta jerarquía incluye las escalas: nominal, ordinal, intervalo y de razón, cuyas características son descritas a continuación. Escala nominal. La de menor precisión de medición es la escala nominal. Esto es, para ubicarla en una escala de medición, es necesario extender la definición a su límite más bajo. Una escala nominal clasifica objetos en categorías sobre la base de alguna característica definida. Entonces, el número de objetos en cada categoría es contado. Por ejemplo, si hacemos una medida nominal de automóviles, podemos clasificarlos en varias marcas y luego contar los números de carros de cada marca. Sexo, color de los ojos y rasgos étnicos son ejemplos de variables medidas en escala nominal. Hay que tener en cuenta que en una medición nominal no existe orden lógico de las categorías. Por ejemplo, cuando clasificamos automóviles, una marca de automóvil no es considerada mejor, más alta o más fuerte que cualquier otra categoría. En forma similar, medimos los antecedentes religiosos de un grupo de personas estableciendo categorías como: católicos, protestantes, adventistas y así, sucesivamente, pero no podemos ordenar estas categorías del más bajo al más alto nivel en algún tipo de orden numérico. Los datos nominales tienen las siguientes propiedades: 1. Los datos categóricos son mutuamente excluyentes; esto es, un objeto puede pertenecer sólo a una categoría. 2. Los datos categóricos no tienen orden lógico. En síntesis, una escala nominal solamente clasifica, nada más. Escala ordinal. Si no sólo clasificamos objetos o características, sino que también damos un orden lógico a la clasificación, entonces tendremos una escala ordinal. El proceso de medición es esencialmente el mismo en la medición ordinal como en la medición nominal; las categorías son identificadas y son asignadas a números. Pero cuando una variable es medida en una escala ordinal, las diferencias en la cantidad de las características medidas son discernibles y los números son asignados de acuerdo con la cantidad. Si usamos una escala ordinal, los puntajes son contados de lo más alto a lo más bajo y categorizado en ese orden.

LaEncuestaCorregido15x215.indd 76

6/28/2013 1:51:06 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  77

El sistema de categorización de un proceso de adopción de tecnología (innovadores, primeros adoptadores, primera mayoría, última mayoría, rezagados) es un ejemplo. Teniendo esta clasificación, podemos conocer que un productor, quien está ubicado en la categoría de innovadores, posee mayores conocimientos y destrezas en la aplicación de una determinada tecnología que otro que es ubicado en la categoría de primeros adoptadores. Sin embargo, no podemos aún inferir que la diferencia entre innovadores y primeros adoptadores es la misma que la diferencia entre última mayoría y rezagados. Las propiedades de los datos ordinales son los siguientes: 1. Los datos categóricos son mutuamente excluyentes. 2. Los datos categóricos tienen un orden lógico. Los datos categóricos son clasificados de acuerdo con la cantidad de las características particulares que ellos poseen. Escala de intervalo. El siguiente nivel en la jerarquía de medición es la de intervalo. Las variables medidas en una escala de intervalo tienen todas las propiedades de aquellas medidas en escala ordinal, más una propiedad adicional. La diferencia entre niveles de categorías en cualquier parte de la escala refleja diferencias iguales en la característica medida. Esto es, una unidad igual es establecida en la escala. Por esta razón, la escala de intervalo es también llamada una escala de unidad igual. La temperatura es un ejemplo típico de una variable medida en una escala de intervalo. Diferencias iguales entre dos temperaturas cualesquiera son iguales, a pesar de las posiciones de las temperaturas en la escala. Por ejemplo, la diferencia entre temperaturas de 35°C y 38°C es 3°C y la diferencia entre temperaturas de 13°C y 16°C es también 3°C. Es importante notar que en este ejemplo y en todas las escalas de intervalo, el punto cero (O) es precisamente otro punto en la escala, no representa el punto de inicio de la escala o la ausencia total de la característica. Las propiedades de los datos de intervalo son las siguientes: 1. Los datos categóricos son mutuamente excluyentes. 2. Los datos categóricos tienen un orden lógico.

LaEncuestaCorregido15x215.indd 77

6/28/2013 1:51:06 PM

78  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

3. Los datos categóricos son clasificados de acuerdo con la cantidad de las características particulares que ellos poseen. 4. Diferencias iguales en la característica son representadas por diferencias iguales en los números asignados a las categorías. 5. El punto cero (O) es sólo un punto en la escala. Escala de razón. El nivel más alto en la jerarquía de las escalas de medición es la escala de razón. Las variables medidas en la escala de razón muestran la forma más precisa de medición. Esta escala tiene una propiedad adicional que las propiedades de la escala de intervalo: un conocido o verdadero punto cero que refleja una ausencia de la característica medida. Así, cuando tenemos variables medidas en una escala de razón podemos hacer enunciados no sólo acerca de la igualdad de las diferencias entre cualesquiera dos puntos en la escala, sino también entre las cantidades proporcionales de la característica que los dos objetos poseen. Por ejemplo, una temperatura de 50°C no es dos veces más templado que una temperatura de 25°C; en cambio, una bolsa de manzanas que pesa 5 kilos sí pesa el doble que una bolsa con 2.5 kilos. Las propiedades de los datos de razón son: 1. Los datos categóricos son mutuamente excluyentes. 2. Los datos categóricos tienen un orden lógico. 3. Los datos categóricos son clasificados de acuerdo con la cantidad de las características particulares que ellos poseen. 4. Diferencias iguales en la característica son representadas por diferencias iguales en los números asignados a las categorías. 5. El punto cero (O) refleja una ausencia de la característica.

Métodos usados para el análisis de datos cuantitativos Cuando queremos hacer análisis de datos cuantitativos, por lo general pensamos en procedimientos estadísticos. Con los números se pueden hacer diversos cálculos y pruebas estadísticas, pero para los fines de la investigación o evaluación, es necesario definir qué tipo de análisis

LaEncuestaCorregido15x215.indd 78

6/28/2013 1:51:06 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  79

estadístico es requerido, de tal modo que los números y los resultados nos ayuden a decidir qué es lo que pasó con el fenómeno o programa en estudio. No debemos olvidar el gran propósito de la investigación o evaluación, que consiste en que ésta debe ayudar a entender los hechos del objeto de estudio o mejorar el proyecto o programa relacionado. Análisis estadísticos complejos que no conducen a un claro entendimiento son menos deseables que otros en los que se emplearon análisis estadísticos simples, pero que permitieron un entendimiento y ayudaron a llegar a conclusiones válidas y claras. En la fase de organización y análisis de datos de la investigación o evaluación, no es suficiente con analizar los datos, presentar cuadros y describir lo que sucedió. Uno debe responder a la pregunta: ¿qué significa esta información? ¿Para qué es la interpretación de los datos? ¿De quién es el interés? ¿Qué uso se le dará a los resultados de la evaluación? ¿Qué es lo que uno, como evaluador, quiere que se haga con los resultados? Es nuestra responsabilidad y compromiso, como conocedores directos de los datos del fenómeno o del proyecto o programa, darle sentido y significancia a los números y palabras. Los datos por sí solos no dicen nada. Para entender su significado, se deben analizar e interpretarlos, para lo cual es necesario que sean organizados. En el caso de los datos cuantitativos, los análisis estadísticos pueden ser usados. Sin embargo, existen algunas técnicas matemáticas comunes que pueden hacer que los datos de la evaluación sean entendibles. Entre éstas se pueden distinguir las estadísticas descriptivas e inferenciales. Entre las primeras se incluyen: las frecuencias, los porcentajes, las medidas de tendencia central (media, mediana y moda) y las medidas de variabilidad (rangos, varianza y desviación entándar). Entre las segundas, se tienen el análisis de varianza, chi cuadrada, correlación, regresión, análisis factorial y otras.

Frecuencias o contabilización numérica En algunos casos, conocer el número de veces que algo ocurre puede ser suficiente. Una frecuencia nos dice cuántas veces ocurren o cuántas respuestas se insertan en una categoría particular. Por ejemplo:

LaEncuestaCorregido15x215.indd 79

6/28/2013 1:51:06 PM

80  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

U Quince de las mujeres participantes en el proyecto eran analfabetas. U Doce de los productores que recibieron capacitación sobre cómo usar invernaderos, ahora ya producen flores usando esta tecnología. U De los 452 alumnos del último año de la preparatoria, sólo 6 fueron aprobados. En algunos casos, la contabilización numérica es el requerido o necesitado. En otros casos, éste sirve de base para otros cálculos. Uno de esos cálculos es el porcentaje, como un dato relativo, sobre todo cuando el número de sujetos es grande.

Porcentajes Una de las formas estadísticas más comúnmente usadas ha sido el porcentaje. El porcentaje expresa información sobre la proporción de un todo. Si calculamos los porcentajes de las cantidades indicadas en los anteriores ejemplos, tendríamos: U De las mujeres participantes en el proyecto, 18.5% era analfabeta. U De los productores que recibieron capacitación sobre cómo usar invernaderos, 20.0% ahora ya produce flores usando esta tecnología. U De los 452 alumnos del último año de la preparatoria, sólo 1.33% fue reprobado. Los porcentajes tienden a ser fáciles de interpretar. Por ejemplo, es más entendible decir que 40% de los encuestados recibió apoyo del programa de la Alianza para el Campo que decir 168 de los 420 encuestados recibieron apoyo del programa. Los porcentajes son una buena forma para establecer relaciones y comparaciones, ya sea entre las categorías de los encuestados o entre las categorías de las respuestas. Por ejemplo:

LaEncuestaCorregido15x215.indd 80

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  81

U De las mujeres participantes en el proyecto en 1990, 32% era analfabeta, comparado con la actualidad (2012), que es de 12 por ciento. U Si bien 82% de los niños menores de cinco años de las áreas rurales del municipio de Texcoco había sido vacunado, sólo 40% recibió la vacuna en forma completa. Los porcentajes también son útiles cuando deseamos demostrar una distribución de frecuencias de datos agrupados. La distribución de frecuencias es una clasificación de respuestas o valores ordenados en categorías según el tamaño o magnitud. Un ejemplo de ello se muestra en el cuadro 2. CUADRO 2. DISTRIBUCIÓN DE FRECUENCIAS DE ESTUDIANTES SEGÚN SU ORIGEN DE PROCEDENCIA (N = 840) Lugar de origen

Frecuencia

Porcentaje

Urbana

510

60.71

Semi-Urbana

255

30.36

Rural

75

8.93

Cuando reportamos los datos en forma de porcentajes, la práctica común es indicar el número de casos del cual el porcentaje es calculado, ya sea “N” (la población total), o “n” (la muestra o grupo de la población). Aunque el cálculo de porcentajes parece ser un proceso fácil, hay una gran posibilidad de cometer errores: 1. Uso correcto de la base. La base (denominador o divisor) es el número a partir del cual el porcentaje es calculado. Es importante usar la base correcta e indicar cuál fue la base utilizada. ¿45% significa 45% de todos los participantes en un proyecto? ¿45% de la muestra? ¿45% de los que respondieron haber recibido asistencia técnica en general? O ¿45% de los que recibieron asistencia técnica para la producción de conejos?

LaEncuestaCorregido15x215.indd 81

6/28/2013 1:51:07 PM

82  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

A veces usamos el número total de casos o los que respondieron como la base para calcular el porcentaje, pero la conclusión puede resultar errónea. Éste puede ser cierto si la proporción de los que no respondieron es alta. Por ejemplo, tenemos cuestionarios de 100 personas, pero no todas respondieron todas las preguntas. Ciertas preguntas no respondieron, 10.70 respondieron sí y 20 respondieron no. Pero si usáramos 90 como la base (aquellos quienes realmente respondieron la pregunta), encontramos que 78% de aquellos que respondieron, reportó “sí”. No sabemos si la respuesta “no” habría sido sí o no. Consecuentemente, en el análisis, es necesario decir que 10% no respondió (ejemplo 1) u omitir 10% “no” respuestas en el divisor (ejemplo 2). Ejemplo 1. Uso de semillas mejoradas a la reunión de maíz (n = 100) Respuestas Porcentaje Sí 70% No 20% No respondió 10%

Ejemplo 2. Asistencia padres de familia (n=90) Respuestas Sí No

Porcentaje 72% 18%

En varias situaciones, una pregunta puede no ser aplicable a los encuestados. Sólo el número de personas que respondieron la pregunta en particular es usado en el cálculo del porcentaje. 2. Suma de porcentajes. Los porcentajes pueden ser sumados sólo cuando las categorías son mutuamente excluyentes. Éste no es el caso de preguntas con respuestas de múltiples opciones, donde el encuestado puede escoger más de una respuesta. Por ejemplo, a la pregunta: “¿Cuál es el destino de su producción de maíz?”, las respuestas pueden ser más de una: a) auto-consumo, b) venta, c) alimento de animales, d) intercambio. Estas respuestas no son mutuamente excluyentes y sus porcentajes no deberían ser sumados. Por el contrario, en el caso de las preguntas de respuestas mutuamente excluyentes, el encuestado tiene una sola opción de respuesta. Por ejemplo, a la pregunta: “¿Qué le pareció la visita al módulo de

LaEncuestaCorregido15x215.indd 82

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  83

traspatio?”, las posibles respuestas son: a) muy interesante, b) interesante, c) poco interesante, d) nada interesante. De estas opciones, el encuestado tiene una sola opción de respuesta. En este caso, los porcentajes pueden ser sumados. 3. Promedio de porcentajes. Debe procurarse evitar cometer el error al promediar los porcentajes. A menudo se cometen este tipo de errores, pero pocas veces se justifican. El siguiente cuadro muestra un tercer ejemplo. Ejemplo 3. Comunidades atendidas por municipios del proyecto (n = 144) Municipios A B C D E Total

Comunidades atendidas 12 17 15 22 20 86

Porcentaje 85 50 60 95 70 72 (incorrecto)

En este ejemplo, el evaluador reportó incorrectamente un promedio de porcentajes de los cinco municipios. El porcentaje correcto es obtenido al dividir el total de comunidades atendidas (86) entre el número total de comunidades (144) que el proyecto abarca a los cinco municipios, es decir, 59.72%. A veces las diferencias son pequeñas, pero en otras grandes, como en este ejemplo. 4. Redondeo de porcentajes. El redondeo de decimales debe reflejar realmente los resultados. Mostrar muchos dígitos (38.349%) en los decimales puede dar una falsa impresión de exactitud y hacer más dificultosa la lectura. Sin embargo, no mostrar decimales puede cancelar el hecho de que existen diferencias. Al redondear los decimales, la regla recomendada es, cuando el decimal es .5 o mayor, debe ser incrementado al siguiente número entero.

LaEncuestaCorregido15x215.indd 83

6/28/2013 1:51:07 PM

84  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Medidas de tendencia central Las medidas de tendencia central son usadas para caracterizar qué es típico o común en el grupo. Éstas son medidas que nos permiten visualizar o identificar las características centrales o la unidad representativa. Para nuestro propósito, las medidas que mayormente son utilizadas son la media, la mediana y la moda. La media. La media, también denominada promedio, es comúnmente usada en el análisis de datos cuantitativos. Ésta es obtenida al dividir la suma total de las respuestas o puntajes entre el número de casos. Para obtener el promedio de superficie que poseen los campesinos que participan en el proyecto, se divide la suma total de hectáreas entre el número de campesinos. La media también es útil para resumir resultados de puntajes de escalas utilizadas. A menudo queremos que un encuestado responda una pregunta o una serie de preguntas a través de escalas o seleccione una opción de una serie de categorías ordenadas. Incluso con escalas narrativas, un número de valores puede ser asignado para cada categoría. Por ejemplo, nada útil, poco útil, regularmente útil y muy útil pueden tener una asignación de 1, 2, 3 y 4. Las categorías nunca, a veces y siempre, pueden tener los números 1, 2 y 3, respectivamente. Con estos números nosotros podemos calcular la media. A manera de ejemplo, consideramos la siguiente información que es resultado de respuesta a la pregunta sobre la utilidad de la capacitación en el empleo de una nueva tecnología educativa (cuadro 3). La media de cada ítem es calculada multiplicando el número de respuestas de cada categoría por el valor de la escala (1, 2, 3, 4), luego, los resultados de cada producto son sumados y la suma total es dividida entre el número total de respuestas de cada ítem. Para calcular la media del primer ítem del ejemplo anterior, se siguen los siguientes pasos: 1. Multiplica el número de respuestas por el valor de la escala: Nada = (0 x 1); Poco = (15 x 2); Regular = (40 x 3); Mucho = (25 x 4). 2. Se suman los productos: 0 + 30 + 120 + 100 = 250.

LaEncuestaCorregido15x215.indd 84

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  85

CUADRO 3. EJEMPLOS PARA OBTENER MEDIAS DE DATOS CUALITATIVOS Posibles respuestas

N

Nada (1)

Poco (2)

Regular (3)

Mucho (4)

A. Me facilitó 0 15 40 25 información práctica 80 respuestas respuestas respuestas respuestas que puedo usar B. Incrementó mi 0 20 45 15 entendimiento 80 respuestas respuestas respuestas respuestas sobre el tema C. Me estimuló para 4 18 40 20 averiguar más sobre 80 respuestas respuestas respuestas respuestas el tema

3. Este producto se divide entre el valor de N: 250/80 = 3.125 (media). Un resumen de los cálculos realizados puede quedar como en el ejemplo 4: Ejemplo 4. Utilidad de la capacitación A. Me facilitó la información práctica que puedo usar B. Incrementó mi entendimiento sobre el tema C. Me estimuló para averiguar más sobre el tema

Promedio* 3.13 2.94 2.95

* Escala 1 – 4: donde 1 = Nada y 4 = Mucho.

Si bien estos promedios pueden ayudar al análisis de las respuestas, los números son sólo representaciones, por lo que es necesario utilizarlos en ese contexto. La moda. La moda es lo que ocurre con mayor frecuencia. La moda es aquello con que la gente comúnmente denomina “lo típico”. Es la respuesta más frecuente o situación encontrada en la evaluación. Por ejemplo, si los campesinos reportan el tamaño de sus parcelas más a menudo en una superficie equivalente a 4.5 ha, entonces 4.5 es la moda. Otros ejemplos pueden ser:

LaEncuestaCorregido15x215.indd 85

6/28/2013 1:51:07 PM

86  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Si la calificación mayormente obtenida por un grupo de estudiantes es 8, ésta es la moda. En un grupo de familias campesinas, si el número de miembros por familia (6) se repite con mayor frecuencia, ésta es la moda. La moda es significante sólo cuando un número grande de valores es disponible. La moda no es afectada por los valores extremos, como lo es en la media. La mediana. La mediana es el valor ubicado en el medio de un grupo de valores, donde la mitad de los casos caen debajo y la otra mitad sobre este valor. A veces queremos conocer el valor punto medio de nuestros resultados, o en otros queremos dividir un grupo de participantes en grupos con alto y bajo puntajes. Ejemplo 5: Familias

Ingreso anual

1 2 3 4 5 6 7 8 9 10 Total

2 500 3 000 3 000 3 000 3 000 4 000 4 000 4 500 5 000 7 000 39 000

Medidas de tendencia central Moda = 3 000 Mediana = 3 500 Media = 3 900

Para calcular la mediana, ordene los datos de un extremo a otro. Proceda a contar hasta la mitad en la lista de los números para averiguar el valor de la mediana. Cuando dos números coinciden en el punto medio, se toman los dos números del medio, se suman y se divide la suma entre dos para conseguir la mediana. Como la moda, una ventaja de la mediana es que no es afectada por los valores extremos.

LaEncuestaCorregido15x215.indd 86

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  87

El ejemplo 5 nos muestra todas las medidas de tendencia central tratadas. En este ejemplo, se analizan datos de ingreso, en dólares, de 10 familias rurales. ¿Cuál de los cálculos tiene mayor sentido, la mediana o la media? La respuesta dependerá de los datos y el propósito del análisis. Es mejor calcular todas las medidas de tendencia central para luego decidir cuál nos proporciona mayor sentido.

Medidas de variación Como se indicó con anterioridad, la media puede ser influenciada indudablemente por los valores extremos de una distribución. Por ejemplo, un valor alto de uno de los extremos puede hacer que la media también sea alta. O un valor extremo bastante bajo, también hará que la media sea baja. Cuando se tiene una distribución de datos, a veces es importante ver cómo se distribuyen los valores con el fin de entender mejor a la media. ¿Todos los datos son similares a la media? ¿Algunos son mucho mayores y menores que la media? En contraste con las medidas de tendencia central, las cuales son puntos, las medidas de variación son espacios de intervalo que indican cómo los valores son esparcidos a través de la distribución. Entre las medidas de variación más conocidas tenemos: el rango, la varianza y la desviación estándar o típica. Rango. El rango es la medida de variación más simple. Es el número de unidades en la escala de medición que incluye los valores más alto y más bajo, esto es: (valor más alto – valor más bajo) + 1. La diferencia entre el valor más alto y el más bajo, en este caso, es adicionado 1, porque los dos valores extremos son considerados. En otros casos el rango es definido sin la suma de 1. Ejemplo: Distribución (1) Distribución (2)

11 18

16 19

18 21

23 23

29 24

31 26

37 29

En estos ejemplos, la mediana en ambos casos es la misma (23), pero los rangos difieren. El rango de distribución (1) (37 – 1 + 1 = 27)

LaEncuestaCorregido15x215.indd 87

6/28/2013 1:51:07 PM

88  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

es mayor que el rango de distribución (2) (29 – 18 + 1 = 12). Así, la distribución más variada es la 1. Aunque el rango es fácil de calcular, no describe adecuadamente la variación de los datos en una distribución. La limitación más seria es la influencia de los valores extremos. La varianza. La varianza es definida como el promedio de la suma de cuadrados resultante de las diferencias entre cada valor de la distribución y la media que es denominada desviación de la media. Esto es, para obtener una medida de variación sin la restricción matemática, primero elevamos al cuadrado cada resultado de la diferencia entre los valores de la distribución y la media y luego lo sumamos. Lo que obtenemos es la suma de los cuadrados de los resultados de las diferencias alrededor de la media o suma de cuadrados. Simbólicamente, se representa así: SS = ‫( گ‬Xi-x)² = ‫( گ‬xi)². Ahora, si dividimos la suma de cuadrados entre el número total de los datos, tendremos el promedio o media de la suma de cuadrados, la cual es llamada varianza. Esta forma de calcular la varianza es la más simple y se puede hacer cuando los datos son pocos, pero si son más grandes, el cálculo se hace de otra manera, cuya explicación rebasa el propósito de esta guía. Para mayor información sobre este punto, consúltense los libros de estadística, como el de Hinkle, Wiersma y Jurs (1988). La desviación estándar. La desviación estándar es la raíz cuadrada de la varianza; mide el grado por el cual los valores individuales varían de la media. Si estamos interesados sólo en describir la variabilidad de una distribución de valores, tanto la varianza como la desviación estándar pueden ser usadas. Esto es, una desviación estándar alta sugiere una alta variabilidad entre los valores alrededor de la media; por el contrario, una desviación estándar baja indica poca variabilidad. Sin embargo, la desviación estándar tiene algunas ventajas sobre la varianza porque es expresada en las unidades originales de medición.

Procesamiento de los datos La investigación y la evaluación deben descansar completamente en evidencias sólidas y válidas. Empiece entendiendo los datos que obtuvo

LaEncuestaCorregido15x215.indd 88

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  89

al ver el resumen de las respuestas de cada ítem. ¿Son las que esperaba? ¿Algunos datos son muy altos o muy bajos? ¿Las respuestas de algunas preguntas parecen vincularse con las respuestas de otros ítems? Es el momento de trabajar con los datos. U Mire los resultados desde los distintos ángulos. U Revise los datos si es que pueden asemejarse. U Empiece a organizar los datos en cuadros, gráficas o figuras para que se vean más claros y entendibles. Un buen proceso es resumir todos los datos en cuadros, listas o gráficas e interpretar a partir de esos resúmenes. Vea cómo los datos se ven en diferentes formas y cuál de ellos comunica los resultados de manera más efectiva. Uso de cuadros o tablas. Pueden usarse cuadros de entrada simple o doble para una explicación clara. Por ejemplo, la proporción familiar de una comunidad campesina que recibió apoyos para mejorar la producción de animales menores, puede ser presentada de la siguiente manera (cuadro 4). CUADRO 4. FRECUENCIA DE ENTREVISTADOS SEGÚN EL TIPO DE APOYO RECIBIDO PARA MEJORAR LA PRODUCCIÓN PECUARIA DE ESPECIES MENORES (N

= 49)

Ovinos

Porcinos

f

%

f

%

f

%

f

%

Capacitación

15

30.61

15

30.61

5

10.20

4

8.16

Asistencia técnica

11

22.45

10

20.41

3

6.12

2

4.08

Crédito en dinero

20

40.82

6

12.24

4

8.16

0

0.00

Tipo de apoyo recibido

Aves*

Otros

Continúa...

LaEncuestaCorregido15x215.indd 89

6/28/2013 1:51:07 PM

90  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES Continuación...

Ovinos

Porcinos

f

%

f

%

f

%

f

%

Crédito en animales

7

14.29

0

0.00

0

0.00

0

0.00

Otro

4

8.16

0

0.00

0

0.00

0

0.00

Tipo de apoyo recibido

Aves*

Otros

* Gallinas y pollos.

También se pueden elaborar cuadros de doble entrada más complicados, pero que ofrecen un resumen claro. Por ejemplo, cuando uno quisiera mostrar los datos de escolaridad de los hijos y otros miembros de una familia, por género, sin incluir al jefe de familia ni cónyuge, pueden presentarse de la siguiente manera (cuadro 5). En éste se muestra la frecuencia y porcentaje de personas de la muestra según su escolaridad por rangos y el promedio de escolaridad por sexo. Como se muestra en dicho cuadro, los datos debidamente organizados permiten visualizar con claridad lo que pasó en un determinado grupo de familias, el nivel de escolaridad de sus miembros, sin incluir a los jefes de familia ni cónyuge. Esta forma de presentar los datos puede ayudar a un análisis e interpretación sin mayor argumentación. Uso de gráficas. Los datos de una encuesta también pueden ser presentados en forma de gráficas de barras o pastel. Un ejemplo de gráfica de barras es la que se presenta a continuación (figura 5). En ésta se muestra el total de familias encuestadas, según el tamaño de la familia o número de miembros que comparten una misma vivienda. Para construir la gráfica, los datos fueron agrupados de acuerdo con los rangos deseados; en este caso fue el que más convino para el análisis. La gráfica muestra los porcentajes de familias, según el número de miembros, desde el de menor número hasta el de mayor. Se hizo esta agrupación por número de miembros de la familia porque el promedio general, si bien nos da una idea del tamaño de familia de la muestra, no es suficiente para conocer su distribución por grupos. En este caso, la figura parece ofrecer, con mayor claridad, el tamaño de las familias por grupos y permite un análisis en detalle sobre el tamaño de las familias de la muestra estudiada.

LaEncuestaCorregido15x215.indd 90

6/28/2013 1:51:07 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  91

CUADRO 5. FRECUENCIA Y PORCENTAJE DE LOS HIJOS

Y OTROS MIEMBROS DE LA FAMILIA (SIN INCLUIR AL JEFE DE LA FAMILIA NI CÓNYUGE), EN RELACIÓN CON LA ESCOLARIDAD POR GÉNERO

Otros miembros de la familia (n = 15)

HIJOS (n = 206)

Rangos de ESCOLARIDAD en años

Varones

Mujeres

Varones

Mujeres

f

%

f

%

f

%

f

%

Menores de 6 años

12

5.82

18

8.74

1

6.67

3

20.00

Analfabetas

0

0.00

1

0.48

1

6.67

6

40.00

1-3 años

15

7.28

13

6.31

0

0.00

2

13.33

4-6 años

28

13.59

43

20.87

0

0.00

0

0.00

7-10 años

16

7.77

19

9.22

0

0.00

0

0.00

11 años o más

18

8.74

23

11.16

2

13.33

0

0.00

89

43.20

117

56.78

4

26.67

11

73.33

7.27

7.30

4.33

3.80

TOTAL Promedio

FIGURA 5. EJEMPLO DE PRESENTACIÓN DE DATOS USANDO BARRAS 43.08 45 40 35

28.23

30 25 20

15.38 12.31

15 10 5 0 1a3

4a5

6a7

Más de 7

Número de miembros por familia

LaEncuestaCorregido15x215.indd 91

6/28/2013 1:51:08 PM

92  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Los datos también pueden ser organizados y presentados en gráficas de pastel. En la figura 6 se muestra el grado de satisfacción respecto a ciertos apoyos que campesinos de cuatro municipios de Tlaxcala recibieron para producir hortalizas en invernaderos. FIGURA 6. EJEMPLO DE PRESENTACIÓN DE DATOS USANDO GRÁFICA EN FORMA DE PASTEL

Muy satisfecho, 20.0%

Satisfecho, 45.0%

Muy insatisfecho, 20.0%

Insatisfecho, 5.0%

Regular, 10.0%

Pruebas estadísticas Finalmente, con los datos cuantitativos se pueden hacer cálculos estadísticos más sofisticados, dependiendo de la naturaleza del estudio. Existen numerosos métodos y técnicas estadísticos para organizar y procesar los datos. Éstos pueden ser de relación, de comparación y predicción. En la medida en que nos familiarizamos con las matemáticas y los cálculos estadísticos, uno puede usarlos dependiendo de las necesidades. Como ya se señaló, la explicación de dichas técnicas está fuera del alcance de esta guía. Los cálculos matemáticos y pruebas estadísticas en nuestros días son facilitados con el uso de las microcomputadoras. Tanto para la captura como para los análisis estadísticos existen numerosos programas, como el SAS (Statistical Analysis System), SPSS (Statistical Package for Social Sciences) y otros.

LaEncuestaCorregido15x215.indd 92

6/28/2013 1:51:08 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  93

Métodos usados en el análisis de datos cualitativos Wilcox (1982, citado por Worthen y Sanders, 1987) señala que el análisis de datos cualitativos depende de la naturaleza de los datos y del marco conceptual empleado en él. Los métodos para el análisis de datos cualitativos varían desde descripciones narrativas hasta análisis de datos cualitativos de los componentes narrativos (por ejemplo, palabras, frases, oraciones, párrafos y temas). Por su parte, Andrade, Shedlin y Bonilla (1987) indican que los métodos de análisis de datos cualitativos involucran algunas formas de inducción analística. Estos mismos autores, citando a otros, refieren también que las discusiones sobre técnicas específicas, como el enfoque de “incidentes claves”, análisis en el campo, y buscando por patrones y categorías, han brindado a los investigadores y evaluadores una dirección en el procesamiento de información cualitativa. El enfoque de “incidentes clave”. Este enfoque, descrito por Wilcox, involucra análisis de descripciones cualitativas de incidentes educativos o eventos que los evaluadores identifican como incidentes claves o ejemplos concretos de un principio abstracto. Según Erickson (1977), se trata de captar incidentes claves de las notas de campo, luego vincularlos con otros incidentes, fenómenos y construcciones teóricas y escribirlo de tal modo que se perciba de lo general a lo particular, de lo abstracto a lo concreto y una relación entre las partes y el todo. Para una definición más amplia, Wilcox agrega que el enfoque de incidente clave puede incluir saltos masivos de inferencias sobre muchos diferentes tipos de datos de distintas fuentes, incluyendo las notas de campo, documentos, información demográfica, entrevistas estructuradas, entre otros. Técnicas de categorización y codificación. El procedimiento básico consiste en encontrar similitudes a través de varios relatos, entrevistas y/o documentos. Examinar transcripciones de entrevistas, notas de observaciones de campo o respuestas a preguntas abiertas en procura de patrones y temas, involucra categorizar las notas en tópicos recurrentes que parecen relevantes a las preguntas de evaluación. Éste es, a menudo,

LaEncuestaCorregido15x215.indd 93

6/28/2013 1:51:08 PM

94  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

hecho a través de la primera lectura de los materiales para identificar temas y patrones. El siguiente paso es eliminar transcripciones inusuales, clasificando por categorías claves que uno descubrió, y agregando estas piezas en una tarjeta (no olvidar identificar de dónde vienen) o programas computacionales que hagan la tarea electrónicamente. El punto es organizar los materiales de tal forma que haga más fácil localizar los patrones, desarrollar nuevas hipótesis o probar hipótesis derivadas de otras fuentes. Técnicas de análisis de contextualización. Aunque usar técnicas de categorización es una forma poderosa para documentar patrones y temas en un programa, a menos de que sea usado con técnicas de contextualización, las cuales se enfocan más en cómo las cosas se adecúan juntas, categorizar puede conducir a generalizaciones prematuras acerca de un programa. Estudios de caso y resúmenes narrativos acerca de una pieza particular del programa son técnicas de contextualización que preservan y clarifican las conexiones. Estas técnicas traen a la luz factores contextuales importantes y diferencias individuales, los cuales, a menudo, están escondidos de la vista cuando desglosamos transcripciones y datos cualitativos en categorías desconectadas. Sobre estas técnicas, numerosos críticos de los métodos cualitativos de evaluación argumentan que es demasiado subjetiva; que los evaluadores pierden su objetividad cuando logran acercarse al programa o involucramiento de la gente. En respuesta, sus defensores sostienen que la objetividad completa no es posible aun con los métodos cualitativos. Estos argumentan también que los profesionales que practican el método cualitativo han diseñado formas efectivas para tratar con la subjetividad, a través de la reflexión de sus propios valores e inclinaciones, y analizan cómo éstos afectan a la información que obtienen o no, lo que escuchan y no escuchan, cómo interpretan los datos y a qué conclusiones llegan. Para mayor referencia sobre el empleo de técnica de análisis de datos, puede consultarse el libro de Amescua, Jiménez, Bermejo y otros (1996). Para terminar, es necesario tomar en cuenta algunas sugerencias que nos hace la Kellogg Foundation (1998). Este autor señala que cuando

LaEncuestaCorregido15x215.indd 94

6/28/2013 1:51:08 PM

CAPÍTULO IV. ELABORACIÓN DE LA BASE DE DATOS Y ANÁLISIS  95

uno analiza e interpreta datos, sean cualitativos o cuantitativos, se debe estar atento para evitar los siguientes errores. U Asumir que las acciones del proyecto son las únicas causas de cambios positivos. Varios factores, algunos de los cuales no están relacionados con las actividades del proyecto, pueden ser responsables de los cambios en los participantes o en la comunidad. Por lo general, no es posible aislar los impactos y el informe de la evaluación debería, al menos, reconocer otros factores que pueden haber contribuido al cambio. U Olvidar que el mismo método de evaluación puede dar resultados diferentes cuando son usados por personas diferentes o que los informantes pueden decir al evaluador lo que ellos creen que él o ella desea escuchar. Por ejemplo, dos entevistadores pueden hacer la misma pregunta, pero recibir diferentes respuestas porque uno fue más amigable o más paciente que el otro. Problemas erales o dificultades pueden ser ignorados o escondidos porque la gente desea que el proyecto tenga éxito o sea aparentemente exitoso. U Seleccionar al grupo erróneamente para comparar grupos que son diferentes en varios sentidos. Por ejemplo, sexo, edad, raza, estatus económico y muchos otros factores pueden tener un impacto en los resultados del proyecto. Si las comparaciones entre grupos son importantes, intente comparar éstos con otros con características comunes, excepto para las variables que están estudiando. U Reclamar que los resultados de la evaluación de un proyecto pequeño también aplica a un grupo más amplio o área geográfica. Por ejemplo, es erróneo que los resultados de la evaluación de un grupo de participantes sobre alguna intervención particular en una comunidad se trate de aplicar a toda una región. El informe de la evaluación debería reflejar sólo los datos analizados. En resumen, la información obtenida de entrevistas y observaciones, por lo general es registrada en forma narrativa. Algunos de estos relatos

LaEncuestaCorregido15x215.indd 95

6/28/2013 1:51:08 PM

96  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

son útiles y pueden ser suficientes, como los estudios de casos, los cuales ilustran puntos particulares que uno puede desear utilizar en un reporte de evaluación. Sin embargo, en muchos casos usted querrá ver varios relatos de las entrevistas, y/o documentos revisados. Usualmente, esto involucra categorizar las notas dentro del tópico de interés. Esto, a menudo, se hace seleccionando y cortando copias de las notas de entrevistas y observaciones y poniendo los recortes en tarjetas (no olvide identificar de dónde provienen los recortes o pedazos de notas) o usando programas de computadoras que hagan la misma tarea electrónicamente. Una vez que esta tarea organizacional esté hecha, es más fácil localizar los patrones, desarrollar nuevas hipótesis o probar nuevas hipótesis derivadas de otros recursos.

LaEncuestaCorregido15x215.indd 96

6/28/2013 1:51:08 PM

Capítulo V. Interpretación y elaboración del informe de la investigación o evaluación

El propósito del informe de la investigación o evaluación

E

l ciclo de la investigación o evaluación culmina con el reporte o informe escrito u oral. En términos generales, el escrito puede tener diferente estructura y alcance, pero el propósito debe ser el mismo o al menos similar. Por ejemplo, una tesis escrita posee una estructura más amplia que un artículo científico. En el primer caso, su contenido incluye varias partes, y en el de un artículo, es conciso y menos amplio; sin embargo, ambos tienen como propósito comunicar los hallazgos de lo investigado o evaluado y promover reflexiones y aportar a la teoría o la praxis. Cabe señalar también que el informe de una investigación propiamente dicha es diferente en su propósito al de una evaluación, aun cuando deben haber seguido una metodología similar. En el primer caso, el propósito principal es explicar el fenómeno o hecho social a la luz de la o las teorías pertinentes, en cambio, el de la evaluación explica lo que aconteció en un programa o proyecto, a la luz de sus objetivos. Sin embargo, como lo señalan Borg y Gall (1989), las diferencias no son extremas. En general, el informe es un texto expositivo-explicativo, tiene por finalidad brindar información sobre los resultados de una investigación o evaluación. Se centra en un único tema bien delimitado. Utiliza un lenguaje objetivo (se evita expresar sentimientos, opiniones o preferencias). La exposición y explicación se basa en los datos obtenidos, su 97 

LaEncuestaCorregido15x215.indd 97

6/28/2013 1:51:08 PM

98  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

organización e interpretación. Como se señaló en párrafos anteriores, los datos cuantitativos pueden ser presentados en forma de tablas, cuadros, gráficas, figuras, entre otros. Si bien estas formas de presentación de los datos sugieren al lector alguna idea de los puntos que se tratan en el informe, no es suficiente si no es interpretado y argumentado con apoyo de la teoría u otras referencias sobre el tema. Por ello, cuando se elabora el informe, en la exposición no sólo se deben mencionar y explicar los datos, sino también discutir e interpretar su significado a la luz de los objetivos de la investigación o evaluación. En ciertos casos, cuando se trata de datos cuantitativos y los objetivos de la investigación así lo demandan, en la exposición no es suficiente la descripción y explicación de los datos; para un análisis e interpretación con mayor detalle, se requiere del apoyo de ciertos métodos o pruebas estadísticas, como las pruebas de t, o análisis de varianza multivariado para determinar las diferencias causales de dos o más grupos de individuos incluidos en la investigación; correlación, regresión y otras pruebas consideradas como no paramétricas, como la chi cuadrada, Mann-Whitney U, Kruscal-Wallis, entre otros (Wayne, 1981). La calidad e importancia de un informe de investigación o evaluación dependerá de las habilidades para usar las herramientas estadísticas y estrategias narrativas durante la interpretación y argumentación de los datos. Si bien la parte de la exposición, análisis, discusión y conclusión es lo medular de un informe, las otras son relevantes para ayudar a dar cuerpo, como un conjunto interconectado de sus partes. Por ello, en la elaboración de un informe es necesario no perder de vista las partes que conforman un todo unificado.

Estructura del informe de investigación Por lo anterior, el informe de la investigación o evaluación debe tener una estructura, la cual debe seguir las pautas de lo que la comunidad científica ha sugerido. En ese sentido, a continuación presentamos una estructura del informe de una investigación a manera de sugerencia.

LaEncuestaCorregido15x215.indd 98

6/28/2013 1:51:08 PM

CAPÍTULO V. INTERPRETACIÓN Y ELABORACIÓN DEL INFORME  99

Portada En la portada deberá aparecer necesariamente el título del trabajo y el nombre del autor o autores. Es conveniente que en la portada también se incluya el nombre de la persona o personas que han realizado el trabajo, empresa, o institución que avala, patrocina o financió el trabajo, la persona que lo ha dirigido, la editorial que lo publica y la fecha de entrega o defensa de éste. También puede incluirse, de un modo muy discreto, alguna imagen o gráfico relacionado con el trabajo, con la intención de hacerlo más vistoso y atractivo. Es conveniente seguir las pautas específicas para dos diferentes modelos de informes, ya que la portada de un informe de investigación no es igual que la portada de una tesis doctoral.

Índice En el índice o sumario se indicará cada una de las partes en las que se ha dividido el trabajo —introducción, capítulos y apartados de cada capítulo, bibliografía, entre otras—, reseñando la página en la que se encuentra (sólo la página en la que empieza) cada una de dichas partes. Después del índice, y aunque no suele ser obligatorio, pueden incluirse los agradecimientos o dedicatorias antes de comenzar con el contenido del informe.

Introducción Esta sección, como el término señala, introduce al lector(a) al tema que trata el informe de la investigación o evaluación. En la primera parte se describe el problema de investigación, apoyado por la literatura pertinente y la descripción de la situación problemática concreta, que puede ser concluida con preguntas de investigación y justificación de la investigación. La segunda parte, en congruencia con la primera, señala los objetivos y las hipótesis propuestos. Finalmente, la introducción concluye puntualizando las otras partes del contenido del documento.

LaEncuestaCorregido15x215.indd 99

6/28/2013 1:51:08 PM

100  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Revisión de literatura Esta sección incluye dos sub-partes: 1) el marco teórico y 2) el marco referencial o contextual. La primera viene a ser la construcción de un cuerpo de ideas basado en la literatura pertinente sobre el o los temas que involucra al problema de investigación. No se trata de transcribir la idea de otros autores, sino de elaborar un cuerpo de ideas, con base en los aportes de otros autores, sobre el tema central que dio origen al problema de investigación. Éste servirá precisamente para dar soporte posterior a la discusión de los resultados, la argumentación en la prueba de la o las hipótesis y arribar a las conclusiones. La segunda se refiere a la descripción del objeto y sujetos de estudio, su ubicación geográfica y otras características sociales y económicas, llamado marco referencial o contextual. Éste tiene como propósito brindar al lector información para que tenga una idea del grupo o grupos en estudio.

Método/metodología En esta sección, el investigador informa sobre los pasos dados en la realización de su trabajo. La información incluida en este apartado debe ser lo suficientemente amplia y explícita como para que otro investigador pueda hacer una réplica del mismo estudio en un contexto diferente. Dicha información variará dependiendo del método de investigación utilizado. En este gran apartado se incluyen y explican ampliamente los siguientes puntos: a) Población y muestra; b) Variables; c) Diseño; d) Materiales e instrumentos de medida y obtención de datos; e) Procedimientos seguidos para el análisis e interpretación de datos.

Análisis y resultados El investigador puede empezar informando sobre las técnicas estadísticas utilizadas, justificando el motivo por el cual optó por ésas y no por otras distintas, en cualquier caso, las técnicas empleadas para el análisis

LaEncuestaCorregido15x215.indd 100

6/28/2013 1:51:08 PM

CAPÍTULO V. INTERPRETACIÓN Y ELABORACIÓN DEL INFORME  101

e interpretación de los datos responderán a las hipótesis u objetivos y nunca a la novedad de la técnica. En este apartado, de cualquier trabajo de investigación y concretamente en una tesis doctoral, deben responderse uno a uno a todos los objetivos y/o hipótesis, de un modo claro y ordenado, ya que muchos investigadores, erróneamente, una vez que disponen de los datos informatizados en cualquier programa estadístico, comienzan a realizar análisis indiscriminadamente, olvidando lo que en realidad es relevante, que ya había quedado establecido en los objetivos e hipótesis al comienzo de la investigación. Recordemos que éstos hacen referencia a lo que consideramos más relevante descubrir, analizar o describir, así que, si llegado el momento creemos que podría realizarse algún análisis no previsto en los objetivos, convendría revisarlos, ya que es posible que éstos no hayan sido formulados de forma adecuada.

Discusión y conclusiones En esta sección se señalan las implicaciones y utilidad de los hallazgos, efectuando una interpretación desde varias perspectivas, siempre desde el marco de los objetivos e hipótesis planteados y a la luz del marco teórico elaborado. Es decir, al menos ha de incluirse un párrafo donde se sintetice cada uno de los objetivos propuestos y el contexto teórico desarrollado para el caso. No debe ser una lista resumida de los hallazgos. A esto deben agregarse algunas sugerencias en aspectos de investigación sobre el tema y de acción.

Referencias bibliográficas En este apartado se incluye la relación de todas las referencias bibliográficas citadas a lo largo del trabajo (no las consultadas, que serán muchas más). Dicha relación se hará por orden alfabético. En cuanto al modo de presentación bibliográfica, se debe seguir una norma, por ejemplo, el formato propuesto por la APA (Asociación Americana de Psicología).

LaEncuestaCorregido15x215.indd 101

6/28/2013 1:51:08 PM

102  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Anexos y apéndices En los anexos o apéndices se debe incluir aquella información relevante para el trabajo que no ha sido incluida a lo largo de éste, por ejemplo, hay investigadores que recogen el instrumento en el “cuerpo del trabajo” y otros que lo colocan como anexo. También debe incluirse aquella información relevante para la investigación considerada como difícilmente accesible para la persona o personas que tengan que evaluar el informe de investigación o la tesis doctoral. Por ejemplo, un documento al que hemos tenido acceso por una determinada razón y que no es accesible al público en general.

Algunas sugerencias puntuales para el informe de la evaluación Una de las preguntas que debe hacerse antes de iniciar el informe de la evaluación es: ¿cuál es el propósito del informe de la evaluación? Algunas de las respuestas pueden ser (Quispe, 2004): U U U U U U U U U

Demostrar cumplimiento y compromiso Convencer Educar Explorar e investigar Documentar Involucrar a otros Ganar apoyo Promover entendimiento Promover relaciones públicas

Otro aspecto importante que se debe tener presente es la identificación de los interesados para el informe de la evaluación. El obviar a alguno de los grupos puede acarrear problemas posteriores. Los posibles interesados en el informe de la evaluación pueden ser:

LaEncuestaCorregido15x215.indd 102

6/28/2013 1:51:08 PM

CAPÍTULO V. INTERPRETACIÓN Y ELABORACIÓN DEL INFORME  103

U U U U U U U

Quienes proporcionaron la información para la evaluación. Técnicos, promotores y operadores del proyecto. Beneficiarios del proyecto. Coordinadores o directores del proyecto. Funcionarios públicos de gobierno federal, estatal o municipal. Donadores o funcionarios de las entidades financieras. Profesionales y estudiantes de instituciones de educación e investigación. U Público en general. Para decidir el formato, contenido y alcance del informe, se sugiere responder a preguntas que pueden ayudar para saber lo que los interesados necesitan conocer: U U U U U U U

¿Qué tipo de decisiones toman los interesados? ¿Cuáles son sus expectativas de los resultados del proyecto? ¿Qué tanto conocen sobre el proyecto? ¿Qué es lo que aceptarán como una evidencia convincente? ¿Qué uso le darán a la información de la evaluación? ¿Cuándo será más útil para ellos el informe de la evaluación? ¿De cuánto tiempo disponen para leer o escuchar el informe de la evaluación?

La pregunta que con frecuencia hacen los evaluadores, sobre todo los principiantes, es: ¿cómo debe ser el informe de la evaluación? A manera de sugerencia, señalamos algunas respuestas. U Escritura y presentación de un reporte completo de evaluación, que incluya un resumen ejecutivo y apéndices técnicos apropiados. U Escribir resúmenes ejecutivos separados para cada tipo de público interesado. U Hacer presentaciones orales para grupos de interés. U Construir diseños gráficos, cuadros y desplegados para usar en las sesiones de la presentación del reporte.

LaEncuestaCorregido15x215.indd 103

6/28/2013 1:51:09 PM

104  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

U Si es posible, hacer grabaciones de video que muestren los resultados con el propósito de discusión. U Montar un debate o un análisis de adversarios (a favor y en contra) de los resultados en el cual los puntos de vista opuestos pueden ser ampliamente ventilados. Finalmente, sobre la estructura de un informe de evaluación, a continuación presentamos una que es frecuente observar en los informes. Como puede notarse, en cierta medida, es similar al informe de una investigación. I. RESUMEN EJECUTIVO II. CUERPO DEL INFORME U Título U Introducción U Descripción del programa a ser evaluado (contexto, naturaleza, objetivos, estrategias de operación, organización y otros) U Definición del qué evaluar (preguntas de evaluación) U Objetivos de la evaluación U Metodología usada para obtener los datos de campo, organizarlos, analizarlos e interpretarlos U Resultados y discusión U Conclusiones y recomendaciones U Bibliografía U Anexos

LaEncuestaCorregido15x215.indd 104

6/28/2013 1:51:09 PM

Bibliografía

Amescua, C., A. Jiménez, R. Bermejo, R. García y E. Ramalle (1996), Evaluación de programas sociales, Madrid, Díaz de Santos. Andrade, S., M. Shedlin y E. Bonilla (1987), Métodos cualitativos para la evaluación de programas, un manual para programas de salud, planificación familiar y servicios sociales, Estados Unidos, The Pathfinder Fund. Borg, W. R. y M. D. Gall (1989), Educational Research, An Introduction, 5a. ed., Nueva York, Longman. Erickson, F. (1977), “Some Approaches to Inquiry in School Community Ethnography”, Anthropology and Educational Quarterly, 8: 58-69. Fraenkel, J. Y. y N. Wallen (1990), How to Design and Evaluate Research in Education, Nueva York, McGraw-Hill. Gómez, J. R. (1985), Introducción al muestreo, Chapingo, Universidad Autónoma Chapingo. Hinkle, D., W. Wiersma y S. Jurs (1988), Applied Statistics for the Behavioral Sciences, Boston, Houghton Mifflin. Kellogg Foundation (1998), Evaluation Handbook, Kalamazoo, Michigan, W. K. Kellogg Foundation. Quispe, A (2004), Evaluación socioeconómica de programas de desarrollo. Una guía didáctica, México, Plaza y Valdés. Salanty, P. y D. A. Dillman (1994), How to Conduct your own Survey, Nueva York, John Wiley and Sons. Taylor, E., S. Steele y M. Douglas (1996), Planning a Program Evaluation, Wisconsin, Cooperative Extension, University of Wisconsin.

105 

LaEncuestaCorregido15x215.indd 105

6/28/2013 1:51:09 PM

106  EL USO DE LA ENCUESTA EN LAS CIENCIAS SOCIALES

Wayne, W. D. (1981), Estadística con aplicaciones a las Ciencias Sociales y a la educación, traducido del inglés por J. Vilamizar, México, McGraw-Hill. Worthen, B. R. y R. J. Sanders (1987), Educational Evaluation, Alternative Approaches and Practical Guidelines, Nueva York, Longman.

LaEncuestaCorregido15x215.indd 106

6/28/2013 1:51:09 PM