Los procedimientos de control de calidad son particularmente importantes para las recolecciones de datos agrícolas, ya que se ha comprobado que están sujetos a errores de medición y sesgo que pueden tener grandes repercusiones en la calidad global de las estadísticas agrícolas para un país. En esta sección, revisaremos las herramientas básicas de control de calidad que están disponibles y que han demostrado su eficacia cuando se aplican correctamente. Un beneficio colateral de un programa de control de calidad es que el rendimiento tiende a mejorar cuando se sabe que el trabajo será revisado.

1

Con el fin de asegurar la calidad, deberá supervisar el progreso de las operaciones de recolección de datos. Veamos algunas herramientas específicas que se encuentran disponibles para administrar el control de calidad. Usted debe tener conocimiento de las opciones, de tal manera que pueda discutir con su equipo de recolección de datos los métodos que se utilizarán durante las operaciones de recolección. Vamos a examinar en detalle cinco herramientas en esta sección.

2

¿Cuál es el objetivo del control de calidad del listado? Garantizar la calidad del trabajo de establecimiento del listado y protegerse contra la falta de cobertura y la cobertura excesiva durante la recolección de datos. ¿Qué decisiones se toman en cuanto al control de calidad del listado? Si los errores sobrepasan el límite aceptable, la lista del área censal deberá ser reelaborada. Si los errores son de menor importancia, tal vez el empadronador puede reparar los errores con una orientación. Si los problemas son graves, puede ser necesario readiestrar, reasignar o despedir a los empadronadores.

3

Control de la calidad confiable es cuando uno examina el trabajo que está comprobando, como un maestro corrigiendo cuestionarios de los estudiantes. En estos casos, es importante no dejarse influir por prejuicios personales. Relacionado con el establecimiento de listas, se refiere a la verificación al azar de direcciones puestas en la lista por los empadronadores, conducida ya sea por el supervisor o por otro trabajador de campo. Los controles no se realizan en presencia del empadronador, ni se le dice al empadronador qué unidades de enumeración o qué parte de la lista serán revisadas.

El supervisor comprueba que todas las unidades censales se incluyan en el área de listado seleccionada al azar, que no existan duplicaciones, errores u omisiones. El supervisor debe comprobar que la información esté completa en todas las unidades del listado.

4

Existen algunas otras formas de verificar la exactitud e integridad del listado. Con el listado anticipado los mismos supervisores establecen la lista de zonas de muestreo de cada área censal antes de la llegada de los empadronadores. Cuando los empadronadores han completado las secciones de la muestra, el supervisor compara su lista con la de los empadronadores e investiga las diferencias para encontrar posibles errores. El único problema con este método es que, si el empadronador opta por hacer la lista de la zona de la muestra al final, los errores pueden no ser identificados hasta que casi se ha completado el proceso de listado. Las ventajas de este método son que ofrece al supervisor conocimiento de las áreas censales para que pueda detectar trabajos deficientes o inadecuados.

La supresión se utiliza cuando los empadronadores no tienen que hacer el listado de las unidades censales en su área, porque la lista ya está disponible en trabajos anteriores o en registros administrativos. Para comprobar que los empadronadores están siguiendo procedimientos correctos de actualización y prestan atención y cuidado, se dejan a propósito unas unidades censales fuera del listado. Se evalúa la capacidad del empadronador para encontrar y agregar las unidades de enumeración suprimidas. Esta verificación puede aportar confianza en la capacidad de los empadronadores para realizar actualizaciones de listado adecuadas y garantizar la cobertura.

5

¿Qué son las observaciones del entrevistador? El supervisor "imita" al entrevistador cuando inician el trabajo. Esto es parte de la supervisión inicial. El supervisor no debe interferir o interactuar de ninguna manera, y debe dar instrucciones al entrevistador de hacer caso omiso de ellas en la medida de lo posible. El Supervisor observa el trabajo del entrevistador para asegurar un adecuado seguimiento de los procedimientos. El supervisor debe intentar observar todas las partes básicas del trabajo del entrevistador, por ejemplo el listado, las entrevistas y la puesta a ejecución de las medidas de observación. El supervisor evaluará el trabajo del entrevistador al final de la observación y proporcionará retroalimentación positiva y negativa al entrevistador. Durante la observación, el supervisor debe tomar notas pero no proporcionar retroalimentación, para reducir cualquier sesgo.

6

¿Cuáles son las metas de las observaciones del entrevistador? La observación del entrevistador evalúa la efectividad de la formación del entrevistador, ya que el supervisor es un simple observador. Si la capacitación ha sido pobre, todos los empadronadores deberían tener un mal desempeño durante este examen. La observación del entrevistador también garantiza que los entrevistadores comprendan y sigan los procedimientos de entrevista prescritos en su entorno real de trabajo. También sirve para proporcionar a los entrevistadores una retroalimentación individual para fomentar un constante mejoramiento. ¿Cuáles son los resultados de las observaciones?

El supervisor debe decidir si el desempeño del entrevistador es aceptable. Si es así, debe permitir al entrevistador continuar trabajando de manera independiente. En caso contrario, reentrenar al entrevistador sobre los procedimientos, o separar al entrevistador de la operación.

7

Estas revisiones se utilizan para controlar la calidad de los datos tan cerca del origen de datos como sea posible, para corregir los errores y evitar que se produzcan más errores. Si los errores son identificados en este punto, aún existe la posibilidad de corregir los datos desde la fuente -- el hogar o la explotación.

8

¿Cómo se llevan a cabo las supervisiones informales? El supervisor se reúne con los empadronadores para revisar sus formularios y/o cuestionarios en cuanto a legibilidad, completitud y exactitud durante el la realización del censo. Los supervisores deben llevar a cabo tantas supervisiones como sea posible durante el censo, para garantizar una calidad homogénea. Puede que necesite visitar más a los que tienen pobres resultados que a los empadronadores que cometen pocos errores. En esta supervisión, los supervisores aportan comentarios positivos y negativos al empadronador en forma inmediata, ya que ellos se reunirán con el exclusivo propósito de revisar los formularios cumplimentados y tocar base para asegurarse de que los empadronadores están haciéndolo bien y no tienen problemas. Cuando sea posible, el empadronador debe corregir los errores, en donde se requiera, de memoria cuando es algo sencillo, y volver al la unidad censal cuando el error es una gran omisión. ¿Cuáles son los resultados de las supervisiones informales? El supervisor determina si el formulario o cuestionario cumple las normas de calidad. Si es así, el formulario/cuestionario es aceptado y presentado. Si no, se corrige el formulario/cuestionario antes de su presentación.

9

¿Cómo se llevan a cabo las supervisiones formales? Generalmente las lleva a cabo personal de una oficina de campo, cuando reciben las unidades de trabajo completado de un área censal o cuando toda una área censal ha sido completada - dependiendo de cómo esté organizado el trabajo de campo. El objetivo es verificar que los supervisores estén haciendo controles de calidad y proporciona un control adicional del trabajo del empadronador. El personal de la oficina de campo revisa los cuestionarios o listados en cuanto a su legibilidad, completitud y exactitud, y corrigen errores simples o devuelven los materiales al terreno cuando es necesario.

¿Qué productos del trabajo están sujetos a supervisiones? Cualquier formulario o cuestionario que requiera un control de calidad (por ejemplo, formatos de nóminas, cuestionarios, formatos de listas de direcciones, etc. ).

10

¿Qué es la repetición de entrevista? La repetición de entrevista es cuando un supervisor u otro personal de campo lleva a cabo una segunda entrevista a una muestra de unidades censales y completa un nuevo cuestionario para realizar una comparación con el cuestionario de la misma casa o explotación hecho por el empadronador. Proporciona un control de calidad de las actividades de entrevista, y es una buena herramienta para garantizar la calidad del trabajo de campo de los entrevistadores. Proporciona una revisión independiente y objetiva del trabajo de entrevista e, incluso si se escoge una pequeña muestra, el hecho que el entrevistador sabe que su trabajo será supervisado lo hace ser más cuidadoso. ¿Cuál es el propósito del componente de repetición de entrevista aleatoria? Proporciona una amplia protección a toda la carga de trabajo y a todos los entrevistadores, y sirve como un medio eficaz de disuasión para la falsificación por parte del entrevistador.

11

¿Cuál es el el diseño de la muestra para el componente de repetición de entrevista aleatoria? El método más sencillo consiste en seleccionar una muestra aleatoria de los casos dentro de la carga de trabajo de cada empadronador. Esto puede hacerlo el supervisor y si hay un miembro del personal sobre el terreno por encima del supervisor, ambos deben llevar a cabo una muestra aleatoria de las entrevistas extraídas de sus áreas de responsabilidad.

También puede utilizarse un diseño de muestra en dos etapas en el que se toma una muestra de entrevistadores, y a continuación, una muestra de casos dentro de las cargas de trabajo de los entrevistadores. Esto sería más apropiado para personal de rango más elevado que el nivel de supervisión directa.

12

La repetición de entrevista captura los siguientes errores:

1.Falsificación, que es un error grave y deliberado por parte del empadronador, donde ellos inventan datos en lugar de recoger datos a través de los entrevistadores. Este tipo de comportamiento debe ser sancionado severamente para disuadir a otros. Usted debe considerar esto como motivo de despido.

2.Error del entrevistador en el que el empadronador, intencionada o accidentalmente, hace algo mal. En este caso, usted debe asumir que el empadronador quiere hacer lo correcto pero necesita dirección para saber cómo. Debe darse retroalimentación y reentrenamiento informal sobre el terreno, en los temas que parecen confusos.

3.El error del informante es cuando los encuestados brindan información incorrecta. Usted no tiene probabilidades de descubrir estos errores a menos que existan conflictos evidentes en los datos. Los empadronadores deben ser alentados a sondear a los informantes para saber si la información es correcta.

4.Puede ser necesario repetir el trabajo por falsificación u otros errores graves, lo que significa que los empadronadores pueden tener que volver a visitar las unidades censales, lo que aumenta el tiempo y los costos.

13

¿Cómo funciona el modelo administrativo? La repetición de entrevista administrativa acumula datos sobre las principales características del trabajo para todos los entrevistadores para realizar una comparación con otros e identificar anomalías. Idealmente, cuanto más grande sea el grupo de empadronadores, mejor, pero esto dependería de las metodologías de presentación de informes establecidas para la operación de recolección de datos del proyecto. Por ejemplo, si es posible hacer informes por vía electrónica desde el terreno, entonces la compilación de todas estadísticas de los empadronadores debería ser posible. Si no es así, los supervisores pueden entonces compilar estas estadísticas para su propio uso con los formularios adecuados. Usted deseará recolectar información sobre los siguientes tipos de información que se relacionan con la calidad y que son indicativos del rendimiento○: •Unidades censales vacantes - demasiadas y quizás el empadronador está marcándolas como vacantes o de no respuesta. •Entrevistas parciales - quizás el empadronador no sabe bien cómo completar la entrevista o bien no está completando las entrevistas. •Unidades censales por tipo/ubicación - si usted ve un extraño patrón, podría indicar omisiones o duplicaciones. •Unidades censales - podría indicar que los mismos empadronadores las están eliminando para no tener que entrevistarlas. •Tamaño promedio por unidad censal - si hay un muchas pequeñas unidades censales donde uno esperaría grandes, esto podría indicar problemas, y viceversa.

14

¿Cuál es el propósito del componente de repetición de entrevista administrativa? Proporciona un enfoque más orientado a la identificación de trabajo sospechoso por parte del empadronador, comparando estadísticas sobre el desempeño individual con el nivel medio dentro de la misma operación. Esta técnica debería incluir una retroalimentación hacia abajo hasta el nivel de supervisores, ya que proporciona valiosos datos sobre el rendimiento a los supervisores de campo para su uso durante el empadronamiento, si es posible.

15

¿Cómo funciona el modelo administrativo? (Cont.) Después de realizar una comparación de datos acumulados de cada entrevistador con los datos de todos los demás entrevistadores en el área de adscripción, debe tomar nota de los valores atípicos o de aquellos cuyas estadísticas son bastante diferentes. Recuerde que diferente no es necesariamente malo -- podría ser que el individuo está obteniendo mejores resultados que el grupo. Las estadísticas recopiladas también proporcionan un promedio para el personal de campo para su uso al fijar las expectativas. Estos promedios deberán ser comunicados en la medida en que sea posible.

16

Dado que esta es una comparación de estadísticas de la operación, no es posible adoptar de inmediato medidas correctivas al identificar valores anómalos o varianzas. El siguiente paso una vez que se encuentra la varianza es hacerle más controles informales o formales y repeticiones de entrevistas a los empadronadores sospechosos, para verificar si hay algún problema.

17

Cuando un empadronador sigue teniendo un mal desempeño o su trabajo resulta sospechoso después de una revisión administrativa, el supervisor puede optar por utilizar una supervisión complementaria que consiste en la selección intencionada del trabajo de un entrevistador para hacer repeticiones de entrevista adicionales. El supervisor determina el tamaño de la muestra, sin embargo podrían darse directrices para asegurar la calidad y reducir el exceso de muestreo.

18

¿Cuál es el propósito de la repetición de entrevistas complementaria? La repetición de entrevistas complementaria da a los supervisores de campo la capacidad de controlar el trabajo de una selección de entrevistadores cuando tienen razones documentadas para hacer otros controles de calidad necesarios. La revisión complementaria no se basa en opiniones subjetivas sino más bien en hechos documentados a partir de las otras herramientas que hemos discutido en esta sección.

Es especialmente útil para la investigación de casos sospechosos de falsificación por el empadronador. Las la repeticiones complementarias de entrevistas deben detenerse una vez que el trabajo del empadronador es nuevamente de calidad aceptable. Dado que el empadronador no sabe qué unidades censales se seleccionarán para la repetición de entrevista, no hay forma de "imitar" la calidad de su trabajo.

19

Lea las preguntas sobre la diapositiva sin hacer referencia a las otras diapositivas. Anote sus respuestas y, a continuación, desplácese hacia abajo para ver las respuestas. No se preocupe por la terminología precisa, lo importante es entender los conceptos que se presentan. Si usted contesta una pregunta incorrectamente, revise las diapositivas pertinentes. RESPUESTAS AL CUESTIONARIO: 1.¿Cuáles son las cinco herramientas de control de calidad disponibles para las operaciones de recolección de datos? •Controles de hojas de listado, observaciones al entrevistador, supervisiones formales / informales, repetición de entrevistas, control de calidad de la lista de direcciones 2.¿Cuáles son los tres controles de calidad de listados? 1.Listado dependiente 2.Listado anticipado 3.Supresión de los datos de listado 3.Explique cómo llevar a cabo una observación a un entrevistador. •El supervisor observa al empadronador mientras trabaja •No interactúa para minimizar algún sesgo •Toma notas durante la observación •Proporciona retroalimentación después de la observación 4.Nombre los tres tipos de repeticiones de entrevistas que pueden ser utilizados para evaluar el contenido y la calidad de la recolección de datos. 1.Aleatoria 2.Administrativa 3.Complementaria 5. ¿La falsificación es un problema grave? Sí

20