Validación de contenido y adaptación del cuestionario Fantastico por técnica Delphi

Validation and adaptation of the Fantastico questionnaire by Delphi technique

Diana Paola Betancurth Loaiza¹, Consuelo Vélez Álvarez², Liliana Jurado Vargas³

¹ Enfermera, magíster en Enfermería con énfasis en salud familiar. Estudiante de doctorado en Salud Pública. Docente Departamento Salud Pública, Facultad de Ciencias para la Salud, Universidad de Caldas, Manizales (Colombia). diana.betancurth@ucaldas.edu.co

² Enfermera, doctora en Salud Pública. Docente Departamento Salud Pública, Facultad de Ciencias para la Salud. Universidad de Caldas, Manizales (Colombia). Grupo Promoción de la Salud y Prevención de la Enfermedad, Universidad de Caldas, Manizales (Colombia) consuelo.velez@ucaldas.edu.co

³ Enfermera. Especialista en gestión de proyectos de desarrollo con enfoque socio-humanístico. Docente Departamento Materno Infantil, Facultad de Ciencias para la Salud, Universidad de Caldas, Manizales (Colombia). liliana.jurado@ucaldas.edu.co
Correspondencia: Diana Paola Betancurth Loaiza. Edificio Miguel Arango Soto. Carrera 25 n° 48-57. Manizales (Colombia). Tel.: 878 3061 - 878 3064 878 3066, Ext. 135 - 136. diana.betancurth@ucaldas.edu.co

Fecha de recepción: 5 de septiembre de 2014
Fecha de aceptación: 29 de abril de 2015

Resumen

Objetivo: Realizar la validación de contenido y adaptación del cuestionario FANTASTICO a través de la técnica Delphi para caracterizar los estilos de vida en adolescentes escolarizados.

Materiales y métodos: Estudio de validación y adaptación con 12 expertos utilizando la técnica Delphi de consenso a tres rondas; un Alpha de Cronbach > 0,80 se consideró como valor óptimo de fiabilidad para la pertinencia, relevancia, utilidad, redacción y claridad.

Resultados: Los 30 ítems incluidos en el cuestionario evalúan conductas en diez dimensiones del estilo de vida−familiares y amigos, asociatividad y actividad física, nutrición, toxicidad, alcohol, sueño y estrés, tipo de personalidad y actividades, imagen interior, control de la salud y sexualidad y orden-, los puntajes obtenidos en el Alpha de Cronbach fueron: pertinencia: 0,932; relevancia: 0,904; utilidad: 0,948; redacción: 0,846 y claridad 0,800.

Conclusiones: El cuestionario FANTASTICO se adapta como una herramienta breve y útil para la aproximación a los estilos de vida de adolescentes escolarizados desde un enfoque holístico. Es un instrumento fiable para esta población.

Palabras clave: estudios de validación, análisis factorial, adolescentes, estilo de vida. (Fuente: DeCs, BIREME).

Abstract

Objective: To carry out validation and content adaptation of the “FANTASTIC” questionnaire trough the Delphi technique to characterize lifestyles among adolescent students.

Materials and methods: Validations and adaptation studies with 12 experts, which used consensus Delphi technique, into three rounds; an Cronbach’s Alpha > 0,80 was considered as an optimum value of pertinence, worthiness, relevance, usefulness, writing composition, and clarity.

Results: The 30 items included in the questionnaire test behaviors on ten dimensions of life style, as: relatives, friends, associate content, physical activity, nutrishment, toxicity, alcohol, sleepiness, stress, personality sort, and activities, inner image, health control, sexuality, and order. The scores obtained from the Cronbach’s Alpha were: pertinence 0,932; relevance 0,904; usefulness 0,948; writing composition 0,846 and clearness 0,800.

Conclusions: The “FANTASTIC” questionnaire can be adapted like a useful and brief tool to approach the schooled adolescents’ lifestyle from a holistic focus. It is a reliable instrument to study this population.

Keywords: validation studies, factor analysis, adolescents, and lifestyle.

Introducción

El cuestionario FANTASTICO es un instrumento genérico diseñado en el Departamento de Medicina Familiar de la Universidad McMaster de Hamilton, Ontario (Canadá), considerado una herramienta de apoyo a los profesionales en el contexto de promoción de la salud y prevención de la enfermedad; permite identificar y medir los estilos de vida de una población en particular (1,2).

Después de la revisión teórica se consideró que este instrumento podría ser apropiado para ser utilizado en la etapa de la preadolescencia y adolescencia inicial, luego de efectuar la adaptación del cuestionario y definir su validez de contenido. Debido a que no ha sido demostrada su utilidad en esta población, se convino utilizar la técnica Delphi como un primer paso para la validación de contenido, y como la más ajustada de entre las técnicas de consenso, buscando modificar la versión chilena ya existente, que ha sido utilizada en promoción de la salud (3).

El FANTASTICO fue seleccionado por caracterizarse como una herramienta breve; ha sido traducido, adaptado y evaluado psicométricamente en Colombia, Cuba, México y Venezuela, sin embargo, la metodología aplicada no reporta la utilización de la técnica Delphi. Este instrumento ha sido empleado por diferentes autores para la prevención de enfermedades cardiovasculares como hipertensión, diabetes y enfermedades endocrinas (1, 4, 5, 6). López et al. lo emplearon en población diabética y encontraron una consistencia interna con Alfa de Cronbach de 0.81 (6), y en hipertensión refieren la consistencia del instrumento como buena (4).

Para la promoción de la salud fue adaptado por el Ministerio de Salud de Chile (3); el Centro de Estudios de Salud y Bienestar Humano de la Universidad de La Habana también lo ha aplicado para trabajar en población general, familias, adulto mayor, mujer adulta joven, escolares y mujeres médicas de consultorios de familia (7-9).

Pardo y Núñez dieron a conocer una versión modificada del instrumento sometida a criterio de expertos en términos de pertinencia y relevancia, al demostrar que es un instrumento sencillo y de fácil comprensión por parte de las mujeres del estudio.

Para medir el estilo de vida en adultos Ramírez y Agredo (10) refirieron un Alfa de Cronbach mayor a 0,50 y 0,73, lo que denota una consistencia aceptable pero no óptima. Los citados autores sugirieron utilizar el cuestionario en la atención primaria en salud y en estudios epidemiológicos. En estudiantes universitarios (11-13) Reyes sustenta una consistencia interna del cuestionario Alfa de Cronbach: correlación de 0,706 Spearman Brow (r=0,616) y la correlación de dos mitades de Guttman (r=0,615), que se ubica en un rango óptimo de confiabilidad (11).

Este trabajo obedece al interés de docentes de Salud Pública y Materno-Infantil para construir las formas de intervención en hábitos de vida saludables, especialmente en adolescentes escolarizados, quienes empiezan a desarrollar su autonomía. Tiene como objetivo validar y adaptar el cuestionario FANTASTICO como herramienta para caracterizar los estilos de vida de adolescentes escolarizados.

Materiales y métodos

Participantes

Para avanzar sobre el consenso fiable de validación por técnica Delphi se definieron dos grupos: el grupo coordinador integrado por docentes del Departamento de Salud Pública y del Departamento Materno-Infantil de la Universidad de Caldas, quienes condensaron los resultados del segundo grupo integrado por el conjunto de expertos; este grupo escogido se consideró apto para emitir criterios certeros y realizar contribuciones válidas, puesto que sus integrantes contaban con conocimientos basados en la formación y experiencias actualizadas.

Fueron seleccionados 20 posibles candidatos, a quienes se les envió el consentimiento previo de participación; de estos, 12 expertos dieron respuesta positiva.

Cuestionario

El cuestionario se caracteriza por ser una herramienta breve y sencilla; cuenta con el menor número posible de preguntas; cada dimensión trata de ser representada en lo posible por aquellos interrogantes que implican una mayor objetividad en la respuesta; ajustado a la población de estudio y, por tanto, modificado según sus preferencias y lenguaje; con una visión integradora que facilita conocer un panorama general del estilo de vida a través de diez dimensiones: F: familiares y amigos, A: asociatividad y actividad física, N: nutrición, T: toxicidad A: alcohol, S: sueño y estrés, T: tipo de personalidad y actividades, I: imagen interior, C: control de la salud y sexualidad y, finalmente, O: orden.

El FANTASTICO estaba compuesto originalmente por 9 dimensiones y 25 preguntas (2); la propuesta chilena contiene 30 preguntas que se integran en 10 dimensiones (3); la adaptación que se hizo presenta tres opciones de respuesta con valor numérico de 0 a 2 para cada categoría y se califican por medio de una escala tipo Likert, con una calificación de 0 a 120 puntos; a mayor puntaje de la dimensión, la calificación es más positiva hacia la salud; la calificación total se clasifica en rangos cualitativos.

Procedimiento

Se efectuó el procedimiento según los criterios propuestos por Oñate, Ramos (14) y Blasco López y Mengual (15), que establecen tres fases fundamentales: preliminar, exploratoria y final de la técnica Delphi (figura 1) (15).

Fase preliminar

Se determinó el cuestionario, grupo coordinador y el grupo de expertos. Para la selección y adaptación del cuestionario se desarrolló una búsqueda electrónica de instrumentos de valoración integral en los que se destacaran variables de comportamiento en salud que midieran el constructo “estilo de vida” y que tuvieran en cuenta las áreas de la dimensión humana: física, biológica, emocional, psicoespiritual y sociocultural.

La búsqueda se efectuó a través de bases de datos internacionales (Schoolar Google, Scielo, Medline, Ovid, ScienceDirect); esto permitió identificar cuatro cuestionarios pertinentes traducidos al español: el HAVISA, adaptado para población colombiana en adolescentes de 8 a 12 años, de Díaz et al. (16); el cuestionario para el estudio de los hábitos de los escolares en relación con la salud del Health Behaviour in School-aged Children(HBSC) (17), 7 aspectos para ser un niño sano, de Garrido (9), y encuesta a muchachos y muchachas saludables de California Healthy Kids Survey (18),con base en los cuales se revisaron preguntas clave para la adaptación de contenido del cuestionario FANTASTICO del Consejo Nacional Vida Chile (3).

Para ajustar el contenido del cuestionario a los rangos de edad propuestos por el estudio se utilizó la clasificación de Breinbauer y Maddaleno -OPS (Organización Panamericana de la Salud) -OMS (Organización Mundial de la Salud) (19), quienes definen la preadolescencia según las siguientes edades: mujeres de 9 a 12 años y varones de 10 a 13, y la adolescencia inicial, que incluye mujeres de 12 a 14 años y varones de 13 a 15.

Para la versión uno del cuestionario se practicó la primera prueba piloto con un grupo de 15 adolescentes escolarizados, lo cual permitió conocer la interpretación de cada ítem y el léxico común; se encontró que era indispensable ajustar el cuestionario y modificar preguntas que aclararan las categorías que se iban a evaluar.

Primera ronda: El cuestionario fue adaptado por el grupo coordinador a través de la discusión y ajustes cualitativos basado en la prueba piloto, la revisión bibliográfica y sugerencias de expertos temáticos en cada una de las dimensiones propuestas para su evaluación, haciendo especial énfasis en los objetivos de desarrollo del estilo de vida en la etapa de la preadolescencia y adolescencia inicial (19) y los activos para la salud de los escolares (20).

Fase exploratoria

La primera versión fue sometida a diversos cambios como producto del proceso para obtener una segunda versión consolidada por el grupo coordinador, la cual pasó a la segunda ronda.

Segunda ronda: El cuestionario fue enviado al grupo de expertos, vía correo electrónico, teniendo en cuenta un proceso anónimo y de aceptación previa; estos realizaron los aportes necesarios mediante un formato preestablecido que valoraba en cada ítem su pertinencia, relevancia, utilidad, redacción y extensión, claridad y apariencia, lo cual hace referencia a la validez facial (Anexo 1) -el plazo máximo para responder fue de quince días-.

Las evaluaciones de los expertos fueron tabuladas, analizadas cuantitativa y cualitativamente, se efectuaron las modificaciones cualitativas consideradas como pertinentes por el grupo coordinador y para evaluar la consistencia interna del cuestionario se aplicó al Alfa de Cronbach para cada uno de los criterios evaluados asumiendo un valor óptimo de Fiabilidad por encima de 0,80; posterior a ello se realizó una segunda prueba piloto con 15 estudiantes; derivado de este proceso se obtuvo la tercera versión.

Fase final

Esta última versión como tercera ronda fue enviada al grupo de expertos, y con base en valoración de estos se estructuró la versión final del cuestionario que será aplicado en el proceso de investigación en la población de interés.

Aspectos éticos

De conformidad con los parámetros establecidos por la Resolución 008430 de 1993 del Ministerio de Salud de Colombia y la Declaración de Helsinki promulgada por la Asociación Médica Mundial (WMA) de 1975, se preservó el anonimato tanto en la aplicación como en la retroalimentación del cuestionario y la aceptación de participación por expertos y estudiantes que intervinieron en las pruebas piloto.

Resultados

Fase preliminar

Como resultado de la revisión teórica se estableció el cuestionario que se utilizó y los ítems que se iban a modificar o a cambiar según la población de estudio. El grupo coordinador asumió la responsabilidad de seleccionar el conjunto de expertos; que fue constituido por un grupo disciplinar heterogéneo con más de 5 años de experiencia en trabajo práctico e investigativo en el área de adolescencia y promoción de la salud. Los 12 expertos seleccionados venían de países como Colombia, Chile, España y Cuba y procedían de 8 instituciones académicas diferentes de alto nivel y prestigio relacionadas con la temática de investigación (ver tabla 1).

Fase exploratoria

En la ronda inicial surgió la primera versión del cuestionario desarrollada por el equipo coordinador y se realizaron los ajustes pertinentes relacionados con la población de interés.

Entre los resultados cualitativos se destacaron:

• El cuestionario es ameno y amigable, los gráficos y el colorido son agradables e ilustrativos, le quitan el carácter clínico, que puede generar rechazo o sensación de estar siendo evaluado.
• Se consideró como una muy buena estrategia de tamizaje y una guía práctica para hacer seguimiento a los factores determinantes de la salud de las/los adolescentes, pues permite un diagnóstico rápido de su situación.
• Se recomendó que era pertinente incluir el tema del matoneo.
• Algunos ítems con problemas de redacción fueron reestructurados y precisados.
• Como cuestionario de autoaplicación puede generar confianza y garantizar mayor confiabilidad en las respuestas.
• Las observaciones relacionadas con actividad física y nutrición debieron replantearse recurriendo a otros expertos temáticos.

A partir de la calificación de los expertos, los resultados del Alfa de Cronbach para cada uno de los criterios fueron los siguientes: pertinencia: 0,932; relevancia: 0,904; utilidad: 0,948; redacción: 0,846 y claridad 0,800. Tal como se observa, todos los valores obtenidos se ubican en un nivel óptimo de confiabilidad, que debe estar por encima de 0,80, con lo cual se evidencia que los ítems propuestos en el instrumento miden lo que pretenden medir.

Fase final

Los expertos no hicieron ningún cambio adicional al cuestionario definitivo; el grupo coordinador estructuró y diagramó la versión final del mismo como se presenta en el Anexo 2.

Discusión

Autores como García, Rodríguez y Carmona (21) resaltan la necesidad de diseñar y validar instrumentos o cuestionarios de medida cuando no existen otros que midan lo que realmente se pretende evaluar.

La técnica Delphi seleccionada en este estudio ha sido reconocida como método eficaz para alcanzar el consenso (22) y una importante técnica de investigación en los servicios de salud (23); “es una metodología estructurada para recolectar sistemáticamente juicios de expertos sobre un problema, procesar la información y a través de recursos estadísticos, construir un acuerdo general” (24). Es uno de los métodos de expertos para garantizar la alta validez de contenido (25); proceso que fue demostrado con los resultados de esta investigación.

La técnica Delphi ha sido utilizada en la validación de escalas y cuestionarios utilizando el juicio de expertos (26).García y Suárez definen como experto a “aquel cuya formación y experiencia previa le ha permitido alcanzar un dominio sobre un asunto que excede el nivel promedio de sus iguales, y que está en disposición de exponer sus opiniones sobre dicho asunto para que sean utilizadas como juicios conclusivos” (24).

Argimón y Jiménez (27) plantean que obtener una tasa de respuesta mayor a 10 expertos en la primera fase es ideal en la aplicación de la técnica Delphi; en este mismo sentido Okoli y Pawlowski sostienen que la literatura recomienda entre 10 y 18 (28); esta información coincide con el procedimiento utilizado en esta investigación, que evidenció las bondades de la técnica Delphi en el proceso desarrollado, involucrando en el mismo a 12 expertos.

La técnica Delphi ha sido ampliamente utilizada en numerosos estudios y ámbitos de conocimiento (29); algunos (30) resaltan la importancia de la utilización de la técnica Delphi online para tener la oportunidad de que contribuyan expertos internacionales, lo cual concuerda con el procedimiento utilizado con los expertos participantes en esta investigación.

La manera como se seleccionen y puntúen los ítems repercute positivamente en la validación del instrumento (23).El procedimiento realizado para la adaptación de los ítems del FANTASTICO tuvo en cuenta los objetivos del desarrollo para la pre-adolescencia y adolescencia inicial, y la puntuación escala tipo Likert respondió a la necesidad de usar una herramienta práctica en esta misma etapa de desarrollo de acuerdo con las sugerencias de los expertos.

Los resultados encontrados en el análisis inicial de los ítems podrían reflejar la eficacia de la adaptación del método Delphi según lo planteado por Christie y Barela (31) y por Okoli y Pawlowski (28), ya que ninguno de los ítems del cuestionario tuvo que ser eliminado (25).

Al hacer la aplicación de la metodología Delphi en el trabajo efectuado por Gil-Gómez y Pascual-Ezama (32) se encontró un alfa de Cronbach de 0.934.

Con respecto a este coeficiente calculado sobre las puntuaciones dadas por los expertos, en cada uno de los criterios del cuestionario FANTASTICO evidenciaron que estos se encuentran en niveles óptimos > 0,70.

Los resultados de esta investigación parecen ser un claro ejemplo de que la técnica Delphi aporta flexibilidad en el trabajo con expertos para garantizar una buena validez de contenido con un rigor científico y metodológico superior a las metodologías utilizadas tradicionalmente, las cuales dan mayor relevancia a las validaciones psicométricas, sin hacer una previa validación adecuada de contenido, incluyendo la adaptación.

En cuanto al cuestionario FANTASTICO, este se constituye en una herramienta útil de aproximación a los estilos de vida de adolescentes escolarizados desde un enfoque holístico; no solo permite al adolescente elaborar la autoevaluación y su propia construcción de metas o rutas de salud de acuerdo con las diferentes dimensiones propuestas por el cuestionario, sino que también posibilita a los miembros de los equipos de salud redireccionar la tradicional manera impositiva de intervenir la salud y, al mismo tiempo, superar el enfoque de riesgo con que se mide el estilo de vida.

Conclusión

El cuestionario FANTÁSTICO dispone de niveles óptimos de validez de contenido y fiabilidad para describir el estilo de vida de los adolescentes, evaluando al mismo tiempo sus actitudes y prácticas.

La técnica Delphi se convierte en una buena herramienta para la elaboración y adaptación de un cuestionario práctico y aplicable, que garantice no solo la validez de contenido sino posiblemente otros tipos de validez y fiabilidad.

En opinión del grupo de expertos consultados, la adaptación del cuestionario FANTÁSTICO puede considerarse de interés práctico en la caracterización de los estilos de vida en la preadolescencia y adolescencia inicial.

Agradecimientos

Al Centro de Estudios de Salud y Bienestar Humano (CESBH) de la Universidad de La Habana, al comité de expertos y a la Facultad de Ciencias para la Salud de la Universidad de Caldas.

Conflicto de interés: ninguno.

Financiación: Universidad de Caldas.

Referencias

1. Triviño Quintero LP, Dosman González VA, Uribe Vélez YL, Agredo Zúñiga RA, Jerez Valderrama AM, Ramírez Vélez R. Estudio del estilo de vida y su relación con factores de riesgo de síndrome metabólico en adultos de mediana edad. Acta Med Colomb [en línea] 2009 Dic. [fecha de acceso26 septiembre de 2012]; 34(4): 158-163. Disponible en: http://www.scielo.org.co/scielo.php?script=sci_arttext&pid=S012024482009000400002&lng=es.         [ Links ]

2. Wilson DM, Ciliska D. Life-style assessment: Development and use of the FANTASTIC checklist. Can Fam Physician 1984; 30:1527.         [ Links ]

3. Lange I, Vio F. Guía para Universidades saludables y otras instituciones de Educación Superior. OPS, Universidad Católica de Chile, Universidad de Chile, OMS, OPS, Vida Chile. Santiago: Productora Gráfica Andros; 2006. Disponible en: <http://www.eligevivirsano.cl/wp-content/uploads/2012/01/Guia-Universidades-Saludables_INTAOPS.pdf>         [ Links ].

4. López-Carmona JM, Rodríguez-Moctezuma JR, Munguia Miranda C, Hernández-Santiago JL, Casas de La Torre E. Validez y fiabilidad del cuestionario FANTASTIC para medir el estilo de vida de pacientes mexicanos con hipertensión arterial. Aten. Primaria 2000; 26: 542-9.         [ Links ]

5. Rodríguez-Moctezuma R, López-Carmona JM, Munguia Miranda C, Hernández-Santiago JL, Bermúdez-Martínez M. Validez y consistencia del cuestionario FANTASTIC para medir estilo de vida en diabéticos. Rev Med IMSS 2003; 41: 211-20.         [ Links ]

6. López, Carmona JM, Ariza Andraca CR, Rodríguez Moctezuma JR, Munguía Miranda C. Construcción y validación inicial de un instrumento para medir el estilo de vida en pacientes con diabetes mellitus tipo 2. Salud Pública de México [en línea] 2003 [fecha de acceso 15 de agosto de 2013]; 45 (julio-agosto).Disponible en: http://www.redalyc.org/articulo.oa?id=10645404.         [ Links ]

7. Pardo-Torres MP, Núñez-Gómez NA. Estilo de vida y salud en la mujer adulta joven. Aquichan 2008 [fecha de acceso 7 de mayo de 2012]; 8 (2):266-284. Disponible en: http://redalyc.uaemex.mx/src/inicio/ArtPdfRed.jsp?iCve=74180212.         [ Links ]

8. Amable AZ, Peña GM, Cabrera MR, Clarke CC. Hacia una ruta de salud. Universidad de La Habana, Centro de Estudios de Salud y Bienestar Humanos, Policlínico Luyanó, Facultad de Medicina 10 de Octubre, Instituto Superior de Ciencias Médicas de La Habana; 2003 [fecha de acceso 7 de junio de 2012]. Disponible en: http://www.uh.cu/centros/cesbh/Archivos/bvirtual/Zoraida1.pdf.         [ Links ]

9. Garrido G. El enfoque sanológico en la construcción de la salud en la edad escolar. [Informe final tesis de especialidad en medicina general]. Cuba: Centro de Estudios de Salud y Bienestar Humanos, Universidad de La Habana; 2003 [fecha de acceso 7 de junio de 2012]. Disponible en: http://www.uh.cu/centros/cesbh/Archivos/bvirtual/tesis7.pdf.         [ Links ]

10. Ramírez-Vélez R, Agredo RA. Fiabilidad y validez del instrumento "Fantástico" para medir el estilo de vida en adultos colombianos. Rev Salud Pública 2012; 14(2):226-37.         [ Links ]

11. Reyes Gaspar P, Rodríguez Flórez R, Salga-do Mora F, Franco Muñoz D. Perfil de salud y estilo de vida de los estudiantes de medicina de la Universidad Surcolombiana, Neiva, 2010. Health profile and life style of medical students at the Universidad Surcolombiana. Entornos 2012 Sep; 25: 245-256.         [ Links ]

12. Seignón C. Estilos de vida y nutrición en universitarios de la Benemérita Universidad Autónoma de Puebla (BUAP). Semana de Divulgación y video Científico. Puebla (México); 2008.         [ Links ]

13. Santos Silva DA. Indicadores do estilo de vida e autoavaliação negativa de saúde em universitários de uma instituição pública do Nordeste do Brasil. Rev Bras Ativ Fis e Saúde (Pelotas/RS) 2012; 17(4):263-269. Disponible en: http://www.sbafs.org.br/_artigos/545.pdf.         [ Links ]

14. Oñate N., Ramos L, Díaz A. Utilización del método Delphi en la pronosticación: una experiencia inicial. Economía Planificada (Cuba) 1988; 3 (4): 9-48. Disponible en: http://www.rieoei.org/deloslectores/804Bravo.PDF.         [ Links ]

15. Blasco Mira JE, López Padrón A. Mengual S. Validación mediante el método Delphi de un cuestionario para conocer las experiencias e interés hacia las actividades acuáticas con especial atención al Winsurf. Ágora para la educación física y el deporte 2010; 12 (1):75-96. Disponible en: http://dialnet.unirioja.es/servlet/articulo?codigo=3217522.         [ Links ]

16. Díaz Martínez M. Estilos de vida en estudiantes de 8 a 12 años de colegios urbanos oficiales residentes en el municipio de Chía, Cundinamarca. [Tesis Residencia en Pediatría]. Bogotá, D.C., Universidad de La Sabana, 2010. Disponible en: http://intellectum.unisabana.edu.co:8080/jspui/bitstream/10818/2007/1/Margarita%20D%C3%ADaz%20Mart%C3%ADnez.pdf.         [ Links ]

17. http://www.msc.es/profesionales/saludPublica/prevPromocion/promocion/saludJovenes//docs/cuestionarios/cuestionarioMayoresHBSC_2006.pdf.         [ Links ]

18. Encuesta a los muchachos y muchachas saludables de California. California Healthy Kids Survey. CA Dept. of Ed. 2011-2012. Disponible en: http://chks.wested.org/resources/chks-ms-core-span-1213.pdf.         [ Links ]

19. Breinbauer C, Maddaleno M. Jóvenes: opciones y cambios: promoción de conductas saludables en los adolescentes. Publicación Científica y Técnica n° 594. Washington, D.C.: OPS; 2008.         [ Links ]

20. Hernán M, Lineros C. Los activos para la salud. Promoción de la salud en contextos personales, familiares y sociales. Revista Fundesfam 2010; 2 (2): 6-12. Disponible en: http://www.fundesfam.org/revista%20fundesfam%201/007revisiones.htm.         [ Links ]

21. García de Yébenes MJ, Rodríguez F, Carmona L. Validación de cuestionarios. Reumatol-Clín 2009;5(4):171-7.         [ Links ]

22. Hung H-L, Altschuld JW, Lee Y. Methodological and conceptual issues confronting a cross-country Delphi study of educational program evaluation. Evaluation and Program Planning 2008; 31, 191-198.         [ Links ]

23. Yáñez Gallardo R, Cuadra Olmos R. La técnica Delphi y la investigación en los servicios de salud. Ciencia y Enfermería 2008; XIV (1): 9-15. Disponible en: http://www.scielo.cl/pdf/cienf/v14n1/art02.pdf.         [ Links ]

24. García Valdés M, Suárez Marín M. El método Delphi para la consulta a expertos en la investigación científica. Rev. Cubana Salud Pública 2013; 39(2): 253-267.         [ Links ]

25. Gil-Gómez de Liaño B, Pascual-Ezama D. La metodología Delphi como técnica de estudio de la validez de contenido. Anales de Psicología 2012; 28:1011-1020. Disponible en: http://www.redalyc.org/articulo.oa?id=16723774041.         [ Links ]

26. Martínez-Piñeiro E. La Técnica Delphi como estrategia de consulta a los implicados en la evaluación de programas. Revista de investigación educativa (RIE) 2003;21(2):449-64.         [ Links ]

27. Argimón JM, Jiménez J. Métodos de investigación clínica y epidemiológica. Madrid: Harcourt; 2000.         [ Links ]

28. Okoli C, Pawlowski S. The Delphi method as a research tool: an example, design considerations and applications. Information & Management 2004; 42: 15-29.         [ Links ]

29. Pardo A, San Martin R. Análisis de datos en psicología. Madrid: Pirámide; 2004.         [ Links ]

30. Lima-Rodríguez JS, Lima-Serrano M, Jiménez-Picón N, Domínguez-Sánchez I. Validación de contenido de la escala de autopercepción del estado de salud familiar usando la técnica Delphi. Rev. Latino-Am. Enfermagem 2013; 21(2). 1-9. Disponible en: http://www.scielo.br/pdf/rlae/v21n2/es_01041169-rlae-21-02-0595.pdf.         [ Links ]

31. Christie CA, Barela E. The Delphi Technique as a Method for Increasing Inclusion in the Evaluation Process. Canadian Journal of Program Evaluation 2005 20(1): 105-122.         [ Links ]

32. Pascual-Ezama D, San Martín R, Gil-Gómez de Liaño B, Scandroglio B. Elaboración y validación de una escala sobre las principales variables que afectan a la conducta de los inversores individuales en los mercados bursátiles. Psicothema 2010; 22(4): 1010-1017.         [ Links ]

Anexos

Anexo 1

Anexo 2