(pdf)
Permalink
Neuropsicologia Latinoamericana
ISSN 2075-9479
Neuropsicologia Latinoamericana vol.7 no.3 Calle 2015
https://doi.org/10.5579/rnl.2015.0241
DOI:10.5579/rnl.2015.0241
Adaptación Argentina de la Behavioural Assessment of Dysexecutive Syndrome (BADS)
Argentine adaptation de l'évaluation du comportement du syndrome dysexécutif (BADS)
Adaptação argentina do Behavioural Assessment of Dysexecutive Syndrome (BADS)
Argentine Adaptation of Behavioural Assessment of Dysexecutive Syndrome (BADS)
Andrea N. QuerejetaI; Andrea L. CrostelliI,II; Juan I. SteccoI,III; Mariana A. MorenoI; Yamila Farías SarquísI,IV; Carlos R. SabenaI,V; Angelina PilattiI; Juan C. GodoyI; Marcos CupaniI
I Facultad de Psicología, Universidad Nacional de Córdoba. Córdoba. Argentina
II Instituto de Ciencias Cognitivas Aplicadas: SEMAS. Córdoba. Argentina
III Centro de Rehabilitación y Capacitación Neurológica Neuro Cinesis. Córdoba. Argentina
IV Hospital Privado: Centro Médico de Córdoba. Córdoba. Argentina
V Facultad de Lenguas, Universidad Nacional de Córdoba. Córdoba. Argentina
RESUMEN
El objetivo del presente trabajo fue presentar la adaptación argentina de la batería neuropsicológica inglesa de función ejecutiva Behavioural Assessment of Dysexecutive Syndrome (BADS) (Wilson, Alderman, Burgess, Emslie & Evans, 1999). La batería ecológica está compuesta por 6 subtests y el cuestionario disejecutivo DEX que puede ser auto o hétero-aplicado. Se realizó la traducción directa e inversa de la prueba (estímulos, manual, protocolo). También se evaluó la equivalencia de las versiones. Se realizaron entrevistas cognitivas que permitieron ajustar consignas y expresiones lingüísticas. La adaptación constó básicamente de 2 fases; en la primera se ajustaron la prueba de juicio temporal y el cuestionario disejecutivo DEX ya que se detectaron problemas en ambos, y en la segunda se incluyeron estudios de validez y confiabilidad. Se analizaron los datos obtenidos mediante estadística descriptiva, juicio de expertos, análisis factorial e índices de correlación. Los resultados fueron los siguientes. En la primera fase, se administró la prueba juicio temporal (n=71) y el cuestionario DEX (n= 130, n=13) para ajustar aquellos ítems con dificultades. En la segunda fase, se realizó una consulta a expertos (n=11) para evaluar la validez de contenido de la batería. Se encontró un adecuado grado de acuerdo entre los jueces, el índice de correlación intraclase fue de .77. Se administró la batería a 120 participantes sin lesión. Se analizó descriptivamente la muestra según edad, CI y perfil ejecutivo de la BADS. El análisis factorial confirmatorio nuevamente evidenció una matriz formada por un solo factor (alteración) con un Alfa de Cronbach de .87 La confiabilidad inter-evaluador fue de entre .90 a .98. La versión argentina de la BADS requiere más estudios psicométricos y normas locales.
Palabras-claves: Adaptación, Función ejecutiva, Evaluación neuropsicológica, BADS, Cuestionario DEX.
RÉSUMÉ
Le but de cette étude était de présenter l'adaptation de l'anglais Argentine batterie de tests neuropsychologiques de la fonction exécutive évaluation comportementale des dysexécutif Syndrome (BADS) (Wilson, Alderman, Burgess, Emslie et Evans, 1999). La batterie écologique se compose de 6 sous-tests et DEX dysexécutif questionnaire qui peut être auto ou hétéro-appliquée. Avant et arrière traduction d'une preuve (stimuli, manuel, protocole) a été réalisée. Versions équivalence a également été évaluée. Les interviews cognitives qui ont permis de régler les consignes et les expressions linguistiques ont été faites. L'adaptation a consisté essentiellement en 2 phases; dans un premier temps test de procès et le questionnaire dysexécutif DEX ont été ajustés parce que les problèmes ont été détectés à la fois, et dans le second études de validité et de fiabilité ont été inclus. Les données obtenues par les statistiques descriptives, un jugement d'expert, l'analyse des facteurs et des coefficients de corrélation ont été analysés. Les résultats étaient comme suit. Dans la première phase, le procès de temps de test (n = 71) et le questionnaire DEX (n = 130, n = 13) a été administré à ajuster ces éléments avec des difficultés. Dans la deuxième phase, une demande a été faite à des experts (n = 11) pour évaluer la validité du contenu de la batterie. Un degré suffisant d'accord entre les juges a été trouvé, le taux de corrélation intra était 0,77. La batterie a été administré à 120 participants sans blessure. L'échantillon selon l'âge, le QI et BADS exécutifs profil est analysé de façon descriptive. L'analyse factorielle confirmatoire a de nouveau montré une matrice formée par un seul facteur (modification) avec un alpha de Cronbach de .87 La fiabilité inter-évaluateurs était entre 90-98. La version Argentine BADS nécessite des études plus psychométriques et réglementations locales.
Mots-clés: Adaptation, Fonctions exécutives, Évaluation neuropsychologique, BADS, DEX questionnaire.
RESUMO
O objetivo do presente trabalho foi apresentar a adaptação argentina da bateria neuropsicológica de função executiva Behavioural Assessment of Dysexecutive Syndrome (BADS) (Wilson, Alderman, Burgess, Emslie & Evans, 1999). A bateria ecológica é composta por seis subtestes e o questionário disexecutivo DEX que pode ser autoaplicável ou não. Realizou-se a tradução direta e inversa da prova (estímulos, manual e protocolo). Também se avaliou a equivalência das duas versões. Se realizaram entrevistas cognitivas que permitiram ajustar as expressões linguísticas. A adaptação consistiu basicamente em duas fases: na primeira se ajustaram as provas de juízo temporal e o questionário disexecutivo DEX já que se detectaram problemas em ambos, e na segunda etapa se incluíram os estudos de validade. Analisaram-se os dados obtidos mediante análise descritiva, análise de juízes, análise fatorial e índices de correlação. Na primeira fase a prova de julgamento temporal foi aplicada em estudantes universitários (n=71). e questionário DEX foi administrado em estudantes universitários e em profissionais (n=130). Realizaram uma consulta aos juízes (n=11) para avaliar a validade de construto da bateria. Encontrou-se um grau de concordância entre os juízes, no qual o índice de correlação foi de 0,77. A bateria foi aplicada em 120 participantes sem lesão. A análise fatorial confirmou novamente uma matriz formada por somente um fator (déficit) com um Alfa de Cronbach de 0,87. A confiabilidade entre avaliadores foi de 0,90 a 0,98. A adaptação argentina permite continuar a coleta de normas locais e a futura utilização da bateria executiva por clínicos e pesquisadores.
Palavras-chave: Adaptação, Função executiva, Avaliação neuropsicológica, BADS, Estudo transcultural.
ABSTRACT
The aim of this study was to present the Argentine adaptation of the english neuropsychological battery of executive function Behavioural Assessment of Dysexecutive Syndrome (BADS) (Wilson, Alderman, Burgess, Emslie & Evans, 1999). The ecological battery consists of six subtests and the DEX dysexecutive questionnaire that can be self- or hetero-applied. Direct and inverse translations (stimulus, manual and protocol) were conducted. Equivalence between versions was also evaluated. Ten Cognitive interviews that made it possible to adjust instructions and linguistic expressions were performed. The adaptation basically consisted of two stages; at the first one it was adjusted the temporal judgment subtest and DEX dysexecutive questionnaire because some problems were detected in both of them, and in the second one it were included a validity and reliability studies. Data obtained were analysed with descriptive statistics, expert judgment, factor analysis and correlation coefficients. In the first stage, the temporal judgment test (n=71) and DEX questionnaire (n= 130, N=13) were administered to adjust those items with difficulties. In the second stage, an expert consultation (n=11) was performed to assess the content validity of the battery test. The judges agreement was acceptable (.77). The battery was administered to 120 participants without lesions. The sample was descriptively analyzed according age, IQ and BADS executive profile. The confirmatory factor analysis of DEX questionnaire showed a matrix formed by a single factor (disorder) again, with an Alpha de Cronbach of .87. The inter-rater-reliability was between .90 to .98. The BADS Argentine version requires more psychometric studies and local norms.
Keywords: Adaptation, Executive function, Neuropsychological assessment, BADS, DEX questionnaire.
Introducción
El multisémico constructo funciones ejecutivas presenta una vasta proliferación de investigaciones en la literatura actual. La falta de univocidad teórica de este dominio cognitivo genera diferentes conceptualizaciones, modelos teóricos, tests y evidentes dificultades en la evaluación de las funciones ejecutivas. (Tirapu Ustárroz, Muñoz Céspedes & Pelegrín Valero, 2002). Está sobradamente establecido que estas funciones cognitivas de alto nivel son dependientes de la corteza prefrontal (Verdejo-García & Bechara, 2010). Las principales funciones ejecutivas incluyen: la formación de conceptos, razonamiento abstracto, memoria operativa, inhibición de impulsos, planificación, organización, evaluación de errores, flexibilidad cognitiva, creatividad, cognición social, toma de decisiones; en suma implican operaciones mentales involucradas en el manejo y adaptación a situaciones nuevas, que implican la organización de ideas y acciones simples en comportamientos complejos dirigidos a una meta. (Gómez Beldarrain & Tirapu Ustárroz, 2012).
La evaluación neuropsicológica no escapa a éste escenario complejo en el que se encuadran las funciones ejecutivas. Aunque no existe una prueba gold estándar para evaluar las funciones ejecutivas; la batería ecológica Behavioural Assessment of the Dysexecutive Syndrome (BADS) (Wilson, Evans, Emslie, Alderman & Burgess 1998) permite evaluar varios componentes de las denominadas funciones ejecutivas frías: planificación, organización, flexibilidad cognitiva, razonamiento, resolución de problemas (Chan, Shum, Toulopoulou & Chen, 2008). La batería BADS cuenta con 6 subtests: alternancia de reglas, programa de acción, mapa del zoo, búsqueda de la llave, juicio temporal, test de los 6 elementos y un cuestionario disejecutivo DEX. Esta prueba neuropsicológica tiene como objetivo central el predecir los problemas diarios derivados del síndrome disejecutivo. Éste carácter ecológico es un atributo primordial de la prueba.
La validez ecológica se define como la relación funcional y predictiva entre la ejecución del sujeto en la exploración neuropsicológica y la conducta de éste en situaciones de la vida diaria (García-Molina, Tirapu –Ustarroz & Roig-Rovira, 2007). García-Molina et al. (2007) sostienen que la validez ecológica está determinada por la representatividad del test y el nivel de generalización de sus resultados. La representatividad de un test depende del nivel de correspondencia que se establece entre un test determinado y posibles situaciones reales con las que se puede encontrar una persona. Por otro lado, la generalización de los resultados de un test está vinculada a la posibilidad de predecir los problemas o limitaciones que éste sujeto puede presentar en su vida cotidiana (García-Molina, Tirapu -Ustarroz & Roig-Rovira, 2007)
Superar la utilización de los tests clásicos de función ejecutiva hacia pruebas neuropsicológicas con lecturas más cercana al rendimiento en la vida real, obliga a embarcarse en la empresa de pensar instrumentos válidos para nuestra cultura. Ante la controversia de construir o adaptar pruebas, algunos reconocidos psicometristas destacan la importancia de la adaptación de tests cuando la misma implique un riguroso proceso de investigación que asegure la equivalencia de constructo y una correcta adaptación del test para evitar toda fuente de sesgos (Fernández, Pérez, Alderete, Richaud & Fernández Liporace, 2010). La batería neuropsicológica BADS ha sido desarrollada y estandarizada en Inglaterra. En este sentido, sería erróneo simplemente importar la prueba sin atender a las influencias culturales que esta reviste (Hambleton & Patsula, 1999; van de Vijver & Tanzer, 2004; Balluerka, Gorostiaga, Alonso-Arbid & Haranburu, 2007). La batería BADS cuenta con numerosos trabajos psicométricos y aplicados. (Evans, Chua, McKenna & Wilson, 1997; Wilson, Evans, Emslie, Alderman & Burgess, 1998; Wilson, Alderman, Burgess, Emslie & Evans, 1999; Burgess, Alderman, Evans, Emslie & Wilson, 1998; Krabbendam, de Vugt, Derix & Jolles, 1999; Norris & Tate, 2000; Chamberlain, 2003; Wood & Liossi, 2006; Claytor, Schmitter-Edgecombe & Burr, 2006; Allain, Chaudet, Nicoleau, Etcharry-Bouyx, Barré, Dubas, Berrut & Le Gall, 2007; Verdejo-García & Pérez-García, 2007; Katz, Tadmor, Felzen & Harman-Maeir, 2007; García da Costa Armentano, Sellitto Porto, Dozzi Brucki & Nitrin, 2009; Pedrero Pérez, Ruiz Sánchez de León, Llanero Luque, Olivar Arroyo, Bouso Saiz & Puerta García, 2009; Engel Yeger, Josman & Rosenblum, 2009; Simblett & Bateman, 2011; Pedrero Pérez, Ruiz Sánchez de León, Lozoya Delgado, Llanero Luque, Rojo Mota & Puerta García, 2011; Canali, Brucki, Bertolucci & Bueno, 2011; Monteiro & Peixoto, 2014).
Se puede considerar que debido al carácter ecológico de la BADS se ha utilizado esta batería en diferentes campos de aplicación (neuropsiquiatría, neurología, rehabilitación) como también se han realizado diferentes adaptaciones (holandesa, australiana, española, portuguesa, etc.). En efecto, trabajo de Krabbendam et al (1999) con la versión holandesa de la BADS, mostró ser sensible en población con esquizofrenia. Asimismo, evidenció una correlación débil con el Test de Clasificación de Cartas Modificado y una correlación moderada con problemas ejecutivos de la vida diaria. Este trabajo también reportó la necesidad de profundizar el sistema de corrección cualitativo de la BADS. El estudio autraliano realizado por Norris y Tate (2000) mostró que la mayoría de los subtests de la BADS correlacionaron significativamente con pruebas ejecutivas estándar, tal como la prueba alternancia de reglas mostró correlación con Trail Making Test (TMT), Cognitive Estimation Test (CET), Rey-Osterreith Complex Figure Test (ROCFT), Porteus Mazes (PM) y Controlled Word Association Test (COWAT). En éste mismo trabajo la batería demostró su capacidad para discriminar entre población con y sin daño cerebral.
Con una versión de la BADS en español (Verdejo-García & Pérez-García 2007) se observó que los subtests de la prueba fueron más predictivos en la identificación de un perfil alterado de sujetos policonsumidores de sustancias en comparación al Test de Clasificación de Cartas de Wisconsin. En éste mismo trabajo, los subtests de la BADS correlacionaron con escalas autoaplicadas de déficits ejecutivos, lo que les permitió evidenciar una mayor capacidad predictiva de la BADS para detectar problemas ejecutivos de la vida diaria.
Otro trabajo realizado en Portugal con población geriátrica (Monteiro & Peixoto, 2014) la batería BADS permitió diferenciar las alteraciones propias del envejecimiento normal del patológico en contexto geriátrico.
También se puede destacar el trabajo español de Pedrero Pérez et al., (2011) quienes aplicaron en una muestra muy amplia (n=1013) el cuestionario disejecutivo DEX de la batería BADS. En éste trabajo, los autores reportaron que la estructura factorial del cuestionario más adecuada está compuesta por dos factores (desorganización/apatía y deshinibición/impulsividad) que poseen adecuados índices de confiabilidad.
Lamentablemente, no existen estudios con la BADS desarrollados con población argentina. En consecuencia, el objetivo del presente trabajo es presentar los estudios preliminares de adaptación de la batería BADS con estudios de validez y confiabilidad que permitan su utilización en Argentina. Para la adaptación de la BADS se llevó un riguroso proceso de investigación que asegure la equivalencia de constructo y una correcta adaptación del test para evitar toda fuente de sesgos (Fernández, Pérez, Alderete, Richaud & Fernández Liporace, 2010).
A continuación, se presentan las diferentes fases que constituyen el proceso de adaptación y validación del instrumento.
MÉTODO
Se obtuvo la autorización (Translation Permission Agreement) de la Editorial Pearson (Pearson Clinical Assessment) para realizar la adaptación de la batería BADS con fecha del 27 de marzo de 2013. La traducción directa (inglés-castellano/versión argentina) de la prueba fue realizada por dos investigadores y la traducción inversa (castellano-inglés/versión inglés dos) por un traductor matriculado y además estudiante del último año de la carrera de Psicología. Asimismo, se realizaron reuniones con el grupo de investigadores para discutir expresiones verbales de la versión directa. La versión argentina y la versión traducida al inglés (dos) fue administrada a sujetos ¨bilingües¨ (n = 20, 10 participantes por grupo), estudiantes de la carrera de traductor de la Facultad de Lenguas de la Universidad Nacional de Córdoba. Esto permitió evaluar la equivalencia de las versiones (Barbero García, Vila Abad & Holgado Tello, 2008). Se analizó la resolución de la prueba por parte de los participantes. Se realizaron entrevistas cognitivas a 10 estudiantes de Psicología para revisar la comprensión de cada consigna. Luego el proceso de adaptación continuó con dos nuevas fases. En la primera fase se ajustaron el subtest de juicio temporal que evalúa estimación de tiempo y el cuestionario DEX sobre sintomatología ejecutiva (auto y hetero-aplicado) ya que ambos presentaron diferentes problemas detectados en la fase de traducción, equivalencia de las versiones y entrevistas cognitivas. Se calculó el porcentaje de acuerdo en la consulta a expertos realizada sobre la prueba juicio temporal y se realizó un análisis factorial en el caso del cuestionario DEX. La única prueba que requirió más estudios fue la de juicio temporal porque a diferencia de las restantes que consistían en resolver determinados problemas o tareas, la prueba de estimación de tiempo consistía en responder preguntas que estaban muy influenciadas por la cultura de origen de la prueba. Por ejemplo, una de las preguntas originales consiste en cuánto tiempo demora en realizarse un ¨examen bucodental de rutina¨, en Argentina no es una expresión habitual ni una conducta frecuente.
En la segunda fase, se administró la batería a 120 participantes sin lesión. Se analizó descriptivamente la muestra según edad, CI y perfil ejecutivo de la BADS. Para establecer la validez de contenido se realizó un juicio de expertos y se calculó el índice de correlación intraclase. Para establecer la confiabilidad interevaluador se calculó mediante un índice de correlación. Se realizó una análisis factorial confirmatorio para conocer la estructura del cuestionario DEX.
Todos los participantes accedieron a participar en el estudio de modo voluntario y firmaron el consentimiento informado.
Instrumentos
Cuestionario socio-demográfico: consta de preguntas sobre edad, escolaridad, ocupación, antecedentes patológicos (enfermedades neurológicas, psiquiátricas, consumo de sustancias) y medicación. (Empleado únicamente en la segunda fase).
Word Accentuation Test- WAT-R (Burin, Jorge, Arizaga y Paulsen, 2000; Sierra Sanjurjo, Motañes, Sierra Matamoros y Burin, 2014). Es un test de lectura que evalúa inteligencia premórbida. Consta de 50 palabras de baja frecuencia que el evaluado debe leer en voz alta, sin atender al significado de la palabra. (Empleado únicamente en la segunda fase).
Behavioural Assesment of Dysexecutive Syndrome (BADS) (Wilson, Alderman, Burgess, Emslie & Evans, 1999): es una batería neuropsicológica que permite una evaluación ecológica de la función ejecutiva. Está compuesta por 6 subtests: alternancia de reglas, programa de acción, búsqueda de la llave, juicio temporal, mapa del zoológico y test de los seis elementos modificado; y un cuestionario disejecutivo DEX que se le entrega a cada individuo y a su familiar/cuidador (Burín, Drake & Harris, 2007).
A continuación se detallan algunas características psicométricas de la prueba reportadas en la publicación original. La confiabilidad interevaluador en los diferentes substests de la BADS osciló entre .88 y 1. La confiabilidad test-retest fue moderada entre la primer y la segunda evaluación (a los seis meses). La puntuación más alta la obtuvo la prueba de búsqueda de la llave .71. La BADS fue aplicada en población normal obteniendo una media de 18,05 (DE:3,05), en participantes con daño cerebral obtuvieron una media de 14,03 (DE:4,73) y en población con esquizofrenia la media fue de 12,79 (DE: 4,58). (Wilson, Alderman, Burgess, Emslie & Evans, 1999)
En breve, se detallan cada uno de los subtests de la prueba (Peña Casanova, Gramunt Fombuena & Gich Fullà, 2005).
Alternancia de reglas: se utiliza un cuaderno con 21 láminas de cartas de juego, se evalúa la capacidad del sujeto de responder correctamente a una regla dada y, posteriormente, de cambiar a una regla distinta. Evalúa flexibilidad cognitiva. En todo momento, el sujeto tiene a la vista el estímulo con la regla pertinente para minimizar el efecto de posibles limitaciones mnésicas. La media en población normal fue de 3,56 (DE: 0,87). La correlación test- retest fue de -.08.
Programa de acción: consiste en una actividad práctica manipulativa que, a partir de habilidades simples, trata de evaluar la capacidad de planificar una actividad con un determinado objetivo, respetando determinadas normas. Para resolver el problema, hay que inhibir la tendencia a la respuesta impulsiva. La media en población normal fue de 3,77 (DE: 0,52). La correlación test- retest fue de .67.
Búsqueda de la llave: mediante un diseño gráfico que representa un campo el sujeto debe planificar la búsqueda de una llave perdida. Se valora la capacidad de diseñar una estrategia de búsqueda efectiva. La media en población normal fue de 2,60 (DE: 1,32). La correlación test- retest fue de .71. Juicio temporal: consiste en 4 preguntas breves acerca del tiempo requerido en determinadas actividades cotidianas, cuya duración suele ser variable. Las preguntas remiten a respuestas en segundos, minutos o años. El sujeto debe realizar una estimación. La media en población normal fue de 2,15 (DE: 0, 91). La correlación test- retest fue de .64.
Mapa del zoológico: sobre un hipotético plano de un zoológico, el sujeto debe mostrar cómo planificaría el recorrido por ciertas ubicaciones indicadas, a la vez que respeta unas reglas predeterminadas. Consta de dos versiones. La primera es muy exigente ya que no hay ninguna estructuración para realizar la planificación de la visita. La segunda versión, el sujeto solo debe seguir las indicaciones dadas para marcar una ruta sin errores. La media en población normal fue de 2,44 (DE: 1, 13). La correlación test- retest fue de .39.
Test de los seis elementos modificado: el sujeto dispone de 10 minutos para realizar una serie de actividades (narración, cálculos y denominación de imágenes). Cada una de estas tareas está dividida en dos partes: parte A y parte B, es decir por ejemplo cálculos A y cálculos B. El sujeto debe realizar al menos algo de cada una de las subtareas en el tiempo indicado, siguiendo una determinada regla y pudiendo controlar él mismo el tiempo (se ofrece cronómetro). Evalúa la capacidad de organización y no la calidad de ejecución en cada una de las tareas. La media en población normal fue de 3,52 (DE: 0, 80).
Cuestionario disejecutivo DEX: contiene 20 ítems que tratan de reflejar el abanico de problemas relacionados con los problemas motivacionales, cognitivos, emocionales o de personalidad y conductuales asociados frecuentemente al síndrome disejecutivo. Consta de una versión aplicada al paciente y otra para el familiar/cuidador. El análisis factorial (Varimax) realizado por Burgess et al., (1998) reportó una matriz formada por 3 factores (inhibición, intencionalidad y memoria ejecutiva).
Tiene una duración de 45 minutos a 60 minutos aproximadamente. Se obtiene un perfil a partir de la puntuación de cada subtest, que oscila de 0-4 puntos. El puntaje máximo en el perfil ejecutivo obtenido de la BADS es de 24 puntos.
Análisis de datos
Se calcularon tablas de frecuencia, estadística descriptiva y análisis factorial exploratorio y confirmatorio. Asimismo, se realizaron cuestionarios para consulta con jueces expertos (Escobar-Pérez & Cuervo-Martínez, 2008). Se analizaron índices de correlación para establecer la validez de contenido y la confiabilidad interevaluador. La significación estadística en todos los casos se estableció a partir de un valor de p< 0,05. Los datos fueron procesados con el paquete estadístico SPSS versión 17.
RESULTADOS
Primera fase: Traducción de la batería Bads. Redacción de ítems para el subtest de Juicio Temporal y estudio de jueces. Análisis factorial exploratorio de Cuestionario Disejecutivo DEX, consistencia interna y análisis de ítems.
ESTUDIO 1
Muestra A: la muestra se conformó con 71 estudiantes ingresantes a la carrera de Psicología de la Facultad de Psicología de la Universidad Nacional de Córdoba.
Procedimientos: se administró el subtest juicio temporal perteneciente a la batería BADS a estudiantes ingresantes a Psicología. Asimismo, se incluyeron otras preguntas para observar el tipo de respuesta de la muestra y contar con ítems de reemplazo. Se tuvo en cuenta, tal como la prueba original que las nuevas preguntas respetaran el criterio temporal establecido (segundos, minutos, años).
Resultados: El primer estudio se llevó adelante porque se encontraron dificultades relacionadas a las características culturales de la población de origen en la prueba juicio temporal al momento de la traducción. Particularmente, tanto la pregunta 1 como la 3 están muy influenciadas por la cultura de origen y difieren de la población meta del presente trabajo. A continuación se presentan las preguntas derivadas de la fase de traducción. La pregunta 1 y 3 corresponden a respuestas medidas en minutos, la pregunta 2 es medida en años y la pregunta 4 es medida en minutos.
1- Cuánto tiempo se tarda en realizar un examen bucodental de rutina?
2- Cuánto tiempo viven la mayoría de los perros?
3- Cuánto tiempo emplea un limpiavidrios para lavar las ventanas de una casa (tamaño promedio).
4- Cuánto tiempo le lleva inflar un globo hasta que reviente?
Las preguntas 1 (rango de respuestas entre 5 y 15 minutos) y 2 (rango de respuestas 9 y 15 años) obtuvieron una media de 24,59 (DE: 12,82) y una media de 12,66 (DE: 3,60) respectivamente, ambas preguntas no presentaron alta variabilidad. Las preguntas 3 (rango de respuestas entre 15 y 25 minutos) y 4 (rango de respuestas entre 50 y 70 segundos) evidenciaron gran dispersión con una media de 55,26 (DE: 82,89); y una media de 91,21 (DE: 83,29) respectivamente. Estos datos permitieron ajustar la formulación de la pregunta del globo y la eliminación de la pregunta de la limpieza de las ventanas y la del examen bucodental de rutina. Estas preguntas no se consideraron específicas en nuestro contexto. No se observaron diferencias significativas por género, si bien éste dato era esperable, otros estudios (Hancock & Rausch, 2010) reportan diferencias por sexo en pruebas de estimación temporal aunque no emplean el mismo test. (Ver tabla 1).
Los rangos de respuesta se establecieron a partir de las respuestas obtenidas con la muestra A de estudiantes universitarios. Para la pregunta del lavado de platos el rango de respuestas es entre 6 y 26 minutos con una media de 16,54 (DE: 10,05) y para la pregunta del lavado de dientes el rango de respuesta se estableció entre 1 y 7 minutos en función de una media de 4,02 (DE: 2,83). Dichas preguntas fueron seleccionadas a partir del estudio 2 con el juicio de expertos.
ESTUDIO 2
Muestra B: conformada por 13 expertos en Neuropsicología (clínicos e investigadores).
Procedimientos: se administró un cuestionario vía correo electrónico en que se consultó a expertos en Neuropsicología (clínicos e investigadores). El cuestionario presentaba las 4 preguntas de la prueba juicio temporal y otras preguntas formuladas para reemplazar aquellas 2 que presentaban problemas. En una primera parte se evaluaba el grado de comprensión de la pregunta y en una segunda parte se consultaba por el grado de especificidad de la pregunta para nuestro medio.
Resultados: En la tabla 2, se observa el porcentaje de acuerdo entre los jueces. Los mayores puntajes corresponden a las preguntas originales 1 y 4 por un lado y a las nuevas preguntas correspondientes a cuánto tiempo toma lavarse los dientes, o lavar los platos de una familia tipo o atarse los cordones. Dado que contamos con 1a pregunta 1 formulada en años (vida de los perros) y la 4 en segundos (globo); se mantuvieron dichas preguntas de la prueba original. Se completaron las dos preguntas correspondientes a minutos. Por lo que la pregunta de lavado de dientes reemplazó a la del examen buco-dental y la pregunta del lavado de platos reemplazó a la de limpiavidrios. La pregunta sobre atado de cordones no se consideró porque ya se contaba con la pregunta del globo con adecuado grado de acuerdo y también medida en segundos. (Ver tabla 2)
Las dos nuevas preguntas seleccionadas para el subtest de Juicio Temporal fueron:
1- Cuánto tiempo tarda en lavarse los dientes por la mañana?
2- Cuánto tiempo emplea en lavar los platos de una familia tipo (4 integrantes)?
La tabla 3 muestra el grado de especificidad de dichas preguntas para nuestro medio. El Coeficiente de Correlación Intraclase fue de .92. (Límite inferior: .82 y Límite superior: .97). (Ver tabla 3)
ESTUDIO 3
Muestra C: la muestra estuvo conformada por 130 estudiantes de Psicología y psicólogos. La media de edad fue de 25,91 (DE: 5,53), la distribución por género fue de 104 participantes de género femenino y 26 de género masculino. El 81% de la muestra presentó 15 años de escolaridad o más.
Procedimientos: se administró el cuestionario disejecutivo DEX autoaplicado.
Resultados: El cuestionario DEX fue administrado a estudiantes universitarios y profesionales. Se detectaron ocho ítems con problemas de claridad o comprensión, más precisamente incluían palabras de baja frecuencia (letárgico, extralimitarse) e iniciaban con adverbios de tiempo (a veces) o de negación (no).
Se ajustaron 8 ítems (correspondientes a las preguntas 3,5,6,8,13,14,16,20) conforme las dificultades señaladas por los participantes. El ajuste de los ítems con funcionamiento deficitario se llevó a cabo mediante reuniones de discusión del grupo de investigadores.
Para analizar la estructura del cuestionario, se realizó un análisis factorial exploratorio que arrojó una estructura conformada por un factor. Los pesos factoriales oscilaron entre .39 y .69. La lectura teórica que se realiza de ese único factor encontrado es la de alteración o déficits. Es decir, se trata de alteraciones o déficits en el comportamiento, en la cognición y en la emoción. El coeficiente alfa de Cronbach fue de .90. (Ver tabla 4)
Segunda fase: análisis descriptivos, estudios de validez de contenido y confiabilidad interevaluador.
ESTUDIO 1
Muestra: estuvo conformada por 11 expertos en Neuropsicología (clínicos e investigadores).
Procedimientos: se realizó una consulta a jueces para evaluar la validez de contenido de la batería. El cuestionario fue enviado por correo electrónico. El cuestionario consistió en la presentación de las consignas de todos los subtests de la BADS intercalados con consignas de otros tests. En ningún caso, se aclaró a qué test correspondía dicha consigna. Los expertos debían indicar qué subdominio de la función ejecutiva era evaluado a partir de cada consigna. Se utilizaron opciones múltiples. Asimismo, se consultó sobre el grado de representatividad de la tarea sobre la función evaluada.
Resultados: En la tabla 5, se puede observar el porcentaje de acuerdo entre los jueces respecto del subdominio cognitivo que cada consigna de cada subtest evaluaba. También se puede observar el grado de representatividad de cada tarea.
Las pruebas de búsqueda de la llave y mapa del zoológico presentan mayor porcentaje de acuerdo entre los jueces. Por otra parte, la prueba cambio de reglas presentó el menor puntaje. Esto se puede deber a que algunos jueces respondieron que la función que evaluaba era flexibilidad. Atendiendo a que es muy difícil pensar la inhibición independiente de la flexibilidad, y si además sumáramos los puntajes de ambas respuestas, podríamos consignar un buen nivel de acuerdo. En el grado de representatividad los puntajes van del 0-10, se observa que ningún subtest está por debajo de 8 y todos presentan escasa variabilidad. Los de mayor representatividad son: programa de acción, búsqueda de la llave, mapa del zoo y seis elementos. Finalmente, se calculó el Coeficiente de Correlación Intraclase que arrojó una correlación moderada .76. Éste estudio permitió discriminar aquellos subdominios ejecutivos con mayor peso específico dentro de la batería.
ESTUDIO 2
Muestra: la muestra estuvo conformada por 120 participantes sin lesión (50% sexo femenino y 50% sexo masculino). La media de edad fue de 45,13 (DE: 18,88) y la media de años de escolaridad fue de 13,11 (DS: 4,81). Los criterios de exclusión a la muestra fueron poseer patología neurológica o psiquiátrica, o enfermedad médica que curse con afectación cognitiva o poseer historia de consumo de sustancias. Se dividieron en 4 grupos etareos y 3 grupos según el coeficiente intelectual (CI) medido con el test de lectura Word Accentuation Test (Sierra Sanjurjo et al., 2014) atendiendo a los criterios de la publicación original. Es decir la muestra fue conformada por 120 participantes distribuidos en 4 grupos de edad (16-31 años, 32-47 años, 48-63 años, 64 o más años) y 3 grupos de coeficiente intelectual (CI bajo, CI medio, CI alto) (Ver tabla 6).
Procedimientos: se administró el cuestionario sociodemográfico, el WAT-BA y la batería BADS a una muestra de participantes divididos en 4 grupos de edad y 3 grupos de coeficiente intelectual (CI) acordes al estudio original.
Resultados: En la tabla 7, se presenta la media y la desviación estándar de la puntuación final obtenida en la batería BADS (cuyo puntaje máximo de perfil es de 24 puntos). La puntuación de perfil obtuvo una media de 16,25 (DE: 3,99). Los resultados del estudio original evidencian puntajes más altos para la población inglesa con una media de 18,05 (DE: 3,05) (Wilson, Evans, Emslie, Alderman & Burgess, 1998). (Ver tabla 7)
Los valores arrojados por el cuestionario DEX autoadministrado a los 120 participantes, cuya puntuación máxima es de 80 puntos, mostraron una media de 22,25 (DE: 10,10). En el caso de los cuestionarios DEX reportados por un familiar del participante (n=22) con una media de 20,68 (DE: 14,77). La diferencia en el número de participantes en ambos grupos (participantes y familiares) es importante, de todos modos se observó un alfa de Cronbach de .84 entre ambos. Es decir una correlación entre la sintomatología reportada por el participante y aquella referida por un familiar del participante. Éste estudio permitió analizar descriptivamente los perfiles ejecutivos según diferentes grupos etareos y según coeficiente intelectual premórbido.
El análisis factorial confirmatorio realizado al cuestionario DEX, evidenció una estructura formada por un solo factor. Es decir, que dicho factor tal como en el estudio 3 de la primer fase puede interpretarse como déficit o alteración o síntoma comportamental, cognitivo o emocional. Los resultados indicaron que el modelo no ajusta adecuadamente a los datos (CFI .83, TLI .81, RMSEA 0.076 CI 0.060-0.090, WRMR 1.009). Los pesos de regresión estandarizados (p< .05) en el factor oscilaron entre .24 y .66. Se presentó una diferencia con el estudio original que muestra una estructura compuesta por 3 factores (comportamiento, cognición y emoción). (Ver tabla 8).
Los 120 participantes fueron evaluados por 2 evaluadores. En la tabla 9, se puede observar la confiabilidad interevaluador para cada subtest, los puntajes oscilan entre .90 a .99. Las pruebas de Búsqueda de la Llave y la prueba de Seis Elementos presentan menor coeficiente (.92 y .90 respectivamente). En el caso de la prueba de la Búsqueda de la Llave las diferencias en la puntuación pueden deberse al los diferentes indicadores que se tienen en cuenta para puntuar la producción del participante. Es decir respetar estos parámetros puede implicar algún grado de subjetividad. En el caso de la prueba de Seis Elementos, se puede analizar como factor involucrado el tiempo que se consigna entre cada subtarea. Se presentaron algunos casos que por la metodología para realizar la actividad y la velocidad de respuesta resultó complejo consignar el tiempo. (Ver tabla 9)
En el estudio original, los índices de confiabilidad interevaluador oscilan entre .88 y 1. La prueba de búsqueda de la llave obtuvo un coeficiente de Alfa de Cronbach de .99 en el estudio pionero (Wilson, Evans, Emslie, Alderman & Burgess, 1998).
DISCUSIÓN
El objetivo central del presente estudio fue adaptar la batería ejecutiva BADS a población argentina. En esa dirección, el trabajo se concentró en un primer momento en la traducción inversa y en el análisis y discusión de ambas versiones que permitió ajustar diferentes aspectos y darle mayor precisión a la versión argentina de la BADS. La opción aplicada en el desarrollo metodológico de la traducción implicó la traducción literal de algunos ítems, el cambio de otros y la creación de nuevos ítems con el objetivo de evitar producir un instrumento sesgado (van de Vijver & Tanzer, 1997).
La primera fase de la adaptación permitió ajustar y redactar ítems del subtest juicio temporal mediante un estudio de jueces. Asimismo se realizaron análisis de ítems y de la consistencia interna del cuestionario disejecutivo DEX.
La segunda fase de la adaptación obtuvo datos descriptivos de la muestra en los que se observó que la población local presentó puntuaciones más bajas que la original. En otro estudio realizado en Brasil (Canali, 2011), con una muestra de menor tamaño y de adultos mayores, evidenciaron puntajes inferiores al presente trabajo. Además se realizaron estudios de validez de contenido mediante consulta a jueces expertos, análisis confirmatorio de la estructura interna del cuestionario DEX y finalmente la confiabilidad interevaluador.
Los resultados obtenidos correspondientes a la validez de contenido realizado, no hace más que reflejar la heterogeneidad de funciones que se amparan bajo el constructo funciones ejecutivas. En muchas ocasiones, se encuentran procesos cognitivos que se solapan como planificación, organización y resolución de problemas o por otro lado; como se reportó en el presente estudio en la prueba cambio de reglas con los subdominios inhibición y flexibilidad cognitiva. En una revisión realizada por Diamonds (2013), se presenta a la inhibición como el corazón de las funciones ejecutivas y se destaca la participación del control inhibitorio en el autocontrol, en el control atencional, en la memoria de trabajo y en la flexibilidad cognitiva.
El cuestionario disejecutivo DEX evidenció una estructura interna conformada por un factor, interpretado teóricamente como alteración o déficit comportamental, emocional o cognitivo. A diferencia del estudio original que presenta una estructura compuesta por 5 factores, 3 factores con mayor peso factorial (inhibición, intencionalidad y memoria ejecutiva) y 2 factores débiles (afecto positivo y afecto negativo). (Burgess, et al. 1998). A su vez el estudio de Pedrero Pérez et al. (2009) arrojó una estructura formada por 2 factores. Otro estudio (Simblett & Bateman, 2009), cuestiona la unidimensionalidad del constructo funciones ejecutivas a partir de la utilización del análisis de Rasch al cuestionario DEX y propone una serie de análisis y ajustes a dicho cuestionario.
La confiabilidad interevaluador fue alta, con algunas diferencias menores respecto del estudio original (Wilson et al., 1998). La principal diferencia radica en los valores del subtest Búsqueda de la Llave. Esto puede deberse a que dicha prueba cuenta con una serie de indicadores para corregirla y en algunos casos faltan precisiones algunos ítems; lo que podría generar diferencias en el sistema de puntuación.
De ninguna manera, éste estudio se presenta como acabado, de hecho una limitación importante han sido los tamaños de la muestra en las diferentes fases; sino que este trabajo inicia los estudios de adaptación y estimula a continuar con estudios de validez concurrente comparando el rendimiento de la BADS con pruebas clásicas de función ejecutiva, con población clínica psiquiátrica y neurológica para determinar sensibilidad y especificidad, obtención de las normas locales en población normal y clínica, entre otros. La BADS es una prueba sensible a las alteraciones ejecutivas y contar con estudios de adaptación en Argentina es absolutamente beneficioso ya sea en el ámbito clínico como en el de la investigación.
En suma, el presente trabajo permitió contar con la versión argentina de la BADS que posee una adecuada validez de contenido y confiabilidad interevaluador. Ha sido una ardua tarea la adaptación de una batería neuropsicológica aunque todavía incompleta. Las futuras líneas de trabajo marcan continuar con estudios de validez concurrente, validez predictiva, confiabilidad test-retest, normas locales, normas clínicas y profundizar los análisis estadísticos para que la prueba sea un instrumento válido y fiable en Argentina.
Referencias
Allain, P., Chaudet, H. Nicoleau, S., Etcharry-Bouyx, F., Barré, J. Dubas, F., Berrut, G., & Le Gall, D. (2007). Étude de la planification de l´action au moyen du test du plan du zoo dans la maladie d´Alzheimer. Rev Neurol (Paris), 163 (22), 222-230. [ Links ]
Balluerka, N., Gorostiaga, A., Alonso-Arbid, I., & Haranburu, M. (2007). La adaptación de instrumentos de medida de unas culturas a otras: una perspectiva práctica. Psicothema, 19 (1), 124-133. [ Links ]
Barbero García, M.I., Vila Abad, E., & Holgado Tello, F.P. (2008). La adaptación de los tests en estudios comparativos interculturales. Acción Psicológica, 5 (2), 7-16. [ Links ]
Byrne, B.M., Leong, F.T.L., Hambleton, R.K., Oakland, T., van de Vijver, F.J.R., Cheung, F.M., & Bartram, D. (2009). A critical analysis of cross-cultural research and testing practices: implications for imporoved education and training in Psychology. Training and Education in Professional Psychology, 3 (2), 94-105. [ Links ]
Burgess, P. W., Alderman, N., Evans, J. Emslie, H., & Wilson, B. (1998). The ecological validity of tests of executive function. Journal of International Neuropsychological Society, 4, 547-558. [ Links ]
Burin, D.I., Jorge, R.E., Arizaga, R.A., & Paulsen, J.S. (2000). Estimation of premorbid intelligence: The Word Accentuation Test- Buenos Aires Version. Journal of Clinical and Experimental Neuropsychology, 22 (5), 677-685. [ Links ]
Canali, F., Brucki, S.M.D., Bertolucci, P.H.F. & Bueno, O.F.A. (2011). Reliability study of the Behavioural Assessment of Dysexecutive Syndrome adapted for a Brazilian sample of older-adult controls and probable early Alzheimer ´s disease patients. Revista Brasileira de Psiquiatria, 33 (4), 338-346. [ Links ]
Chamberlain, E. (2003). Test Review: Behavioural Assesment of Dysexecutive Syndrome (BADS). Journal of Occupational Psychology, Employment and Dysability, 5 (2), 33-37. [ Links ]
Chan, R.C.K., Shum, D. Toulopoulou,T., & Chen, E.Y.H. (2008). Assessmemt of executive functions: Review of instruments and identification of critical issues. Archives of Clinical Neuropsychology, 23 (2), 201-216. [ Links ]
Claytor, N., Schmitter-Edgecombe, M., & Burr, R. (2006). Improving the ecological validity of executive functioning assessment. Archives of Clinical Neuropsychology, 21, 217-227. [ Links ]
Drake, M. A. (2007). Evaluación de las funciones ejecutivas. En D. Burín, M. Drake & P. Harris. Evaluación neuropsicológica en adultos (pp. 299-329). Buenos Aires: Paidós. [ Links ]
Engel-Yeger, B., Josman, N., & Rosenblum, S. (2009). Behavioural Assessment of Dysexecutive Syndrome for childer (BADS-C): an examination of construct validity. Neuropsychological Rehabilitation, 19 (5), 662-676. [ Links ]
Escobar Pérez, J., & Cuervo Martínez, A. (2008). Validez de contenido y juicio de expertos: una aproximación a su utilización. Avances en Medición, 6, 27-36. [ Links ]
Evans, J.J., Chua, S.E., McKenna, P.J., & Wilson, B.A. (1997). Assessment of the dysexecutive syndrome in schizophrenia. Psychological Medicine, 27 (3), 635-646. [ Links ]
Fernández, A. Pérez, E. Alderete, A. M., Richaud, M.C., & Fernández Liporace, M. (2010). Constuir o adaptar test psicológicos? Diferentes respuestas a una cuestión controvertida. Evaluar, 10, 60-74. [ Links ]
García da Costa Armentano, C., Sellitto Porto, C., Dozzi Brucki, S.M., & Nitrin, R. (2009). Study on the Behavioural Assessment of the Dysexecutive (BADS) performance in healthy individuals, Mild Cognitive Impairment and Alzheimer Disease. A preliminary study. Demencia & Neuropsychologia, 3 (2), 101-107. [ Links ]
García-Molina, A., Tirapu -Ustarroz, J., & Roig-Rovira, T. (2007). Validez ecológica en la exploración de las funciones ejecutivas. Anales de Psicología, 23 (2), 289-299. [ Links ]
Gómez Beldarrain, M., & Tirapu Ustárroz, J. (2012). Neuropsicología de la corteza prefrontal y funciones ejecutivas: una visión panorámica. En J. Tirapu Ustárroz, A. García Molina, M. Ríos Lago, & A. Ardila Ardila (Eds.), Neuropsicología de la corteza prefrontal y las funciones ejecutivas (pp. 3-17). Barcelona: Viguera. [ Links ]
Hambleton, R.K., & Patsula, L. (1999). Increasing the validity of adapted tests: Myths to be avoided and guidelines for impoving test adaptation practices. Journal of Applied Testing Technology, 1 (1), 1-30. [ Links ]
Hancock, P.A., y Rausch, R. (2010). The effects of sex, age and interval duration on the perception of time. Acta Psychologica, 133, 170-179. [ Links ]
Katz, N., Tadmor, I., Felzen, B., & Hartamn-Maeir, A. (2007). The Behavioural Assessment of Dysexecutive Syndrome (BADS) in schizophrenia and its relation to functional outcomes. Neuropsychological Rehabilitation, 17 (2), 192-205. [ Links ]
Krabbendam, L. de Vygt, M.E., Deriz, M.M.A., & Jolles, J. (1999). The Behavioural Assessment of Dysexecutive Syndrome as a tool to assess executive functions in schizophrenia. The Clinical Neuropsychologist, 13 (3), 370-375. [ Links ]
Monteiro, M. & Peixoto, B. (2014). Behavioural Assessment of Dysexecutive Syndrome (BADS) no contexto do envelhecimiento normal e patologico. Rev. Bras. Geriatr. Gerontol., 17 (2), 407-416. [ Links ]
Norris, G., & Tate, R. (2000). The Behavioural Assessment of the Dysexecutive Syndrome (BADS): ecological, concurrent and construct validity. Neuropsychological Rehabilitation, 10 (1), 33-45. [ Links ]
Pedrero Pérez, E.J., Ruiz Sánchez de León, J.M., Llanero Luque, M., Olivar Arroyo, A., Bouso Saiz, J.C., & Puerta García, C. (2009). Versión española del Cuestionario Disejecutivo DEX-Sp). Propiedades psicométricas en adictos y probación no clínica. Adicciones, 21 (2), 155-166. [ Links ]
Pedrero Pérez, E.J., Ruiz Sánchez de León, J.M., Lozoya Delgado, P., Llanero Luque, M., Rojo-Mota, G., & Puerta García, C. (2011). Evaluación de los síntomas prefrontales: propiedades psicométricas y datos normativos del Cuestionario Disejecutivo (DEX) en una muestra de población española. Rev Neurol, 52 (7), 394-404. [ Links ]
Peña Casanova, J., Gramunt Fombuena, N., & Gich Fullà, J. (2005). Test neuropsicológicos. Cap. 16. Barcelona: Masson. [ Links ]
Sierra Sanjurjo, N., Montañez, P., Sierra Matamoros, F.A., & Burin, D. (2014). Estimating Intelligence in Spanish: Regression Equations with the Word Accentuation Test and demographic variables in Latin America. Applied Neuropsychology, 0, 1-10. [ Links ]
Simblett, S.K. ,& Bateman, A. (2011). Dimensions of the Dysexecutive Questionnaire (DEX) examined using Rasch analysis. Neuropsychological Rehabilitation, 21 (1), 1-25. [ Links ]
Tirapu Ustárroz, J., Muñoz Céspedes, J. M. & Pelegrín Valero, C. (2002). Funciones ejecutivas: necesidad de una integración conceptual. Rev Neurol, 34 (7), 673-685. [ Links ]
Van de Vijver, F., & Tanzer, N.K. (2004). Bias and equivalence in crooscultural assessment: an overview. Revue européenne de psychologie appliqué, 54, 119-135. [ Links ]
Verdejo García, A., & Bechara, A. (2010). Neuropsicología de las funciones ejecutivas. Psicothema, 22 (2), 227-235. [ Links ]
Verdejo García, A., & Pérez García, M. (2007). Ecological assessment of executive functions in substance dependent individuals. Drug and Alcohol Dependence, 90, 48-55. [ Links ]
Wilson, B.A, Alderman, N., Burgess, P., Emslie, H., & Evans, J. (1999). Behavioural Assessment of the Dysexecutive Syndrome (BADS). Inglaterra. Pearson. [ Links ]
Wilson, B.A., Evans, J., Emslie, H., Alderman, N., & Burgess, P. (1998). The development of an ecologically valid test for assessing patients with a dysexecutive syndrome. Neuropsychological Rehabilitation, 8 (3), 213-228. [ Links ]
Wilson, B., Evans, J., Emslie, H., Alderman, N., & Burgess, P. (1998). The development of an ecologically valid test for assessing patients with a dysexecutive syndrome. Neuropsychological Rehabilitation, 8 (3), 213-228. [ Links ]
Wood, R.L., & Liossi, C. (2006). The ecological validity of executive tests in a severely brain injured sample. Archives of Clinical Neuropsychology, 21, 429-437. [ Links ]
Dirección para correspondencia
Andrea Querejeta
Box B1. Facultad de Psicología (UNC)
Avenida Enrique Barros y Enfermera Gordillo
CP 5000, Ciudad Universitaria. Córdoba
E-mail: andrea.querejeta533@gmail.com
Artículo recibido: 09/03/2015
Artículo revisado: 19/11/2015
Artículo aceptado: 30/12/2015
Agradecimientos: Ph.D Barbara Ann Wilson. Sarah Weinberg de Editorial Pearson. Luciana Marengo, Evelina Fontana, Jessica Tavella y Eugenia García (raters). Lucía Montero y Benjamín Morán (colaboradores).
Proyecto aprobado y subsidiado por Secretaría de Ciencia y Técnica (SECyT) de la Facultad de Psicología de la Universidad Nacional de Córdoba. Resol. HCD 162/2012. Resol. Rectoral: 2472/2012.
