+Model

NRL-1646; No. of Pages 10 ARTICLE IN PRESS

Neurología xxx (xxxx) xxx—xxx

NEUROLOGÍA
www.elsevier.es/neurologia

ORIGINAL

Estudios normativos españoles (Proyecto

NEURONORMA Plus): normas para las pruebas Delis
Kaplan-Design Fluency Test (DK-DFT), Color Trails
Tests (CTT) y Dual Task (DT)
G. García-Escobar a,b , C. Pérez-Enríquez a,c , C. Arrondo-Elizarán a,d ,
B. Pereira-Cuitiño a , L. Grau-Guinea a , M. Florido-Santiago a,e , J. Piqué-Candini a ,
R.M. Manero a,b , A. Puig-Pijoan a,b , J. Peña-Casanova a,∗ y G. Sánchez-Benavides a,f,∗∗

a
Grupo de Neurofuncionalidad y Lenguaje, Programa de Neurociencias, Instituto Hospital del Mar de Investigaciones Médicas
(IMIM), Barcelona, España
b
Unidad de Deterioro Cognitivo y Trastornos del Movimiento, Servicio de Neurología, Hospital del Mar, Barcelona, España
c
Unidad de Epilepsia, Servicio de Neurología, Hospital del Mar, Barcelona, España
d
Servicio de Neurología, Clínica Universidad de Navarra, Pamplona, España
e
Unidad de Salud Cerebral, Centro de Investigaciones Médico Sanitarias (CIMES), Málaga, España
f
Barcelonabeta Brain Research Center, Barcelona, España

Recibido el 11 de marzo de 2021; aceptado el 12 de mayo de 2021

PALABRAS CLAVE Resumen

Estudios normativos; Introducción: Las tareas de atención compleja y fluencia no verbal se utilizan en las valora-
Funciones ejecutivas; ciones neuropsicológicas con el objetivo de explorar subdominios de las funciones ejecutivas.
Fluencia no verbal El objetivo de este estudio es proporcionar datos normativos ajustados por edad, escolaridad
y género de las pruebas Delis Kaplan-Design Fluency Test (DK-DFT), Color Trails Tests (CTT) y
Dual Task (DT) como parte del Proyecto NEURONORMA-Plus.
Método: Se incluyeron 308 individuos sin deterioro cognitivo de entre 18 y 92 años de edad.
Se convirtieron las puntuaciones brutas en puntuaciones escalares ajustadas por edad y se
realizaron ajustes por escolaridad y género aplicando regresiones lineales estratificando en dos
grupos de edad (< 50 y ≥ 50 años).
Resultados: Globalmente la edad tuvo un impacto negativo en el DK-DFT y el CTT. La esco-
laridad mostró un efecto positivo en las puntuaciones del DK-DFT sólo en el grupo de mayor
edad (≥ 50 años) y se halló un rendimiento discretamente superior en los hombres más jóvenes
en la condición básica de esta prueba. La escolaridad se asoció positivamente con todas las
puntuaciones de CTT en ambos grupos de edad, excepto en la subprueba CTT-1 en el grupo de
adultos jóvenes. La edad y la escolaridad no mostraron influencia sobre el rendimiento en el
DT, a diferencia del género, ya que las mujeres jóvenes tuvieron un rendimiento ligeramente
superior.
∗ Autor para correspondencia.
∗∗ Autor para correspondencia.
Correos electrónicos: [email protected] (J. Peña-Casanova), [email protected] (G. Sánchez-Benavides).
https://doi.org/10.1016/j.nrl.2021.05.013
0213-4853/© 2021 Sociedad Española de Neurologı́a. Publicado por Elsevier España, S.L.U. Este es un artı́culo Open Access bajo la licencia
CC BY-NC-ND (http://creativecommons.org/licenses/by-nc-nd/4.0/).

Cómo citar este artículo: G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al., Estudios normativos españoles
(Proyecto NEURONORMA Plus): normas para las pruebas Delis Kaplan-Design Fluency Test (DK-DFT), Color Trails Tests
(CTT) y Dual Task (DT), Neurología, https://doi.org/10.1016/j.nrl.2021.05.013
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al.

Conclusión: Estos datos normativos pueden resultar útiles para la interpretación de las eva-
luaciones neuropsicológicas en población española.
© 2021 Sociedad Española de Neurologı́a. Publicado por Elsevier España, S.L.U. Este es un
artı́culo Open Access bajo la licencia CC BY-NC-ND (http://creativecommons.org/licenses/by-
nc-nd/4.0/).

KEYWORDS Spanish normative studies (NEURONORMA-Plus project): norms for the Delis
Normative studies; Kaplan-Design Fluency Test, Color Trails Test, and Dual Task
Executive function;
Non-verbal fluency Abstract
Introduction: Complex attention and non-verbal fluency tasks are used in neuropsychologi-
cal assessments with the aim of exploring subdomains of executive function. The purpose
of this study is to provide norms and age-, education-, and sex-adjusted data for the Delis
Kaplan-Design Fluency Test (DK-DFT), Color Trails Test (CTT), and Dual Task (DT) as part of the
NEURONORMA-Plus project.
Methods: The sample included 308 cognitively healthy individuals aged between 18 and
92 years. Raw scores were converted to age-adjusted scaled scores. These were further con-
verted into education- and sex-adjusted scaled scores by applying linear regression, with 2 age
groups (< 50 and ≥ 50 years).
Results: Overall, age had a negative impact on DK-DFT and CTT performance. We observed a
positive effect of education on DK-DFT scores only in the older group (≥ 50 years). Moreover,
younger men performed slightly better in the basic condition of this test. Education was positi-
vely associated with all CTT scores in both age groups, with the exception of the CTT-1 subtest
in the younger group. Age and education did not influence DT performance, whereas sex did,
with young women performing slightly better.
Conclusions: These normative data may be useful in the interpretation of neuropsychological
assessments in the Spanish population.
© 2021 Sociedad Española de Neurologı́a. Published by Elsevier España, S.L.U. This is an open
access article under the CC BY-NC-ND license (http://creativecommons.org/licenses/by-nc-nd/
4.0/).

Introducción nos permiten responder de forma adaptativa a situaciones

novedosas4 , y se consideran como un dominio cognitivo que
Los datos normativos de pruebas neuropsicológicas son nece- es importante evaluar en toda evaluación neuropsicológica.
sarios para interpretar el rendimiento cognitivo normal y La fluencia de diseños es la alternativa no verbal a las
anormal. Debe tenerse en cuenta el impacto de las variables tareas de fluencia verbal, ampliamente utilizadas en eva-
sociodemográficas en el rendimiento ya que repercuten en luación cognitiva. Se define como la productividad fluente
las puntuaciones de los individuos. Muchos instrumentos de del ámbito no verbal y mide la habilidad de generar series
evaluación cognitiva desarrolladas en el ámbito anglosajón de diseños abstractos sin repetirlos5,6 . Existen algunas prue-
no disponen de datos de referencia para las poblaciones no bas conocidas para evaluar esta capacidad, como el Design
anglófonas. La disponibilidad de normas para grupos, idio- Fluency Test7 , el Ruff Figural Fluency Test8 y el Five Point
mas y culturas específicos es fundamental para la calidad Test6 , contando este último con una reciente normalización
de la práctica neuropsicológica. Durante los últimos años, española9 . Sin embargo, el DK-DFT posee algunas carac-
la falta de datos normativos en la población española ha terísticas que lo hacen especialmente útil para evaluar
sido parcialmente resuelta por estudios normativos como la fluencia no verbal. Esta prueba se incluye en la bate-
el Proyecto NEURONORMA1,2 y posteriormente el proyecto ría ejecutiva Delis-Kaplan Executive Function System10 e
Normacog3 . El presente estudio, en el marco del proyecto incluye tres condiciones: la primera podría considerarse
NEURONORMA-Plus, pretende aportar datos de referencia como el procedimiento de fluencia «puro»5 . La segunda
para algunas pruebas neuropsicológicas adicionales que no requiere capacidades de inhibición y control, y la tercera
estaban incluidas en el proyecto NEURONORMA original. implica capacidades de alternancia o switching4 . El término
En este presente artículo se proporcionan datos norma- switching puede describirse como la capacidad de cam-
tivos ajustados por edad, escolaridad y género para las biar la atención entre diferentes estímulos o conjuntos de
pruebas Delis Kaplan-Design Fluency Test (DK-DFT), Color respuestas11 .
Trails Tests (CTT) y tarea dual experimental denominada Respecto a la influencia con las variables sociodemográ-
Dual Task (DT). Estos tests evalúan la atención compleja ficas, a diferencia de los múltiples estudios existentes sobre
y diferentes tipos de funciones ejecutivas, que pueden el efecto de la edad, la escolaridad y el género en las prue-
definirse a grandes rasgos como aquellas habilidades que bas de fluencia verbal, los estudios sobre su impacto en la

2
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
Neurología xxx (xxxx) xxx—xxx

fluencia de tipo no verbal son mucho más escasos12 , aun- evaluados en el servicio de neurología del Hospital del
que progresivamente se han ido publicando más resultados Mar de Barcelona y parte reclutados en centros para la
al respecto9,13—15 . tercera edad de la misma ciudad. El reclutamiento se rea-
El CTT16 fue desarrollado como un análogo adaptado cul- lizó teniendo en cuenta estratos previamente especificados
turalmente del Trail Making Test (TMT)17 . Debido a que (aleatorio estratificado por género, edad y escolaridad). El
presenta círculos de color numerados, en lugar de elementos origen étnico de todos los participantes fue caucásico. Todos
del alfabeto, puede reducir las demandas educativas de indi- residían y habían sido educados en España. El proyecto fue
viduos analfabetos o sujetos con un nivel de escolaridad más aprobado por el Comité de Ética del Instituto Hospital del
bajo. En la primera parte se evalúa la atención sostenida, Mar de Investigaciones Médicas (Barcelona, España).
que se define como la capacidad de mantener la atención Los criterios de selección fueron los siguientes:
centrada en un aspecto en concreto durante un período sos- Criterios de inclusión: a) consentimiento informado fir-
tenido de tiempo, a la vez que se filtran distractores18 . La mado; b) hombres y mujeres de 18 a 95 años de edad;
segunda parte de la prueba se centra en la medición de aten- c) castellanohablantes con una capacidad mínima de escri-
ción alternante, que consiste en la capacidad de cambiar tura y lectura (confirmada durante la entrevista inicial y
el foco atencional de forma alterna entre dos o más estí- corroborada por un historial fiable de al menos ≥ 1 año de
mulos o procesos cognitivos. En general, la primera parte educación formal); d) ausencia de afectación en las activi-
del CTT se asocia con características básicas de atención y dades de la vida cotidiana, según la evaluación del Interview
la segunda con una capacidad ejecutiva de orden superior for Deterioration of Daily Living in Dementia25 (puntua-
relacionada con la atención alternante y la flexibilidad cog- ción < 37).
nitiva. Es importante señalar que en las pruebas de atención Criterios de exclusión: a) antecedentes personales de
generalmente existe un claro solapamiento con otras funcio- enfermedades del sistema nervioso central que puedan cau-
nes y conceptos, como los de memoria de trabajo, inhibición sar déficits neuropsicológicos (por ejemplo, ictus, epilepsia,
de respuestas o switching5 . Aunque existen algunos estudios traumatismo craneoencefálico, trastornos del movimiento,
de normalización del CTT en diversos países, no se dispone esclerosis múltiple, tumor cerebral, etc.); b) antecedentes
de los mismos en población española. de abuso de alcohol u otras sustancias psicotrópicas; c) pre-
Si bien en la atención alternante el foco atencional se sencia de enfermedades sistémicas activas o no controladas
desplaza alternativamente entre varios procesos, existen asociadas con el deterioro cognitivo (por ejemplo, diabetes
tareas que requieren de una gestión atencional simultá- mellitus, hipotiroidismo, deficiencia de B12); d) antece-
nea en paralelo. Esta capacidad es la denominada atención dentes de enfermedades psiquiátricas graves (por ejemplo,
dividida, la cual consiste en dirigir la atención a múlti- depresión grave, trastorno bipolar, psicosis); e) deficiencias
ples estímulos o procesos a la vez, dividiendo los recursos sensoriales graves (pérdida de la visión y/o la audición) que
de la atención de manera óptima o mediante un shifting hayan podido impedir la administración de pruebas cog-
muy rápido de la misma19 . El paradigma que ha sido típica- nitivas; f) puntuación del Mini Mental State Examination
mente utilizado para el estudio de este tipo de atención (MMSE)26 , en la versión de Blesa y colaboradores27 < 25 o pun-
es el de tareas duales, que requieren realizar simultá- tuación del Memory Impairment Screen (MIS)28 < 5 según el
neamente dos tareas. La capacidad de realizar diversas trabajo de Böhm y colaboradores29 ; g) cualquier otra razón
tareas al mismo tiempo se sustenta sobre un sistema de según criterios clínicos (por ejemplo, falta de motivación).
memoria de trabajo de múltiples componentes que abarca Los participantes no recibieron compensación alguna por su
un elemento ejecutivo central que tiene la función de participación.
controlar e integrar las operaciones de dos sistemas perifé-
ricos diferentes. Estos componentes periféricos son el bucle
fonológico y la agenda visuoespacial, los cuales proporcio-
nan el procesamiento y el almacenamiento temporal de Medidas neuropsicológicas
la información verbal y visuoespacial, respectivamente20 .
El déficit en la capacidad de asignar recursos atencio- Las pruebas fueron administradas y puntuadas de acuerdo
nales y la consiguiente disminución de la realización de con los manuales publicados (excepto para tarea DT, ya que
tareas simultáneamente se explica como un fallo en el es una tarea experimental diseñada ad hoc). El equipo de
mecanismo del ejecutivo central21 . La evaluación de la investigación tradujo por consenso las instrucciones verbales
capacidad de realizar dos tareas a la vez ha mostrado originales del inglés al español de acuerdo con la siguiente
resultados prometedores para captar afectación cognitiva metodología: un investigador creó el primer borrador de ins-
sutil22 . En el presente estudio presentamos datos normati- trucciones traducidas para cada prueba; luego se realizó
vos para una tarea dual experimental basada en trabajos una reunión de consenso con el resto de neuropsicólogos
anteriores23,24 . clínicos y dos lingüistas y se propuso una versión final para
cada prueba. Finalmente, una revisión posterior por parte
de un neurólogo conductual con amplia experiencia en el
desarrollo de herramientas cognitivas en marcos interna-
Materiales y métodos cionales aprobó las versiones finales y aprobó las versiones
resultantes. Debido a las características no verbales de las
Participantes pruebas, no fue necesaria ninguna adaptación lingüística
para sus elementos. Las evaluaciones fueron realizadas por
Se incluyeron un total de 308 sujetos. Los participantes fue- neuropsicólogos entrenados que eran hablantes nativos de
ron reclutados entre los familiares y amigos de los pacientes español.

3
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al.

Delis Kaplan-Design Fluency Test recibidas varía en función de su longitud del span y del
tiempo necesario para repetir la serie, se toma como medida
Esta prueba se compone de tres condiciones: básica, inhi- de rendimiento la proporción de dígitos repetidos en su posi-
bición y alternancia. En cada condición se proporciona una ción correcta (número total de dígitos repetidos en su orden
hoja con 35 casillas que contenía un conjunto de puntos. correcto dividido entre el número total de dígitos presen-
Se instruye a los participantes que realicen diseños distin- tados por el examinador), en lugar del número de series
tos de 4 líneas rectas conectando los puntos de cada casilla correctas.
durante 60 segundos. Cada línea tiene que estar conectada En la prueba de cancelación se colocan horizontalmente
con la línea anterior a través de un punto y éstas pueden dos láminas que contienen un conjunto de siluetas opacas
cruzarse entre sí. Además, los diseños no necesariamente (animales y frutas) alineadas a lo ancho de la lámina. En
tienen que ser cerrados y pueden ser abstractos. esta tarea se instruye a los sujetos señalar con lápiz todas
En la condición básica (puntos sombreados), las casillas aquellas que coincidían con la silueta objetivo (mostrada al
contienen 5 puntos sombreados en negro y se instruye a inicio de la lámina) durante también 60 segundos. El número
los participantes para que creen diferentes diseños conec- total de siluetas objetivo señaladas en el tiempo permitido
tando estos puntos. En la segunda condición de inhibición es, en este caso, la variable principal.
(puntos vacíos), las casillas contienen 5 puntos sombreados Por último, en la condición de tarea dual, los partici-
en negro y 5 puntos vacíos. Los sujetos tienen que crear pantes deben realizar la tarea de repetición de series de
los diseños conectando únicamente los puntos vacíos, igno- dígitos (máximo span alcanzado) y la de cancelación simul-
rando los puntos sombreados en negro (que sí son usados táneamente durante 60 segundos. Las variables elegidas en
en la condición anterior). Por último, en la tercera con- esta parte fueron el número de dígitos repetidos correcta-
dición (alternancia) las casillas también incluyen 5 puntos mente en la posición correcta y del número de estímulos
sombreados en negro y 5 puntos vacíos pero en este caso se diana marcados.
instruye a los participantes que realicen diseños diferentes El rendimiento proporcional en la tarea de repetición de
alternando entre los puntos sombreados y los vacíos. Previo dígitos (P dígitos) se calculó midiendo el cambio entre el
al inicio de cada condición, se realiza una parte de prác- rendimiento en la repetición de dígitos en la condición single
tica de tres casillas, en la cual el examinador proporciona (p single) y el rendimiento en la repetición de dígitos en
un feedback sobre la corrección de las respuestas. Se selec- la condición dual (p dual), utilizando la siguiente fórmula,
cionó el total de diseños correctos en cada una de las tres donde p es la proporción de dígitos repetidos en el orden
condiciones para elaborar los datos normativos. correcto en función de los presentados por el examinador:
Eq. 1: Fórmula p dígitos
Color Trails Test (p sin gle − pdual) × 100
Pdigitos = (1)
p sin gle
El CTT se compone de dos partes: CTT-1 y CTT-2. Ambas
incluyen una parte de práctica. La parte CTT-1, consiste en El rendimiento proporcional de la tarea de cancelación
dibujar una línea continua conectando círculos numerados (P cancelación) se calculó midiendo el cambio en el ren-
del 1 al 25 de forma secuencial en el menor tiempo posible dimiento entre las condiciones de tarea simple (t single) y
sin levantar el lápiz. La parte CTT-2 muestra dos círculos dual (t dual) (donde se define por el número total de siluetas
para cada número, uno de color amarillo y otro de color objetivo marcadas), utilizando la siguiente fórmula:
rosado. La tarea en este caso consiste en conectar los cír- Eq. 2: Fórmula p cancelación
culos numerados, pero alternando entre los amarillos y los
rosados. En ambas partes, la variable principal es el tiempo (t sin gle − tdual) × 100
Pcancelacion = (2)
(segundos) necesario para completar cada prueba. t sin gle

El rendimiento proporcional de la combinación de ambas

Dual Task
tarea (P dual), que es la principal variable seleccionada para
los datos normativos, se calculó mediante la siguiente fór-
El DT consta de tres partes. Las dos primeras (condición sin- mula:
gle) son tareas relativamente simples. En la parte final se Eq. 3: Fórmula p dual
realizan ambas tareas single de manera simultánea (con-
dición dual). Las tareas simples consisten en una tarea de (Pdigitos − Pcancelacion)
repetición de dígitos con la longitud de span verbal máximo Pdual = (3)
2
alcanzada por el sujeto y una tarea de cancelación. Las hojas
de trabajo están disponibles mediante petición a los autores.
Para determinar el span verbal máximo, se administra la Procedimientos
versión española adaptada de la tarea de dígitos30 , siguiendo
los procedimientos estándar indicados en el manual WAIS- Cada sujeto fue evaluado en una sola sesión que se com-
III31 , es decir, se administran dos intentos para cada longitud puso de una explicación del estudio con una firma posterior
de span independientemente de si el primero se respon- de consentimiento informado. Después se realizó una entre-
día correctamente. A continuación, se inicia la primera vista inicial y pruebas de selección de pacientes (screening).
parte del test (tarea single verbal) la cual consiste en repe- Tras confirmar que se cumplían los criterios de inclusión y
tir durante 60 segundos series de dígitos del span máximo ninguno de exclusión, se administró la batería cognitiva. La
alcanzado anteriormente. Dado que el número de series evaluación duró dos horas aproximadamente.

4
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
Neurología xxx (xxxx) xxx—xxx

Análisis estadístico dependiendo de los factores que mostrasen una asociación

relevante. Para los análisis se usó el programa Statistical
Los datos normativos se elaboraron siguiendo los pro- Package for the Social Sciences (SPSS) versión 22.
cedimientos descritos anteriormente en el proyecto
NEURONORMA1,2 con ligeras variaciones, como el uso de
correlaciones semiparciales en lugar de univariadas para Resultados
estudiar la asociación con las variables sociodemográficas
y el uso de las medias de escolaridad de los grupos para La tabla 1 muestra los descriptivos de las variables socio-
establecer el marco de ajuste por esta variable. Para ana- demográficas de la muestra completa y estratificada por
lizar los efectos de las variables sociodemográficas en las edad. Los datos descriptivos de los resultados cognitivos se
puntuaciones cognitivas, la muestra se clasificó en dos gru- muestran en la tabla 2.
pos: sujetos de edad < 50 años (n = 118) y sujetos de edad Las correlaciones semiparciales y los coeficientes de
≥ 50 años (n = 190). Esta sub clasificación asegura la com- determinación entre las puntuaciones brutas de DK-DFT, CTT
parabilidad con estudios normativos anteriores del Proyecto y DT por edad, escolaridad y el género se presentan en la
NEURONORMA y, por otro lado, diferencia de una manera tabla 3. No se observó ningún efecto de la edad en el grupo
más precisa el efecto del envejecimiento y de la escolaridad de adultos jóvenes en ninguna de las pruebas. Por otro lado,
entre los jóvenes y los adultos de mayor edad. la edad explicó altos porcentajes de varianza en los sujetos
Posteriormente, con el objetivo de maximizar el número ≥ 50 años en el rendimiento de DK-DFT y CTT. En cuanto
de participantes que contribuyen a cada grupo normativo, se a la escolaridad, no se encontró ningún efecto en el grupo
aplicó la estrategia del intervalo de superposición32 . Se con- de adultos jóvenes en el DK-DFT y el DT, excepto en la sub-
sideraron diez grupos de rangos de edad de sujetos para la prueba CTT-2, en la que esta variable explicó el 8,5% de la
creación de los datos normativos (mid-points):18-29 (n = 41), varianza. En el grupo de adultos más mayores, la escolaridad
23-36 (n = 59), 30-43 (n = 48), 37-50 (n = 53), 44-57 (n = 61), explicó porcentajes entre el 3,6% y el 11,3% de la varianza
51-64 (n = 71), 58-71 (n = 83), 65-78 (n = 74), 72-85 (n = 68) en todas las variables de DK-DFT y CTT. Globalmente, no se
y 79-92 (n = 40). Finalmente, se crearon diez nuevos rangos observó ningún efecto de la variable género, excepto en la
de edad para la aplicabilidad de datos normativos: 18-26, condición de inhibición del DK-DFT en adultos jóvenes en la
27-33, 34-40, 41-47, 48-54, 55-61, 62-68, 69-75, 76-82, 83- que explicó el 5,1% de la varianza.
92. Las PE NEURONORMA ajustadas por edad para las varia-
Para la elaboración de los datos normativos se siguieron bles principales de los test DK-DFT, CTT y DT se presentan
los siguientes pasos: a) análisis descriptivo (media, desvia- en el Apéndice A (tablas A1- A6). Para seleccionar la
ción estándar y porcentajes para la muestra global y para correspondiente PE y el rango de percentil asociados a
cada grupo de edad); b) determinar el efecto de la edad, una determinada puntuación bruta, seleccione la columna
la escolaridad y el género mediante correlaciones semipar- correspondiente a un grupo de edad específico, encuentre
ciales y coeficiente de determinación (r2 ); c) creación de la puntuación bruta del paciente, y la PE correspondiente,
tablas normativas ajustadas por edad asignando rangos de la cual se muestra en la primera columna de la tabla.
percentiles a puntuaciones escalares (PE) NEURONORMA (PE En la tabla 4 se muestran las correlaciones (r) y coeficien-
ajustada por edad). Esta conversión produjo una distribu- tes de determinación (r2 ) de las puntuaciones de las pruebas
ción normal de estas puntuaciones (rango 2-18 media = 10 DK-DFT, CTT y DT de las PE con la edad, la educación y el
y desviación estándar = 3); d) para desarrollar los ajustes de género. Como se indica en la sección de métodos, se elabo-
educación se hicieron análisis de regresión lineal entre las PE raron ajustes para los años de escolaridad cuando la varianza
y los años de escolaridad. Se calcularon los coeficientes de explicada fue ≥ 5% y ˇ significativa. En el Apéndice B se
correlación (r) y determinación (r2 ) de las PE para cada grupo proporcionan las tablas B1 a B6 correspondientes a las PE
de edad (< 50 / ≥ 50 años). En aquellos casos en los que la corregidas por escolaridad y los valores de ˇ correspondien-
varianza explicada era superior al 5% y ˇ mostraba un efecto tes. En este caso, se selecciona la PE (columna izquierda) y
significativo (p < 0,05), se realizó una corrección siguiendo los años de escolaridad (fila superior) correspondientes para
la fórmula de Mungas et al.33 . Las PE NEURONORMA ajusta- obtener la PE ajustada.
das para edad y escolaridad se calcularon para el grupo de En lo que respecta a los ajustes por la variable género,
< 50 años utilizando PE ajustada por escolaridad = PE ajus- debe darse un punto adicional a las PE ajustadas por edad en
tada por edad - (ˇ * [Escolaridad - 13]), y para el grupo de ≥ el caso del grupo de mujeres en la condición de inhibición
50 años, PE ajustada por escolaridad = PE ajustada por edad del DK-DFT y a los hombres en la variable del DT (tablas B7
- (ˇ * [Escolaridad - 10]), donde 13 y 10 eran la media de y B8, respectivamente).
los años de escolaridad de cada grupo; e) para los ajustes
por género se compararon en primer lugar las puntuaciones
medias brutas entre hombres y mujeres. Si se encontraban Discusión
diferencias significativas, se realizaba una regresión con la
PE ajustada por edad o PE ajustada por edad y escolaridad El objetivo del presente estudio fue proporcionar datos nor-
como variable dependiente y el género como predictor y se mativos para la población española de 18 a 92 años de edad
utilizaban los criterios de r2 ≥ 5% y ˇ (p < 0,05) para decidir si para el DK-DFT, CTT y DT incluido en la batería neuropsi-
era necesario realizar ajustes por género. Así, las PE ajusta- cológica NEURONORMA-Plus. La muestra se dividió en dos
das por edad, escolaridad y género se calcularon aplicando grupos de edad, grupo de adultos jóvenes < 50 años y grupo
las siguientes fórmulas: PE ajustada por edad y escolari- de adultos más mayores (≥ 50 años) para proporcionar datos
dad - (ˇ *género) o PE ajustada por edad - (ˇ *género), homogéneos con nuestros estudios previos. Se presentan

5
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al.

Tabla 1 Datos sociodemográficos de la muestra global y por grupo de edad(< 50 y ≥ 50 años)

Global (N = 308) < 50 años (N = 118) ≥ 50 años (N = 190)
Edad (años) M (DE) 54,11 (19,17) 34,34 (9,32) 67,67 (10,35%)
Escolaridad (años) M (DE) 11,42 (4,24) 13,01 (3,49) 10,34 (4,38%)
Género (% Mujeres) 167 (54,2%) 61 (51,70%) 106 (55,80%)
M: media; DE: desviación estándar.

Tabla 2 Datos descriptivos de las variables cognitivas de la muestra global y por grupo de edad (< 50 y ≥ 50 años)
Global < 50 años ≥ 50 años
DK-DFT
Condición básica (total correctos) M (DE) 9,05 (3,29) 11,02 (2,81) 7,82 (2,97)
Condición inhibición (total correctos) M (DE) 9,89 (3,72) 12,32 (3,21) 8,38 (3,17)
Condición alternancia (total correctos) M (DE) 7,54 (3,13) 9,35 (2,86) 6,43 (2,75)
CTT
CTT-1 (segundos) M (DE) 51,17 (25,44) 33,87 (10,97) 61,91 (25,97)
CTT-2 (segundos) M (DE) 109,84 (57,28) 67,07 (18,49) 136,41 (57,15)
DT
Pdual M (DE) 90,43% (15,11) 89,78% (14,56) 90,83% (15,46)
M: media; DE: desviación estándar; DK-DFT: Delis Kaplan — Design Fluency Test; CTT: Color Trails Test; DT: Dual Task; Pdual, rendimiento
proporcional en la tarea dual.

Tabla 3 Correlaciones semiparciales (CS) y coeficientes de determinación (r2 ) de las puntuaciones brutas según edad, escola-
ridad y género de la muestra (< 50 y ≥ 50 años)
< 50 años

Edad (años) Escolaridad (años) Género

Correlación r2 Correlación r2 Correlación r2

semiparcial semiparcial semiparcial
DK-DFT
Condición básica (total -0,020 0,000 -0,019 0,000 -0,034 0,001
correctos)
Condición inhibición (total -0,111 0,012 0,075 0,006 -0,226 0,051
correctos)
Condición alternancia (total -0,208 0,043 0,109 0,012 -0,160 0,026
correctos)
CTT
CTT-1 (segundos) 0,047 0,002 -0,153 0,023 0,002 0,000
CTT-2 (segundos) 0,183 0,033 -0,291 0,085 -0,057 0,003
DT
Pdual 0,134 0,018 0,001 0,000 0,210 0,044
≥ 50 años
DK-DFT
Condición básica (total -0,388 0,151 0,336 0,113 0,027 0,001
correctos)
Condición inhibición (total -0,449 0,202 0,287 0,082 -0,010 0,000
correctos)
alternancia (total correctos) -0,465 0,216 0,281 0,079 -0,032 0,001
CTT
CTT-1 (segundos) 0,486 0,236 -0,191 0,036 -0,062 0,004
CTT-2 (segundos) 0,463 0,214 -0,291 0,085 0,066 0,004
DT
Pdual 0,019 0,000 0,005 0,000 0,189 0,036
DK-DFT: Delis Kaplan — Design Fluency Test; CTT: Color Trails Test; DT: Dual Task; Pdual, rendimiento proporcional en la tarea dual.

6
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
Neurología xxx (xxxx) xxx—xxx

Tabla 4 Coeficientes de correlación (r) y determinación (r2 ) de las puntuaciones escalares con la edad, la escolaridad y el
género
< 50 años

Edad (años) Escolaridad (años) Género

r r2 r r2 r r2
DK-DFT
Condición básica (total correctos) 0,05 0,002 0,005 0,000 0,017 0,000
Condición inhibición (total correctos) 0,015 0,000 0,023 0,001 0,234 0,055
Condición alternancia (total correctos) 0,055 0,003 0,095 0,009 0,167 0,028
CTT
CTT-1 (segundos) 0,026 0,0007 0,148 0,022 0,007 0,00005
CTT-2 (segundos) 0,049 0,0024 0,259 0,067 0,025 0,0006
DT
Pdual 0,040 0,002 0,005 0,000 0,232 0,054

≥ 50 años

Edad (años) Escolaridad (años) Género

r ry r ry r ry
DK-DFT
Condición básica (total correctos) 0,036 0,001 0,333 0,111 0,025 0,001
Condición inhibición (total correctos) 0,036 0,001 0,308 0,095 0,070 0,005
Condición alternancia (total correctos) 0,06 0,004 0,293 0,086 0,042 0,002
CTT
CTT-1 (segundos) -0,038 0,0014 0,253 0,064 -0,013 0,0002
CTT-2 (segundos) -0,039 0,0015 0,357 0,127 -0,124 0,015
DT
Pdual 0,038 0,001 0,020 0,000 0,195 0,038
DK-DFT: Delis Kaplan — Design Fluency Test; CTT: Color Trails Test; DT: Dual Task; Pdual: rendimiento proporcional a tarea dual.

los datos normativos ajustados por edad y los subsiguien- en el tiempo de finalización tanto en el CTT-1 como en el
tes ajustes para la escolaridad y el género basados en una CTT-2 en el grupo de mayor edad de nuestro estudio, mien-
regresión lineal. tras que en el grupo más joven no se encontró ninguna
influencia significativa de la edad en el CTT-1. La esco-
Delis Kaplan-Design Fluency Test laridad tuvo un efecto moderado en ambos grupos en el
CTT-2 pero no en el CTT-1, lo que sugiere que el CTT-
Se halló un efecto negativo de la edad en el rendimiento 1 requiere menos habilidades educativas que el CTT-2.
en la prueba. Las puntuaciones son significativamente infe- No se encontraron diferencias significativas en función del
riores en el grupo de mayores de 50 años. Estos hallazgos género, lo que concuerda con la mayoría de los estudios
coinciden con los datos presentados por los autores de anteriores16,36—39 , con la excepción del estudio de Sant’Ana
la prueba10 . Nuestros resultados están en consonancia con Rabelo y colaboradores35 , en el que los hombres obtuvieron
estudios anteriores relativos al efecto de las variables socio- puntuaciones superiores en ambas partes. En este estudio
demográficas en otras pruebas neuropsicológicas que miden brasileño, con casi 2.000 participantes y solo un 19% de
la capacidad de fluencia no verbal4-15 . En cuanto a la escola- ellos hombres, los autores señalan a la mayor escolaridad
ridad, los sujetos con un nivel educativo superior obtuvieron de estos frente a las mujeres como posible fuente de sesgo
mejores puntuaciones de rendimiento. Estos resultados tam- en el resultado. Este hecho, junto a la potencia estadís-
bién concuerdan con estudios anteriores sobre el efecto de tica debido al gran tamaño muestral, pueden explicar el que
la escolaridad en otras pruebas de fluencia no verbal8,9 . Se hallaran tales diferencias significativas por sexo, aun cuando
observó un discreto efecto de la variable género en el grupo los tamaños del efecto fueran pequeños.
de adultos jóvenes en una sola condición de prueba (inhibi- A pesar de las diferencias entre ambas pruebas, resulta
ción), consistente en un mejor desempeño de los hombres de interés la comparación de los presentes resultados del
y en concordancia con los hallazgos reportados por Harter y CTT con los del test TMT presentados en anteriores traba-
colaboradores34 . jos del proyecto NEURONORMA40,41 . En líneas generales, se
observa que el tiempo necesario para completar el CTT es
Color Trails Test similar, con tendencia a ser menor, que para completar el
TMT (por ejemplo, la puntuación alrededor de la mediana),
Como se ha descrito en anteriores estudios de datos es decir puntuación escalar 10, para el grupo de edad de
normativos16,35-39 , la edad mostró una influencia negativa 48 a 54 años en el CTT-1 se corresponde a un tiempo de

7
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al.

entre 35 y 40 segundos, mientras que en el TMT-A para el ajustadas a la edad. Sin embargo, el amplio rango de
rango de edad de 50-56 es de 36 a 4640 . Los menores tiempos edad de los participantes estudiados redujo el número de
de resolución se hacen más evidentes en la parte más com- ellos que contribuían a cada subgrupo de edad, siendo
pleja, completándose el CTT-2 consistentemente más rápido los tamaños resultantes de entre 40 y 83 sujetos. Estos
que el TMT-B al comparar los datos normativos (siguiendo el tamaños se consideran suficientes, ya que según estudios
ejemplo anterior, para el CTT-2 la puntuación escalar 10 se recientes las estimaciones de las medias y desviaciones
corresponde con un tiempo de resolución de entre 66 y 84 estándar empiezan a ser estables alrededor de 30-80 suje-
segundos, mientras que para el TMT-B los tiempos van de tos, dependiendo de la asimetría de la distribución de los
80 a 107 segundos). A pesar de que estos datos provienen datos47 . Otra limitación se refiere a la aplicabilidad de estos
de diferentes muestras y resultar las pruebas sólo parcial- datos a las poblaciones de habla hispana. Su utilización
mente comparables, los resultados sugieren que el TMT-B en otros países distintos de España debe hacerse con cau-
presenta mayor complejidad que el CTT-2, pudiéndose hipo- tela ya que las diferencias culturales pueden influir en el
tetizar que esta dificultad añadida proviene de la exigencia rendimiento.
del conocimiento del abecedario y del hecho de que en el
TMT-B realmente se requiere alternar entre dos series sin
elementos reiterados (números y letras), mientras que en Conclusiones
el CTT-2 la «segunda» serie a mantener activa sólo consta
de dos categorías de color que se alternan. En cuanto a los Este proyecto proporciona datos normativos para el DK-DFT,
efectos sociodemográficos, se observa que tanto edad como, CTT y DT en la población española. El DK-DFT es una medida
sobretodo, escolaridad tienen un mayor impacto en el TMT40 útil de la fluidez no verbal que complementa una evaluación
que en el CTT (por ejemplo, para sujetos mayores de 50 años precisa de las capacidades ejecutivas. El CTT es también una
el TMT-B muestra una correlación con años de escolaridad buena medida de la función ejecutiva con menor influencia
de r = 0,52, mientras que el CTT-2 de r = 0,35). Este hecho del nivel educativo. Finalmente, presentamos el DT como
apoya una vez más la utilidad del CTT para evaluar sujetos una herramienta novedosa y fácil de usar para una eva-
con baja escolaridad o sin conocimiento formal suficiente de luación exigente de la capacidad de atención dividida. La
la lengua. aportación de estos datos normativos y los ajustes sociode-
mográficos asociados, permite una interpretación más fiable
Dual Task del rendimiento cognitivo en nuestro medio con estas herra-
mientas.
Como era de esperar, los resultados obtenidos mostraron
una leve disminución en el rendimiento de los sujetos en
la condición de tarea dual. De acuerdo con varios estu- Financiación
dios previos, no se detectó ningún efecto de la edad, lo
que sugiere que las habilidades evaluadas con este para- La presente investigación no ha recibido ayudas específicas
digma son independientes del envejecimiento20,23,42,43 . Estos provenientes de agencias del sector público, sector comer-
resultados contrastan sin embargo con otros estudios que cial o entidades sin ánimo de lucro.
sí reportaron un peor rendimiento en tareas duales en los
adultos mayores44—46 . No se observó una influencia de la
escolaridad, mientras que el género sí mostró un ligero
Conflicto de intereses
efecto, con un mejor rendimiento de las mujeres, lo que
requirió un ajuste de las puntuaciones para los hombres
menores de 50 años. Este hallazgo contrasta con trabajos Los autores declaran no tener ningún conflicto de intereses.
anteriores23 donde los resultados mostraron una influencia
positiva de la escolaridad, pero ninguna del género. Las dis-
crepancias observadas podrían estar relacionadas con las Agradecimientos
diferencias en la naturaleza de las tareas y de las muestras.
La tarea usada en el presente estudio ajusta la dificultad de Queremos agradecer a todos los participantes de este estu-
la misma a la capacidad de cada participante, centrándose dio por su colaboración altruista. También agradecemos
en las diferencias intraindividuales entre el rendimiento de a los siguientes clubes sociales de la tercera edad por
la tarea single y la dual, lo cual pensamos que representa su apoyo: Barceloneta, Verneda, Verneda Alta y Can Cas-
una ventaja y puede explicar la ausencia de efecto de la telló. Por último, a las lingüistas Anna Planas y Mercè
edad en el rendimiento. Paez por su labor en la traducción al castellano de las
instrucciones originales de los test empleados en este
estudio.
Limitaciones

Este estudio no está exento de limitaciones. En los estu- Anexo. Material adicional
dios normativos el tamaño de la muestra es especialmente
relevante. Se evaluaron más de 300 sujetos y con el fin Se puede consultar material adicional a este artículo
de maximizar la muestra disponible se usó la estrate- en su versión electrónica disponible en doi:10.1016/j.nrl.
gia de intervalos superpuestos para desarrollar las normas 2021.05.013.

8
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
Neurología xxx (xxxx) xxx—xxx

Bibliografía gender and education. Brain Inj. 2001;15:819—29,

http://dx.doi.org/10.1080/02699050110034325.
1. Peña-Casanova J, Blesa R, Aguilar M, Gramunt-Fombuena N, 19. Parasuraman R. The attentive bra. En: Issues prospects, In:
Gómez-Ansón B, Oliva R, et al., NEURONORMA Study Team. Parasuraman R, editores. The attentive brain. Cambridge: MIT
Spanish Multicenter Normative Studies (NEURONORMA Project): Press; 1998. p. 3—15.
methods and sample characteristics. Arch Clin Neuropsychol. 20. Baddeley A, Logie R, Bressi S, Della Sala S, Spinnler H. Demen-
2009;24:307—19, http://dx.doi.org/10.1093/arclin/acp027. tia working memory. Q J Exp Psychol A. 1986;38:603—18,
2. Peña-Casanova J, Casals-Coll M, Quintana M, Sánchez- http://dx.doi.org/10.1080/14640748608401616.
Benavides G, Rognoni T, Calvo L, et al. Estudios 21. Baddeley AD, Logie RH. Working memory: The multicomponent
normativos españoles en población adulta joven model. En: Miyake A, Shah AP, editores. Models of working
(Proyecto NEURONORMA jóvenes): métodos y carac- memory. New York: Cambridge University Press; 1999. p. 28—61.
terísticas de la muestra. Neurologia. 2012;27:253—60, 22. Della Sala S, Cocchini G, Logie RH, Allerhand M, MacPher-
http://dx.doi.org/10.1016/j.nrl.2011.12.019. son SE. Dual task during encoding, maintenance, and retrieval
3. del Pino R, Peña J, Schretlen DJ, Ibarretxe-Bilbao N, Ojeda in Alzheimer’s disease. J Alzheimers Dis. 2010;19:503—15,
N. Estudio multicéntrico de normalización y estandarización http://dx.doi.org/10.3233/JAD-2010-1244.
de instrumentos neuropsicológicos en personas sanas para 23. Della Sala S, Foley JA, Beschin N, Allerhand M, Logie RH.
población española: metodología y características del proyecto Assessing dual-task performance using a paper-and-pencil
Normacog. Rev Neurol. 2015;61:57—65. test: normative data. Arch Clin Neuropsychol. 2010;25:410—9,
4. Lezak MD, Howieson DB, Tranel ED, Bigler D. Neuropsychological http://dx.doi.org/10.1093/arclin/acq039.
assessment. 5th edition. New York, NY: Oxford University Press; 24. Foley JA, Kaschel R, Logie RH, Della Sala S. Dual-task per-
2012. formance in Alzheimer’s disease, mild cognitive impairment,
5. Strauss E, Sherman EM, Spreen O. A compendium of neuropsy- and normal ageing. Arch Clin Neuropsychol. 2011;26:340—8,
chological tests. Administration, norms and commentary. 3rd ed http://dx.doi.org/10.1093/arclin/acr032.
New York: Oxford University Press; 2006. 25. Teunisse S, Derix MM, van Crevel H. Assessing the severity of
6. Regard M, Strauss E, Knapp P. Children’s production on verbal dementia. Patient and caregiver. Arch Neurol. 1991;48:274—7,
and non-verbal fluency tasks. Percept Mot Skills. 1982;55(3 Pt http://dx.doi.org/10.1001/archneur.1991.00530150042015.
1):839—44, http://dx.doi.org/10.2466/pms.1982.55.3.839. 26. Folstein MF, Folstein SE, McHugh PR. ‘‘Mini-mental state’’.
7. Jones-Gotman M, Milner B. Design fluency: the A practical method for grading the cognitive state of
invention of nonsense drawings after focal corti- patients for the clinician. J Psychiatr Res. 1975;12:189—98,
cal lesions. Neuropsychologia. 1977;15(4—5):653—74, http://dx.doi.org/10.1016/0022-3956(75)90026-6.
http://dx.doi.org/10.1016/0028-3932(77)90070-7. 27. Blesa R, Pujol M, Aguilar M, Santacruz P, Bertran-Serra I, Hernán-
8. Ruff RM, Light RH, Evans R. The Ruff Figural Fluency Test: a dez G, et al. Clinical validity of the minimental state for Spanish
normative study with adults. Dev Neuropsychol. 1987;3:37—51, speaking communities. Neuropsychologia. 2001;39:1150—7.
http://dx.doi.org/10.1080/87565648709540362. 28. Buschke H, Kuslansky G, Katz M, Stewart WF, Sliwinski
9. Matias-Guiu JA, Pytel V, Delgado-Álvarez A, Delgado-Alonso MJ, Eckholdt HM, et al. Screening for dementia with
C, Cortés-Martínez A, Fernández-Oliveira A, Matías-Guiu J. the memory impairment screen. Neurology. 1999;52:231—8,
The Five-Point Test: Normative data for middle-aged and http://dx.doi.org/10.1212/wnl.52.2.231.
elderly Spaniards. Appl Neuropsychol Adult. 2021 Jan 20:1—9, 29. Böhm P, Peña-Casanova J, Gramunt N, Manero RM, Terrón C,
http://dx.doi.org/10.1080/23279095.2021.1873137. Quiñones-Ubeda S. Versión española del Memory Impairment
10. Delis DC, Kaplan E, Kramer JH. Delis-Kaplan Executive Function Screen (MIS): datos normativos y de validez discriminativa. Neu-
System (D-KEFS). San Antonio: The Psychological Corporation; rologia. 2005;20:402—11.
2001. 30. Peña-Casanova J. Programa Integrado de Exploración Neuro-
11. Kramer JH, Quitania L, Dean D, Neuhaus J, Rosen HJ, psicológica. En: Test Barcelona-Revisado. Barcelona: Masson;
Halabi C, et al. Magnetic resonance imaging correlates 2005.
of set shifting. J Int Neuropsychol Soc. 2007;13:386—92, 31. Wechsler D. Wechsler Adult Intelligence Scale-Third
http://dx.doi.org/10.1017/S1355617707070567. Edition(WAIS-III). Administration scoring manual. San Antonio
12. Mitrushina M, Boone KB, Razani J, D’Elia LF. Handbook of nor- TX: The Psychological Corporation.; 1997.
mative data. for neuropsychological assessment. 2nd ed. New 32. Pauker JD. Constructing overlapping cell tables to maximize
York: Oxford University Press; 2005. the clinical usefulness of normative test data: rationale and an
13. Goebel S, Fischer R, Ferstl R, Mehdorn HM. Nor- example from neuropsychology. J Clin Psychol. 1988;44:930—3,
mative data and psychometric properties for http://dx.doi.org/10.1002/1097-4679(198811)44:6<930::aid-
qualitative and quantitative scoring criteria of the jclp2270440613>3.0.co;2-h.
Five-point Test. Clin Neuropsychol. 2009;23:675—90, 33. Mungas D, Marshall SC, Weldon M, Haan M, Reed BR.
http://dx.doi.org/10.1080/13854040802389185. Age and education correction of Mini-Mental State Exami-
14. Izaks GJ, Joosten H, Koerts J, Gansevoort RT, Slaets JP. nation for English and Spanish-speaking elderly. Neurology.
Reference data for the Ruff Figural Fluency Test stratified 1996;46:700—6, http://dx.doi.org/10.1212/wnl.46.3.700.
by age and educational level. PLoS One. 2011;6:e17045, 34. Harter SL, Hart CC, Harter GW. Expanded scoring criteria for
http://dx.doi.org/10.1371/journal.pone.0017045, 10. the design fluency test: reliability and validity in neuropsycho-
15. Tucha L, Aschenbrenner S, Koerts J, Lange KW. The logical and college samples. Arch Clin Neuropsychol. 1999;14:
five-point test: reliability, validity and normative data 419—32.
for children and adults. PLoS One. 2012;7:e46080, 35. Santana Rabelo I, Pacanaro SV, Rossetti M, Almeida de Sá
http://dx.doi.org/10.1371/journal.pone.0046080. Leme S, Castro NR, de Güntert CM, et al. Color Trails Test:
16. D’Elia L, Satz P, Uchiyama C, White T. Color Trail: adult form A Brazilian normative sample. Psychol Neurosci. 2010;3:93—9,
manual. Odessa, FL: PAR; 1996. http://dx.doi.org/10.3922/j.psns.2010.1.012.
17. Reitan RM. Trail Making Test: Manual for administration and 36. Konstantopoulos K, Issidorides M, Spengos K. A nor-
scoring. Tucson: Reitan Neurospychology Laboratory.; 1992. mative study of the color trails test in the Greek
18. Chan RC. A further study on the sustained atten- population. Appl Neuropsychol Adult. 2013;20:47—52,
tion response to task (SART): the effect of age, http://dx.doi.org/10.1080/09084282.2012.670155.

9
+Model
NRL-1646; No. of Pages 10 ARTICLE IN PRESS
G. García-Escobar, C. Pérez-Enríquez, C. Arrondo-Elizarán et al.

37. La Rue A, Romero LJ, Ortiz IE, Liang HC, Lindeman span visuoespacial Letter-Number Sequencing, Trail Making Test
RD. Neuropsychological performance of Hispanic and y Symbol Digit Modalities Test. Neurologia. 2012;27:319—29,
non-Hispanic older adults: an epidemiologic survey. Clin http://dx.doi.org/10.1016/j.nrl.2011.12.020.
Neuropsychol. 1999;13:474—86, http://dx.doi.org/10.1076/ 42. Belleville S, Rouleau N, Caza N. Effect of normal aging on the
1385-4046(199911)13:04;1-Y;FT474. manipulation of information in working memory. Mem Cognit.
38. Pontón MO, Satz P, Herrera L, Ortiz F, Urrutia CP, Young R, 1998;26:572—83, http://dx.doi.org/10.3758/bf03201163.
et al. Normative data stratified by age and education for 43. Salthouse TA, Fristoe NM, Lineweaver TT, Coon VE. Aging of
the Neuropsychological Screening Battery for Hispanics (NeSB- attention: does the ability to divide decline? Mem Cognit.
HIS): Initial report. J Int Neuropsychol Soc. 1996;2:96—104, 1995;23:59—71, http://dx.doi.org/10.3758/bf03210557.
http://dx.doi.org/10.1017/s1355617700000941. 44. Fernandes MA, Moscovitch M. Divided attention and memory:
39. Vogel A, Stokholm J, Jørgensen K. Performances on Sym- evidence of substantial interference effects at retrie-
bol Digit Modalities Test Color Trails Test, and modified val and encoding. J Exp Psychol Gen. 2000;129:155—76,
Stroop test in a healthy, elderly Danish sample. Neuropsy- http://dx.doi.org/10.1037//0096-3445.129.2.155.
chol Dev Cogn B Aging Neuropsychol Cogn. 2013;20:370—82, 45. Lindenberger U, Marsiske M, Baltes PB. Memorizing
http://dx.doi.org/10.1080/13825585.2012.725126. while walking: increase in dual-task costs from young
40. Peña-Casanova J, Quiñones-Ubeda S, Quintana-Aparicio adulthood to old age. Psychol Aging. 2000;15:417—36,
M, Aguilar M, Badenes D, Molinuevo JL, et al. Spanish http://dx.doi.org/10.1037//0882-7974.15.3.417.
Multicenter Normative Studies (NEURONORMA Project): 46. Naveh-Benjamin M, Craik FI, Guez J, Kreuger S. Divided
norms for verbal span, visuospatial span, letter and attention in younger and older adults: effects of strategy
number sequencing, trail making test, and symbol digit and relatedness on memory performance and secondary task
modalities test. Arch Clin Neuropsychol. 2009;24:321—41, costs. J Exp Psychol Learn Mem Cogn. 2005;31:520—37,
http://dx.doi.org/10.1093/arclin/acp038. http://dx.doi.org/10.1037/0278-7393.31.3.520.
41. Tamayo F, Casals-Coll M, Sánchez-Benavides G, Quintana 47. Piovesana A, Senior G. How Small Is Big: Sample
M, Manero RM, Rognoni T, et al. Calvo et al. Estudios Size and Skewness. Assessment. 2018;25:793—800,
normativos españoles en población adulta joven (Proyecto NEU- http://dx.doi.org/10.1177/1073191116669784.
RONORMA jóvenes): normas para las pruebas span verbal,

10