Avaliação Da Adequação - VBMAPP - Artigo
Avaliação Da Adequação - VBMAPP - Artigo
Avaliação Da Adequação - VBMAPP - Artigo
Universidad Veracruzana
Resumo:
O VB-MAPP (Verbal Behavior Milestones Assessment and Placement Program) é um ins-trumento de
avaliação e acompanhamento do desenvolvimento de repertórios para crianças com autismo e outros
distúrbios do desenvolvimento. Os três Níveis de funcionalidade do VB-MAPP foram estabelecidos a
partir dos marcos típicos de desenvolvimento infantil deri-vados principalmente de estudos com
crianças estadunidenses ou europeias. Considerando as diferenças socioeconômicas e culturais
existentes entre os Estados Unidos/Europa e o Brasil, este estudo analisou a adequação dos níveis de
funcionalidade do VB-MAPP para a avaliação de repertórios verbais, sociais e motores de uma
amostra de 61 crianças brasileiras com de-senvolvimento típico, residentes em Belém, com idades
entre um e cinco anos. Os resultados apontaram que os níveis propostos no VB-MAPP se mostraram
adequados para avaliar reper-tórios de uma amostra de crianças brasileiras com desenvolvimento
típico: crianças com até 18 meses, de forma geral, realizaram as tarefas propostas Nível 1, crianças
entre 18 a 30 me-ses desempenharam a maioria das tarefas presentes no Nível 2 e crianças entre 30 e
48 meses realizaram grande parte das tarefas do Nível 3. ampliando os dados sobre a validade
externa do instrumento. Com base nesses resultados sugere-se a pertinência do uso do VB-MAPP no
contexto brasileiro.
Palavras-chave:
VB-MAPP, avaliação comportamental, validade externa, autismo, de-senvolvimento.
Abstract:
The Verbal Behavior Milestones Assessment and Placement Program (VB-MAPP) is a crite-ria-based
assessment tool that can be used as a curriculum guide and repertoire development monitoring
system for children with autism and other developmental disorders, making it possible to establish a
measure of verbal behavior, some motor and social skills of the individ-uals evaluated. The VB-MAPP
contains five components: ‘Milestones Assessment’, ‘Barriers Assessment’, ‘Transition Assessment’,
‘Task Analysis and Skills Tracking’, and ‘ Placement & IEP Goals ‘. ‘Milestones Assessment’ presents 170
measurable learning milestones divided hierarchically into three levels. The three levels of VB-MAPP
were established from typical child development milestones derived primarily from studies with US or
European children. Considering the socioeconomic and cultural differences that exist between the
United States/ Europe and Brazil, this study analyzed the adequacy of VB-MAPP functional levels for
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 1/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
the evaluation of verbal, social and motor repertoires of a sample of 61 Brazilian children with typical
development, living in Belém do Pará, of both sexes, one to five years old. The pro-cedure started with
the conduction of an anamnesis session with the parents and/or guard-ians of the child, in order to
obtain general information about the child and its behavioral development and to raise possible
reinforcing stimuli for the participant. After that, a child observation session was held, lasting
approximately thirty minutes, aiming to guarantee the inclusion of only children with typical
development in the study sample. Each session was conducted individually and lasted approximately
one hour, and the application of the test with each participant lasted for days or, in some cases,
weeks. In addition, the application was con-ducted strictly following all tasks and scoring criteria
defined in VB-MAPP for each domain and development milestone. Each participant was assessed from
Level 1 of the VB-MAPP and the evaluation was applied in a hierarchical way: the evaluation of Level 2
was conducted with each participant after the conclusion of the Level 1 evaluation and so on.
However, the participant was only assessed on a next level if he/she obtained 80% of the maximum
possible score in the previous level. Participants were included in Level 1 if they did not reach 80% of
the maximum score of that Level, or if they achieved that performance, they should achieve less than
50% of the maximum score of Level 2. To be included the next Levels, participants should obtain at
least 50% of the maximum score at the specific level. The results showed that the functional levels
proposed in the VB-MAPP were adequate to evaluate repertoires of a sample of Brazilian children with
typical development: children up to 18 months of age performed the tasks proposed on Level 1,
children between 18 and 30 months performed most of the tasks present in Level 2 and children
between 30 and 48 months did most of the tasks of Level 3, increasing the data on the external validity
of the instrument. Based on these results it is suggested the relevance of the use of VB-MAPP in the
Brazilian context.
Keywords:
VB-MAPP, behavioral assessment, external validity, autism, development.
O Nível 1 do VB-MAPP é constituído por nove domínios, e inclui a avaliação dos re-pertórios
iniciais dos operantes verbais mando e tato (Skinner, 1992/1957), de ouvinte, ha-bilidades
sociais, pareamento ao modelo, brincar independente, imitação e comportamento vocal
espontâneo. O Nível 2 de avaliação, composto por doze domínios, inclui habilidades mais
avançadas dos mesmos domínios no Nível 1 (mando, tato etc.), com exceção de com-
portamento vocal espontâneo, e a introdução dos seguintes domínios: resposta de ouvinte
por classe, função e característica (FCC), operante verbal intraverbal (Skinner, 1992/1957),
rotinas de sala de aula, habilidades de grupo e estrutura linguística. Nos Níveis 1 e 2 está pre-
sente também o sub teste do operante verbal ecoico (Skinner 1992/1957), criado por Barbara
Esch com o objetivo de avaliar a habilidade da criança de repetir com correspondência ponto
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 2/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
a ponto a um modelo vocal. O Nível 3, formado por 13 domínios, continua a avaliação de
habilidades mais refinadas dos domínios presentes no Nível 2 (com exceção de imitação) e
introduz três novos domínios: leitura, escrita e matemática.
O VB-MAPP tem sido utilizado para medir o repertório de crianças diagnosticadas com
autismo e outros distúrbios do desenvolvimento antes da implementação de uma variedade
de intervenções comportamentais que buscam, por exemplo: o ensino de habilidades rela-
cionadas à rotina escolar (Charania et al., 2010), a avaliação de preferência por modelos de
intervenção (Geiger, LeBlanc, Dillon, & Bates, 2010), o ensino de prevenção a raptos (Gunby,
Carr, & LeBlanc 2010), dentre outros. Nesses estudos a avaliação dos indicadores de
desempenho no VB-MAPP figura como a única ou principal medida de desempenho dos
participantes antes da implementação da intervenção comportamental.
Em diversos estudos, tambén, o VB-MAPP tem sido utilizado como instrumento de medida
de porgresso de participantes em algum método de inervencao. Nesses estudos o ins-
trumento é aplicado antes e após a intervencao e as medidas de desempenho nestas
aplicacoes são tomadas para avaliar o efeito do método de intervenção (Carnett &
Ingvarsson, 2016; Koehler-Platten, Grow, Schulze, & Bertone, 2013; Mason & Andrews, 2014;
Vandbakk, Arntzen, Gisnaas, Antonsen, & Gundhus, 2012).
O VB-MAPP foi traduzido e publicado em diversos idiomas (ex. chinês, francês, ita-liano,
espanhol) e vem sendo utilizado nos contextos de investigações e intervenções para pessoas
com autismo e outros distúrbios do desenvolvimento (Esch et al., 2010; Gould et al., 2011). No
Brasil, ainda na ausência de uma versão traduzida publicada do VB-MAPP, o ins-trumento
vem sendo utilizado por pesquisadores e profissionais de orientação analítico-com-
portamental que trabalham com pessoas com distúrbios do desenvolvimento. Recentemente,
Martone (2017) realizou a tradução e adaptação para o português dos capítulos um a seis do
manual do VB-MAPP (Sundberg, 2014) e dos formulários de pontuação da avaliação de
marcos, competências ecoicas e barreiras do protocolo de registro do VB-MAPP (?/20082).
Nessa direção, este estudo analisou a adequação dos níveis de funcionalidade do VB--MAPP
para a avaliação de repertórios verbais, sociais e motores de uma amostra de crianças
brasileiras com desenvolvimento típico, residentes em Belém do Pará.
MÉTODO
Participantes
Ñao foi indicado qual versao do protocolo de 2008 foi parcialmente traduzida mentar a
probabilidade de que a maioria dos repertórios do Nível 3 pudessem ser avaliados. Os
participantes foram selecionados pela pesquisadora por meio de visitas a escolas e creches
de Belém. Para garantir a inclusão apenas de crianças com desenvolvimento típico no estudo,
foi realizada uma sessão de anamnese com os pais e/ou responsáveis e a observação da
crian-ça pela pesquisadora antes da inserção da mesma na pesquisa (ver Procedimento). O
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 3/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
nível socioeconômico de cada participante foi definido considerando a informação sobre a
renda familiar obtida durante a anamnese.
A coleta de dados foi realizada em uma sala de 36 m2 utilizada nas atividades de pesquisa e
intervenção com crianças com autismo do Projeto APRENDE (Atendimento e Pesquisa sobre
Aprendizagem e Desenvolvimento) da Universidade Federal do Pará, ou na casa dos parti-
cipantes, desde que se cumprisse o requisito de haver a presença de no máximo três pessoas
durante a coleta de dados (incluindo o pesquisador e o participante da pesquisa).
Para a aplicação do VB-MAPP com as crianças, foi utilizada a versão em inglês do manual do
instrumento de avaliação (Sundberg, 2014), e o protocolo de avaliação dos mar-cos do
desenvolvimento do VB-MAPP (Sundberg, 2007-2015/2008), contendo: os níveis, domínios e
todas as habilidades que compõem a fase de avaliação do VB-MAPP, as folhas de registro da
avaliação dos marcos do VB-MAPP e a folha que indica a avaliação do repertório
comportamental de cada criança a partir do VB-MAPP. Foi utilizada também uma folha de
registro para cada tentativa específica criada pelo projeto APRENDE com base em Sundberg
(2007-2015/2008).
PROCEDIMENTO
Foi realizada, também, uma sessão de observação da criança, que teve duração de apro-
ximadamente trinta minutos. Essa sessão procurou garantir a familiaridade da criança com a
pesquisadora e a situação de aplicação do VB-MAPP, assim como a verificação das informa-
ções levantadas na anamnese sobre os comportamentos das crianças e potenciais
reforçadores (Sundberg, 2014, p. 21)
Uma vez que a criança fosse selecionada como participante, era realizada uma sessão de
aproximadamente uma hora, com o objetivo de estabelecer o controle de estímulo da
presen-ça da pesquisadora e a função potencialmente reforçadora dos seus
comportamentos para as ações da criança. Nessa sessão a pesquisadora levou estímulos
preferidos da criança e brincou com ela, buscando ‘parear-se’ a estes estímulos. Caso a
criança emitisse comportamentos tais como: interagir com a pesquisadora, fazer contato
visual e sorrir, a coleta de dados tinha início imediatamente. Após o início da aplicação da
avaliação dos marcos de desenvolvimento do VB-MAPP, os cinco primeiros e os cinco últimos
minutos de cada sessão foram dedicados à manutenção do ‘pareamento’.
A aplicação da avaliação dos marcos do VB-MAPP foi conduzida por um pesquisador trei-
nado e familiarizado com os operantes verbais de Skinner (1992/1957), com os princípios da
Análise Comportamental Aplicada (Lovaas, 2003), e com experiência no manejo de compor-
tamento de crianças e na aplicação do VB-MAPP. Todos estes são pré-requisitos estabeleci-
dos por Sundberg (2014, p.19) para a condução de uma avaliação eficaz.
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 4/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
aplicação foi con-duzida seguindo estritamente todas as tarefas e critérios de pontuação
definidos no VB-MAPP para cada domínio e marco do desenvolvimento.
Cada domínio (mando, tato, pareamento etc.) possui cinco repertórios específicos em cada
Nível, e em cada repertório o participante pode obter as pontuações 0, 1/2 e 1. A pontuação
máxima, então, em cada domínio, por Nível, é de cinco pontos. Os critérios específicos de
pontuação para cada repertório estão descritos no manual do VB-MAPP (Sundberg, 2014). A
pontuação total máxima (dos três Níveis) é de 170 pontos, sendo 45 nos domínios do Nível 1,
60 no Nível 2 e 65 no Nível 3.
Cada participante foi avaliado a partir do Nível 1 do VB-MAPP (independente de sua idade).
A aplicação da avaliação foi realizada de forma hierárquica: somente foi conduzida a avalia-
ção do Nível 2 com cada participante após o encerramento da avaliação do Nível 1 e assim
por diante. No entanto, o participante somente foi avaliado em um Nível seguinte se obteve
80% da pontuação máxima possível no Nível anterior.
ANÁLISE DE DADOS
Para avaliar a integridade da aplicação do instrumento, 30% das sessões foram gravadas e
assistidas por um pesquisador com conhecimento e experiência na utilização do VB-MAPP. O
pesquisador, ao assistir os vídeos das sessões, considerou se a implementação de cada ten-
tativa de avaliação foi realizada seguindo os elementos de uma aplicação eficaz do VB-MAPP
(Sundberg, 2014, p.21): obtenção da atenção da criança antes de iniciar a tentativa; dar à
criança de 3 a 5 segundos para ela responder, não fornecer ajuda à criança para realização da
tarefa e repetir a tentativa até três vezes se não houver resposta ou ocorrer erros.
Consideran-do [Implementações corretas/ Total de Implementações] x 100, verificou-se que a
integridade da aplicação do procedimento foi de 95%.
Para avaliar a fidedignidade dos registros dos desempenhos dos participantes foi calcula-do
o acordo entre os registros de dois observadores familiarizados com a avaliação dos mar-cos
do VB-MAPP em 30% das sessões (concomitantemente à aplicação do teste ou por meio de
vídeos gravados durante as sessões). Nessas sessões o pesquisador sinalizou qual marco de
qual domínio específico iria testar antes de iniciar a tentativa. Cada tentativa foi pontuada
conforme especificado no VB-MAPP por cada observador e o acordo foi calculado conside-
rando [Concordâncias/Concordâncias + Discordâncias] x 100, obtendo-se uma concordância
entre observadores para os registros do desempenho dos participantes de 91%.
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 5/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
Martone (2017)
Tabela 1.
Idade em meses, sexo, nível socioeconômico (NSE) e percentualobtido da pontuação
máxima possível em cada Nível do VB-MAPP decada participante (Part. = participantes; F=
feminino; M= masculino).
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 6/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
Tabla 1. Continuación
Idade em meses, sexo, nível socioeconômico (NSE) e percentualobtido da pontuação
máxima possível em cada Nível do VB-MAPP decada participante (Part. = participantes; F=
feminino; M= masculino).
A Figura 1 apresenta a média das idades dos participantes por Nível de avaliação do VB-
MAPP e seus respectivos desvios padrões. Para o Nível 1 a média das idades dos parti-
cipantes foi de 17 meses, com desvio padrão de 3,3. No Nível 2 a média das idades foi de 28
meses, com desvio padrão de 2,8. Para o Nível 3 a média das idades foi de 47 meses, com
desvio padrão de 9,7. Estes resultados se ajustam aos desempenhos esperados nos três
Níveis do VB-MAPP, considerando os intervalos de idades e os marcos de desenvolvimento
que comumente são observados em crianças típicas com idades nesses intervalos (Nível 1- 0
a 18 meses, Nível 2 – 18 a 30 meses, e Nível 3 – 30 a 48 meses). A maior variação das idades
das crianças incluídas no Nível 3 está relacionada com o aumento, no presente estudo, da
idade das crianças em um ano (48 meses para 60 meses) se comparado às idades típicas
propostas no VB-MAPP para esse Nível.
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 7/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
Figura 1.
Médias das idades em meses dos participantes para cada Nível de avaliação do VB- MAPP
e seus respectivos desvios padrões
O percentual médio da pontuação das crianças incluídas no Nível 1 foi menor, se com-
parado ao percentual médio da pontuação das crianças dos Níveis seguintes. Isso pode estar
relacionado ao fato de que, diferentemente dos Níveis 2 e 3, no Nível 1 não havia critério
mínimo de desempenho para inclusão no mesmo (todas as crianças avaliadas que não atin-
giram 80% das habilidades no primeiro Nível ou, ao atingirem,ñao completaram 50% das
habilidades presentes no Nível2, goram incluídas no Nivel 1).
Figura 2.
Percentual médio e desvio padrão da pontuação máxima possível dos participantes em
cada Nível do VB-MAPP.
A Figura 3 apresenta a quantidade de crianças que atingiu cada Nível de Avaliação do VB-
MAPP dentro dos grupos de idades definidos por Sundberg (2014): 0 a 18 meses: Nível 1; 18 a
30 meses: Nível 2; e 30 a 48 meses: Nível 3.
Figura 3.
Percentual de participantes por Nível de avaliação alcançado com idades até 18 meses, de
18 a 30 meses e de 30 a 48 meses.
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 8/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
Todos os 11 participantes do estudo com até 18 meses de idade foram incluídos no Nivel 1.
Em relacao ao segundo grupo de idade (18 a 30 meses), havia um total de 15 criancas, tres
das quais foram incluídas no Nivel 1, 11 atingiram o Nivel 2 e uma alcancou critério para ser
incluída no Nível 3. Quanto ao terceiro grupo de idade (30 a 48 meses), havia 20 parti-
cipantes, dos quais um foi incluído no Nível 2 e os 19 restantes no Nível 3. Esses resultados
confirmam o bom ajuste dos dados da amostra de crianças brasileiras com desenvolvimento
típico aos desempenhos esperados nos três Níveis do VB-MAPP, considerando os intervalos
de idades e os marcos de desenvolvimento que comumente são observados em cada Nível.
Verificou-se ainda que não houve diferença significativa entre as frequências de am-bos os
sexos nos três Níveis do VB-MAPP alcançados pelos participantes (Qui-quadrado χ2 (1,384),
p˃0,05). Também não foram detectadas diferenças significativas entre as distribui-ções dos
níveis de avaliação do VB-MAPP para cada nível socioeconômico, com exceção do nível C (Qui-
quadrado χ2 (21,43), p˂0,01). No entanto, este resultado parece derivar de uma sub-
representação do nível socioeconômico C na amostra (ver Tabela 1). (Error 2: La referencia:
Tabela 1 está ligada a un elemento que ya no existe)
Apesar de seu caráter inicial, uma limitação inerente a este tipo de estudo está na seleção
da amostra. Para ampliar sua relevância para o processo de avaliação da validade externa do
VB-MAPP (Sundberg, 2014) é importante expandir o estudo para um número maior de
participantes (com uma distribuição mais equilibrada da variável nível sócio econômico) e
para outras regiões do Brasil. Além disso, pode se configurar como uma limitação do estudo
o fato de que, para selecionar os participantes seguindo o critério de os mesmos não
possuírem qualquer atraso no desenvolvimento, foi realizado, no início do estudo, uma
anamnese com os pais ou responsáveis da criança. Não foi realizada a aplicação de
instrumentos validados de avaliação do desenvolvimento infantil (e.g., ASQ-Br, Denver II e III),
o que daria mais emba-samento aos dados sobre o desenvolvimento infantil de cada
participante. Porém é importante ressaltar que, embora não tenha sido aplicado um
instrumento padronizado de avaliação de desenvolvimento infantil, o desempenho das
crianças no VB-MAPP correspondeu aos espe-rados para suas faixas de idade, ou seja,
correspondeu ao desenvolvimento típico para aquele período de desenvolvimento.
Também pode ser importante que em novos estudos a aplicação do VB-MAPP seja rea-
lizada com cada domínio até que o mesmo se esgote (o participante não consiga mais realizar
as tarefas propostas pelo mesmo). Isso pode permitir uma análise mais detalhada dos
repertó-rios dos participantes, mostrando com qual idade média os mesmos tornam-se aptos
a realizar as tarefas propostas por cada domínio do VB-MAPP, e aproxima-se mais da forma
como o teste é conduzido na prática dos profissionais que o utilizam.
Referências
Bijou, S.W., & Baer, D. M. (1965). Child development II: Universal stage of infancy. New
Brazelton, T. B., & Sparrow, J. D. (2006). Touch points. Cambridge, MA: Da Capo Books.
Carnett, A., & Ingvarsson, E. T., (2016). Teaching a child with autism to mand for answers to
questions using a speech-generative device. The Analysis of Verbal Behavior, 32, 233-241.
doi: 10.1007/s40616-016-0070-6.
Charania, S. M., LeBlanc, L. A., Sabanathan, N., Ktaech, I. A., Carr, J. E., & Gunby, K. (2010).
Teaching effective hand raising to children with autism during group instruction. Journal
of Applied Behavior Analysis, 43, 493-497. doi: 10.1901/jaba.2010.43-493
Eldevik, S., Hastings, R. P., Jahr, E., & Hughes, J. C. (2012). Outcomes of behavioral inter-
vention for children with autism in mainstream pre-school settings. Journal of Autism
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 9/10
24/04/2021 Avaliação da adequação dos níveis de funcionalidade do VB-MAPP em uma amostra de crianças brasileiras
and Developmental Disorders, 42, 210-220. doi: 10.1007/s10803-011-1234-9.
Esch, B. E., LaLonde, K. B., & Esch, J. W. (2010). Speech and language assessment: A verbal
behavior analysis. The Journal of Speech-Language Pathology and Applied Behavior
Analysis, 5, 166-191. doi: 10.1037/h0100270.
Geiger, K.B., LeBlanc, L.A., Dillon, C.M., & Bates, S.L. (2010). An evaluation of preference for
video and in vivo modeling, Journal of Applied Behavior Analysis, 43, 279-283.
Gould, E., Dixon, D. R., Najdowski, A. C., Smith, M. N., & Tarbox, J (2011). A review of
assessments for determining the content of early intensive behavioral intervention
programs for autism spectrum disorders. Research in Autism Spectrum Disorders, 5(3),
990–1002. doi: 10.1016/j.rasd.2011.01.012.
Greer, R. D., & Ross, D. E. (2008). Verbal behavior analysis: Inducing and expanding new
Gunby, K.V., Carr, J.E., & LeBlanc, L.A. (2010). Teaching abduction – prevention skills to
children with autism. Journal of Applied Behavior Analysis, 43, 107-112. doi: 10.1901/
jaba.2010.43-107.
Koehler-Platten, K., Grow, L. L., Schulze, K. A., & Bertone, T. (2013). Using a lag schedule of
reinforcement to increase phonemic variability in children with autism spectrum di-
sorders. The Analysis of Verbal Behavior, 29, 71-83. doi: 10.1007/BF03393125.
Mason, L. L., & Andrews, A., (2014). Referent-based verbal behavior instruction for children
with autism. Behavior Analysis in Practice, 7, 107-111. doi: 10.1007/s40617-014-0018-z.
Schlinger, H. D. (1995). A behavior analysis view of child development. NY: Plenum Press.
Skinner, B. F. (1992). Verbal behavior. Acton, MA: Copley. Publicado originalmente em 1957.
Vandbakk, M., Arntzen, E., Gisnass, A., Antonsen, V., & Gundhus, T. (2012). Effect of training
different classes of verbal behavior to decrease aberrant verbal behavior. The Analysis of
Verbal Behavior, 28, 137-144. doi: 10.1007/BF03393115
Yin, R. K. (2001). Estudo de caso: Planejamento e métodos (Trad. D. Grassi). São Paulo:
Bookman. Obra originalmente publicada em 1994.
https://www.redalyc.org/jatsRepo/2745/274558118020/html/index.html 10/10