Viernes 5 de febrero de 2016 Cmo elaborar un resumen

Taller:
Elaboracin de un resumen estructurado de una comunicacin
estructurado de una comunicacin
cientfica cientfica de calidad
Ponente/monitor: Carlos Ochoa Sangrador
n Carlos Ochoa Sangrador
Servicio de Pediatra. Hospital Virgen de la Servicio de Pediatra. Hospital Virgen de la Concha. Zamora
Concha. Zamora. [email protected]
Javier Gonzlez de Dios
Textos disponibles en Servicio de Pediatra. Hospital General Universitario de Alicante.F
www.aepap.org Departamento de Pediatra. Universidad Miguel Hernndez.C
Cmo citar este artculo? @gmail.com
Alicante
Ochoa Sangrador C, Gonzlez de Dios J.
Cmo elaborar un resumen estructurado de una
comunicacin cientfica de calidad. En: AEPap (ed.). RESUMEN
Curso de Actualizacin Pediatra 2016. Madrid:
La Ediciones 3.0; 2016. p. 283-90.
Los resmenes son un componente esencial de las comunicacio-
nes cientficas. Se les dedica poca atencin, tanto si corresponden
a resmenes de comunicaciones para congresos o de artculos de
revistas, a pesar de que son el principal escaparate que tiene
nuestro trabajo, en ocasiones el nico al que acceden los poten-
ciales lectores. Habitualmente no somos conscientes de que de la
calidad formal y de contenido del resumen va a depender la
aceptacin de nuestro trabajo, su publicacin o su lectura. De
hecho, el rigor cientfico de nuestro resumen, va a ser extrapolado
al de nuestro estudio. Sin embargo nadie nos ha enseado a
elaborar resmenes de calidad. En el presente taller repasaremos
la calidad formal (estructura, estilo de redaccin) y la calidad de
contenido (objetivo nico y claro, mtodos bien definidos, resul-
tados precisos y conclusiones fundadas) de un resumen cientfico.
Asimismo destacaremos la importancia de los mensajes clave: qu
se sabe?, qu se aporta? Finalmente practicaremos con ejemplos
de resmenes, siguiendo los elementos de una lista gua de com-
probacin de su calidad.

INTRODUCCIN

Los resmenes son un componente esencial de las comunicacio-

nes cientficas, tanto si son resmenes de presentaciones para
congresos como si forman parte de artculos para revistas. A

283
284 Actualizacin en Pediatra

pesar de su importancia, se les dedica poca atencin, sin mtodos de observacin y mtodos analticos), los
tener en cuenta que son el principal escaparate que principales resultados (incluyendo, si es posible, la mag-
tiene nuestro trabajo, en ocasiones el nico al que van a nitud de los efectos y su precisin o significacin estads-
tener acceso los potenciales lectores. A menudo son tica) y las conclusiones principales. Los autores deben
elaborados con prisas, en el caso de las comunicaciones cuidar que los resmenes reflejen con precisin el con-
a congresos, porque esperamos hasta el ltimo da del tenido del trabajo. Desgraciadamente, muchos resme-
plazo de admisin, en el caso de los manuscritos para nes no concuerdan con la comunicacin presentada o el
revistas, como un ltimo trmite obligatorio antes de su texto del artculo publicado.
remisin a la editorial. Y esto es as porque no somos
conscientes de que de la calidad formal y de contenido Dado que un resumen debe seguir los estndares de
del resumen va a depender la aceptacin de nuestro toda literatura cientfica, se debe asegurar su claridad y
trabajo, su publicacin o su lectura. De hecho, el rigor brevedad por medio de oraciones sencillas y de redac-
cientfico de nuestro resumen, va a ser extrapolado al de cin precisa. El resumen debe tener una narracin cohe-
nuestro estudio. Sin embargo nadie nos ha enseado a rente y presentar la informacin ms pertinente y rele-
elaborar resmenes de calidad. Por lo tanto, parece ne- vante para el lector.
cesario que dediquemos un tiempo a conocer los fun-
damentos de un buen resumen.
CMO ELABORAR RESMENES DE CALIDAD
Un resumen es un documento abreviado que recoge la
informacin fundamental de un trabajo cientfico, puede
Para elaborar un buen resumen tenemos que tener en
ser la primera versin escrita del mismo, o bien una
cuenta una serie de recomendaciones referidas a aspec-
sntesis de versiones avanzadas, recogidas en documen-
tos de calidad formal (estructura, estilo de redaccin) y
tos ms amplios. Supone la tarjeta de presentacin de
de calidad de contenido (objetivo nico y claro, mtodos
nuestro trabajo, con la que daremos a conocer nuestros
bien definidos, resultados precisos y conclusiones funda-
hallazgos y con la que empezaremos a ser evaluados. Es,
das). A continuacin daremos algunas recomendaciones
asimismo, el punto de partida para alcanzar nuestro
siguiendo los apartados: estructura, estilo de redaccin y
objetivo final: que el trabajo sea aceptado para su pre-
contenido.
sentacin o publicacin. Finalmente, cuando el trabajo es
aceptado, es el testimonio escrito de su presentacin o
publicacin, a veces el nico que queda accesible para su
consulta en repertorios o bases de datos. Debemos Estructura
tener en cuenta que muy pocos compaeros podrn ver
y or nuestra presentacin presencial en un congreso, Antes de elaborar el resumen debemos consultar las
pero muchos podrn leer el resumen posteriormente en normas establecidas por los organizadores del congreso,
formato papel o electrnico; de igual manera, cuando un en el caso de una comunicacin, o por el comit editorial,
lector interesado realice una bsqueda a travs de fuen- en el caso de un artculo cientfico. Las normas incluirn
tes de informacin electrnicas, ser el resumen de aspectos especficos sobre formato y nmero de pala-
nuestro trabajo el que pueda consultar, y solo, en funcin bras. No leer y no seguir las normas es el primer paso
del inters que despierte y de la accesibilidad del docu- para la no aceptacin de cualquier comunicacin cient-
mento completo, acceder al resto del mismo. fica. Aunque las normas pueden variar en algunos aspec-
tos, existen estndares que deben ser considerados.
El resumen debe proporcionar el contexto o anteceden-
tes del estudio y debe fijar los objetivos del mismo, los Se recomienda que el resumen sea estructurado, incluso
procedimientos bsicos (seleccin de los sujetos o ani- si no lo requieren las normas de presentacin corres-
males de laboratorio que han participado en el estudio, pondientes. Los apartados habituales son:
 Cmo elaborar un resumen estructurado de una comunicacin cientfica de calidad 285

Ttulo. deberan leer y dar su visto bueno a la comunicacin y

su resumen antes de su envo. Cabe recordar que ms
Autores. de 6 autores en una comunicacin de un congreso no
suele ser bien visto (salvo que sea un estudio multicn-
Institucin (centro de trabajo). trico). El autor que presente el trabajo (el ponente)
conviene que aparezca en primer lugar. Es importante
Introduccin (o fundamentos o antecedentes o justi- que se indique cada autor siempre igual y recordar que
ficacin) y objetivos. entre los dos apellidos espaoles conviene poner un
guin en medio, lo que ayuda para una buena normali-
Mtodos. zacin del nombre en las bases de datos internacionales
(esto es ms importante para artculos cientficos, pero
Resultados. no es mala norma hacerlo siempre igual, tambin en las
comunicaciones a congresos). Al igual que con los auto-
Conclusiones. res, conviene que las instituciones se nombren siempre
con la misma denominacin.
No obstante, el formato requerido para los resmenes
estructurados puede diferir segn el congreso o revista Habitualmente no se indica bibliografa en un resumen,
implicado, incluso pueden existir diferentes formatos aunque en resmenes de comunicaciones a congresos
segn el tipo de estudio. As, el primer apartado puede pueden verse, pocas y muy seleccionadas, ms como
desglosarse en Antecedentes y Justificacin por un referentes metodolgicos que como soporte de la dis-
lado y Objetivos por otro, mientras que el apartado de cusin de los resultados.
Mtodos puede separarse en diseo, mbito, muestra,
procedimientos (intervencin o medidas de exposicin)
y determinaciones (anlisis o medidas de efecto). Los Estilo de redaccin
autores deben esforzarse por preparar sus resmenes
en el formato especificado por el congreso o revista La literatura cientfica tiene requisitos comunes a cual-
elegido. quier creacin literaria, pero tambin peculiaridades es-
pecficas de terminologa (vocabulario especializado) y
Normalmente, los resmenes tienen un lmite de pala- exigencias estrictas de veracidad y respeto a las normas
bras, en torno a 250 (aunque el lmite vendr especifica- profesionales y ticas. La redaccin de resmenes com-
do por cada congreso o editorial). Este lmite, obliga a parte estos requisitos, pero adems se ve condicionada,
una sntesis, en la que el objetivo es transmitir la esencia por limitaciones de espacio, a priorizar la sntesis y la
del trabajo. Nuestra capacidad para describir con preci- claridad.
sin, claridad y de forma atractiva el estudio debe estar
a la altura de la calidad del mismo. Por ello, todo el A continuacin citamos algunos consejos generales que
tiempo que dediquemos a la elaboracin del resumen no debemos olvidar para escribir resmenes y que son
ser un tiempo bien empleado. esenciales en la redaccin cientfica1:

Aunque no suelen establecerse limitaciones para su S e debe elegir un ttulo breve, preciso e informativo
longitud, un ttulo ideal no debera tener ms de 15 pa- (que describa la conclusin principal). Debe ser fcil
labras. La lista de autores debe limitarse a aquellos que de entender y no debe incluir jerga ni siglas o abrevia-
han realizado el estudio, ya sea como responsables del turas poco conocidas. No debe incluir trminos gen-
diseo, recogida de datos, anlisis de resultados y/o re- ricos como investigacin proyecto o informe, ya
daccin. Y esto debe servir para recordar que la autora que este tipo de trminos no orientan sobre el tema
es algo muy serio, por lo que todos los autores citados del trabajo.
286 Actualizacin en Pediatra

S e debe usar un lenguaje de fcil lectura, con frases N

 o empezar frases con Se sugiere que, Se cree
cortas y sencillas. Cuando tengamos que traducir el que, Se considera que, etc.
texto al ingls comprenderemos la utilidad de este
consejo. E vitar finalizar con frases como Segn lo descrito
Segn lo analizado o similares.
D
 ebemos evitar la voz pasiva y los gerundios. Aunque
la voz pasiva es muy empleada en textos en ingls, por N
 o repetir ni reformular el ttulo dentro del texto.
lo que algunos recomiendan su uso, en castellano su
lectura es ms compleja.
Contenido
D
 ebemos evitar las abreviaturas, excepto en el caso
de abreviaturas universalmente aceptadas. En caso de Existen pocos documentos de referencia especficos
que se considere necesario (pues el contenido no sobre el contenido de resmenes cientficos1-6. Por ello,
permite adaptarnos al nmero de palabras exigidas), para hacer recomendaciones, tendremos que basarnos
deben definirse la primera vez que aparecen en el en documentos de estilo de artculos cientficos7,8 y
resumen. tambin en los procedimientos de evaluacin de res-
menes de comunicaciones para congresos9-14. A conti-
D
 ebemos evitar los extranjerismos, especialmente los nuacin resumimos algunas recomendaciones que pue-
anglicismos. Hemos de usar denominaciones genri- den hacerse por apartados (Tabla 1).
cas y, por tanto, evitar nombres comerciales de me-
dicamentos. En la introduccin (o Fundamento o Antecedentes)
se debe responder a las preguntas qu se sabe? o por
D
 ebemos comprobar la ortografa y la gramtica. Las qu? Se deben resumir, preferiblemente en una frase, los
faltas de ortografa son poco frecuentes, pero las faltas conocimientos actuales o el estado del arte especfica-
gramaticales y de puntuacin lo son ms, y ello se mente relacionado con el trabajo presentado. Y en otra
puede convertir en algo difcilmente asumible para el frase se ha de indicar el objetivo del estudio (e, ideal-
rigor que exige la ciencia. mente, una breve resea de la hiptesis del mismo).
Siempre es preferible un objetivo nico, factible y rele-
D
 ebemos pedir la opinin de colegas no involucrados vante, aunque en el estudio original sea ms amplio.
en el estudio, que hayan ledo el resumen, para analizar Desde la introduccin y a lo largo de todo el resumen
el fondo y la forma y, sobre todo, para saber si com- deben quedar expresamente reseados los elementos
prenden la idea central que busca transmitir el estudio de la pregunta de investigacin que subyace al estudio.
a travs del resumen. Toda crtica constructiva debe Como ayuda metodolgica conviene definir estos ele-
ser bienvenida. mentos en: poblacin, intervencin o medida de exposi-
cin, comparacin (cuando proceda) y medida de efecto.
Finalmente, recordemos algunos puntos de lo que no se Cuando un estudio tiene claramente definidos estos
debe hacer1: elementos: la redaccin del resumen se simplifica y el
mensaje se hace claro y preciso.
N
 o malgastar palabras en describir su grupo de traba-
jo, a menos que describa el mbito del estudio o sea En el apartado de mtodos (o Material y mtodos o
un referente metodolgico. Pacientes y mtodos) se debe responder a la pregun-
ta qu se ha hecho y cmo? En un resumen, la descrip-
N
 o comenzar la redaccin con Este trabajo o cin de la metodologa debe ser concisa y omitir muchos
Este informe, pues hay que escribir sobre la inves- de los detalles. No obstante, en unas cuantas frases
tigacin directamente. cortas debemos ser capaces de plasmar el diseo del
 Cmo elaborar un resumen estructurado de una comunicacin cientfica de calidad 287

Tabla 1. Recomendaciones de contenido de resmenes de comunicaciones cientficas

Apartado Preguntas
Introduccin - objetivos
Antecedentes Qu se sabe?
Justificacin Por qu se hace el estudio?
Pregunta de investigacin - hiptesis - objetivo
Mtodos
Diseo epidemiolgico
Poblacin (criterios inclusin) - muestreo Qu se ha hecho y cmo?
Variables exposicin - efecto
Medida principal del efecto (instrumentos)
Anlisis estadstico principal
Resultados
Qu se ha encontrado?
Muestra de estudio final
Medidas principales del efecto (medida absoluta con intervalo de confianza)
Conclusiones
Qu significado e implicaciones tiene?
Respuesta a la pregunta de investigacin
Qu hay de nuevo?
Interpretacin - limitaciones importantes
Implicaciones para la prctica e investigacin

estudio, el emplazamiento, la muestra de pacientes y las En el apartado de resultados se debe responder a la

variables analizadas. Resulta fundamental describir el tipo pregunta qu se ha encontrado? Debemos presentar los
de diseo epidemiolgico, ya que es uno de los princi- principales resultados con datos objetivos (y no en tr-
pales criterios que los evaluadores considerarn para minos subjetivos) y elegir bien las variables y los estads-
puntuar y seleccionar el trabajo; considerando los dise- ticos que vamos a exponer. Se recomienda emplear es-
os ms habituales, la valoracin del estudio crece expo- timadores con sus intervalos de confianza como
alternativa al nivel de significacin estadstica (recordar:
nencialmente desde los casos clnicos, pasando por series
muera la p y viva el intervalo de confianza), ya que
de casos, estudios transversales, de casos y controles, de
adems de cuantificar los resultados, los intervalos ofre-
cohortes y ensayos clnicos. Si hay algn criterio de in- cen informacin, con sentido clnico, sobre su precisin
clusin o exclusin que se considere relevante, debe y significacin. No se recomienda incluir tablas o figuras,
mencionarse. De igual manera tendremos que citar las aunque es frecuente que en resmenes de congresos se
intervenciones comparadas o las variables de riesgo es- permita alguna; el uso de estos elementos nos liberar
tudiadas. Si el estudio ha definido una medida principal de parte del trabajo de sntesis y ampliar la informacin,
de efecto, esta debe destacarse, renunciando a mencio- pero diluir la esencia del mensaje que se describe en el
nar otras variables cuando sea necesario por limitacin texto, nica parte del resumen que se incorporar a
de espacio. Si centramos la descripcin en la medida bases de datos electrnicas de referencia.
principal facilitaremos la claridad en la redaccin de los
resultados y conclusiones. Por ltimo, cuando sea rele- En las conclusiones se debe responder a la pregunta qu
vante se debe indicar el anlisis estadstico realizado, pero significado e implicaciones tiene el estudio? Debemos
es superfluo indicar el nivel de significacin (aceptado resumir en una o dos frases por qu nos parecen impor-
por consenso) o el paquete estadstico empleado, salvo tantes los hallazgos y cules son sus posibles implicacio-
que constituya el objeto del trabajo. nes (para la prctica clnica y/o investigacin). Si el estudio
288 Actualizacin en Pediatra

presenta alguna limitacin importante, debera abordar- sin por pares, empleando escalas de puntuacin. Estas
se en este apartado o en alguno de los anteriores. Es escalas son muy heterogneas entre s, con componen-
importante aqu ser razonables y coherentes con los tes muy subjetivos, que en su mayora no han sido va-
hallazgos del estudio. Si el resumen comenz describien- lidados. Aunque de forma global los mejores resmenes
do qu se sabe?, en este apartado debe contestarse a tienden a ser mejor puntuados y, por lo tanto, seleccio-
la pregunta qu hemos aportado?; si el conocimiento nados, sabemos muy poco de la validez y especialmen-
previo ha cambiado por nuestro estudio habremos te de la reproducibilidad de estas escalas. Teniendo en
completado los objetivos y enriquecido el conocimiento. cuenta el alto nmero de resmenes y revisores impli-
cados en la evaluacin, ser inevitable que esta sea muy
Una vez completado el resumen es el momento de heterognea.
plantearse la redaccin de su ttulo; demorar hasta ese
momento la eleccin permite tener extractados los En un primer paso del proceso es frecuente que los co-
componentes del mismo. El ttulo debe ser una promesa mits organizadores de los congresos o reuniones cient-
exacta del contenido del resumen (y por supuesto del ficas pongan un filtro de exclusin de estudios sobre te-
trabajo o documento que sintetiza). Podemos optar por mas no relacionados con el objeto del congreso, con
describir lo que se ha investigado o resaltar sus conclu- problemas ticos mayores (publicacin duplicada, plagio,
siones: un ttulo descriptivo es ms sencillo de elaborar etc.) o de resmenes con muy deficiente presentacin (no
pero menos ambicioso; un ttulo informativo en el que ajustada a las normas o sin resultados concretos).
se destaca la conclusin principal es ms atractivo y se
asocia a un mayor grado de aceptacin en congresos
Los criterios de evaluacin de la calidad de un resumen
cientficos2. Es un elemento clave a la hora de vender
suelen agruparse en torno a cinco apartados: originalidad,
bien nuestro trabajo, por ello, el modelo a seguir es el de
importancia clnica, tipo de diseo, limitaciones metodo-
un titular periodstico1.
lgicas y calidad formal. Aunque la mayora de ellos estn
supeditados a la calidad del estudio que se presenta, la
capacidad de los autores por transmitir estos aspectos
CRITERIOS DE CALIDAD PARA LA EVALUACIN
en el resumen va a ser fundamental.
DE RESMENES

Considerando lo hasta ahora expuesto, la calidad de un Los dos primeros, originalidad e importancia clnica, son
resumen va a depender del cumplimiento de las referen- muy subjetivos y por lo tanto muy variables entre eva-
cias marcadas en los apartados previos en cuanto a es- luadores. El criterio de tipo de diseo suele tener un gran
tructura, estilo de redaccin y contenido. Estas referen- peso en la evaluacin, ponderndose positivamente los
cias han sido usadas de una forma ms o menos diseos experimentales y analticos frente a los observa-
explcita en la evaluacin de resmenes de comunicacio- cionales y descriptivos. La valoracin de las limitaciones
nes para congresos2, 5, 9-14. metodolgicas resulta compleja, dada la escasa informa-
cin que el resumen aporta y la heterognea formacin
Es importante tener en cuenta que no siempre la calidad metodolgica de los evaluadores. Curiosamente es el
del resumen se corresponde con la calidad del trabajo apartado de calidad formal, en el que ms margen de
que en dicho resumen se presenta, si bien, ambas suelen maniobra van a tener los autores para mejorar el resu-
estar muy relacionadas. De hecho, se ha observado que men (independientemente de la calidad del trabajo
la calidad del resumen de una comunicacin no garanti- subyacente) y ms facilidad los evaluadores para pun-
za la calidad de su posterior presentacin real13. tuarlo positiva o negativamente.

Es habitual que el proceso de evaluacin de resmenes En la Tabla 2 se presentan una seleccin de criterios a
para congresos se haga siguiendo un proceso de revi- tener en cuenta en la valoracin de la calidad de un
 Cmo elaborar un resumen estructurado de una comunicacin cientfica de calidad 289

Tabla 2. Criterios de calidad de resmenes BIBLIOGRAFA

de comunicaciones cientficas
1. Diseo (calidad decreciente): 1. Gonzlez de Dios J, Gonzlez-Muoz M, Alonso-
Ensayo clnico aleatorizado controlado Arroyo A, Aleixandre-Benavent R. Comunicacin
Estudio de cohortes prospectivo; experimental no
cientfica (II). Congresos cientficos (1): elaboracin
controlado o no aleatorizado
Estudio de cohortes retrospectivo; casos y controles; de resmenes. Acta Pediatr Esp. 2013;71:145-9.
revisin sistemtica
Estudio transversal; estudio de pruebas diagnsticas; estudio 2. Haynes RB. More informative abstracts: current
de costes
Series de casos status and evaluation. J Clin Epidemiol. 1993;
Otros (casos clnicos) 46:595-7.
2. Limitaciones metodolgicas (bajan la calidad)
Muestra inapropiada (no representativa) 3. Pujol J, Llor C, Navarro MM, Bayona C. El formato
Aleatorizacin inadecuada (en estudios experimentales) del ttulo en los resmenes de comunicaciones in-
Seguimiento incompleto - prdidas altas (20%) o sesgadas fluye en la aceptacin final a congresos. Med Clin
Grupo control inapropiado
No enmascaramiento-ciego o clasificacin sesgada (Barc). 2008;130:35-6.
Variables/medidas de exposicin o efecto invlidas
Imprecisin (muestra pequea, intervalos de confianza 4. Sim Miana J. Comunicaciones cientficas a con-
amplios)
gresos cientficos: algunas propuestas de mejora.
Anlisis inapropiado (no ajustes, medidas o pruebas
inapropiadas) Aten Primaria. 1999;23:371-5.
3. Criterios de calidad de estructura (aumentan la calidad)
Ttulo informativo 5. Taboulet P. Advice on writing an abstract for a
Justificacin de la comunicacin (qu se sabe?) o pregunta scientific meeting and on the evaluation of ab-
de investigacin stracts by selection committees. Eur J Emerg Med.
Objetivo nico y claro
2000;7:67-72.
Resultados principales detallados con medidas de efecto
absolutas y/o de impacto
Resultados principales con precisin (IC 95%; p; contraste 6. Velasco Rodrguez MJ, Rodrguez del guila MM,
estadstico) Sordo del Castillo L, Prez Vicente S. Como redactar
Justificacin de limitaciones del estudio
Valoracin vlida y acorde de resultados o conclusiones un resumen para una publicacin o comunicacin
(qu se aporta?) cientfica. Med Clin (Barc). 2008;131:614-6.
Estilo de redaccin claro y preciso
4. Originalidad o novedad (aumentan la calidad) 7. International Committee of Medical Journal Editors.
Uniform requirements for manuscripts submitted to
5. Impacto clnico o meditico (aumentan la calidad)
biomedical journals: writing and editing for bio-
medical publications 2010. [Fecha de acceso 28 nov
2015]. Disponible en www.icmje.org.
resumen. Pueden servir como gua de comprobacin
para autores y evaluadores a la hora de comprobar la 8. Medicina Clnica. Manual de estilo. Publicaciones bio-
calidad. mdicas. Barcelona: Mosby/Doyma Libros; 1993.

En este taller elaboraremos un resumen modelo con los 9. Hankard R, Giraudeau B, Dubus JC, Tounian P, Sarles
datos de un estudio no publicado y repasaremos los dis- J, Chabrol B, et al. Comment sont valus les rsu-
tintos criterios de calidad revisando resmenes seleccio- ms soumis la Socit Francaise de Pdiatrie
nados entre publicaciones y actas de congresos cientficos. (SFP)? Arch Pediatr. 2011;18:1257-60.
290 Actualizacin en Pediatra

10. Montgomery AA, Graham A, Evans PH, Fahey T. 13. van der Steen LP, Hage JJ, Kon M, Monstrey SJ.Validity
Inter-rater agreement in the scoring of abstracts of a structured method of selecting abstracts for a
submitted to a primary care research conference. plastic surgical scientific meeting. Plast Reconstr Surg.
BMC Health Serv Res. 2002;2:8. 2004;113:353-9.

11. Rowe BH, Strome TL, Spooner C, Blitz S, Grafstein 14. Winker MA. The need for concrete improvement in
E, Worster A. Reviewer agreement trends from four abstract quality. JAMA. 1999;281:1129-30.
years of electronic submissions of conference ab-
stract. BMC Med Res Methodol. 2006;6:14.

12. Timmer A, Sutherland LR, Hilsden RJ. Development

and evaluation of a quality score for abstracts. BMC
Med Res Methodol. 2003;3:2.