Presentatie golden road Systematic Review afdeling geriatrie AMC 19 juli 2011
1. 1
De ‘Golden Road’ voor een Systematic Review (SR)
Programma:
SR: wat en wanneer?
1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
Golden road SR – 19 juli 2011 - Joost Daams
2. Overzicht van opmerkingen bij Dia 1
Pagina: 1
Nummer: 1 Auteur: Joost Daams Onderwerp: Presentatienotities Datum: 21-7-2011 08:43:31
INTRODUKTIE
De ‘Golden Road’ voor een Systematic Review:
vooraf:
- clinici en onderzoekers zijn weinig vertrouwd met databases
- een SR is illustratief en indicatief (want anders!) voor andere searches (voor attenderingen, CAT’s, evidence based
richtlijnen etc.)
Golden road:
- de ‘yellow road’ wordt het meest bewandeld
- gebaseerd op bronnen met authoriteit
Alles verteld vanuit perspectief clinical librarian, dus eerste 2 stappen EBM: formuleren van een klinisch relevante zoekvraag, op
systematische wijze zoeken van evidence
Status
jgdaams Bevestigd 21-7-2011 08:43:26
3. 1
Download PDF: Raadpleeg online: Additionele info online:
http://www.york.ac.uk/inst/crd/index_guidance.htm http://www.cochrane-handbook.org/ http://www.pico.nu
Golden road SR – 19 juli 2011 - Joost Daams
4. Pagina: 2
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Presentatie is gebaseerd op best practices en bronnen met autoriteit.
5. 1
SR: wat en wanneer?
Definitie SR
“ Een systematisch overzicht van de stand van zaken van medisch-
wetenschappelijk onderzoek.
Een systematische review is transparant en reproduceerbaar en gaat uit van een
expliciete vraagstelling, een uitgebreide zoekstrategie, een ondubbelzinnige
procedure voor selectie van onderzoeken, een beoordeling van de kwaliteit van de
onderzoeken en een transparante presentatie van de resultaten.”
Inleiding in evidence-based medicine / M. Offringa et al., p. 254
Golden road SR – 19 juli 2011 - Joost Daams
6. Pagina: 3
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Kernelementen vanuit de zoekoptiek:
transparant en reproduceerbaar: voor wat betreft het zoeken kom ik hier op terug bij het onderdeel ‘schrijven’, het documenteren
van de search en de weergave van de search in een tijdschriftartikel.
expliciete vraagstelling conform pico methodiek
uitgebreide zoekstrategie. Waarom? -> publicatiebias + zoveel mogelijk gepubliceerd onderzoek vinden
7. 1
SR: wat en wanneer?
Oriënteren (deel)onderwerp promotietraject
‘Uitputtend’ antwoord op (klinisch) probleem / vraag (follow up
CAT?)
Aantonen noodzaak (nader) onderzoek
Voorbeeld: SR is vereiste DoelmatigheidsOnderzoek ZonMW subsidie
(http://www.zonmw.nl/nl/onderwerpen/alle-programma-s/doelmatigheidsonderzoek/formulieren )
Startpunt evidence based richtlijn
Volgende:
1. Opstellen protocol
Golden road SR – 19 juli 2011 - Joost Daams
8. Pagina: 4
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Wanneer doe je een SR?
Oriënteren onderzoeksonderwerp (bijv. promotie):
- vaak sprake van een gewoon review
(klinisch) probleem / vraag: wat weten we bijv. van een bepaalde therapie? SR kan vervolgtraject zijn van een CAT
9. 1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
Waaruit moet een SR team bestaan:
“The review team will manage and conduct the review and should have a range of
skills. Ideally these should include expertise in systematic review methods,
information retrieval, the relevant clinical/topic area, statistics, health economics
and/or qualitative research methods where appropriate. It is good practice to have
a minimum of two researchers involved so that measures to minimize bias and
error can be implemented at all stages of the review.”
(CRD guidance, p. 4)
En:
“(…) it is (…) valuable to have an advisory group whose members can be consulted
at key stages”
(CRD guidance, p. 5)
Golden road SR – 19 juli 2011 - Joost Daams
11. 1
1. Opstellen protocol
Key areas to cover in a review protocol:
1. Background
2. Review question and inclusion criteria
3. Defining inclusion criteria
4. Identifying research evidence
5. Study selection
6. Data extraction
7. Quality assessment
8. Data synthesis
9. Dissemination
CRD guidance, p. 6 - 15
Golden road SR – 19 juli 2011 - Joost Daams
12. Pagina: 6
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Het is van belang vooraf een protocol op te stellen EN je daaraan te houden om methodologische bias te voorkomen. Bovendien
dwingt het je om over veel dingen na te denken, zoals nut/noodzaak en (klinisch relevante) vraagstelling.
Background
context en concepten
Review question and inclusion criteria
gebruik makend van PICO, evt incl domein- en/of studietypefilter(s). Vaak is hier niet over vraag nagedacht. Heeft
consequenties voor de search (te doorzoeken dbases/evt filters/etc.)
Defining inclusion criteria
best available evidence
Identifying research evidence
verkennende zoekaktie moet voorafgaan aan het identificeren van relevant onderzoek. Binnen Cochrane mag dit juist
NIET, omdat dit tot bias in je vraagstelling kan leiden.
Study selection
“This should include the number of researchers who will screen titles and abstracts and then full papers, and the method
for resolving disagreements about study eligibility.”
Data extraction
Hoe? Worden auteurs van primair onderzoek benaderd voor nadere gegevens? Welke procedure is er voor vertalingen?
Quality assessment
Hoe worden bijv. verschillen van inzicht tussen reviewers opgelost?
Data synthesis
Wanneer wordt overgegaan tot meta-analyse? Wat wordt gedaan om publicatie bias tegen te gaan?
Dissemination
“Dissemination is a planned and active process that seeks to ensure that those who need to know about a piece of research get to
know about it and can make sense of the findings.” (CRD guidance, p. 85)
LET OP:
Cochrane gaat vaak anders met deze punten om (RevManager, trial search coordinator, review groups)
14. Pagina: 7
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
- pico in blokjes: soms werkt dit zo, soms ook niet (zoek je op i&O in een OR relatie)
- pico is meer dan een patient - interventie - vergelijk - outcome (slides CATS laten zien)
15. 1
1. Opstellen protocol
Study design Therapy Prognosis Harm Etiology Diagnosis
1 1 1 1 1
SR
RCT 2 2 (2) (3)
Cohort 3 2 2 2 (3)
Case-Control 4 3 3 3
Cross-
2
sectional
Golden road SR – 19 juli 2011 - Joost Daams
16. Pagina: 8
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
- pico in blokjes: soms werkt dit zo, soms ook niet (zoek je op i&O in een OR relatie)
- pico is meer dan een patient - interventie - vergelijk - outcome (slides CATS laten zien)
17. 1
1. inzicht krijgen in de toepassing van HCT‐ sensor/activity monitoring bij thuiswonende
ouderen en de effectiviteit van HCT
2. Welke soort HCT wordt toegepast bij thuiswonende ouderen van 65 jaar en ouder
1. Opstellen protocol
3. Bij welke doelgroepen thuiswonende ouderen wordt HCT toegepast
4. Bij welke doelgroepen is de toepassing van HCT effectief gebleken in het ondersteunen
van het dagelijks functioneren en gezondheid
5. Welke uitkomsten worden gemeten in studies naar de effectiviteit van HCT Welke "(third) generation healthcare" technologieën zijn het meest effectief bij het
6. Op welke uitkomsten is welke soort HCT werkzaam gebleken ondersteunen/optimaliseren van (i)adl bij zelfstandig wonende 65 plussers?
P I C O P I C O
Independent living Healthcare technology (I)ADL Independent living (third) generation healthcare ((I)ADL, meerdere
persons aged 65 and Activity monitoring Independent living persons aged 65 and technologies: manieren om dit
over Sensor monitoring Autonomy over ‐ Healthcare monitoring concreet/meetbaar te
Healthcare monitoring Participation systems maken:
systems Health ‐ Sensing technology Independent living
Sensing technology Quality of life ‐ Activity monitoring (bijv. score ICF?)
Wireless sensor networks Functional status ‐ Sensor monitoring Autonomy
safety ‐ Wireless sensor networks Participation
‐ Assistive technology Health
Frail elderly Assistive technology Self‐management
‐ Automatic recognizing ADL Quality of life
At risk older adults Automatic recognizing ADL Self‐ care
activity recognition Functional status
MMSE>24 activity recognition Personal care
‐ telemonitoring safety
telemonitoring Leisure
‐ ???
Home safety Life skills
Occupational therapy Motivation
Healthcare professionals Treatment
caregivers effectiveness/
Client education outcomes
Home rehabilitation
Coaching
devices and equipment
interdisciplinary approach
Voorbeeld: herformulering PICO
patient care team
environment accessibility
Volgende:
2. Zoeken
Golden road SR – 19 juli 2011 - Joost Daams
18. Pagina: 9
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Hoe kom je achter de relevante zoektermen? Voorbeeld herformulering PICO van Margriet Pol.
- scannen indexering gevonden artikelen. Voorbeelden:
Artikel in Pubmed, 21508080[uid], had Margriet zelf al gevonden. 'Probleem': pubmed in process.
Toen in Pubmed gezocht op journal of telemedicine and telecare (relevant tijdschrift voor het onderwerp) EN sensor
monitoring (een interventie): gaf bijvoorbeeld het volgende Pubmed record als relevant resultaat: 18430280[uid]. Bekijk vervolgens
de indexering van dit record.
- meshbrowsing
n.a.v. 21508080[uid], nog niet geindexeerd, dus los gezocht "life style monitoring" -> life style EN monitoring (vind je
juist hits die je NIET wilt vinden, zoals blood pressure monitoring)
n.a.v. 18430280[uid] telemedicine als indexterm. In de mesh is remote consultation de specifiekere term die wellicht beter
is, maar niet altijd toegekend. Dus zal je wat ruis moeten accepteren door breder te zoeken op Telemedicine.
19. 1
1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
• Waarom uitgebreid?
• Welke bronnen?
• Zoekfilters: ja of nee?
• Zoekproces: documenteren en falsificeren
Golden road SR – 19 juli 2011 - Joost Daams
20. Pagina: 10
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Waarom uitgebreid?
publicatiebias, reduceren kans dat je gepubliceerd onderzoek mist
Welke bronnen?
Zoekproces: documenteren en falsificeren
Documenteren t.b.v.:
- rapportage search in de publicatie
- verantwoording (reproduceren v zoekresultaten)
- geheugen (evt. later updaten search)
falsificeren voor kwaliteit:
- hoe kom je er achter wat je niet weet?
21. 1
2. Zoeken
Welke bronnen?
Minimaal (‘yellow’):
• Bibliografische databases (generiek en specialistisch)
• Trials registers [http://apps.who.int/trialsearch/ ]
Aanvullend (‘gold’):
• Internetbronnen (voorbeeld)
• Handsearching tijdschriften
• Referentie check
• Citatie analyse
Gebaseerd op:
CRD’s guidance, p. 16
Cochrane Handbook, chapter 6
ZonMW, toelichtingsformulier SR
Golden road SR – 19 juli 2011 - Joost Daams
22. Pagina: 11
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Pubmed
Cochrane Library
Current Controlled Trials (CCT): http://controlled-trials.com/
ClinicalTrials.gov: http://clinicaltrials.gov/
NHS Centre for Reviews and Dissemination (CRD): http://www.york.ac.uk/inst/crd/crddatabases.htm
NHS Economic Evaluation Database (NHS-EED
Health Technology Assessment Database (HTA)
(ZonMW, toelichtingsformulier SR)
Maar denk ook aan:
LILACS (Literatura Latino Americana e do Caribe em Ciências da Saúde - Spaans- en Portugeestalige equivalent van Pubmed, te
gebruiken als prevalentie binnen taalgebied hier aanleiding toe geeft)
PEDro (Physiotherapy Evidence Database, specifiek voor revalidatie interessant)
• Searching electronic databases
• Visually scanning reference lists from relevant studies
• Handsearching key journals and conference proceedings
• Contacting study authors, experts, manufacturers, and other organisations
• Searching relevant Internet resources
• Citation searching
• Using a project Internet site to canvas for studies
(CRD’s guidance, p. 16)
Selectie databases – hoe? Indexering in Ulrich [Jo]
- Pubmed, Embase, PsycINFO
- Specifieke database: PILOTS, Neuroscience Citation Index, anders?
- citatieanalyse (WoS, Google Scholar, Pubmed)
- Trialregisters (http://www.zonmw.nl/nl/organisatie/publicaties/mediator/archief/mediator-2005/mediator-3-2005/systematische-
reviews-en-databases)
- het WWW (bijv. Websites van Cochrane reviewgroups, onderzoeksconsortia, etc.)*
- handsearching
23. 1
2. Zoeken
Zoekproces – documenteren & falsificeren
Voorbeeld:
https://docs.google.com/document/d/1WJa9HqxImgwR82ev3zeHh26HmQFl_yLo_qRLRkqbYso/edit?hl=en&authkey=CIDrwdwD
Attendering: hoe ga je met nieuwe records om?
Volgende:
3. Beheren en selecteren
Golden road SR – 19 juli 2011 - Joost Daams
24. Pagina: 12
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Attendering
- tussen draft en final manuscript ligt de nodige tijd. Hoe ga je met nieuwe records om?
- Ook voor promotietraject is attendering interessant. Vraag je clinical librarian / medisch informatiespecialist hiernaar!
25. 1
1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
Reference Manager RefWorks
Officieel support Geen officieel support
Stand alone/netwerk versie Webbased
+ Expert controle records + Intuïtieve interface
+ fulltext toe te voegen en doorzoekbaar
+ extramurale samenwerking
+ UvA linker bij ieder record
- Instabiel - Browser refresh
- Complex - Installeren plug-ins
Volgende:
4. Schrijven
Golden road SR – 19 juli 2011 - Joost Daams
26. Pagina: 13
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Tips:
* onderschat de hoeveelheid werk niet (max. 1 uur per dag ontdubbelen / max. 300 referenties per keer)
* maak met je cobeoordelaar duidelijke afspraken over:
- backups orginele data
- selectieproces (aparte folders of bestanden)
- hoe consensus te bereiken bij verschillend inzicht (protocol!)
27. 1
1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
• PRISMA Statement
• Verantwoording search
Golden road SR – 19 juli 2011 - Joost Daams
29. 1
4. Schrijven
Het volledige PRISMA statement:
http://www.prisma-statement.org
30. Pagina: 15
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
The PRISMA Statement (PRISMA - Preferred Reporting Items for Systematic Reviews and Meta-Analyses )
The aim of the PRISMA Statement is to help authors report a wide array of systematic reviews to assess the benefits and harms of
a health care intervention. PRISMA focuses on ways in which authors can ensure the transparent and complete reporting of
systematic reviews and meta-analyses.
In 1996, to address the suboptimal reporting of meta-analyses, an international group developed a guidance called the QUOROM
Statement (QUality Of Reporting Of Meta-analyses), which focused on the reporting of meta-analyses of randomized controlled
trials.
In 2009, the guideline was updated to address several conceptual and practical advances in the science of systematic reviews, and
was renamed PRISMA (Preferred Reporting Items of Systematic reviews and Meta-Analyses).
Let op wat er staat bij:
Information resources
search
32. Pagina: 16
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Hoe ga je om met referenties die je langs andere weg hebt gevonden?:
gebruik hiervoor additional records (bovenaan flow chart, dus niet tussenvoegen).
Maar:
wat zegt het over de kwaliteit van de search?
33. 1
4. Schrijven
“Search Strategy
We used a wide range of sources—Medline, CINAHL, EMBASE, AMED,
PsycINFO, and the Cochrane Library—with the assistance of a librarian at the
Toronto Rehabilitation Institute.
The key words used to search the databases were brain injury, head injury,
intervention, rehabilitation, therapy, treatment, community integration, community
reintegration, community re-entry, and participation. We explored MeSH headings
for brain injury and head injury.
The concept of “community integration” did not match any MeSH terms, so we
used the search keywords used in Reistetter and Abreu (2005)”
Uit: Effectiveness of Rehabilitation in Enhancing Community Integration After Acute
Traumatic Brain Injury: A Systematic Review / Hwan Kim, Angela Colantonio
In: Am J Occup Ther. 2010 Sep-Oct;64(5):709-19
Golden road SR – 19 juli 2011 - Joost Daams
34. Pagina: 17
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Waarom is dit niet zoals het moet:
De search is zo niet transparant en reproduceerbaar
- iedere database heeft zijn eigen indexering, zoektools en content waardoor iedere zoekactie per database syntactisch en
semantisch verschilt
Iedere vraag vraagt zijn eigen zoekstrategie. Je kunt dus niet zomaar ‘keywords’ overnemen van andere searches.
in beginsel maak je GEEN gebruik van zoekfilters bij een SR (i.t.t. eerdere presentatie geriatrie)
35. 1
4. Schrijven
Pubmed
Datum: 26/1/2011
(pain measurement OR severity of illness index OR ache OR postoperative pains OR pain management[tw] OR analgesic OR numeric rating scale[tw])
AND (acute stress[tw] OR Acute traumatic Stress Disorders OR acute traumatic stress disorder OR asd OR Post-Traumatic Stress Disorders OR Post-
Traumatic Stress Disorder OR PTSD OR PTSS OR Posttraumatic Stress OR post-traumatic stress OR (psychopathology AND trauma))
==============================
Ovid PsycINFO
Datum: 26/1/2011
1. "3215".cc.
2. (acute stress or ptsd or ptss or posttraumatic stress or post traumatic stress or acute stress disorder or posttraumatic symptom? or post traumatic
symptom? psychopathology).ab,id,ti,sh.
3. early experience?.ab,id,sh,ti.
4. exp psychopathology/
5. or/1-4
6. psychobiology.sh.
7. chronic pain/
8. pain management/
9. ache?.ab,id,ti,sh.
10. pain measurement/
11. pain perception/
12. "2220".cc. [tests & testing]
13. comfort scale?.ab,id,ti,tm.
14. (face? adj3 scale?).ab,id,ti,tm.
15. pain.id,tm.
16. vas.id,tm.
17. (visual adj3 scale?).id,tm.
18. or/6-17
19. 5 and 18
20. limit 19 to ("0100 journal" or "0110 peer-reviewed journal" or "0120 non-peer-reviewed journal" or "0130 peer-reviewed status unknown" or "0400
dissertation abstract" or "0500 electronic collection")
Volgende:
5. Publiceren
Golden road SR – 19 juli 2011 - Joost Daams
36. Pagina: 18
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
Dit is de green road. De golden road is de search aangevuld met per database gemotiveerde keuzes, welke:
bronnen
termen niet
velden
limieten
Zoekfilters
Verantwoording van de zoekaktie: waar? (bijlage/appendix/methodologiesectie in artikel/anders)
37. 1
1. Opstellen protocol
2. Zoeken
3. Beheren en selecteren
4. Schrijven
5. Publiceren
• In welk tijdschrift? (impact factor, OA)
• Auteursrecht?
• Acknowledgement of co-auteurschap?
Golden road SR – 19 juli 2011 - Joost Daams
38. Pagina: 19
Nummer: 1 Auteur: Presentator Onderwerp: Presentatienotities Datum: 21-7-2011 08:39:32
LET OP: updaten zoekaktie wordt vaak door editorial board gevraagd, aangezien er de nodige tijd verstrijkt tussen inlevering
manuscript en daadwerkelijke publicatie.
Vraag aan publiek: hoe bepalen jullie in welk tijdschrift te publiceren?
Auteursrechten
Hoef je niet klakkeloos over te dragen aan de uitgever!
39. http://www.uba.uva.nl/oa http://www.doaj.org/
http://copyrighttoolbox.surf.nl/copyrighttoolbox/
Golden road SR – 19 juli 2011 - Joost Daams
41. 1 Opstellen protocol
2 Zoeken
3 Beheren en selecteren
4 Schrijven
5 Publiceren
Acknowledgement of co-auteurschap Clinical Librarian
Waarom en wanneer zou je een clinical librarian inschakelen?
Vragen over deze presentatie, een search of anders?
j.g.daams@amc.uva.nl
Golden road SR – 19 juli 2011 - Joost Daams