Fagfellevurdering av søkestrategier

Ved å få en kollega til å gjennomgå søkestrategien, sikres god kvalitet på leveransen. Det gir også den enkelte bibliotekar ekstra trygghet for at det er gjort en god jobb. På Folkehelseinstituttet blir dessuten fagfellevurdering sett på noe som kan føre til kompetanseheving, da det er kan være læringsutbytte både for bibliotekaren som utfører søket, og bibliotekaren som vurderer søket.

McGowan et al. har utviklet en standard for fagfellevurdering av søkestrategier. På folkehelseinstituttet følger vi ikke denne sjekklista, men har en litt friere fremgangsmåte. Følgende sjekkes:

• Oppbygning av søket
• Logisk bruk av boolske operatorer, parenteser?
• Sjekke for skrivefeil
• Avgrensinger, bruk av filter
• Fagfellen forventes ikke å gå dypt inn i problemstillingen mtp å vurdere innholdet/søkeordene. Unntaket er hvis hun har vært borte i lignende søk og at det dermed faller seg naturlig.

Fagfellevurderingen går på rundgang. Bibliotekaren med hovedansvar for søket må gi fagfellen rimelig tid til å gjøre sin vurdering, samtidig som det forventes at fagfellen tar seg tid til å utføre oppgaven innen rimelig tid.

Av og til kan det være lurt å involvere en kollega allerede i forarbeidet, f.eks å diskutere PICO og/eller problemstilling, og få belyst hva som er uklart. Fagfellevurdering av søkestrategi kan altså skje når som helst underveis i prosessen, men det må i alle fall gjøres helt til sist før endelig søk kjøres.

I dokumentasjon av søket inkluderes også navn på fagfellen.

Luke ut uønskede studiedesign

I noen databaser kan vi vurdere å luke ut enkelte studiedesign fra trefflista, men det kan være en liten fare forbundet med det. Kommentarer og lederartikler kan i teorien omtale en studie med et design vi ønsker å fange opp. Her må man ta en vurdering på hvor farlig det er om vi misser disse fra trefflista.

Medline

1	[søkeprofil]
2	(comment or editorial or letter).pt.
3	1 NOT 2

Embase

1	[søkeprofil]
2	(Conference Abstract or Letter or Editorial).pt.
3	1 NOT 2

PsycInfo

1	[søkeprofil]
2	("comment/reply" or editorial or letter).dt.
3	1 NOT 2

Cinahl

1	[søkeprofil]
2	PT (Commentary or Editorial or Letter)
3	1 NOT 2

Avgrense til kostnadsstudier

NHS EEDs kostnadsfilter

Medline:

1 Economics/
2 exp "costs and cost analysis"/
3 Economics, Dental/
4 exp economics, hospital/
5 Economics, Medical/
6 Economics, Nursing/
7 Economics, Pharmaceutical/
8 (economic$ or cost or costs or costly or costing or price or prices or pricing or pharmacoeconomic$).ti,ab.
9 (expenditure$ not energy).ti,ab.
10 value for money.ti,ab.
11 budget$.ti,ab.
12 or/1-11
13 ((energy or oxygen) adj cost).ti,ab.
14 (metabolic adj cost).ti,ab.
15 ((energy or oxygen) adj expenditure).ti,ab.
16 exp animals/ not humans/
17 or/13-16
18 12 not 17

Embase:

1. Health Economics/
2. exp Economic Evaluation/
3. exp Health Care Cost/
4. pharmacoeconomics/
5. (econom$ or cost or costs or costly or costing or price or prices or pricing or pharmacoeconomic$).ti,ab.
6. (expenditure$ not energy).ti,ab.
7. (value adj2 money).ti,ab.
8. budget$.ti,ab.
9. OR/1-8
10. (metabolic adj cost).ti,ab.
11. ((energy or oxygen) adj cost).ti,ab.
12. ((energy or oxygen) adj expenditure).ti,ab.
13. animal/
14. exp animal experiment/
15. nonhuman/
16. (rat or rats or mouse or mice or hamster or hamsters or animal or animals or dog or dogs or cat or cats or bovine or sheep).ti,ab,sh.
17. OR/13-16
18. exp human/
19. human experiment/
20. OR/18-19
21. 17 NOT (17 AND 20)
22. OR/10-12,21
23. 9 NOT 22

Bruk av nærhetsoperatorer mellom to søkekomponenter

Eksemplet er hentet fra databasen Psycinfo og problemstillingen var som følger:

"Hvordan skolene jobber med integrering, hvilken kompetanse de har, hva som skal til for å lykkes, hvordan tekstbøkene er tilpasset det flerkulturelle samfunnet osv."

Dersom jeg kombinerer søkekomponentene på den tradisjonelle måten, blir det særdeles mange treff. For å øke presisjonen har jeg brukt nærhetsoperatorer mellom de to søkekomponentene skole/lærere og integrering. Dette fordi det i dette tilfellet vil være er stor sannsynlighet for at skole og integrering blir nevnt i samme setning i relevante artikler.

Det bør være veldig mange treff for kunne å forsvare denne praksisen.

1	schools/ or exp colleges/ or elementary schools/ or graduate schools/ or high schools/ or junior high schools/ or kindergartens/ or middle schools/ or teachers/ or college teachers/ or elementary school teachers/ or high school teachers/ or junior high school teachers/ or middle school teachers/ or preschool teachers/ or teaching methods/ or curriculum/ or instructional media/ or textbooks/ or teaching/	199180
2	multiculturalism/ or acculturation/ or social integration/	19767
3	1 and 2	1106
4	school integration/	1209
5	((school? or preschool* or kindergarten* or teaching or Teacher? or education*) adj6 (Multiculturalism or Assimilat* or Acculturation or "diversity polic*" or "diversity approach*" or "diversity management*" or "diversity program" or "diversity program?" or "Cultural Pluralism" or "social integrat*")).tw.	1953
6	(((school? or preschool* or kindergarten* or teaching or Teacher? or education*) adj6 (integrat* or accommod*)) and ("ethnic group*" or "ethnic minorit*" or "ethnic population*" or "ethnic orgin*" or "ethnic aspect*" or "ethnic difference*" or immigrant* or foreigner* or alien* or refugee* or minority group*)).tw.	421
7	3 or 4 or 5 or 6	4367

Det er fremdeles veldig mange treff nå også. Men bruker gikk gjennom de første treffene og oppdaget veldig mange relevante. Og da avgrenser vi ikke ytterligere.

Treffe med søkestrategien

Det perfekte søket som fanger opp alle relevante artikler, samtidig som det ikke fanger opp en eneste irrelevant artikkel, er som oftest ikke mulig å konstruere. Dersom vi har et veldig presist søk, er det stor sannsynlighet for at vi har gått glipp av relevante treff.

Sett at det er publisert ti studier på temaet vårt, og åtte av disse viser at tiltaket har effekt, mens to av disse viser at tiltaket ikke har effekt. I ytterste konsekvens kan vi ved å søke veldig presist ende opp med å kun finne de to studiene som viser at tiltaket ikke har effekt. Og dermed vil vi få et feil bilde av hvor effektivt det er. I noen tilfeller kan et presist søk være godt nok, men det kommer an på hva som er formålet med søket - hvilket "produkt" det skal brukes til, og hvor viktig det er at svaret på problemstillingen blir besvart korrekt.

Og det er kanskje når vi trenger fullstendighet at bibliotekaren først og fremst har en rolle. Det presise søket vil en bruker i mange tilfeller være i stand til å utføre selv. Mens for å konstruere en gjennomarbeidet søkeprofil kreves det en del kompetanse. Den bør derfor utformes av en som har spesialisert seg på litteratursøk.

Den kanskje mest utfordrende i arbeidet med en søkeprofil er å balansere fullstendigheten og presisjonen. Mange brukere har rett og slett ikke kapasitet til å gå gjennom tusener på tusener med treff., og da må vi forsøke å øke presisjonen uten at det skal gå altfor mye utover fullstendigheten. Men er også vår jobb å si ifra når dette ikke er mulig, når det ikke er forsvarlig å snevre søket inn. Igjen er det formålet med søket som spiller inn, men også bibliotekarens faglige integritet. Vi ønsker ikke å signere ut en strategi vi ikke kan stå inne for.

Fullstendighet

Følgende vil øke fullstendighet

• Ta med alle relevante emneord i emneordsregistrene
• Ta med alle Used for / entry terms, samt selve emneordet som fritekstsøk
• Se på indekseringen og hvordan ting blir uttrykt i tittel og abstract på relevante artikler
• Gå gjennom alle søkeordene og sjekk om de bør trunkeres (eventuelt skrive de andre formene av ordene fullt ut)
• Bruk nærhetsoperatorer fremfor fraser (der det er naturlig) for å få med variasjoner hvor det står flere ord mellom søkeordene.
• Er det vanlige synonymer som bør legges til? Har vi f.eks "Psychotropic drug?", bør vi kanskje ha med "Psychotropic medicine?" og "Psychotropic medication", og har vi "psychiatric treatment", er det kanskje aktuelt med ord som "psychiatric therapy", "psychiatric intervention?" og "psychiatric rehabilitation".

Presisjon

Følgende vil øke presisjon

• Test søkeordene. Er det søkeord som har flere betydninger? Er det søkeord som er for generelle? Har vi forkortelser i profilen som kan bety noe annet? Når vi har slike søkeord bør vi vurdere om de bør være med, men det er viktig å først undersøk hva vi mister av treff dersom vi ekskluderer det. Dersom vi sammenligner søkeprofiler med operatoren NOT. ("det brede søket" NOT "det smale søket"), vil det gi oss svar på hva vi mister hvis vi snevrer søkeprofilen inn.
• Et alternativ til å ekskludere søkeord, er å legge på et ekstra søkeord for å gjøre det mer presist. La oss si at vi ønsker å søke på "moba" (forkortelse for "den norske mor og barn undersøkelsen", men også et begrep innen genetikk). For å få færre artikler om gener, kan vi prøve å hjelpe søkeordet med søkeordene norway or norwegian?: (moba and (norway or norwegian?)). Igjen må vi kjøre testsøk for å forsikre oss om at vi kun luker ut irrelevante artikler. Vi kan også kjøre tester på om vi bør bruke nærhetsoperator eller operatoren AND.
• Test hvor høyt vi skal sette nærhetsoperator. Igjen kan vi bruke ("det brede søket" NOT "det smale søket"), for å se hva vi mister hvis vi setter tallet lavere.
• Nærhetsoperatorer mellom fritekstsøket fra en søkekomponent og fritekstsøket fra en annen søkekomponent, kan være en god idé i noen tilfeller, se eksempel 
• Kjør også hele profilen, gå gjennom treffene og sjekk om det er noe som peker seg ut som kilde til feiltreff 

Det er ikke realistisk å gå gjennom alle artiklene som blir luket ut når vi jobber med presisjon på denne måten. De 20-40 første på trefflista kan kanskje være mulig å jobbe seg gjennom, og på bakgrunn av det trekke en konklusjon. Men dermed kan vi egentlig ikke konkludere med 100% sikkerhet at ingen relevante treff forsvinner. Det blir ekstra utfordrende å bedømme hvilke artikler som er relevante og hvilke som er irrelevante dersom vi ikke kjenner fagfeltet så godt. 

Arbeidet med presisjon må alltid gjøres med varsomhet, for selv om de har et ønske om ikke så mange treff, så har brukeren ofte forventninger om fullstendighet i søket de bestiller fra biblioteket. 

Husk også på at hvis vi uansett skal gjøre avgrensinger på studiedesign eller dato, er det ikke sikkert det er behov for å gjøre så mange kompromisser i forhold til fullstendigheten i søket. Hvis ikke bruker ikke har tenkt på slike avgrensinger selv, kan det være en idé for oss å foreslå det. Særlig hvis vi kommer til et punkt der det ikke er faglig forsvarlig å gjøre noe med presisjonen.