Introduction to scientific reasoning
1. Psychology is a way of thinking
Producing versus consuming research
- Examples to illustrate the importance of the research consumer role
o Facilitated communication treatment (FCT)
Helpt bij autisme
Helpt bij de communicatie van patiënten
De persoon er bij helpt bij het vinden van de juiste letters door de hand mee
te begeleiden
Mensen die normaal niet juist kunnen communiceren kunnen dit nu wel
maar eigenlijk is het wat de helper wilt zeggen en niet wat de patiënt zegt
De persoon met autisme communiceert niet, maar het is eigenlijk de helper
die communiceert, men gaat communiceren wat men denkt dat de patiënt
wilt communiceren
o Scared-straight approach (SSA)
Mensen bang maken zo dat men geen misdaden gaat plegen
o Mindfulness and academic performance (MAP)
Stijgen de punten Hierna ook effectief?
- Critical mindset is essential
- Not all published research is correct or robust
- Replication crisis in psychology
o Kwaliteit van de studies
o Niet elke wetenschap studie is betrouwbaar en goed uitgevoerd
o Elke studie heeft zijn sterktes en zwaktes
o Het onderzoek bevat 3 experimenten waarin men iets moest voorspellen
Geen van de replicaties vind de zelfde uitkomsten
Heeft het te maken met hoe dat men het onderzoek voert?
Heeft men enkel de uitkomsten laten zien die effectief zijn en waar dat er
een significant verschil is
o Hoe analyseert men de data?
De data steunt de hypothese niet? Dan een aantal dingen veranderen in de
data tot dat er toch significant is en je kan bewijzen wat je wilt bewijzen
o Lijden tot de replicatie crisis (er werd zo veel gerepliceerd om eerdere onderzoeken
te onderzoeken en vele bleken vals te zijn)
Dus het niet omdat gepubliceerd is dat het juist is
1
,How scientists work
- Science is based on empiricism
- Scientists test theories
- Scientists work on fundamental and applied problems
- Science is continuously evolving
- Scientists publish their findings in scientific journals
- Scientists communicate with the general public via journalists
Empiricism
- Empirical method is based on data obtained through:
o Our senses (sight, hearing, touch)
o Instruments that assist our senses (thermometer, questionnaires, timer)
- Empiricists aim to do research in a systematic, rigorous, and replicable manner
- Empiricism is not based on own experiences, intuition, or authority figures
Empiricisme to collect data
- In een systematische manier (zelfde vragen voor iedereen in een vragenlijst)
- Realiseerbaar
Scientists test theories
Waarom zijn kinderen zo aan hun moeder gehecht?
- Gevoed worden vs comfort van contact
- Eten vs comfort van de mama
Comfort van contact is de meest gewilde
- Characteristics of good theories
o Supported by data
o Falsifiable
o Parsimonious (“Occam’s razor”)
- Examples of non-falsifiable theories:
o Facilitated communication threatment believers
o See book “De ongelovige Thomas heeft een punt”
- Theories are evaluated based on all available evidence
o A theory can never be “proven”, but it can be falsified
o Replication is crucial
2
,Scientists form a community
Merton’s scientific norms:
1. Universalism
o Onderzoek zou niet beïnvloed mogen zijn door geloof, achtergrond,….
2. Communality
o Het is niet voor één individu, maar voor een hele groep
Geen geheimen
Goede communicatie
Het zou toegankelijk moeten zijn voor iedereen (geen pay-wall)
Open science
3. Disinterestedness
o Als je onderzoek doet dan zou de uitkomst van de studie niet beïnvloed mogen
worden door jezelf, je zou geen voorkeur mogen hebben voor de uitkomst van het
onderzoek
4. Organized skepticism
o Je zou sceptisch moeten zijn tegen over elkaars onderzoek
Fundamental versus applied research
Transactional praktische implicatie, maar niet altijd meteen mogelijk
Applied Voor een specifieke context en omgeving
Continuously evolving
- Theories are continuously tested, modified, and falsified
- Research triggers follow-up research (example: impact of color on approach- and avoidance-
motivation in context (Meier et al., 2012))
o Onderzoek triggerd nieuwe vragen en dus ook een nieuw onderzoek
Onderzoek:
- In het tweede deel van het experiment ga je iemand ontmoeten en je hebt een interview
o Groep 1: je hebt een date
o Groep 2: het is een intelligentie test
- Er wordt een foto getoond van de persoon waarmee men het interview zou hebben (rrod vs
blauw tshirt)
3
, -
Hoe snel wandelt men naar de volgende kamer?
-
Verwachtingen?
o Rood: ontwijkend gedrag wordt getriggerd en men gaat
hierdoor trager wandelen naar de volgende kamer
o Blauw: is niet rood en dus men gaat geen effect hebben
- Maar is wel afhankelijk van het type interview (context
afhankelijk)
o Dus omgekeerd bij date
- Theories are continuously tested, modified, and falsified
- Research triggers follow-up research (example: impact of color on approach- and avoidance-
motivation in context (Meier et al., 2012))
Dus later hebben ze het meerdere keren willen repliceren, maar dat is niet gelukt
Publishing
- Manuscripts are submitted to scientific journals (e.g., Nature, Science, Psychological Bulletin)
- Peer-review process
o Role of editor (of the journal)
o Role of reviewers (2-6 pp) make a recommendation
o Reject, revise and resubmit, accept (10%)
Lage hoeveelheid van acceptatie heeft effect op onderzoekers want je kunnen worden
geëvalueerd op hoeveel je gepubliceerd wordt
Heel afhankelijk van dat je hypothese correct is of niet?
Dit leidt tot druk, en op zijn plaats naar onethisch gedrag
Number of submitted and published articles at Nature between Percentage of articles accepted at Nature between
Communication
Media is niet altijd accuraat van wat er eigenlijk wel of niet in een onderzoek staat en durven dit
foutief te gebruiken in hun artikels
4
1. Psychology is a way of thinking
Producing versus consuming research
- Examples to illustrate the importance of the research consumer role
o Facilitated communication treatment (FCT)
Helpt bij autisme
Helpt bij de communicatie van patiënten
De persoon er bij helpt bij het vinden van de juiste letters door de hand mee
te begeleiden
Mensen die normaal niet juist kunnen communiceren kunnen dit nu wel
maar eigenlijk is het wat de helper wilt zeggen en niet wat de patiënt zegt
De persoon met autisme communiceert niet, maar het is eigenlijk de helper
die communiceert, men gaat communiceren wat men denkt dat de patiënt
wilt communiceren
o Scared-straight approach (SSA)
Mensen bang maken zo dat men geen misdaden gaat plegen
o Mindfulness and academic performance (MAP)
Stijgen de punten Hierna ook effectief?
- Critical mindset is essential
- Not all published research is correct or robust
- Replication crisis in psychology
o Kwaliteit van de studies
o Niet elke wetenschap studie is betrouwbaar en goed uitgevoerd
o Elke studie heeft zijn sterktes en zwaktes
o Het onderzoek bevat 3 experimenten waarin men iets moest voorspellen
Geen van de replicaties vind de zelfde uitkomsten
Heeft het te maken met hoe dat men het onderzoek voert?
Heeft men enkel de uitkomsten laten zien die effectief zijn en waar dat er
een significant verschil is
o Hoe analyseert men de data?
De data steunt de hypothese niet? Dan een aantal dingen veranderen in de
data tot dat er toch significant is en je kan bewijzen wat je wilt bewijzen
o Lijden tot de replicatie crisis (er werd zo veel gerepliceerd om eerdere onderzoeken
te onderzoeken en vele bleken vals te zijn)
Dus het niet omdat gepubliceerd is dat het juist is
1
,How scientists work
- Science is based on empiricism
- Scientists test theories
- Scientists work on fundamental and applied problems
- Science is continuously evolving
- Scientists publish their findings in scientific journals
- Scientists communicate with the general public via journalists
Empiricism
- Empirical method is based on data obtained through:
o Our senses (sight, hearing, touch)
o Instruments that assist our senses (thermometer, questionnaires, timer)
- Empiricists aim to do research in a systematic, rigorous, and replicable manner
- Empiricism is not based on own experiences, intuition, or authority figures
Empiricisme to collect data
- In een systematische manier (zelfde vragen voor iedereen in een vragenlijst)
- Realiseerbaar
Scientists test theories
Waarom zijn kinderen zo aan hun moeder gehecht?
- Gevoed worden vs comfort van contact
- Eten vs comfort van de mama
Comfort van contact is de meest gewilde
- Characteristics of good theories
o Supported by data
o Falsifiable
o Parsimonious (“Occam’s razor”)
- Examples of non-falsifiable theories:
o Facilitated communication threatment believers
o See book “De ongelovige Thomas heeft een punt”
- Theories are evaluated based on all available evidence
o A theory can never be “proven”, but it can be falsified
o Replication is crucial
2
,Scientists form a community
Merton’s scientific norms:
1. Universalism
o Onderzoek zou niet beïnvloed mogen zijn door geloof, achtergrond,….
2. Communality
o Het is niet voor één individu, maar voor een hele groep
Geen geheimen
Goede communicatie
Het zou toegankelijk moeten zijn voor iedereen (geen pay-wall)
Open science
3. Disinterestedness
o Als je onderzoek doet dan zou de uitkomst van de studie niet beïnvloed mogen
worden door jezelf, je zou geen voorkeur mogen hebben voor de uitkomst van het
onderzoek
4. Organized skepticism
o Je zou sceptisch moeten zijn tegen over elkaars onderzoek
Fundamental versus applied research
Transactional praktische implicatie, maar niet altijd meteen mogelijk
Applied Voor een specifieke context en omgeving
Continuously evolving
- Theories are continuously tested, modified, and falsified
- Research triggers follow-up research (example: impact of color on approach- and avoidance-
motivation in context (Meier et al., 2012))
o Onderzoek triggerd nieuwe vragen en dus ook een nieuw onderzoek
Onderzoek:
- In het tweede deel van het experiment ga je iemand ontmoeten en je hebt een interview
o Groep 1: je hebt een date
o Groep 2: het is een intelligentie test
- Er wordt een foto getoond van de persoon waarmee men het interview zou hebben (rrod vs
blauw tshirt)
3
, -
Hoe snel wandelt men naar de volgende kamer?
-
Verwachtingen?
o Rood: ontwijkend gedrag wordt getriggerd en men gaat
hierdoor trager wandelen naar de volgende kamer
o Blauw: is niet rood en dus men gaat geen effect hebben
- Maar is wel afhankelijk van het type interview (context
afhankelijk)
o Dus omgekeerd bij date
- Theories are continuously tested, modified, and falsified
- Research triggers follow-up research (example: impact of color on approach- and avoidance-
motivation in context (Meier et al., 2012))
Dus later hebben ze het meerdere keren willen repliceren, maar dat is niet gelukt
Publishing
- Manuscripts are submitted to scientific journals (e.g., Nature, Science, Psychological Bulletin)
- Peer-review process
o Role of editor (of the journal)
o Role of reviewers (2-6 pp) make a recommendation
o Reject, revise and resubmit, accept (10%)
Lage hoeveelheid van acceptatie heeft effect op onderzoekers want je kunnen worden
geëvalueerd op hoeveel je gepubliceerd wordt
Heel afhankelijk van dat je hypothese correct is of niet?
Dit leidt tot druk, en op zijn plaats naar onethisch gedrag
Number of submitted and published articles at Nature between Percentage of articles accepted at Nature between
Communication
Media is niet altijd accuraat van wat er eigenlijk wel of niet in een onderzoek staat en durven dit
foutief te gebruiken in hun artikels
4
