TOE - Hoorcolleges
Hoorcollege 1 - Kwalitatief
RECAP KOM:
- Empirische theorie cyclus
- Structuren interviews
Interviews
Interviews is eigenlijk een gesprek wat alleen maar bestaat uit vragen en antwoorden tussen de
interviewer en een respondent.
- De gevoelens, ideeën, meningen, ervaringen van de respondent moeten omgezet worden in
taal.
Interviewer draagt bij aan dit proces door
e
- De juiste vragen te stellen (binnen de context)
- De respondent te motiveren om de juiste antwoorden te geven
nd
Doel interviews = het begrijpen van de perspectief(ven) van de respondent(en) over een bepaald idee,
programma of situatie.
Vormen interviews
Face to Face
La
- Twee mensen zitten schuin tegenover elkaar en praten over het onderwerp vh interview.
Telefonisch
- Dit is iets minder persoonlijke aandacht, iets minder controle.
- Lezen van emoties is lastig
- Meer feitelijk interview kan dit best.
n
Online
te
- Bijv. via Skype of via de chat
- Ook hier weer iets minder persoonlijk en minder controle
Etnografisch interview
- Binnen context ve onderzoek waarin je weken-/maandenlang verblijft in een bepaalde cultuur
S.
of met bepaalde mensen in een bepaalde situatie. Binnen deze periode houdt je interviews met
mensen waarin je mensen neer spreekt over datgene waarover je ze echt wilt spreken
➔ Leer je mensen echt kennen
➔ Combi van observaties, interviews, wellicht focusgroepen
Go-along interview
- Kortere vorm van etnografisch interview
- Bijv. je loopt een dag met iemand mee op zijn werk / met zijn werkzaamheden
- Je loopt gewoon een dagje met iemand mee, of het nou meelopen met werk is of meelopen
met een wandeling door de stad etc.
,Stages interview
1. Arrival and introduction
- Hier kan je dingen al mee verpesten als je niet voorbereid bent
- Gevolg = geen vertrouwen vd respondent in het interview
- Begin een beetje met koetjes en kalfjes gesprek en dan bam interview
2. Introducing the research
- Vertellen wat er allemaal gaat gebeuren
- Tekenen informed consent + laten weten wat hun rechten zijn binnen dit onderzoek
- Niet willen tekenen? = geen interview. Alleen interview beginnen wanneer informed
consent is getekend.
3. Beginning the interview
- Aangeven dat interview ‘nu’ begint
e
- Beetje praten over het onderwerp, maar nog niet de hoofdvraag > elkaar aftasten
4. During the interview
- Topiclijst > vanaf ong topic wordt het interessant
nd
- Laten weten dat je het antwoord waardeert dmv knikje of instemmend geluid
➔ Doen bij uitgebreide antwoorden die echt ingaan op je vraag.
- Bij stilte of kort antwoord een duidelijke doorvraag stellen, zoals ‘Kun je me daar meer
over vertellen? ‘
La
5. Ending the interview
- Rond het interview af met eventueel een ander onderwerp zodat je het interview
goed/rustig kan afsluiten >> weer betrekken naar dagelijks leven
6. After the interview
- Respondent bedanken, heb het erover hoe je verder gaat
- Doorknob effect = ineens komt het hele waardevolle/nuttige informatie naar voren
n
(voor onderzoek) op het moment dat je echt aan het weggaan bent. WEES HIER
ALERT OP >> laat papier en pen nog even liggen.
te
➔ gebruiken voor fieldnotes of memo’s >> wel vragen voor toestemming.
Focusgroepen
Focusgroep is een interview waarbij er sprake is van interactie tussen de respondenten en is dus niet
een groepsinterview
S.
- Data is generated through interaction
- Let participants listen, reflect, and consider their own standpoint further
- Spontaneity - naturalistic setting
Why do we do focus groups?
- Diagnose problems
- Stimulate new ideas or identify new relationships
- Evaluate programs
- Interpret quantitative results
Niet het doel = bereiken van consensus
,Vermijd focusgroepen wanneer:
● er commitments aan zitten die je niet kan bewaken > bijv. anonimiteit > jij houdt de informatie
wel anoniem, maar doet de rest vd participanten dat ook?
● de participanten niet comfortabel zijn met elkaar
● de topics niet appropriate zijn om te bespreken
● het project statistische data vereist
Opbouw focusgroep
1. Planning
2. Recruiting participants
3. Moderating
4. Analyzing and Reporting
e
Stages focusgroep
1. Forming
nd
- Samenkomen + vaststellen dat dit je focusgroep is
- Testing + dependence (on leader)
2. Storming
- Zoeken naar de hiërarchie in de groep
La
- Intragroup conflict + criticism
3. Norming
- Vaststellen van de normen waaraan de groep zich zal houden
- Development of group cohesion
4. Performing
- Hierin presteer je
n
- Daadwerkelijke onderwerp vh onderzoek bespreken
- Functional role relatedness
te
5. Adjourning
- Focusgroep netjes afsluiten, bespreken de normen, gaan ze contact houden etc.
- Termination, separation
Compositie en grootte
S.
● 6-10 mensen
● Heterogene groep binnen een hele homogene setting
● Zetten we vreemden, kennissen of al bestaande groepen bij elkaar?
Groepsgrootte hangt af van
- onderzoeks topic
- sensitiviteit of complexiteit van het onderwerp / ‘issue’
- breadth or depth of data required
- population group involved
Vormen focusgroep
1. Two-way
, - Twee groepen, inter- en intragroep discussie. Groep 2 observeert hoe groep 1
discussieert (en vice versa). Door het horen van hoe groep 1 erover denkt, discussieert
groep 2 en komt tot conclusies.
2. Dual moderator
- Twee moderators; 1 moderator verzekert de smooth progressie van de sessie, terwijl
de andere moderator verzekert dat alle topics aan bod komen.
3. Dueling moderator
- Twee moderators; elk geven een tegengesteld beeld naar de ander. Dit
vergemakkelijkt het denken van verschillende kanten van een probleem.
- Laten zien dat het mag om niet met elkaar eens te zijn.
- Uitkijken dat je niet woorden in de mond van de participanten legt
4. Respondent moderator
e
- Een participant neemt tijdelijk de rol van moderator. Dit vergroot de kans voor diverse
antwoorden.
5. Online focusgroep
nd
- Chatroom focusgroep → alle participanten nemen op hetzelfde tijdstip deel aan de
focusgroep.
- Bulletin board focusgroep → een bulletin board is gemaakt. De begin- en einddatum
van de bulletin board focusgroep zijn op voorhand doorgegeven aan de participanten.
La
Participanten nemen deel aan de focusgroep op het tijdstip wat hun het beste uitkomt
binnen de begin- en einddatum.
Topiclijst of topic guides
Document that outlines the key questions, subtopics, and prompts to be used during data collection.
Designing topic guides
n
- Degree of consistency in data collection
- Flexibility to pursue the individual, salient details
te
- Consultation and discussion with stakeholders
- Common understanding of the intended approach
Content, structure, and length of guides
- Review the specifications, study objective, literature etc.
- Group and ceder (?) key issues without repetition
S.
- Prevent ‘scope creep’
Fieldnotes, memo’s en recording
Memo gaat grof gezegd over alles wat relevant is voor het onderzoek
- denk aan post-it met info wat je op je project plakt
Data collection summary sheets
● Key points
● Additional participants details
● Issues relating to the context
● General observations
● Topic guide evaluation and thoughts about refinement
● Thoughts relating to analysis
,Hoorcollege 2 - Kwalitatief
RECAP KOM - coderen van data
- coderen zelf
- iterativeness
- Attribute, Index, Analytic
Sensitizing concepts
Zijn concepten, gevoelige concepten waarvan je weet ‘dit zou een issue kunnen zijn’. Uit de literatuur
weet je of dit relevant kan zijn.
● Lens
● Helpt je om verder te kunnen gaan in je onderzoek / in het veld van je onderzoek
● Geeft je verklarende kracht - explanatory power for unraveling your puzzle
e
● Houd creativiteit open (blijf open voor nieuwe informatie) en zorg ervoor dat je geen tunnelvisie
creëert.
- opening up creativity, not constraining (tunnel vision)
nd
● Vermijd dat je sensitizing concepts dwingt op de data
A-priori codes
A-priori codes are codes that are developed before examining the current data. These are derived from
La
literature or prior studies.
- Ontstaan uit je sensitizing concepts >> specifieker dan sensitizing concepts
- Komen heel strikt uit de literatuur
Constant Comparison
- Maintain close connection between codes and data
n
- Compare data coded in the same way (same code) to develop a theoretical elaboration
- Use Memos to do this
te
Je vergelijkt de hele tijd (nieuwe) theorieën, data etc. met elkaar, maar zorg er wel voor dat de data en
de modellen in elkaar passen.
.
Inductief coderen
Open coderen
S.
- Tekst uitpluizen en terugbrengen naar een meer behapbare vorm van data
- Tekst in stukjes hakken, herkennen wat de waardevolle stukjes zijn en die te labelen met een
code (die zegt wat er in dat stuk tekst gezegd wordt) waardoor er onderscheid wordt gemaakt.
- Die open code moet je inhoudelijk vertellen wat er gebeurt in dat stukje tekst
- Je staat op een weegschaal waarbij er aan de ene kant te weinig wordt geselecteerd qua tekst
om te coderen en aan de andere kant juist teveel wordt geselecteerd.
Axiaal coderen
- Define codes and clear the cutter
- Goal = structuring dataset and identifying main themes (in data)
- ‘Het opnieuw in elkaar zetten van de codes’
,Selectief coderen
- Put the pieces together again
- Goal = create theoretical model
Axial coding - steps to follow
1. Are the codes still accurate? Or do some of the codes need renaming?
Or do we need new codes to cover all the themes?
2. Do the fragments still match with the assigned codes or do some fragments fit better into
another code?
3. Are there codes that can be merged because they are alike?
4. Can you structure codes in main codes and subcodes?
5. Do you have an accurate description for each code?
e
Selective coding - steps to follow
1. What are the main themes in the observations?
nd
2. What is the main message that the participants underline in relation to your research question?
3. Is there a link between the main themes? Can you see a pattern?
4. How can you best describe the perspective of the participants?
5. Can you find an explanatory model?
La
Observaties
‘What is observation?’
- Research topics
● complex interactions or processes
● subconscious or instinctive actions
n
● people’s interactions (with environment / physical context)
● norms or pressures
te
- Main elements of doing observation
● researcher being his/her own main tool → role of the researcher
● field notes
Hoorcollege 3 - Kwalitatief
S.
RECAP - KOM
Verzamelde data in de vorm van:
- Interviews / focusgroepen >> transcripten, fieldnotes
- Observaties >> fieldnotes
- Bestaande gegevens >> archiefstukken, nieuwsberichten, dagboeken
Archival data - visual & textual data
Manifest en/of latent coderen
Manifest content Latent content
Visual, obvious components - more description Involves interpretation of the underlying
, components (deeper meaning) - more
interpretation
VB: aantal keer dat iemand een bepaald woord VB: hoe wordt het roken van een sigaret gezien?
gebruikt in bijv een krantenbericht. - als cool ,vies, normaal...
Textuele data
1. Collecting documents - secondary sources
- Bronnen waarvan je gebruikt maakt, maar deze bestonden al en zijn dus niet
(speciaal) voor het onderzoek geschreven
2. Classifying documents
e
- Bronnen die zijn geproduceerd door organisaties zelf
- Those that refer to an organisation or a course of events it is/was involved in (media
articles)
nd
- Informal and unofficial documents such as personal ones
3. Collecting data - accessibility
- Public → annual reports, websites,libraries, public meetings
- With permission → Archives, correspondence with stakeholders, personal
La
development plans
- Private → Internal correspondence (memos etc), letters, diaries
Visuele data
1. Images and photographs
2. Classifying visual data
- Those produced by participants = participant generated
n
- Those produced by the researcher = researcher generated
- Those already existing
te
- Personal, commercial, professional (official)
3. Collecting documents - accessibility
- Public → websites, libraries, magazines, journals
- With permission → archives, from participants
- Private
S.
Theoretical saturation
‘’Newly added data do not provide any new information’’
● After constant comparison and further sampling, there are no new illuminations of the concept -
the code is saturated
- No new relevant data
- Code has well developed dimensions and properties
- Relationship among codes are well established and validated
Theory testing and negative cases
● Theory is developed and tested systematically so as to include a wide variety of cases that
show patterns
, ● The goal is to validate or extend conceptually a theoretical framework or theory
● The cases which do not confirm to the patterns are important too = negative cases
- Negative cases are basically outliers or outlying observations
Categorization matrix
- Researchers identify key concepts or variables as initial coding categories before the study
- These initial coding categories are listed out in a ‘categorization matrix’
- These concepts/variables in the matrix are based on existing theories, models, mind maps or
literature review
Deductive coding process
- When?
e
● Specific theories
about your
research problem
nd
exists
● The topic is
complex or
sensitive
La
● You want to understand how the mechanism plays in this particular situation
● Deductive content analysis is often used in cases where the researcher wishes to retest
existing data in a new context
Deductive coding process - content analysis
● First of all: create your categorization matrix with operational definitions of concepts and
n
relationships between them
● Collect data
te
● Coding
- Apply the matrix to data
- Label ‘un-fitting’ dat
➔ if you find data which doesn’t fit your matrix, label them with appropriate
names
S.
★ VB: interviewees mention being shy/nervous due to being diabetic >>
label = introversion
➔ If you find data which refutes the definitions in your matrix, label them as well
(these are negative cases)
★ VB: interviewees mention that being diabetic made them bold >> label
= courage
- Compare the extent of the data-matrix fit
- Explore underlying (latent) content
Compare the extent of the data-matrix fit
- Check how well the matrix fits in with the data
● Are all the terms in our matrix reflected in the data?
, ● How frequently are the terms reflected?
● How many new, related terms were identified?
- Are the theoretical expectations verified?
● Was the mechanism behind the situation clarified?
● Was it what we expected?
● What new dimensions of the mechanism were identified?
Hoorcollege 4 - Kwalitatief
Rigor in qualitative research - 3 perspectives
Rigor research = wat je onderzoekt, is de uitkomst van het onderzoek
First perspective
- Empirical-analytical paradigm
e
- Standardization
- ‘’It doesn’t qualify for existing criteria, like validity and reliability, so it isn’t scientific research. At
best it’s a preliminary investigation.’’
nd
Second perspective
- Validity and reliability are worthy aims, but need to be adjusted to qualitative research
- “It’s different research altogether but the scientific criteria validity and reliability are applicable.
Only the procedures need to be different.’’
La
Criterion Quantitative approach
truth value internal validity
applicability external validity
consistency reliability
n
accuracy construct validity
te
neutrality objectivity
Third perspective
- Isolation of qualitative research → plaatje rechts hoort bij 3e perspectief
S.
- Criteria
- ‘’It’s so different, it needs different criteria and procedure, such as credibility and transferability.’’
Kwaliteit van kwalitatief onderzoek
Reliability (betrouwbaarheid)
- Refers to the absence of random error, enabling subsequent researchers to arrive at the same
insights if they conduct the study along the same steps again
- Weinig random error
- Weakness in many qualitative studies =
● no separation between collected evidence and final report
● readers of the report have no way of finding out basis for conclusions
Internal validity
Hoorcollege 1 - Kwalitatief
RECAP KOM:
- Empirische theorie cyclus
- Structuren interviews
Interviews
Interviews is eigenlijk een gesprek wat alleen maar bestaat uit vragen en antwoorden tussen de
interviewer en een respondent.
- De gevoelens, ideeën, meningen, ervaringen van de respondent moeten omgezet worden in
taal.
Interviewer draagt bij aan dit proces door
e
- De juiste vragen te stellen (binnen de context)
- De respondent te motiveren om de juiste antwoorden te geven
nd
Doel interviews = het begrijpen van de perspectief(ven) van de respondent(en) over een bepaald idee,
programma of situatie.
Vormen interviews
Face to Face
La
- Twee mensen zitten schuin tegenover elkaar en praten over het onderwerp vh interview.
Telefonisch
- Dit is iets minder persoonlijke aandacht, iets minder controle.
- Lezen van emoties is lastig
- Meer feitelijk interview kan dit best.
n
Online
te
- Bijv. via Skype of via de chat
- Ook hier weer iets minder persoonlijk en minder controle
Etnografisch interview
- Binnen context ve onderzoek waarin je weken-/maandenlang verblijft in een bepaalde cultuur
S.
of met bepaalde mensen in een bepaalde situatie. Binnen deze periode houdt je interviews met
mensen waarin je mensen neer spreekt over datgene waarover je ze echt wilt spreken
➔ Leer je mensen echt kennen
➔ Combi van observaties, interviews, wellicht focusgroepen
Go-along interview
- Kortere vorm van etnografisch interview
- Bijv. je loopt een dag met iemand mee op zijn werk / met zijn werkzaamheden
- Je loopt gewoon een dagje met iemand mee, of het nou meelopen met werk is of meelopen
met een wandeling door de stad etc.
,Stages interview
1. Arrival and introduction
- Hier kan je dingen al mee verpesten als je niet voorbereid bent
- Gevolg = geen vertrouwen vd respondent in het interview
- Begin een beetje met koetjes en kalfjes gesprek en dan bam interview
2. Introducing the research
- Vertellen wat er allemaal gaat gebeuren
- Tekenen informed consent + laten weten wat hun rechten zijn binnen dit onderzoek
- Niet willen tekenen? = geen interview. Alleen interview beginnen wanneer informed
consent is getekend.
3. Beginning the interview
- Aangeven dat interview ‘nu’ begint
e
- Beetje praten over het onderwerp, maar nog niet de hoofdvraag > elkaar aftasten
4. During the interview
- Topiclijst > vanaf ong topic wordt het interessant
nd
- Laten weten dat je het antwoord waardeert dmv knikje of instemmend geluid
➔ Doen bij uitgebreide antwoorden die echt ingaan op je vraag.
- Bij stilte of kort antwoord een duidelijke doorvraag stellen, zoals ‘Kun je me daar meer
over vertellen? ‘
La
5. Ending the interview
- Rond het interview af met eventueel een ander onderwerp zodat je het interview
goed/rustig kan afsluiten >> weer betrekken naar dagelijks leven
6. After the interview
- Respondent bedanken, heb het erover hoe je verder gaat
- Doorknob effect = ineens komt het hele waardevolle/nuttige informatie naar voren
n
(voor onderzoek) op het moment dat je echt aan het weggaan bent. WEES HIER
ALERT OP >> laat papier en pen nog even liggen.
te
➔ gebruiken voor fieldnotes of memo’s >> wel vragen voor toestemming.
Focusgroepen
Focusgroep is een interview waarbij er sprake is van interactie tussen de respondenten en is dus niet
een groepsinterview
S.
- Data is generated through interaction
- Let participants listen, reflect, and consider their own standpoint further
- Spontaneity - naturalistic setting
Why do we do focus groups?
- Diagnose problems
- Stimulate new ideas or identify new relationships
- Evaluate programs
- Interpret quantitative results
Niet het doel = bereiken van consensus
,Vermijd focusgroepen wanneer:
● er commitments aan zitten die je niet kan bewaken > bijv. anonimiteit > jij houdt de informatie
wel anoniem, maar doet de rest vd participanten dat ook?
● de participanten niet comfortabel zijn met elkaar
● de topics niet appropriate zijn om te bespreken
● het project statistische data vereist
Opbouw focusgroep
1. Planning
2. Recruiting participants
3. Moderating
4. Analyzing and Reporting
e
Stages focusgroep
1. Forming
nd
- Samenkomen + vaststellen dat dit je focusgroep is
- Testing + dependence (on leader)
2. Storming
- Zoeken naar de hiërarchie in de groep
La
- Intragroup conflict + criticism
3. Norming
- Vaststellen van de normen waaraan de groep zich zal houden
- Development of group cohesion
4. Performing
- Hierin presteer je
n
- Daadwerkelijke onderwerp vh onderzoek bespreken
- Functional role relatedness
te
5. Adjourning
- Focusgroep netjes afsluiten, bespreken de normen, gaan ze contact houden etc.
- Termination, separation
Compositie en grootte
S.
● 6-10 mensen
● Heterogene groep binnen een hele homogene setting
● Zetten we vreemden, kennissen of al bestaande groepen bij elkaar?
Groepsgrootte hangt af van
- onderzoeks topic
- sensitiviteit of complexiteit van het onderwerp / ‘issue’
- breadth or depth of data required
- population group involved
Vormen focusgroep
1. Two-way
, - Twee groepen, inter- en intragroep discussie. Groep 2 observeert hoe groep 1
discussieert (en vice versa). Door het horen van hoe groep 1 erover denkt, discussieert
groep 2 en komt tot conclusies.
2. Dual moderator
- Twee moderators; 1 moderator verzekert de smooth progressie van de sessie, terwijl
de andere moderator verzekert dat alle topics aan bod komen.
3. Dueling moderator
- Twee moderators; elk geven een tegengesteld beeld naar de ander. Dit
vergemakkelijkt het denken van verschillende kanten van een probleem.
- Laten zien dat het mag om niet met elkaar eens te zijn.
- Uitkijken dat je niet woorden in de mond van de participanten legt
4. Respondent moderator
e
- Een participant neemt tijdelijk de rol van moderator. Dit vergroot de kans voor diverse
antwoorden.
5. Online focusgroep
nd
- Chatroom focusgroep → alle participanten nemen op hetzelfde tijdstip deel aan de
focusgroep.
- Bulletin board focusgroep → een bulletin board is gemaakt. De begin- en einddatum
van de bulletin board focusgroep zijn op voorhand doorgegeven aan de participanten.
La
Participanten nemen deel aan de focusgroep op het tijdstip wat hun het beste uitkomt
binnen de begin- en einddatum.
Topiclijst of topic guides
Document that outlines the key questions, subtopics, and prompts to be used during data collection.
Designing topic guides
n
- Degree of consistency in data collection
- Flexibility to pursue the individual, salient details
te
- Consultation and discussion with stakeholders
- Common understanding of the intended approach
Content, structure, and length of guides
- Review the specifications, study objective, literature etc.
- Group and ceder (?) key issues without repetition
S.
- Prevent ‘scope creep’
Fieldnotes, memo’s en recording
Memo gaat grof gezegd over alles wat relevant is voor het onderzoek
- denk aan post-it met info wat je op je project plakt
Data collection summary sheets
● Key points
● Additional participants details
● Issues relating to the context
● General observations
● Topic guide evaluation and thoughts about refinement
● Thoughts relating to analysis
,Hoorcollege 2 - Kwalitatief
RECAP KOM - coderen van data
- coderen zelf
- iterativeness
- Attribute, Index, Analytic
Sensitizing concepts
Zijn concepten, gevoelige concepten waarvan je weet ‘dit zou een issue kunnen zijn’. Uit de literatuur
weet je of dit relevant kan zijn.
● Lens
● Helpt je om verder te kunnen gaan in je onderzoek / in het veld van je onderzoek
● Geeft je verklarende kracht - explanatory power for unraveling your puzzle
e
● Houd creativiteit open (blijf open voor nieuwe informatie) en zorg ervoor dat je geen tunnelvisie
creëert.
- opening up creativity, not constraining (tunnel vision)
nd
● Vermijd dat je sensitizing concepts dwingt op de data
A-priori codes
A-priori codes are codes that are developed before examining the current data. These are derived from
La
literature or prior studies.
- Ontstaan uit je sensitizing concepts >> specifieker dan sensitizing concepts
- Komen heel strikt uit de literatuur
Constant Comparison
- Maintain close connection between codes and data
n
- Compare data coded in the same way (same code) to develop a theoretical elaboration
- Use Memos to do this
te
Je vergelijkt de hele tijd (nieuwe) theorieën, data etc. met elkaar, maar zorg er wel voor dat de data en
de modellen in elkaar passen.
.
Inductief coderen
Open coderen
S.
- Tekst uitpluizen en terugbrengen naar een meer behapbare vorm van data
- Tekst in stukjes hakken, herkennen wat de waardevolle stukjes zijn en die te labelen met een
code (die zegt wat er in dat stuk tekst gezegd wordt) waardoor er onderscheid wordt gemaakt.
- Die open code moet je inhoudelijk vertellen wat er gebeurt in dat stukje tekst
- Je staat op een weegschaal waarbij er aan de ene kant te weinig wordt geselecteerd qua tekst
om te coderen en aan de andere kant juist teveel wordt geselecteerd.
Axiaal coderen
- Define codes and clear the cutter
- Goal = structuring dataset and identifying main themes (in data)
- ‘Het opnieuw in elkaar zetten van de codes’
,Selectief coderen
- Put the pieces together again
- Goal = create theoretical model
Axial coding - steps to follow
1. Are the codes still accurate? Or do some of the codes need renaming?
Or do we need new codes to cover all the themes?
2. Do the fragments still match with the assigned codes or do some fragments fit better into
another code?
3. Are there codes that can be merged because they are alike?
4. Can you structure codes in main codes and subcodes?
5. Do you have an accurate description for each code?
e
Selective coding - steps to follow
1. What are the main themes in the observations?
nd
2. What is the main message that the participants underline in relation to your research question?
3. Is there a link between the main themes? Can you see a pattern?
4. How can you best describe the perspective of the participants?
5. Can you find an explanatory model?
La
Observaties
‘What is observation?’
- Research topics
● complex interactions or processes
● subconscious or instinctive actions
n
● people’s interactions (with environment / physical context)
● norms or pressures
te
- Main elements of doing observation
● researcher being his/her own main tool → role of the researcher
● field notes
Hoorcollege 3 - Kwalitatief
S.
RECAP - KOM
Verzamelde data in de vorm van:
- Interviews / focusgroepen >> transcripten, fieldnotes
- Observaties >> fieldnotes
- Bestaande gegevens >> archiefstukken, nieuwsberichten, dagboeken
Archival data - visual & textual data
Manifest en/of latent coderen
Manifest content Latent content
Visual, obvious components - more description Involves interpretation of the underlying
, components (deeper meaning) - more
interpretation
VB: aantal keer dat iemand een bepaald woord VB: hoe wordt het roken van een sigaret gezien?
gebruikt in bijv een krantenbericht. - als cool ,vies, normaal...
Textuele data
1. Collecting documents - secondary sources
- Bronnen waarvan je gebruikt maakt, maar deze bestonden al en zijn dus niet
(speciaal) voor het onderzoek geschreven
2. Classifying documents
e
- Bronnen die zijn geproduceerd door organisaties zelf
- Those that refer to an organisation or a course of events it is/was involved in (media
articles)
nd
- Informal and unofficial documents such as personal ones
3. Collecting data - accessibility
- Public → annual reports, websites,libraries, public meetings
- With permission → Archives, correspondence with stakeholders, personal
La
development plans
- Private → Internal correspondence (memos etc), letters, diaries
Visuele data
1. Images and photographs
2. Classifying visual data
- Those produced by participants = participant generated
n
- Those produced by the researcher = researcher generated
- Those already existing
te
- Personal, commercial, professional (official)
3. Collecting documents - accessibility
- Public → websites, libraries, magazines, journals
- With permission → archives, from participants
- Private
S.
Theoretical saturation
‘’Newly added data do not provide any new information’’
● After constant comparison and further sampling, there are no new illuminations of the concept -
the code is saturated
- No new relevant data
- Code has well developed dimensions and properties
- Relationship among codes are well established and validated
Theory testing and negative cases
● Theory is developed and tested systematically so as to include a wide variety of cases that
show patterns
, ● The goal is to validate or extend conceptually a theoretical framework or theory
● The cases which do not confirm to the patterns are important too = negative cases
- Negative cases are basically outliers or outlying observations
Categorization matrix
- Researchers identify key concepts or variables as initial coding categories before the study
- These initial coding categories are listed out in a ‘categorization matrix’
- These concepts/variables in the matrix are based on existing theories, models, mind maps or
literature review
Deductive coding process
- When?
e
● Specific theories
about your
research problem
nd
exists
● The topic is
complex or
sensitive
La
● You want to understand how the mechanism plays in this particular situation
● Deductive content analysis is often used in cases where the researcher wishes to retest
existing data in a new context
Deductive coding process - content analysis
● First of all: create your categorization matrix with operational definitions of concepts and
n
relationships between them
● Collect data
te
● Coding
- Apply the matrix to data
- Label ‘un-fitting’ dat
➔ if you find data which doesn’t fit your matrix, label them with appropriate
names
S.
★ VB: interviewees mention being shy/nervous due to being diabetic >>
label = introversion
➔ If you find data which refutes the definitions in your matrix, label them as well
(these are negative cases)
★ VB: interviewees mention that being diabetic made them bold >> label
= courage
- Compare the extent of the data-matrix fit
- Explore underlying (latent) content
Compare the extent of the data-matrix fit
- Check how well the matrix fits in with the data
● Are all the terms in our matrix reflected in the data?
, ● How frequently are the terms reflected?
● How many new, related terms were identified?
- Are the theoretical expectations verified?
● Was the mechanism behind the situation clarified?
● Was it what we expected?
● What new dimensions of the mechanism were identified?
Hoorcollege 4 - Kwalitatief
Rigor in qualitative research - 3 perspectives
Rigor research = wat je onderzoekt, is de uitkomst van het onderzoek
First perspective
- Empirical-analytical paradigm
e
- Standardization
- ‘’It doesn’t qualify for existing criteria, like validity and reliability, so it isn’t scientific research. At
best it’s a preliminary investigation.’’
nd
Second perspective
- Validity and reliability are worthy aims, but need to be adjusted to qualitative research
- “It’s different research altogether but the scientific criteria validity and reliability are applicable.
Only the procedures need to be different.’’
La
Criterion Quantitative approach
truth value internal validity
applicability external validity
consistency reliability
n
accuracy construct validity
te
neutrality objectivity
Third perspective
- Isolation of qualitative research → plaatje rechts hoort bij 3e perspectief
S.
- Criteria
- ‘’It’s so different, it needs different criteria and procedure, such as credibility and transferability.’’
Kwaliteit van kwalitatief onderzoek
Reliability (betrouwbaarheid)
- Refers to the absence of random error, enabling subsequent researchers to arrive at the same
insights if they conduct the study along the same steps again
- Weinig random error
- Weakness in many qualitative studies =
● no separation between collected evidence and final report
● readers of the report have no way of finding out basis for conclusions
Internal validity