2nd Class Readings
Research Designs and Issues of Validity
-
A research design is a detailed plan of how the researcher intends to collect observations regarding variables.
-
A variable is an operational definition of an attribute that the researcher has some way of seeing, hearing, smelling, touching, or tasting.
A design to determine if men are paid more than women might be to survey men and women by phone for eight consecutive evenings asking them questions about their work experience and pay. Using the letter "O" to represent Observations, the design might look as follows:
O male
O female
The researcher's design describes how he/she would sample respondents, what questions would be asked, where (phone respondents in XXX area codes), when (week of xx/xx/xx) and how (phone survey). The design should provide sufficient information that another researcher might be able to repeat the design.
|
1. Elements of a research design or plan
Плановете включват решения относно:
-
Как наблюденията ще бъдат изпробвани. Пробите могат да бъдат или случайни (R) или неслучайни
-
Правене на наблюдения относно вариациите на проучването преди да бъде представен стимула. Този предходен на теста период се нарича притест (Ox)
-
Управление на представянето на стимула или експеримента (X)
-
Периода на правенето на наблюдения на вариации или следстимулния период се нарича посттест (Oy)
-
Включването на контролна група, която участва в претеста и/или посттеста, но не участва в самия експеримент
Класическата форма на проучването може да бъде представена така:
(Учебна група) R (O1) X (O2)
(Контролна група) R (O3) (O4 )
|
(##) IF the researcher uses the design above to test if a college education (X) causes higher income (O2) for 25- 30 year olds then which of the following would have to be TRUE? (= means equal, < less than, >greater than)
a) O1 = O3
b) O2 > O4
c) O2 > O1
d) O2 = O4
e) O4 > O3
Съществуват много планове на проучване, различни от класическата форма, отбелязана по-горе. Най-лесният е единичният случай X (O1)
Some examples of other designs- See Trochim's Designing Designs
2. Threats to research validity
-
Изследователите избират форма, която най-добре пасва на техните ситуации, но се опитват да избягват форми с твърде много заплахи към валидността на единичния случай.
a. Single group threats
b. Multiple group threats
c. Social Interaction threats
Заплаха към валидността на усилието на изследователите е всяка ситуация, която може да представи правоподобна алтернативна причина за промените в крайните резултати (зависима вариация), различна от това, което изследователите класифицират като причина или независима вариация
Класическата форма на проучване позволява на изследователите да избегнат различни заплахи за валидността като:
-
История-събития извън учението, влияещи на обектите на изследване, с които се изопачава влиянието на независимите вариации.
-
Зрялост-крайни резултати, които се получават, защото обектите остаряват, изморяват се или се променят в посоки, несвързани с изследването
-
Тестване-резултати,които се получават, защото обектите стават сензитивни към инструментите за събиране на информация, използвани от изследователя.Инструментариумът е друга заплаха за валидността на изследването, но не се решава с промени във формата на проучване.
-
Статистическа регресия-избиране на екстремни ситуации или обекти за изследване.
-
Селективно пристрастие-когато обектите в O1 са коренно различни от обектите в O3
-
Умиране на експеримента-когато изследователят губи контакт с участниците по време на събиране на информация между притеста и посттеста
-
Причинна заявка-когато не може ясно да се индикира, че причината (независимата вариация) предхожда ефекта или зависимата вариация
-
Липсата на адекватна изолация между контролната и обектната групи води до размяна на информация (дифузия), съперничество, компенсация и/или деморализация.
The research design enables the researcher to test a hypothesis. A hypothesis is an educated guess about a cause--effect relationship. For example, higher education causes higher income. X=college education; O=income.
|
3. Observations of the researcher must be unambiguous and measurable
a. Researchers make a distinction between an attribute and a variable.
b. Gender is a variable that is comprised of attributes male and female
c. Research questions use attributes but research hypothesis use variables.
For example a researcher may be interested in examining why there is a disparity between the wages of men and women. This is the research question.
-
The hypothesis (H) would test if gender were associated with wages.
-
The null hypothesis (NH) would be that the relationship between wage differences and gender vary at random.
|
4.Variables- direct, indirect and construct
a. Since the design is about how the researcher observes the variables the variable definition must be clear enough to understand what is being observed.
How do we know IF someone is tall? How do we know someone's height?
-
Directly - measure with ruler
-
Indirectly - ask them what their height is
-
Construct- ask a series of questions that would distinguish Tall from non-tall e.g. When standing and looking at the faces of other adults who are standing, do you find yourself typically looking up, looking down, neither, not applicable.
|
(##) Go to Green Line - Kelly McDonald discussion on Customer Survey
(##) 1. What design did this student use?
(##) 2. What were the concepts the students wanted to understand? How did they take these concepts and make them operational?
Concept
|
Operational Definition
|
?
|
?
|
?
|
?
|
?
|
?
|
?
|
?
|
(##) 3. What potential threats exist with this design?
EXERCISE: [as time permits]
The ministry of education in Sofia wants to know if college students in Sofia are getting a good education. You have been asked to develop a plan and define "a good education" for the purposes of conducting a study.
a. What is the most valid design you might be able to implement?
b. How will you adapt the ministry's attribute "a good education" into a variable the researcher can observe?
|
Written Analysis Task
SELECT AN ARTICLE THAT IS OF INTEREST TO YOU. Each article has its own Written Analysis form. Please note The Racial/Ethnic Differences article is the most challenging.
-
Read the article selected by you and provided by faculty.
-
Read the questions on the
Written Analysis form for Racial/Ethnic Differences-access to health care
Written Analysis for High Schools that Work and Tech Prep. OR
Written Analysis for Police Canine (Dog) Search Teams
Answer each question on the sheet provided and/or on attached pages indicating the number, question and your response.
Submit your papers at the time and date scheduled by the faculty.
Students are solely responsible for the responses they submit. Be sure your name and the due date are clearly indicated on each page of your paper.
Thank you.
|
1-ва Българска версия
2-ра Българска версия
3-та Българска версия
4-та Българска версия
5-та Българска версия
6-та Българска версия
7-ма Българска версия (следва)
8-ма Българска версия (следва)
9-та Българска версия (следва)
10-та Българска версия (следва)
Проект Българска версия
Сподели с приятели: |
