Study Guides (248,131)
Canada (121,336)
Psychology (1,705)

Midterm 3 textbook notes.docx

15 Pages
Unlock Document

Psychology 2800E
Patrick Brown

Chapter 7 – Control The Concept of Control • Control: any means used to rule out threats to the validity of research • Experimental approach to knowledge: 1. What are the threats to validity of research and  2. What means are available to neutralize the threats • Must have a method to countering plausible alternative explanations of your experiment • Often a control group is used to compare the effect of the variable of interest  • Many experiments are performed, in which the use of a group that doesn’t receive the iV  makes no sense – i.e. teaching methods, you chose different methods of teaching and  decide which is best without a 3  group that never attends class • Control: ruling out threats to the validity of research Control Provides a Standard of Comparison: • Meaning of control: providing a standard against to compare the effect of an IV • Standard of comparison meaning of the term control o Experimental group: subjects in an experiment who receives treatment o Control group: subjects in a between subjects design who are like the  experimental group in every respect except they don’t receive treatment  o If 2 groups were equal before the experimental treatment, then any post­ experimental difference can be attributed to the treatment  • Control can be achieved with or without a control group • Experiencing different measurements of caffeine – each group serving as a control for the  other • Another point: some experiments each subject experiences every condition o Control condition: a condition where subjects design experiments that doesn’t  contain experimental manipulation (unlike control group) o When each subject experiences every condition, we say each subjects is his/her  own control o Within subject experiment: research design where each subject experiences  every condition  o Between subjects experiment: research design in which each subject  experiences only one of the conditions in the experiment  Control Reduces Variability:  • Another meaning of control: ability to restrain or guide sources of variability in research • Important to reduce variability bc reduce chances of confounding variables or  measurement error and increases confidence – by limiting IVs • Keeping everything constant except the IV provides confidence that the IV is the only  thing to cause the change  • When there are so many sources of variability in an experiment that the behavior  becomes predictable = achieved experimental control – Skinner’s operant conditioning  Relating the 2 Meanings of Control: • Primary meaning allows to conclude that a DV is associated with an IV and not with  anything else  • Second meaning draws this conclusion by limiting the variables operating in the situation  and their range of values that the conclusion is clearer • Experimental control (secondary): more sensitive situations to rule our explanations of  the experimental results (primary) • Control relates to statistics in research o 1. Inferential statistics to evaluate probability that a difference between  experimental and control groups is likely to have come from chance alone o 2. Make enough observations or subjects to reduce the variability of our estimate  of the experimental effect and make our evaluation more precise General Strategies • Failure to confirm a hypothesis doesn’t mean the hypothesis is incorrect • Other problems in the experiment may make it seem like the hypothesis is deficient • 3 strategies for achieving control in research o Laboratory setting  o Considering the research setting as preparation  o Instrumenting the response Control in the Laboratory:  • Place to set up to allow the most appropriate control over variables of interest • Requires control over elements like choice of participants, beginning and end of social  interaction, freedom from distraction • Results of lab research depend on degree and type of control that’s possible  • Social research is mainly done in field settings because its not possible or ethical to  manipulate certain variables in a lab  • Sometimes effects of manipulation may not be realistic  • Field research is warranted when ethical or practical problems preclude the degree of  control that would justify calling a certain research program a lab experiment • Always ask: which type of study will best answer the question you want to ask  • Lab research is ideal when feasible because it provides the most control  The Research Setting as a Preparation:  • 1 : decide what type of setting or system you want to use  • Preparation is familiar to anyone studying biology  • Everything part of the research setting is a part of the preparation, which is really a  context for data collection  • Experimental equipment, method of testing, location of testing, subject used in study  • Some of the most important contributions to psych have been made by people who  selected appropriate preparation  • People with new preparation for studying a given phenomenon have also made valuable  contributions to psychology o Cognitive proessess – differences in reaction time can indicate differences in  cognitive processes • Exactly which situation will provide the most powerful relationship between the variables  of interest = important q to ask yourself  Instrumentation of the Response as Control:  • Improve the measurement of the behavior being studied  • Precision to measure the DV can influence your results  • The term instrumentation in discussing the task of improving response measurement  o Calls attention to measurement devices as intruments for reducing behavior to  forms convenient for data analysis  • Good measurement intrusment is that it takes the response out of casual observation and  makes it reliable giving accurate measurements time after time  • Even a measure of a subjective state, such as pleasantness of an odor can be considered  objective provided the instrumentation is adequate  Specific Strategies Subject as Own Control (Within Subjects Control): • Most powerful control techniques: each participants experiencing every condition of  experiment o Therefore variations of different people is reduced o Experimenter should adopt strategy of using participants as own controls  whenever possible • Control method is common in areas of psych, particularly in sensation and perception o Participants may not be aware that the experiment has different conditions  • Using subjects as own controls isn’t possible always – once the participant has learnt  something by one method, learning the same problem in a different way is impossible.  The information cannot be unlearned, so using subjects as own controls isn’t possible  • Another situation where using subjects as own controls isn’t feasible is when contrast  effects exist between conditions of the experiment, so that experiencing one condition  may carry over and influence the response effects o There are sitatuions in which conditions may affect on another like reward is IV  and subjects who experience a large reward first mya respond less to a small  reward than they would if only small reward was received • In summary, you should consider using subjects as their own controls whenever three  conditions can be met o 1. Using subjects as own controls is logically possible o 2. Participating in all conditions of the experiment wont destroy the naiveté of the  subject o 3. Serious contrast effects between conditions will not be present  Random Assignment (Between Subjects Control): • Random assignment: unbiased assignment process that gives each subject an equal and  independent chance of being placed in every condition  • Advantage: once subjects have been randomly assigned, the only way that confounding  of subject­related variables with the experimental variable can occur is by chance  • Random should not be cofused with haphazard, arbitrary or without a plan • When you randomly assign subjects to conditions, you can be sure that only chance can  cause the groups to be unequal with respect to any and all potential condounding  variabels associated with the group members • Even if some variable is confounded with the IV by chance alone, assessing the  likelihood of this happening is possible via statistical methods  • Statistics rely on random allocation fo subjects to the various experiment conditions  might have produced the results obtained  • If the subjects are not assigned to conditions randomly, the statistical tests aren’t valid  • One of the biggest sins in experimental psych is an experiment that cannot be analyzed  statistically  • Computer generated randomizations may or may not be truly random, depending on the  process of calculation  • Appropriateness of a random number generator depends on the application, at least one  web site, provides access to people seeking random numbers for  research • Even signing up at different times isn’t reandom because people who sign up early times  may be more motivated or have jobs to leave campus – must randomly assign conditions  after signing up  • 1. Randomly assign subjects to groups 2. Administer experimental conditions 3. Examine  differences between groups  Matching (Between Subjects Control): • Matching: control procedure to ensure that experimental and control groups are equated  on one or more variables before the experiment  • May be necessary when the subjects differ among themselves on an independent variable  known to affect the DV • Example: studying effect of 2 different instruction on mathematical performance o Might think that those more mathematically competent would continue to gain  knowledge regardless of how they are taught o If children were randomly placed, its possible that the more brighter children all  end up in a certain group  o By testing the children before the experiment, you could place thme in a way that  the average mathematical competence is the same  • The first requirement for matching is a strong suspicion that there is an important  variable, which subjects that, differ could be controlled. Must also believe that there a is  an important correlation between matching variable and DV  o i.e. if you found that the children who initially had more math knowledge tended  to gain more knowledge regardless of group, its justified in matching prior to  math knowledge  o If you found that there was little or no correlation, you would’ve wasted effort in  matching participants and weakened the power of your experiment  • It’s possible to weaken your experiment by matching subjects if matching variable isn’t  substantially correlated with the DV o Statistical test appropriate for a matched groups design considers the data from  pairs of subjects, whereas the randomized groups test considers individual  subjects o You can see that there are twice as many subjects as pair subjects, so the  randomized test has more numbers to work with and therefore more powerful  o Important to make certain that matching is necessary before the control technique  • Second condition necessary for matching: must be feasible to present a pretest to the  subjects before assigning them to condition o I.e. giving a full IQ test to every student for the math example isn’t feasible  • You can try match on the basis of some bariable that has the highest possible correlation  with the DV • Normally, the highest correlation is between the DV and itself o i.e. if you’re doing an experiment using reaction time, matching subjects by their  reaction times make the most sense  o if you’re doing an experiment on learning and want to control intelligence,  marching by SES would be ore even if there is a correlation with SES, but the  correlation is weak  • For matching, even when you have matched your subjects, you must still randomly  allocate the members of the pairs to conditions  • I.e. if testing knowledge, matching with SES is a bad choice Building Nuisance Variables into the Experiment:  • Nuisance variables: a condition in an experiment that cannot easily be removed and so is  made an independent variable as a means of control • Variables that cannot easily be removed from the experiment, so design an experiment so  that nuisance variables become IV in the study  • Nuisance variables are known to affect the DV, but you have no theoretical interest in  them  • Building in nuisance variables allows you to measure their effects and examine the  effects of your Ist • Two choices: 1. 1  is to use only day or night students – reduces variability but reduces  the participant pool and generality 2. Build the nuisance variable – when the student  attends class into the experiment  • Nuisance variable may suggest new theorietical questions for another experiment  • Don’t confused nuisance variables with confounded variables  • Confounded cariables varies with the independent variable and a nuisance variable is  treated as a second independent variable that is varied separately from the first one  Statistical Control:  • Mathematical means of comparing subjects on paper when they cannot be equated as  they exist in fact  • Is synonymous with inferential statistics – branch of stats that deals with making  decisions in uncertainty  • Statistical control isn’t just in analysis, it is involved with designing an experiment  • The question of statistical control comes down to whether you and others believe the data  • Statistical control refers to a means of equating subjects on paper when they cannot be  equated in fact o I.e. seeing if grades on different ppwt are more effective. If students in the classes  don’t have the same IQ average, then you wont be able to attribute the difference  in teaching styles  o But if you know the relationship between IW and grades in the class, you can  finfd out how much the grades differed from what you would have expected based  on the prediction of IQ­learning relationship o Makes it possible to test on people with different IQs Replication, Replication • Replication: repeating an experiment to see if the results will be the same  • If pother experimenters obtain the same results, they become part of our scientific  knowledge  • If replication isn’t successful, the facts in original experiment are invalid and forgotten  • Feeding trained planaria (worms) to untrained planaria resulted in a transfer of memory  to the untrained worms  • Similar experiment on rats, but instead of deeding trained rats to untrained, the  experimenters injected extracts of brains – those who didnt find effects were hesitant and  discarded their results, making the truth take longer to come out  • Implications for the mechanisms of memory and for the storage of information in the  nervous system  • Not all investigators were able to replicate this  • Two types of replication are distinguished • Direct replication: some repeats identical experiment to obtain same results o Seldom because little glory to finding same results o Difficult for grants  o Usually attempted only when systematic replication failed  o Investigators go back and repeat method exactly to pinpoint the difference in  results • Systematic replication: when researcher B says “If A’s theory is correct, then the  following should happen”. Then B performs an experiment different from As but based  on it. If A’s results and theory are correct, B should find a result that supports it  o Similar to another study with diff subjects, values of stimulus or different ways of  measuring o Tests external validity by using different subjects, species or situations  o Construct validity is tested when different ways are used to measure the  theoretical concepts • Statistical validity is tested in direct and systematic  • Believers in ESP say that particular experiments produced results that would have  happened only once in a billion experiments by chance • ESP believers statistics are usually impeccable, but their understanding of the methods of  science is faulty  • Calculating long odds is impressive, but it is only one of a number of considerations in  evaluating an experiment  • Generally ESP fails to replication – scientists will pay little attention to ESP until  someone devises an experimental situation that gives consistent results in its favor  Experimental Design as Problem Solving • Best to create a research design from the beginning because often alterations from past  experiments must be made  • Designing an experiment is solving particular problems of validity by applying methods  of control • When every problem has been solved, the experimental design complete, you must see if  your design can be analyzed according to accepted statistical procedures • Important to create experiment that can be analyzed The Elegant Experiment  • Elegance: richness combined with tasteful simplicity  • In mathematic, elegance emphasizes simplicity • An elegant proof draws powerful conclusion in the simplest way  • Simplest experiment to make a clear and convincing test of a hypothesis • Tradeoffs often need to be made in designing an experiment and the process requires hard  decisions Chapter 8­ Nonexperimental Research Part 1: Observational, Archival, and Case­Study  Research • The distinction between experimental research and Nonexperimental research is based on  the degree of control that the researcher has
More Less

Related notes for Psychology 2800E

Log In


Join OneClass

Access over 10 million pages of study
documents for 1.3 million courses.

Sign up

Join to view


By registering, I agree to the Terms and Privacy Policies
Already have an account?
Just a few more details

So we can recommend you notes for your school.

Reset Password

Please enter below the email address you registered with and we will send you a link to reset your password.

Add your courses

Get notes from the top students in your class.