Data Analysis: Continuing Issues in the Everyday Analysis of Psychological Data

CONTENTS INTRODUCTION . . . . . . . . . . . . . . . . . ... . . . . . . . . . . . . . . . . . . . .. . .. . . . . . . . . . .. . . . . .... . . . . . . . . . . . . . . . . ... ..... .... ... . . . . . . . . . . . . . 433 THE MODEL COMPARISON APPROACH TO DATA ANALYSIS . . . . . ...... . . . . . . . . .... .... ...... . . 434 Significance Tests and Effect Estimates.. . . . . . . . . .. . . ... . .. . . .. . . . . . . . . . . . . . . . . .. . .. . . . . . . . . . . . . . . ... . . . . . . . . . . . . . . . . . 437 Focused Comparisons.. . . . . . .. .. . . . . .... . ... . . . . . . . . . . . . . . . . . . . . .. ........ 440 Statistical Power . . . . . . . . . . . . . . . . . . . . . .. .. . . . . . . . . . .... . . ...... .... . ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . .... .... .... 445 Interactions 446 ASSUMPTIONS: VIOLATIONS AND SOLUTIONS . .. . . .... ... . .... . . . . . . . . . . . .. . . .... . . . . . . . . . . . . . 452 Distributional Problems... . . . . . . .. . . . . . .. . . . . . . . . . . . . . .... .... .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 452 Remedies/or Distributional Problems.. . . . . . . . . . . .. . . . . . . . . . . . . . . ...... . . . . . . . .... ...... . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . 455 Nonindepen dence 0/ Observations.. . . . ... . . . . . . . . . . . . . . . ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . ... 459 CONCLUSIONS.... .... ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . .... .... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 460