MBF3C U6L5 Understanding Bias January 16, 2015

Topic :  Understanding Bias

Goal :  I can spot biased and misleading surveys and know how they might affect the outcome of the survey.

Understanding BiasThere are two ways a survey/study might be biased. 

1. The way the sample is collected is not representative of the population being studied.

2.  The questions are asked in such a way as to influence the response.

Bias When Conducting SurveysWe will give a few situations and try to spot the problems, and fix them.

Survey : To find out how many Canadian homes have a telephone, one conducts a random phone survey.

What's the problem? :

How do we fix it?:

MBF3C U6L5 Understanding Bias January 16, 2015

Survey : To find out how many homes have working mothers, one goes door to door in the hours from 9:00 a.m. to 3:00 p.m.

What's the problem?

How do we fix it?

Survey : To find out how many students in the school wish to go to university, one samples students from the academic classes

What's the problem?

How do we fix it?

Survey : A survey is handed out to a random sample of students within the high school that asks them how important they feel that high school math is in their future.  Only half of the surveys come back, but of those it is found that a high number of students think math is very important.

What's the problem?

How do we fix it?

MBF3C U6L5 Understanding Bias January 16, 2015

Survey : A survey is handed out in class that asks respondents if they have every committed an illegal offence. 

What's the problem?

How do we fix it? 

Survey :  the principal of the school is told by his staff that there is a problem with students being in the halls at inappropriate times.  To see if their concerns are justified, he patrols the halls regularly for a week, and decides there is no problem. 

What's the problem?

How do we fix it? 

Bias in the Survey Questions

There are two types of biased survey questions.  

Leading questions very subtly try to influence the person taking the survey to answer the question in one manner. 

"Almost everyone I know likes pizza, what is your favourite food?"

Loaded questions use strong words (positive or negative) that make a person feel that they must answer the question a certain way.

"Do you support the murderous practice of abortion, or are you pro­life?"

MBF3C U6L5 Understanding Bias January 16, 2015

Survey:  A survey question asks “Should the administration at the school be able to dictate what you wear to school every day?” 

What's the Problem?

How do we fix it?

Survey:  A survey question asks "Do you favour spaghetti or pizza?  What is your favourite comfort food?

What's the Problem?

How do we fix it?

Decide if the following questions are leading, loaded or fair.  If they are NOT fair, rewrite them so they are.

Do you think bike helmets should be mandatory for all bike riders?

1.  Do you prefer the natural beauty of hardwood floors in your home?

2.  Do you exercise regularly?

3.  Do you eat at least the recommended number of servings of fruits and vegetables to ensure a healthy and long life?

4.  Do you prefer the look and feel of thick lush carpeting in your living room?

5.  Do you take a daily multiple vitamin to supplement your diet?

6.  Do you read the newspaper to be informed about world events?

7.  Do you feel that the TV news is a sensational portrayal of life’s problems?