Jessica Henderson Boyd, MD, MPHChief Medical Officer

Secrets for Performance Improvement with Data‐Driven Practice Transformation

2

The Story• Introduction to BMS• Role of leadership

• Strategic alignment• DRVS implementation

• Building trust in the data • Workflow Documentation         Quality metric• Provider and staff engagement • Translating data to patient care • Results

Baltimore Medical System

3

• Established in 1984 in Baltimore, MD• 5 Health Centers, 7 School Based Health Clinics

– ~46,000 patients, ~140,000 visits

• 55‐60 clinical providers, 365 total staff• FP, Peds, IM, OB/Gyn, BH

• Commitment to Quality– The Joint Commission accredited since 1987– Strategic plan for 2010‐2015: shift from volume‐focused quality‐focused culture

Quality Plan 2013:Elements of Quality

4

QUALITY

The Patient Experience

Accreditation

Risk Management

Competency

Mortality Reports

Incident Reports

CredentialingPeer ReviewSupport Staff Competency

TJC

NCQA

NPSPatient

Complaints

Model of Care: PCMH

Quality Indicators

5

The Beginning• BMS implemented an E.H.R. (Misys) in 2006

– Programmer on staff– Manual audits  electronic reporting by 2009

• Each year, UDS report would be a “surprise” with data we didn’t believe

• Several ideas, processes, grants in place to improve health outcomes but no idea about how we were performing

• Reactive not proactive around performance • Next Step: Quality Program + HIT= Synergy!!

6

A Change is Gonna Come• 2011: Switch to new E.H.R. (NextGen)

– Reporting was a major factor in selection• Dashboard, Report writer, Menu reports, Crystal Reports

• Reporting challenges– Inconsistent– Upgrades and changes in definitions = lots of work – Difficult to capture the information in the charts

• Unintended consequence of the switch?– UDS: Back to manual audits for two years 

• Year 1: Data from two systems was difficult to integrate• Year 2: Too many reports to develop and ensure accuracy;  “UDS tool” was generic, regimented and focused on billing codes

7

On the Road Again• The switch to NextGen was the first step

– Significantly more capabilities– More structured fields

• An external reporting system (DRVS) was the second step– Data at our fingertips

• Organization, Center, and Provider level data– Allowed us to map our exact workflow (how we document) to the reports

– Many reports available out of the box (over 65) which were in line with our reporting needs

– Upgrades and changes to the measure definitions are managed by Azara

Let’s Stay Together: Strategic Alignment• As a FQHC, we are always managing limited resources so we had to choose a few things to focus on from our exhaustive list:– Key results– Quality turtle– Organization Dashboard– Quality Improvement– UDS– Meaningful Use– HEDIS– Provider Scorecards– Clinician Compensation Plan– Patient Centered Medical Home and direct patient care

8

HbA1c Paps

2yo Imm

Smoking

Alignment of Clinical Metrics

9

Life is a Highway:DRVS Implementation• Features

– Primary implementation team: Health informatics team, two clinicians, performance improvement coordinator

– Each report tested by at least two team members• 20 non‐compliant and 20 compliant• Identified‐mapping issues, definition issues

– Iterative process with Azara  Ongoing– End‐user testing: clinicians, medical assistants– Provider training/ re‐training

• How to use DRVS and where to document– Support staff training

• Result– Each report was the best that we could get it, and each of us involved had a better understanding of the report 10

A Matter of TrustBuilding trust in the data

– People working with the data trusted and understood the reports

• We recognized an issue as a report failure v. a user error – Ex: cervical cancer screening

• Physicians personally audited >10 key reports and vouched for them– Performance improvement coordinator monitors this regularly

– The process of workflow documentation for each metric is both defined and documented

• Instructions/ user guide with screen shots provided by Azara• Cheat sheets maintained by us

– If a provider doesn’t think their results are correct:• Collect specific patient examples 

– Win‐Win opportunity:  Get their buy‐in and/or improve our report!– We walk them through a sample of patients so they understand

11

HbA1c < 9  January 2012 – July 2014

0

10

20

30

40

50

60

70

Jan‐12

Mar‐12

May‐12

Jul‐1

2

Sep‐12

Nov‐12

Jan‐13

Mar‐13

May‐13

BMS

BE

AR

MX

OS

SA

HT

Tier 1

Tier 3

12

Diabetic Control

0

10

20

30

40

50

60

70

Oct‐12

Jan‐13

Apr‐13

Jul‐1

3

Oct‐13

Jan‐14

Apr‐14

Jul‐1

4

January 2012‐May 2013Captured 5/2013

October 2012‐ July 2014Captured 7/2014

13

Sugar, We’re Goin Down• Hemoglobin A1c pitfalls and opportunities

– Multiple labs utilized by our system– Test names can change or have many permutations impacting mapping.  (Ex: Hgba1c. and HgbA1c)

– Labs on paper (from specialists, non‐interfaced labs) requires manual entry of lab results

• This also occurs with paper lab requisitions instead of CPOE

– Lab tracking and registries helps with building trust in the data

Diabetes Registry

15

Unwritten:Linking Documentation & Data• Data mapping allows us to link our workflow as providers (what makes sense) to something concrete– Multiple possible locations to document– As few extra clicks as possible

• “If you didn’t document it, you didn’t do it”– Get credit for the work that you do– Standardization of documentation allows for accurate data capture and more representative quality metrics

0%

10%

20%

30%

40%

50%

60%

70%

80%

% Com

pliant Monthly

Trailing Year

DRVSScorecard

Documentation Training

ProviderComp Plan Turtle Team

Weight Assessment, Counseling on Diet and Activity in Children

16

Get Up, Get Into It, Get Involved (Pt 1):Provider and Staff Engagement• Provider scorecards

– Regular feedback• DRVS put results (and the data to back it) at their fingertips

– Friendly competition• Involvement in turtle teams (PDSA teams)

– Teaches how to do something about improving their scores• Clinician compensation plan

– Productivity, quality, citizenship– Show me the money

• Clinical support staff buy‐in– MA audits– MA PCMH incentive 17

18

Provider Score Card

18

Clinician Compensation Plan

19

0%

10%

20%

30%

40%

50%

60%

% Com

pliant

Monthly

Trailing Year

20

Breast Cancer Screening

DRVS

ProviderComp Plan Turtle Team

20

Dashboard

MA AuditsPCMH MA incentive

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Trailing Year

Monthly

Depression Screening

21

DRVS

22

Keeps Gettin’ Better:Process Improvement

PDSA is our primary process improvement method– Used in our organization for PCMH/ NCQA, quality improvement, any reportable outcome

– Focused on tests of small incremental changes• Need data to determine how we did and next steps 

– DRVS allows providers, managers, nurses, etc. to access the data for a single provider, group of providers or all providers

• For the specific time period they are measuring

– Registries and report details can help to provide the information to develop the next test of change

• Identify gaps and opportunities

Updated asthma toolkit

Grant renewal;Training, feedback; 

PDSA project0%

10%

20%

30%

40%

50%

60%

70%

Monthly

Trailing Year

23

Asthma Action Plans in Children

DRVS

24

Asthma Status and Management Registry

25

• Pre‐Visit Planning report– Provided by administrative assistants– Utilized by medical assistants– Reviewed by providers and staff in huddles– This information is key to identifying opportunities to improve care and workflow with minimal added work

• Registries– Supports ownership for a panel of patients and their health outcomes 

– Outcomes or opportunities can be identified outside of the context of a visit

– Better application of standing orders and outreach to meet outcomes

Team:Data Makes PCMH Possible

Pre‐Visit Planning Report

26

Moderate  Risk

High Risk

8:00

8:15

8:45

9:00

Risk Factors: Tobacco Use

Risk Factors: SMIP, SAD

Risk Factors: ObesityModerate  Risk

Risk Factors: Pregnancy

26

Diabetes Registry

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

HbA1c Paps

2yo Imm Smoking

28

2013 Quality Turtle Results• One of four Key Results for the organization

• Presented to staff monthly– Posted in centers, featured in the newsletter, discussed at staff meetings

• Turn our turtle green!Calypso

29

Quality Turtle Reporting

30

Lessons Learned• Keys to our success:

– Data validation was important to build trust– Provider champions helped ease the way– Training and re‐training (and a lot of patience)

• Providers, managers, clinical and admin support staff• Teach them to fish

– Baby steps• Continued providing paper scorecards with help of DRVS• Anonymous reporting  Transparency

– Strategic alignment• Focus on what people can handle • Can reduce friction, minimize wasted work, and create synergy!

Questions?

The Playlist

• The Story‐ Brandi Carlile (Sara Ramirez)• The Beginning‐ John Legend• A Change is Gonna Come‐ Sam Cooke• On the Road Again‐Willie Nelson• Let’s Stay Together‐ Al Green• Life is a Highway‐ Tom Cochrane• A Matter of Trust‐ Billy Joel• Sugar We are Goin’ Down‐ Fall Out Boy• Unwritten‐ Natasha Bedingfield• Get Up, Get Into It, Get Involved Pt. 1‐ James Brown• Keeps Getting’ Better‐ Christina Aguilera• Team‐ Lorde• Lessons Learned‐ Carrie Underwood