Intro to Impact

Measurement for
Social Enterprise
Adryan Hafizh - Sept 2021
Adryan Hafizh. “Yahee”

My Business + Life Purpose 2013 2014 2015

Empowering
founders to build 2016 2017 2018

enduring great
business that
influence positive 2019

change for humanity.

How do you measure the success of your
“instagram post?” Likes & Comment.

How do you measure the success of your

“business” ? (probably) a Financial Metrics.

So how do you measure the success of

“Impact” from your Business? OUTCOME.
OUTCOME is a change of wellbeing
as a result of activities (solution)
Bagaimana OUTPUT
mengukur 3x berhasil makan bareng dalam
keberhasilan satu bulan pertama PDKT.
saat kamu
PDKT?
OUTCOME
Perubahaan perasaan si cewek ke si
cowok dari “temen” jadi “demen”
setelah satu bulan PDKT.
Perubahan standar kesejahteraan
yang dirasakan oleh beneficiary.
Bagaimana OUTPUT
mengukur 5 hari bootcamp tentang impact
keberhasilan management untuk SE di Makassar
acara SIAP
Bootcamp?
OUTCOME
Peningkatan kemampuan impact
management sehingga dampak
sosial SE bisa dimaksimalkan
SE called it “The Theory of Change”
Aktivitas bisnis apa yang kita jadikan solusi
Activities
untuk memecahkan akar masalah?

Perubahan apa yang kita harap terjadi sebagai

Output
indikator keberhasilan “aktivitas” di bisnis kita?

Perubahan kesejahteraan apa yang kita

Outcome harap terjadi di orang yang kita bantu
sebagai indikator dampak yang kita buat?

Goals Tujuan apa yang kita ingin capai dengan SE?

SE measure OUTCOME as they
measure their business PROGRESS.
Rencana Rencana Indikator
Visi & Misi Aktivitas
Jangka Jangka Aktivitas Bisnis
Perusahaan Bisnis Rutin
Panjang Pendek (Output)

+ OKR Impact
Sama dengan indikator bisnis, mengukur
outcome dapat memberitahu kita apa yang Pengukuran
Impact Goals
harus dilakukan untuk meningkatkan Outcome
perubahan impact yang terjadi
There might be several OUTCOMES
for one activity (solution)
PDKT Jadi lebih rajin Mood jadi lebih Pola hidup jadi
Orang tua jadi
For Cewek senang dan
merawat diri bagus seharian lebih teratur
& Cowok “tenang”

SIAP Pemahaman Kepercayaan Kemampuan Menambah

Bootcamp konsep SE diri peserta implementasi jumlah teman
For Peserta meningkat meningkat meningkat kalangan SE

We need to decide where we want to focus

HOW?
1.Identify who we want to help
with our solution (SE)
Beneficiary Customer Partner Internal
People that we want to
Pemilik Venue Tim facilitator
help (impact) the most Peserta SIAP
Acara SIAP
by the solution Bootcamp
of our SE. sebagai
Beneficiary Tim facilitator
Vendor Makanan
lokal Makassar
Customer
People that consume the
end product or service Sponsor SIAP
of our SE. Bootcamp
Got It?
Produk Customer Solution Beneficiary
PISANG IJO IMPACT
Anak
Jualan pisang ijo khusus Pisang Anak Resep khusus
malnutrisi
untuk anak malnutrisi Ijo Malnutrisi pisang ijo
yang beli
sebagai beneficiaries penuh gizi
pisang ijo

COTO IMPACT
Jualan Coto yang dibuat Pelatihan Pemuda tuna
Coto Masyarakat kerja pemuda
oleh pemuda tuna rungu Makassar Sekitar
rungu sebagai
tuna rungu pekerja (koki)
sebagai beneficiaries
sebagai koki

PALUBASA IMPACT
Jualan Palubasa dengan Hubungan
Masyarakat Petani kecil
Palubasa kerja dengan
bahan baku yang disupply supplier
Sekitar para petani
oleh petani kecil sebagai bahan baku
kecil
beneficiaries
2.Assume the outcomes that might
happen and create relation trees.
Merasakan Kepercayaan diri Meningkatkan
relevansi materi peserta daya tahan
dengan SE nya meningkat terhadap masalah

Pemahaman akan Mengerti Kemampuan Keberlangsungan

konsep SE penggunaan implementasi bisnis peserta
meningkat framework SE meningkat meningkat

Menambah teman Peserta menjadi Membuka banyak

seperjuangan di tidak merasa peluang baru
kalangan SE sendirian berkolaborasi
3.Reach your beneficiaries and ask
them about the Outcome they wish
to happen (or already happened)
● Pemahaman akan konsep SE meningkat. Perubahan apa saja yang
● Menambah teman seperjuangan dikalangan SE.
kamu alami setelah
● Merasakan relevansi materi dengan SE nya.
mengikuti (solusi) ??
● Mengerti penggunaan framework SE.
● Peserta menjadi tidak merasa sendirian.
● Kepercayaan diri peserta meningkat.
● Kemampuan implementasi meningkat.
● Membuka banyak peluang kolaborasi baru.
Apa aja sih perubahan yang
● Meningkatkan daya tahan terhadap masalah. kamu harapkan terjadi jika
● Keberlangsungan bisnis peserta meningkat. mengikuti (solusi) nanti ??
“Perubahan apa saja yang kamu alami setelah mengikuti (solusi)?
Apa aja sih perubahan lain yang kamu harapkan terjadi?”

“Apa yang kamu rasakan setelah mengikuti (solusi) selama ini?

Boleh ceritakan bagaimana pengalamannya?”

“Apakah ada hal positif lain yang kamu rasakan

setelah mengalami (solusi)??”

“Apakah ada hal yang tidak diharapkan yang

terjadi atas hasil dari (solusi)?”
3.Understand which outcomes are
the most important for beneficiary.
Potential outcomes rank rate

Ranking the Outcome Pemahaman akan konsep SE meningkat. 1 9/10

Ask your beneficiaries to Menambah teman seperjuangan dikalangan SE. 3 9/10

rearrange the outcomes in Merasakan relevansi materi dengan SE nya. 7 6/10

order of its importance. Mengerti penggunaan framework SE. 2 9/10

Peserta menjadi tidak merasa sendirian. 8 5/10
Kepercayaan diri peserta meningkat. 10 4/10
Rating the Outcome Kemampuan implementasi meningkat. 6 8/10
Ask your beneficiaries to put Membuka banyak peluang kolaborasi baru. 4 6/10
the “weight of importance” Meningkatkan daya tahan terhadap masalah. 9 5/10
(1-10) for each outcomes. Keberlangsungan bisnis peserta meningkat. 5 7/10
LET’S TRY
TOGETHER
Let’s Remember!
1. Outcome is a CHANGE in Beneficiary WELLBEING
caused by our activities (solution)

2. Focus on the Outcome that are most important /

most expected from your beneficiary perspective.
So ASK them & INVOLVE them.

3. Pick a SPECIFIC Outcome Area to be focused on.

LET’S DO IT!
Implementation Time
1. List the possible Outcome from your SE.
Make a list of Outcomes from your assumption.

2. Call 2 of your (potential) beneficiaries to get

insight about other expected Outcome.

3. PR - Make a RANK/RATE survey of your Outcomes

in Whatsapp & send it to 5 beneficiaries.
A story of how a good
intention, sometimes
created an unintended
negative consequences
(maksudnya baiiikk..)
Measure Manage Maximise
Impact Impact Impact
How do you measure progress?
You measure the change.
What How
Apakah anak aku Lihat nilai raport
belajar dengan anak per-mata
baik di sekolah? pelajaran tiap bulan

What How
Apakah perjuangan Lihat timbangan
diet keto ku berhasil setiap minggu
bulan ini? selama 1 bulan.
We usually measure our business
aspect to see it’s progress.
What How
Apakah penjualan Laporan keuangan
restoran ku bulan ini untuk melihat laba/
berjalan baik? rugi (omset)

What How
Apakah aktivitas Jumlah likes &
marketing instagram comment di post
ku berhasil? Instagram
We do MEASUREMENT on each
INDICATOR and measure the
CHANGE over time.
Measurement Indicator Change Measured

Melihat nilai raport # Nilai / mata IPA Oct: 80 | Nov: 90 | Dec: 92

anak setiap bulan pelajaran IPS Oct: 60 | Nov: 55 | Dec: 45

Melihat laporan Rp Laba - Rugi October November

keuangan (Omset) Revenue: 9jt Revenue: 10jt
Cost: 6jt Cost: 8jt
Indicator can be “Objective Type”
Outcome Activity Question to Ask Indicator

Peningkatan rasa Ukur jumlah Berapa rata-rata # scale 1-6

sayang kepada huruf ganda huruf ganda di 1xA = Teman ajah
calon pasangan di chat penghujung chat 6xA = Baper

Peningkatan ilmu Ukur nilai Berapa nilai ujian Nilai 1-10

pengetahuan IPA raport IPA mata pelajaran IPA 1 : Ga ngerti
anak di sekolah anak anak bulan lalu 10 : Ngerti banget

Peningkatan Test dengan Nilai test tentang Nilai 1-10

pemahaman akan suatu pemahaman SE 1 : Tidak paham
konsep SE standar terstandarisasi 10 : Paham banget
It can also be “Subjective Type”
Outcome Activity Question to Ask Indicator

Peningkatan rasa Tanyain Jadi.. kamu ke aku # scale 1-10

sayang kepada langsung tuh gimana sih? 1 : Temen ajah
calon pasangan ke doi Kita ini apa sih? 10 : Maunya apah?

Peningkatan ilmu Tanyain Nak, kamu kmaren # scale 1-10

pengetahuan IPA langsung paham materi IPA 1 : Ga ngerti
anak di sekolah ke doi di sekolah? 10 : Ngerti banget

Peningkatan Kuesioner Seberapa paham # scale 1-10

pemahaman akan langsung kamu sekarang 1 : Tidak paham
konsep SE ke peserta akan konsep SE? 10 : Paham banget
Which one is the best one? Your
progress & beneficiaries will evolve
it over time, just like in business
1st Development 2nd Development 3rd Development

Marketing Measuring post likes & Measuring Leads to Measuring CAC, ROI,
Progress comment / campaign Deals conversion LTV of campaign

Team Measuring team task Measuring team Measuring Human

Progress weekly hit rate monthly KPI & OKR Capital ROI

Start with a measurement that you can do.

HOW?
1.Create Outcome Measurement
Dashboard using Impact Journal.

Outcome to Measurement Question to Outcome Measurement

Measure Activity be Ask Indicator Frequence
Dampak Bagaimana cara Apa yang akan Apa indikator Seberapa sering /
perubahan apa untuk mengukur ditanyakan untuk perubahannya? lama perubahan
yang mau diukur perubahannya? mengukurnya? (satuan data) tersebut diukur

Pemahaman Questionnaire Tanya tentang Setiap hari

konsep SE “checkout” ke pemahaman Score 1-10 setelah
meningkat peserta konsep SE bootcamp
Raport anak, laporan keuangan,
dan impact journal.

Foto Laporan
Foto Excel “Checkout Score” SIAP
Keuangan simple di
Bootcamp di Malang
Excel
Create your Impact Journal

bit.ly/siapimpactjurnal
(download the file first, then edit)
2.Develop a “Question Format” for
each outcome you want to measure
Pemahaman Bagaimana tingkat pemahaman Seberapa bisakah kamu
konsep SE mu akan konsep SE setelah menjelaskan ulang konsep SE
meningkat bootcamp hari ini? dari hari ini kepada tim mu?

Kemampuan Seberapa bisakah kamu Materi yang manakah yang

implementasi mengimplementasi materi yang kamu bisa implementasikan
SE meningkat disampaikan ke dalam SE mu? ke SE mu?

Keterampilan Bagaimana tingkat keterampilan Seberapa banyak keterampilan

dalam fungsi mengenai fungsi bisnis mu bisnis baru yang kira-kira bisa
bisnis meningkat setelah bootcamp hari ini? kamu terapkan di SE mu?
Is the change happened
in our beneficiaries
happened because of
our activities?
Avoid overclaiming
a. Deadweight / Counterfactual
Percentage of likelihood that people could
have experienced the changes without us

b. Attribution / Contribution
the percentage contribution of other
individuals/organisations to the changes
3.Create a Simple Questionnaire
Main Question Supporting Question Deadweight Attribution

Bagaimana tingkat Seberapa bisakah kamu

pemahaman mu akan menjelaskan ulang Dari skala 100% Seberapa banyak kah
A
konsep SE setelah konsep SE dari hari ini pemahaman kamu
kamu pernah belajar
mengenai konsep dan
bootcamp hari ini? kepada tim mu? akan konsep SE, implementasi SE
menurutmu berapa sebelumnya?

Seberapa bisakah Materi yang manakah persen kah yang

Jika ada, Sebutkan
mengimplementasi yang kamu bisa kamu dapat dari
B bootcamp SIAP?
sumber / aktivitas
yang disampaikan implementasikan belajarnya
ke dalam SE mu? ke SE mu?

Apakah materi fungsi Dalam 6 bulan terakhir, Dalam 6 bulan terakhir, berapakah jumlah
C bisnis hari ini relevan berapakah jumlah pelatihan tentang fungsi bisnis yang kamu
dan bisa berguna pelatihan tentang fungsi pernah ikuti?
untuk SE mu? bisnis yang kamu ikuti?
Impact Measurement Questionnaire
CHECKOUT For SIAP Bootcamp Makassar day 3

1. Bagaimana tingkat pemahaman mu terhadap konsep & 1 = Tidak Paham

implementasi SE sebelum bootcamp SIAP? (base-ab) # 10 = Sangat Paham

2. Bagaimana tingkat pemahaman kamu terhadap konsep 1 = Tidak Paham

# 10 = Sangat Paham
SE setelah bootcamp hari ke 3? (core-a)
1 = Tidak Bisa
3. Bisakah kamu ceritakan konsep SE ke tim mu? (val-a) # 10 = Sangat Bisa
4. Seberapa bisakah kamu mengimplementasi materi yang 1 = Tidak Bisa
disampaikan ke dalam SE mu? (core-b) # 10 = Sangat Bisa

5. Materi SE yang manakah yang kamu ingin & bisa Tuliskan materi
implementasikan ke SE mu? (val-b) abc SE yang mana

6. Dari 100% pemahamanmu akan konsep SE, menurut mu 0% = bukan dari SIAP
berapa persen kah yang kamu dapat dari SIAP? (dw-ab) % 100% semua dari SIAP
Gunakan bahasa dan kalimat
yang mudah dimengerti.
7. Seberapa banyak kah kamu pernah belajar mengenai 1 = Tidak pernah
konsep dan implementasi SE sebelumnya? (dw-ab) # 10 = Sangat banyak

8. Jika ada, Sebutkan sumber / aktivitas belajarnya.. (atri-ab) abc Tuliskan...

9. Apakah materi fungsi bisnis hari ini relevan dan 1 = Tidak relevan
berguna untuk SE mu? (core)
# 10 = Sangat relevan

10. Seberapa banyak materi fungsi bisnis yang kamu yakin Masukkan jumlah
bisa implementasikan di SE mu? (val)
# materinya

11. Dalam 6 bulan terakhir, berapakah jumlah pelatihan Masukkan jumlah

tentang fungsi bisnis yang kamu ikuti? (dw) # pelatihan nya
4.Validate the questionnaire by send
it to 2-3 of your beneficiaries first.

Foto contoh questionnaire Foto contoh questionnaire

Foto contoh Google Form
tertulis pake whatsapp blast
LET’S TRY
TOGETHER
Story of how Instagram
create “social feedback
addiction” and how can
we harness the same
nature of behavior.
Remember this kid? His parent,
“measure” the change in his score
What How Indicator
Apakah anak aku Lihat nilai raport # Nilai / mata
belajar dengan anak per-mata pelajaran
baik di sekolah? pelajaran tiap bulan

Change Measured OWWW..

IPA Oct: 80 | Nov: 90 | Dec: 92 THEN WHAT
DOES IT MEAN?
IPS Oct: 60 | Nov: 55 | Dec: 45
Hati-hati dalam interpretasi
IPA Anak saya Saya berhasil Sekolah unggulan
Oct: 80
memang pintar kyk mendidik sebagai memang beda
Nov: 95
Dec: 92 bapaknya orang tua kualitas

IPS Apakah anak saya Apakah anak saya Apakah saya gagal
Oct: 60 belajar dengan tidak berbakat mata sebagai orang tua
Nov: 55
Dec: 45 baik di sekolah? pelajaran IPS? dalam mendidik?

MAAF SAYA
7.32 Pemahaman
Konsep 7.41 Implementasi
Konsep GAGAL
 SIAP Incubation W3 Average
1. Bagaimana tingkat pemahaman mu terhadap konsep & Data sebelum
4.73 bootcamp SIAP
implementasi SE sebelum bootcamp SIAP?

2. Bagaimana tingkat pemahaman kamu terhadap konsep 7.27

SE setelah bootcamp hari ke 3? Data pemahaman
materi SE
3. Bisakah kamu ceritakan konsep SE ke tim mu? 7.36
4. Seberapa bisakah kamu mengimplementasi materi yang 7.41
disampaikan ke dalam SE mu? Data kemampuan
OC : 17 penerapan materi SE
5. Materi SE yang manakah yang kamu ingin & bisa
RC : 5
implementasikan ke SE mu?

6. Dari 100% pemahaman mu akan konsep SE, menurutmu 64%

berapa persen kah yang kamu dapat dari SIAP? Validasi kontribusi SIAP
terhadap perubahan
7. Seberapa banyak kah kamu belajar mengenai konsep 4.59 pemahaman dan
dan implementasi SE sebelumnya?
Youtube : 6 penerapan materi SE
Buku : 7
8. Jika ada, Sebutkan sumber / aktivitas belajarnya.. Seminar : 7
Network : 5
It’s better to see the data as it is.
Don’t focus on judging and
labeling the number.
IPA
Oct: 80 = Pintar
Nov: 95 = Sangat Pintar
Dec: 92 = Lumayan Pintar
Jan: 100 = Pintar Sempurna
Pemahaman Konsep SE
Score 1 = Tidak Paham
Score 5 = Kayaknya Paham
Score 6 = Cukup Paham
Score 10 = Sangat Paham
Kalo mau lebih pintar IPA dari “Pintar
Sempurna” harus dapet nilai 110 gt ya
Pak? Eh tunggu, tp kayaknya pintar ga
bisa dibatesin pake nilai doang deh Pak”
“Kalo gitu, score 8 artinya “lebih paham
dari cukup paham” ya Pak? Kalo score
10, udah sempurna dong artinya
pemahaman saya ama SE? Saya suka nih
ama SIAP kalo gitu caranya”
How we interpret the 1st Outcome?
Avg Answer Baseline 1st Test Change DW 1 DW 2

Q2 Q3 Q1 Avg Q2-Q3 OC1 - Q1 100%-64% Q7

7.27 7.36 4.73 OC1 : 7.32 +2.59 36% 4.6

Rata-rata peserta menilai
tingkat pemahaman akan
konsep SE setelah bootcamp
ke-3 dengan nilai 7.32. Dimana
sebelum bootcamp, tingkat
pemahamannya dinilai dengan
angka 4.73.
Sehingga terjadi perubahan
sebesar +2.59 hingga week 3
Namun ada deadweight di angka 36%, yang artinya
SIAP hanya berkontribusi sebesar 64% dari
perubahan yang terjadi. Ditambah peserta pernah
mendapatkan edukasi mengenai SE sebelumnya
dengan nilai 4.6. Peserta juga mendapatkan
pembelajaran dari sumber lain seperti Youtube (6),
Buku / Artikel (7), Workshop (7), dan Networking (5)
Namun, angka perubahan sebenarnya bisa lebih
kecil dari +2.59, sehingga masih banyak yang harus
ditingkatkan di bootcampnya, agar perubahan
terjadi lebih besar lagi di hari ke-4 & 5
So we can spend more time, focus,
and effort in increasing the degree
of changes , by GETTING INSIGHT
from our beneficiaries.
1. 2. 3.
Hubungkan dengan Hubungkan dengan Analisa insight
sumber masalah expected outcome dari metode
yang kita coba dari beneficiaries kualitatif seperti
selesaikan wawancara
Measure, measure, measure over
a certain period of time.
Peningkatan kemampuan penerapan materi SE
Sebelum Bootcamp Bootcamp Bootcamp Online Kickoff
Bootcamp week ke-3 week ke-4 week ke-5 Support Bootcamp
4.73 7.32 X Y Z A

< +2.59 +? +? +? +?

Data shows that on average participant improve <+2.59 on the 3rd bootcamp day.

How can SIAP improve the degree of change?

is a learning platform for aspiring
social innovators to find their path to
impact as innovators, changemakers
and problem solvers.

Platform launched:
September 13th 2021

Impact Classroom:
September 2425th 2021

bit.ly/siapsiapdulu