EKSPLORASI JENIS-JENIS ALGORITMA REGRESSION

PROPOSAL

Disusun Oleh:
Adi Mulia
1903015004

PROGRAM STUDI TEKNIK INFORMATIKA

FAKULTAS TEKNIK INDUSTRI DAN INFORMATIKA
UNIVERSITAS MUHAMMADIYAH PROF.DR. HAMKA
JAKARTA
2022
TIPE ANALISIS JENIS REGRESI

Analisis jenis regresi sendiri hadir dalam beberapa tipe. Pada Proposal ini, akan dibahas enam
tipe analisis jenis regresi yang sering diterapkan, yaitu linear regression, logistic
regression, ridge regression, lasso regression, polynomial regression, dan bayesian
regression. Berikut penjelasan dan perbedaan untuk masing-masing tipe.

1. LINEAR REGRESSION
Merupakan jenis analisis regresi yang paling umum digunakan. Pada perbedaan tipe
ini, variabel dependen bersifat kontinu, sedangkan variabel independen bisa bersifat kontinu
atau diskrit (terpisah). Untuk sifat garis regresinya sendiri bersifat linier.
Dalam linear regression, hubungan antara variabel dependen (Y) dengan satu atau
lebih variabel independen (X) menggunakan garis lurus yang paling sesuai (garis regresi).
Biasanya, hubungan tersebut diwakili dengan persamaan Y=a+b*X. Dalam persamaan
tersebut, a berarti intercept, dan b adalah kemiringan garis (Algorit.ma, 2022).

2. LOGISTIC REGRESSION
Regresi logistik adalah perbedaan teknik yang seringkali digunakan ketika variabel
dependen yang diketahui bersifat diskrit atau hanya dapat memiliki dua nilai saja atau disebut
skala dikotomi yakni seperti 0 atau 1, benar atau salah, dan sebagainya. Dalam regresi ini
memiliki sebuah function yang disebut logit function yang digunakan untuk mengukur
hubungan antara variabel target dan juga variabel independent.

3. RIDGE REGRESSION
Berikutnya, ada ridge regression. Perbedaan umumnya, regresi tipe ini digunakan
saat data mengalami multikolinearitas atau variabel independen yang sangat berkorelasi.
Multikolinearitas berkaitan dengan perkiraan ordinary least square (OLS). Meski OLS tidak
bias, variansnya (ragam suatu peubah acak) cenderung besar. Hal ini menyebabkan terjadinya
penyimpangan pada nilai yang diamati. Bisa jadi, nilai yang diamati jauh dari nilai sebenarnya.
Dengan menambahkan derajat bias, maka ridge regression dapat meminimalisir penyimpangan
tersebut.
4. LASSO REGRESSION

Lasso regression mirip dengan ridge regression. Lasso sendiri merupakan singkatan
dari Least Absolute Shrinkage and Selection Operator. Sebab, tipe analisis ini pun mampu
mengurangi variabilitas dan meningkatkan akurasi model regresi linier.

Meski begitu, saat dibandingkan, keduanya memiliki perbedaan. Pada lasso

regression, dapat menggunakan nilai absolut, bukan kuadrat seperti ridge regression. Dengan
begitu, nilai yang menyebabkan estimasi parameter bisa benar-benar nol.

5. POLYNOMIAL REGRESSION

Regresi Polinomial adalah salah satu jenis teknik analisis regresi dalam pembelajaran
mesin, yang sama dengan Regresi Linier Berganda dengan sedikit modifikasi. Dalam Regresi
Polinomial, hubungan antara variabel bebas dan variabel terikat, yaitu X dan Y, dilambangkan
dengan derajat ke-n ini adalah model linier sebagai penduga.

Metode Least Mean Squared juga digunakan dalam Regresi Polinomial. Garis yang
paling sesuai dalam Regresi Polinomial perbedaannya yang melewati semua titik data
bukanlah garis lurus, melainkan garis lengkung, yang bergantung pada pangkat X atau nilai n.

6. BAYESIAN LINEAR REGRESSION

Regresi bayesian merupakan jenis yang menggunakan teorema bayes untuk mengetahui
nilai koefisien regresi. Teorema bayes merupakan sebuah teorema yang menyatakan seberapa
jauh derajat kepercayaan subjektif harus berubah secara rasional ketika ada petunjuk baru.
Metode ini mirip dengan regresi linear dan ridge, namun lebih stabil dibandingkan dengan
regresi linear sederhana (Upgrad, 2022).

KESIMPULAN

Berdasarkan pemaparan diatas disimpulkan bahwa analisis jenis regresi merupakan suatu
metode analisis yang menyelidiki hubungan dan perbedaan antara dua variabel, yaitu variabel
dependen dan variabel independen. Untuk menerapkan analisis ini, bisa melalui beberapa tipe,
yaitu linear regression, logistic regression, ridge regression, lasso regression, polynomial
regression, dan bayesian regression.
Referensi :

Algorit.ma. 2022. “Tipe Analisis Regresi.” Algoritma.Ma. Retrieved November 3, 2022

(https://algorit.ma/blog/tipe-analisis-regresi-2022/).
Upgrad. 2022. “6 Jenis Model Regresi Dalam Machine Learning Yang Harus Anda Ketahui.”
Upgrad.Com. Retrieved November 3, 2022 (https://www.upgrad.com/blog/types-of-
regression-models-in-machine-learning/).

HASIL CAPTURE PENERAPAN CODINGAN ANALISIS JENIS REGRESI

1. A. Codingan Input LINEAR REGRESSION

 B. Codingan Output LINEAR REGRESSION

2. A. Codingan Input LOGISTIC REGRESSION

B. Codingan Output LOGISTIC REGRESSION
3. A. Codingan Input RIDGE REGRESSION

B. Codingan Output RIDGE REGRESSION

4. A. Codingan Input LASSO REGRESSION
B. Codingan Output LASSO REGRESSION
 5. A. Codingan Input POLYNOMIAL REGRESSION

B. Codingan Output POLYNOMIAL REGRESSION

6. A. Codingan Input BAYESIAN LINEAR REGRESSION

B. Codingan Output BAYESIAN LINEAR REGRESSION