stdsquare²
Kelas
stdsquare / Kelas / Statistika Bisnis II / Tambahan Ch.14: Analisis Regresi …
Tema
Japan
Arcade
Dark Retro
Font
Materi Tambahan · Lind Ch.14

Analisis Regresi Berganda

Tambahan 6 — Pertemuan 20 · Banyak Prediktor, Satu Model

Membaca output regresi berganda seperti seorang peneliti: menafsirkan koefisien parsial, menguji model secara global (uji-F) dan per variabel (uji-t), lalu memasukkan variabel kualitatif lewat dummy variable.

Sesi Tambahan T6  •  30 Menit  •  2026 · Semester 2

Tujuan Pembelajaran (Terjemahan LO14-1 … LO14-8)

Setelah sesi ini, Anda mampu:

LO14-1 — Model Berganda
$\hat{y} = a + b_{1}x_{1} + \dots$
Beberapa variabel bebas
Memakai & menafsirkan hubungan beberapa variabel bebas terhadap satu variabel terikat — koefisien = efek parsial.
LO14-2 · LO14-3 — Evaluasi & Uji
$R^{2}$ · $F$ · $t$
ANOVA & inferensi
Menilai kecocokan model ($R^{2}$, $s_{y\cdot x}$), uji-F global, dan uji-t per koefisien.
LO14-4 · LO14-5 — Asumsi & Dummy
0 / 1
Variabel kualitatif
Menyadari asumsi model; memasukkan variabel nominal (garasi, gender) sebagai dummy variable dan menafsirannya.
LO14-6 · LO14-7 · LO14-8 — Lanjutan
$x_{1}x_{2}$
Interaksi & stepwise
Menguji efek interaksi, memilih variabel lewat stepwise regression, merancang model linear untuk prediksi.

Satu X Tidak Pernah Cukup

Kasus pembuka buku — departemen kredit Bank of New England meneliti pendapatan keluarga pemohon kredit:

Lima Prediktor Calon
5 X → 1 Y
Nilai rumah · Pendidikan · Usia · Cicilan bulanan · Gender
Semua diduga menjelaskan pendapatan keluarga (Y). Regresi sederhana hanya bisa memakai satu — sisanya terbuang, padahal jelas berpengaruh.
Kasus Utama Hari Ini
Salsberry Realty
20 rumah · 3 prediktor
Biaya panas Januari (Y) ← suhu rata-rata ($x_{1}$), isolasi atap ($x_{2}$), usia furnace ($x_{3}$). Satu kasus dari output sampai keputusan variabel.
Pertanyaan yang hanya bisa dijawab model berganda: berapa efek murni suhu setelah isolasi dan usia furnace dikontrol? Prediktor mana yang sebenarnya tidak berguna dan layak dibuang? Bagaimana memasukkan "punya garasi / tidak" yang bukan angka?
Bagian 1 dari 3
Model & Interpretasi Koefisien
Dari garis menjadi bidang: rumus umum regresi berganda, arti efek parsial, dan membaca persamaan Salsberry Realty seperti membaca cerita bisnis.
Rumus 14-1 Efek Parsial Prediksi

Dari Garis ke Bidang — dan Arti Efek Parsial

$$\hat{y} = a + b_{1}x_{1} + b_{2}x_{2} + \dots + b_{k}x_{k} \qquad [14\text{--}1]$$

Contoh mini buku — harga jual rumah ($000): jumlah kamar ($x_{1}$), usia rumah ($x_{2}$):

Persamaan (Chart 14-1)
$\hat{y} = 21{,}2 + 18{,}7x_{1} - 0{,}25x_{2}$
2 prediktor → bidang di ruang 3D
Rumah 7 kamar berusia 30 tahun: $\hat{y} = 21{,}2 + 18{,}7(7) - 0{,}25(30) = $ 144,6 → $144.600.
Tafsir Koefisien (kunci!)
$+18{,}7$ / $-0{,}25$
Efek parsial — ceteris paribus
Tiap kamar ekstra menaikkan harga $18.700, berapa pun usianya; tiap tahun usia menurunkan $250, berapa pun kamarnya. Intersep 21,2 = nilai tanah tanpa rumah.
Lebih dari 2 prediktor tak bisa digambar (grafik terbatas 3 dimensi), tapi matematikanya mulus terus. Estimasi tetap kuadrat-terkecil: minimalkan $\sum (y - \hat{y})^{2}$ — dihitung software, bukan tangan.

Coba Sendiri: Bidang Regresi 3D

Iklan & jumlah karyawan vs omzet 18 UMKM — putar sudut pandang, geser prediktor, dan lihat bidang serta residualnya dari berbagai arah.

Kasus Utama: Salsberry Realty — 20 Rumah, 3 Prediktor

Pertanyaan pembeli rumah: "berapa biaya memanaskan rumah ini tiap Januari?" (Tabel 14-1 buku; sampel acak 20 rumah yang baru terjual).

PeranVariabelSimbolRentang data
TerikatBiaya panas Januari ($)$y$$43 – $400
BebasSuhu luar rata-rata (°F)$x_{1}$7 – 65
Isolasi atap (inci)$x_{2}$2 – 12
Usia furnace (tahun)$x_{3}$1 – 15
$$\hat{y} = 427{,}194 - 4{,}583\,x_{1} - 14{,}831\,x_{2} + 6{,}101\,x_{3}$$
Sebelum percaya angka, uji logikanya: suhu naik → biaya turun (koef. negatif ✓); isolasi tebal → biaya turun (negatif ✓); furnace tua → boros, biaya naik (positif ✓). Tanda koefisien yang janggal = sinyal salah spesifikasi.

Hitung dari Nol — HDN-1: Prediksi & Tafsir Tiap Koefisien

Rumah contoh buku: suhu rata-rata 30 °F, isolasi 5 inci, furnace 10 tahun. Berapa biaya panasnya?

LangkahPerhitunganHasil & tafsir parsial
Substitusi $x_{1}=30, x_{2}=5, x_{3}=10$$427{,}194 - 4{,}583(30) - 14{,}831(5) + 6{,}101(10)$$\hat{y} = 276{,}56$
Langkah antara — suhu$-4{,}583 \times 30 = -137{,}49$komponen suhu menekan biaya $137,49
Langkah antara — isolasi$-14{,}831 \times 5 = -74{,}155$komponen isolasi menekan biaya $74,16
Langkah antara — usia$+6{,}101 \times 10 = +61{,}01$komponen usia menambah biaya $61,01
Uji intuisi buku: Boston 25 °F vs Philadelphia 35 °F$(35-25) \times 4{,}583$Philadelphia lebih murah $45,83/bulan (isolasi & usia sama)
Latihan tafsir: +1 inci isolasi → hemat $14,83/bulan (suhu & usia tetap); +1 tahun usia furnace → +$6,10/bulan (suhu & isolasi tetap). Intersep 427,194 = biaya dasar saat ketiganya nol — di luar rentang data, jangan ditafsirkan harfiah.
Bagian 2 dari 3
Evaluasi & Pengujian Model
Tabel ANOVA sebagai pusat komando: galat taksiran berganda, $R^{2}$ dan adjusted $R^{2}$, uji-F global, uji-t per koefisien, dan strategi membuang variabel.
ANOVA Uji-F Global Uji-t Individual

ANOVA: Pusat Komando Evaluasi

Variasi total $y$ terbelah dua — persis ANOVA Bab 12, kini untuk regresi:

SumberdfSS (Salsberry)MS
Regresi (dijelaskan)$k = 3$$SSR = \sum(\hat{y}-\bar{y})^{2} = 171.220{,}473$$MSR = 57.073{,}491$
Residual (galat)$n-(k+1) = 16$$SSE = \sum(y-\hat{y})^{2} = 41.695{,}277$$MSE = 2.605{,}995$
Total$n-1 = 19$$SS_{total} = 212.915{,}750$
Galat Taksiran Berganda [14-2]
$51{,}05$
$s_{y\cdot 123} = \sqrt{MSE} = \sqrt{2.605{,}995}$
"Salah tipikal" prediksi = $51,05. ~68% residual dalam ±$51,05; ~95% dalam ±$102,10.
Koefisien Determinasi [14-3]
$R^{2} = 0{,}804$
$= 171.220{,}473 / 212.915{,}750$
80,4% variasi biaya panas dijelaskan ketiga prediktor; 19,6% = galat + faktor lain.
Contoh Residual (rumah #1)
$-8{,}90$
$y = 250$ vs $\hat{y} = 258{,}90$
Rumah #1: (35 °F, 3", 6 th) → $250$ aktual; $(250-258{,}90)^{2} = 79{,}21$ masuk $SSE$.

Hitung dari Nol — HDN-2: Adjusted $R^{2}$ & Uji-F Global

Bahan ANOVA Salsberry: $SSR = 171.220{,}473$; $SSE = 41.695{,}277$; $n = 20$; $k = 3$; α = 0,05.

LangkahPerhitunganNilai
$R^{2}$ [14-3]$171.220{,}473 / 212.915{,}750$0,804
$R^{2}_{adj}$ [14-4]$1 - \dfrac{41.695{,}277 / 16}{212.915{,}750 / 19} = 1 - \dfrac{2.605{,}995}{11.206{,}092}$0,767
$F$ hitung [14-5]$\dfrac{171.220{,}473/3}{41.695{,}277/16} = \dfrac{57.073{,}491}{2.605{,}995}$21,90
$F$ tabel (3; 16; 0,05)Lampiran B.6A3,24
Keputusan global$21{,}90 > 3{,}24$ (p = 0,000)Tolak $H_{0}$: model berguna
$H_{0}: \beta_{1} = \beta_{2} = \beta_{3} = 0$ vs "tidak semua $\beta_{i}$ nol". $F$ = rasio varians-dijelaskan per varians-galat: model yang bagus menyandera banyak variasi dengan sedikit galat → $F$ besar. $F$ signifikan hanya menjamin "minimal satu" prediktor berguna — bukan semuanya.

Coba Sendiri: Mesin ANOVA — $F$ Global & Uji-t Individual

Default = ANOVA Salsberry. Ubah SSR/SSE/k/n atau koefisien uji-t, dan keputusan global-individual diperbarui seketika — termasuk eksperimen "tambah variabel sampah" di bawah.

Uji-t Individual: Prediktor Mana yang Nyata?

$t = \dfrac{b_{i} - 0}{s_{b_{i}}}$ dengan df $= n-(k+1) = 16$; kritis dua arah α = 0,05 → $\pm 2{,}120$ (output Excel buku):

Variabel$b_{i}$$s_{b_{i}}$$t$ hitungp-valueVonis
Suhu luar ($x_{1}$)−4,5830,772−5,9370,000Signifikan ✓
Isolasi ($x_{2}$)−14,8314,754−3,1190,007Signifikan ✓
Usia furnace ($x_{3}$)+6,1014,011+1,5210,148Tidak signifikan ✗
Keputusan Strategis
Buang usia furnace
Aturan buku: hapus SATU variabel per kali — yang |t| terkecil / p terbesar — lalu jalankan ulang regresi. Jangan buang beberapa sekaligus.
Model Ulang (2 prediktor)
$\hat{y} = 490{,}286 - 5{,}150x_{1} - 14{,}718x_{2}$
df = 17 · semua signifikan
$F = 29{,}424 > 3{,}59$ (p 0,000); suhu $t = -7{,}337$ (p 0,000), isolasi $t = -2{,}983$ (p 0,008). Koefisien bergeser sedikit — normal, korelasi antar-prediktor.

Miskonsepsi: "$R^{2}$ Tinggi = Model Bagus, Tambah Terus Variabelnya"

Keliru ✗
$R^{2} \nearrow$ selalu
Bahkan untuk variabel sampah
Tiap variabel baru — bahkan nomor undian — membuat $SSE$ turun/menetap → $R^{2}$ tak pernah turun. Ekstrem: $k = n$ → $R^{2} = 1{,}0$ sempurna palsu (overfit total; buku menyebutnya soal etika juga).
Benar ✓
$R^{2}_{adj}$
Dihukum oleh df
$R^{2}_{adj} = 1 - \dfrac{SSE/[n-(k+1)]}{SS_{total}/(n-1)}$ — penyebut kecil makin "mahal" tiap variabel. Salsberry: 0,804 → 0,767. Bandingkan model beda jumlah variabel hanya dengan adjusted.
Pasangan miskonsepsi lain dari bab ini: uji-F signifikan ≠ semua koefisien signifikan (F global hanya menjanjikan "minimal satu"); dan tanda koefisien janggal bukan bug — itu diagnosis (cek teori, multikolinearitas, spesifikasi). Untuk membandingkan model beda-jumlah-variabel secara sistematis: stepwise (bagian 3).

Coba Sendiri: Dekomposisi Variasi — dari $R^{2}$ 0% ke 100%

Scatter IHSG vs saham BBCA — geser kemiringan/noise dan lihat pembagian SST menjadi SSR (dijelaskan) vs SSE (galat) di balik angka $R^{2}$.

Bagian 3 dari 3
Variabel Dummy & Pemilihan Model
Memasukkan variabel kualitatif (garasi) ke dalam persamaan angka, mengujinya seperti koefisien lain, dan melihat stepwise + interaksi sebagai penutup.
Dummy 0/1 Interaksi Stepwise

Variabel Dummy: Memasukkan "Punya Garasi" ke Persamaan

Langkah demi langkah (Tabel 14-2, n = 20 rumah):

  1. 1Kodekan kualitas jadi angka: rumah tanpa garasi tertempel → $x_{4} = 0$; dengan garasi → $x_{4} = 1$. (Furnace usia sudah dibuang — model basis: suhu + isolasi.)
  2. 2Jalankan regresi seperti biasa → $\hat{y} = 393{,}666 - 3{,}963x_{1} - 11{,}334x_{2} + 77{,}432x_{4}$.
  3. 3Uji dua rumah kembar di Buffalo (20 °F; 3 inci): tanpa garasi ($x_{4}=0$): $280{,}404$ · dengan garasi ($x_{4}=1$): $357{,}836$ → selisih persis $77{,}432$.
  4. 4Uji signifikansi: $t = 77{,}432 / 22{,}783 = 3{,}399 > 2{,}120$ (df 16) → signifikan; p = 0,004 → dummy garasi layak masuk model.
Tafsir Geometris
2 garis sejajar
Dummy menggeser intersep saja — kemiringan suhu & isolasi tak berubah. Selisih vertikal $b_{4} = \$77{,}43$ konstan di semua kombinasi.
Aturan Penting — Jangan Jebol
$k - 1$ dummy
Kategori m level → cukup m − 1 dummy (contoh buku: 4 kuartal → 3 dummy). Semua level dibuatkan dummy = dummy variable trap (multikolinearitas sempurna vs intersep).

Coba Sendiri: Centang Garasi, Lihat Garis Bergeser $77,43

Geser suhu & isolasi lalu centang/uncentang garasi — prediksi berpindah antar dua garis sejajar dengan jarak tetap; readout uji-t dummy selalu menyertai.

Interaksi & Stepwise: Dua Alat Penutup

Interaksi ($x_{1}x_{2}$) — LO14-6
$t = 1{,}324$
Tidak signifikan (p = 0,204)
Buat variabel baru $x_{1}x_{2}$ (suhu × isolasi; rumah #1: $35 \times 3 = 105$) → $\hat{y} = 598{,}070 - 7{,}811x_{1} - 30{,}161x_{2} + 0{,}385x_{1}x_{2}$. $t = 0{,}385/0{,}291 = 1{,}324 < 2{,}120$ → efek gabungan suhu+isolasi tidak melampaui jumlah efek terpisah.
Stepwise — LO14-7 (output Minitab buku)
3 langkah
R² naik bertahap lalu berhenti
  • Langkah 1: suhu masuk — R² 65,85% ($\hat{y} = 388{,}8 - 4{,}93x_{1}$)
  • Langkah 2: + garasi — R² 80,46% (+14,61 poin)
  • Langkah 3: + isolasi — R² 86,98%; berhenti — usia furnace tak lagi menambah
Stepwise = forward selection otomatis (masukkan variabel penambah R² terbesar, satu per satu, hanya yang signifikan). Alternatif: backward elimination (mulai penuh, buang satu-satu) & best-subset (bandingkan $2^{k}-1$ model). Keputusan akhir tetap di tangan analis — software "terlalu rajin" bisa mengejar keanehan data, bukan pola populasi.

Checkpoint & Rangkuman Cepat

Checkpoint — kerjakan 3 menit
  • CP1. Self-Review 14-2 (Myrtle Beach): df Regresi 5, SS 100; Residual df 20, SS 40. Hitung $s_{y\cdot x}$, $R^{2}$, $F$. (Jawab: √2 = 1,414; 100/140 = 0,714; 20/2 = 10 → F = 20 > kritis → global signifikan)
  • CP2. Dari output Salsberry: mengapa usia furnace dibuang padahal uji-F signifikan?
  • CP3. Rumah Buffalo tanpa garasi (20 °F; 3"): prediksi biayanya? (280,40)
  • CP4. Teman Anda membandingkan dua model dengan jumlah variabel berbeda memakai $R^{2}$ biasa. Benarkah?
  • CP5. Kategori 4 kuartal butuh berapa dummy? Kenapa bukan 4?
Cheat sheet Bab 14
  • $\hat{y} = a + b_{1}x_{1} + \dots + b_{k}x_{k}$ — $b_{i}$ = efek parsial (lain tetap)
  • $s_{y\cdot 1..k} = \sqrt{MSE}$; $R^{2} = SSR/SST$; $R^{2}_{adj}$ untuk bandingkan model
  • Uji-F global: $F = \dfrac{SSR/k}{SSE/[n-(k+1)]}$ — "minimal satu" $\beta_{i} \ne 0$
  • Uji-t individual: $t = b_{i}/s_{b_{i}}$, df $n-(k+1)$; buang 1 per 1 + rerun
  • Dummy: 0/1, geser intersep; m level → m − 1 dummy (hindari trap)
  • Interaksi $x_{1}x_{2}$ diuji seperti koefisien; stepwise memilih variabel otomatis
Rangkaian materi tambahan (T5–T6) tuntas: korelasi → regresi sederhana → regresi berganda + dummy. Langkah lanjut alami: asumsi klasik & diagnosis (Pertemuan 11 reguler) serta penerapan di skripsi.