LLM Series Part 2 : Parameter & Jaringan Saraf Tiruan

Di part 1 sudah dibahas gimana kata yang kita masukan sebagai prompt ditokenisasi sampai akhirnya tiap token tersebut memndapatkan id yang kemudian ditukar ke vektor embedding berupa deretan 4096 koordinat lalu setelah jadi vektor embeding gimana proses selanjutnya yang terjadi di dalamnya ?, ada 2 komponen penting yang bekerja di sini yaitu jaringan saraf (deep layers) dan parameter (weight & biases) parameter ibarat papan dj raksasa yang punya miliaran tombol untuk atur volume suaranya , biasanya saat llm rilis ke publik mereka akan flexing berapa billion parameter yang digunakan, apa parameter itu ? dalam matematika, parameter di dalam Neural Network terdiri dari 2 hal : weights (bobot) adalah angka pengali untuk menentukan seberapa penting suatu informasi biases (bias) adalah angka konstan penambah untuk menyetel sensitivitas tebakan nah parameter ini adalah miliaran angka pengali yang sdah paten (dikunci) yg diperoleh saat proses training model hasi dari membaca internet (yang menebak kata selanutnya itu), saat user bertanya koordinat yg tadi sudah didapat dari tokenisasi id akan disaring dan dikalikan dengan miliaran tombol ini ...

May 25, 2026 Â· 3 min

Urdu Language

Kenapa kosakata bahasa india banyak mirip dengan arab (dan indonesia) misalnya Mubarak : Selamat Duniya : Dunia Insaan : Manusia Jannati : Sesuatu bersifat surgawi Mohabbat : dari kata muhabbah = cinta/kasih sayang Kenapa bisa banyak kata serapan ? prosesnya terjadi sekitar 1000 tahun lamanya, terbagi kedalam 3 babak jalur perdagangan laut (abad ke-7) pedagang arab sudah mendarat di pesisir barat india(wilayah karela dan gujarat) hubungan dagang ini membuat istilah istilah dlm arab diserap oleh penduduk lokal penaklukan dan kesultanan delhi (abad ke 12 -16) : Dinasti dinasti muslim dari asia tengan menaklukkan india utara dan mendirikan kesultanan delhi, mereka menggunakan bahsa persia sebagai bahasa resmi (bahasa persia sdh terpengaruh oleh bahasa arab) kekaisaran mughal : prajurut,pedagang, dan rakyat berbicara dalam dialek lokal berkumpul bersama para penguasa yg berbahasa persia-arab, dari perkumpulan itu lahir bahasa baru yaitu urdu (artinya Kamp Militer dalam bahasa turki) -> pakai tata bahasa india tapi mayoritas kosakata dari bahasa arab dan persia Pasca kemerdekaan india dan pakistan th 1947 pemerintah india mencoba menghilangkan bahasa bahasa serapan tersebut dan membuat kosakata pengganti yang berakar dari bahasa sansekerta asli, di level pemerintahan dan sejajarnya itu diterapkah namun masyarakat sampai sekarang masih tetap memakai kata kata tersebut adlam percakapan sehari hari. ...

May 24, 2026 Â· 1 min

Fakta Random

Pisang itu termasuk jenis beri fokus mata kalau diibaratkan kamera digital dia bakal memiliki resolusi 576 megapixel menara eifel bisa bertambah tinggi saat musim panas karna pemuaian besinya bisa nambah 15 cm Tulang manusia bisa lebih kuat daripada beton , batang tulang yang berukuran sama dengan beton bisa menahan beban 4x lebih besar keetimbang beton tumbuhan adalah elemen terlangka di alam semesta, berlian bisa ditemuukan banyak di planet selain bumi contohnya di planet neptunus Iklan iPhone selalu menunjukkan jam 09:41: momen persis saat Steve Jobs pertama kali memperkenalkan iPhone ke dunia pada tahun 2007.

May 23, 2026 Â· 1 min

LLM Series Part 1 : Tokenisasi

komputer tidak mengetahui huruf atau kata dia hanya ngerti angka , makanya perlu diubah si teks yg ditanyakan oleh user menjadi struktur matematika caranya pertama adalah dengan memecah teks yg user input ke dalam token token, nama prosesnya adalah tokenisasi proses ini dilakukan oleh program Tokenizer, nah tiap kata nanti dipecah, sebetulnya tidak spesifik dipecah tiap kata, bisa aja tiap suku kata misal “mendengarkan” bisa dipecah menjadi “Men”,“Dengar”,“Kan” ada beberapa pertanyaan yg perlu dipahami dulu ...

May 22, 2026 Â· 4 min

Backpropagation

Backpropagation adalah proses komputer memberitahukan layer parameter secara mundur dari layer paling terakhir hingga sampai ke layer pertama kali saat suatu kata itu masuk , apa yang dibertahu ? yg diberi tahukan adalah informasi bahwa koordinat yg dibawa oleh setiap layer itu apakah benar atau salah atas hasil tebakan yang dilakukan layer paling atas , jadi misal ada kata “Kucing itu sedang ….” nah pas training kata terbang ternyata kata terbang itu salah tidak nyambung dnegan kalimat tersebut maka dilakukan backpropagation untuk memberikan nilai faktor pengali (knop parameter) ke kata terbang itu jauh posisinya supaya di masa depan, kalau ada kata kucing layer layer tersebut tidak mengantarkan sinyal menuju koordinat terbang. ...

May 21, 2026 Â· 1 min

Planck Length

Seberapa kecil suatu ukuran itu bisa kita bayangkan ? manusia mungkin masih bisa melihat sehelai rambut yang lebarnya berkisar 0.1 milimeter, lalu kalau kita perkecil lagi terus menuerus sampai ke ujung yang paling kecil itu sampai mana ? Mungkin jawaban yang biasa kita temukan adalah atom, atom adalah suatu hal yang paling kecil yang membentuk kita dan semua yang ada di alam semsta, tapi faktanya ada “ukuran” yang lebih kecil lagi, ibarat atom itu di zoom kan nati ada proton neutron elektron, quark lalu terus menerus sekecil kecilnya sampailah nanti kita ke ukuran terkecil yang diizinkan oleh hukum fisika, nanmanya adalah Planck Length. ...

May 20, 2026 Â· 2 min

Belajar

Kenapa kita harus belajar ? Karena kita itu manusia, agar menjadi manusia yang seutuhnya. berbeda dengan mahluk lain yang bergerak murni dengan isting, manusia menjadi “manusia” karena kapasitas berpikir dan belajarnya. Itu juga merupakan wujud syukur kita karena telah diciptakan sebagai manusia

May 20, 2026 Â· 1 min

Fill In The Blank

Sifat alami manusia itu fill in the blank artinya manusia akan selalu mencoba mengisi kekosongan kekosongan atas pertanyaan yang tidak diketahui jawabanya, kita bisa mengisi kekosongan itu dengan 2 cara yaitu dengan melalui proses pemikiran yang logis, kritis, analitis atau dengan cara instan saja mengambil jalan pintas kesimpulan karna kemalasan atau ketidakmauan untuk melalui proses2 di cara yang pertama. Belakangan ini ada sosok orang ngelantur yang viral yg dikenal dengan mama ghufron pertanyaanya adalah kenapa orang absurd seperti beliau bisa memiliki penonton atau pengikut, mungkin juga sebagian orang hanya menganggap itu hanya hiburan semata alias tidak mempercayai apa yg dikatakanya sebagai suatu kebenaran atau ilmu ya anggap aja kakek kakek lagi mengeluarkan unek unek absurd aja, tapi tidak bisa dipungkiri ada juga segelintir orang yang mempercayai dia atau setidaknya memiliki keraguan dalam hatinya apakah yg disampaikan itu salah atau benar. ...

May 19, 2026 Â· 2 min

The Great Wall Of China

The Great Wall of China / Tembok besar china merupakan benteng raksasa sepanjang lebih dari 21.000 (dua puluh satu RIBU) kilometer , dibangun lebih dari 2000 tahun untuk lindungi kekaisaran dari serangan luar Sejarah Pembangunan : Awal mula (abad ke 7 SM) : kerajaan2 kuno tiongkok mulai membangun tembok2 terpisah untuk lindungin wilayah dari suku nomaden utara Penyatuan (221 SM- 206 SM) : Kaisan Qin Shi Huang mempersatukan tiongkok menghubungkan tembok tembok terpisah jadi satu pakai tanah yang dipadatkan ...

May 18, 2026 Â· 1 min

Ashkenazi

Siapa itu yahudi ashkenazi ? Mereka adalah kelompok etnis yahudi yang nenek moyangnya berasal dari wilayah eropa tengah dan timur. Mereka itu kelompok yahudi terbesar di dunia modern, yang menyumbang separuh populasi yahudi global dan banyak menetap di US,Israel,dan Eropa. Asal usul : terbentuk sekitar abad 10 di wilayah rhineland, jerman dan prancis utara. “Ashkenazi” berasal dari bahasa ibrani yang merujuk pada kata “Jerman” Bahasa tradisional mereka itu yiddish, bahasa perpaduan jermanik,ibrani, dan slavia yg ditulis pakai abjad ibrani. ...

May 17, 2026 Â· 1 min