# Artikel Terkait Distilasi

Pusat Berita HTX menyediakan artikel terbaru dan analisis mendalam mengenai "Distilasi", mencakup tren pasar, pembaruan proyek, perkembangan teknologi, dan kebijakan regulasi di industri kripto.

Pemenang Penghargaan Khusus Tsinghua, Gu Yuxian, Bergabung dengan DeepSeek

DeepSeek saat ini sedang dalam proses rekrutmen besar-besaran untuk berbagai posisi. Pada saat yang sama, versi resmi DeepSeek V4 akan diluncurkan pertengahan bulan ini. Dalam daftar penulis makalah DeepSeek V4, terdapat nama **Yuxian Gu**, seorang doktoral Universitas Tsinghua angkatan 2021 dan penerima Beasiswa Prestasi Khusus untuk Mahasiswa Pascasarjana tahun 2025. Diketahui bahwa **Gu Yuxian telah resmi bergabung dengan DeepSeek**. Gu Yuxian, yang juga pernah mendapatkan Beasiswa Doktoral Apple tahun 2025 dan Beasiswa In-Tech Ant Group, menyatakan bahwa "Inovasi algoritma menjadi kunci untuk menembus hambatan komputasi ketika sumber daya perangkat keras terbatas." Ia adalah doktoral tingkat akhir di Departemen Ilmu Komputer Universitas Tsinghua, dengan gelar sarjana juga dari universitas yang sama. Halaman pribadinya menunjukkan bahwa ia belajar di Kelompok Penelitian AI Interaktif (Conversational AI, CoAI) Universitas Tsinghua, dibimbing oleh Profesor Huang Minlie. Penelitiannya berfokus pada peningkatan efisiensi dalam seluruh siklus hidup model bahasa besar (LLM), mencakup tahap pra-pelatihan, adaptasi, dan inferensi. Ia mengembangkan penelitian dari tiga arah utama: **Penyaringan Data Pra-Pelatihan, Distilasi Pengetahuan dalam Kompresi Model, dan Arsitektur Model yang Efisien.** Di halaman Google Scholar-nya, **kutipan makalah Gu Yuxian telah mendekati 5000**, dengan dua makalah yang dikutip lebih dari 1000 kali. Sebagai penulis pertama, Gu Yuxian telah mempublikasikan banyak makalah di konferensi AI terkemuka internasional seperti NeurIPS, ICLR, dan ACL. Pada tahun 2024, ia dan rekan-rekannya mengusulkan metode distilasi pengetahuan untuk menyuling model bahasa besar menjadi model yang lebih kecil, menciptakan **"MiniLLM"** yang menghasilkan jawaban yang lebih akurat dan berkualitas lebih tinggi. Metode ini telah diadopsi oleh komunitas dan platform industri terkemuka seperti Google, Alibaba, dan NVIDIA. Pada tahun 2025, makalah **"Jet-Nemotron"** memperkenalkan seri baru model bahasa berarsitektur hybrid yang mencapai akurasi model perhatian penuh state-of-the-art (SOTA) sekaligus memiliki efisiensi yang luar biasa.

marsbit11j yang lalu

Pemenang Penghargaan Khusus Tsinghua, Gu Yuxian, Bergabung dengan DeepSeek

marsbit11j yang lalu

Claude dan Codex yang Kamu Pakai Setiap Hari, Di Dalam Meta Dilarang Dipakai Sembarangan

Meta, perusahaan induk Facebook, telah memberlakukan pembatasan internal ketat terhadap penggunaan alat bantu pemrograman AI dari pihak ketiga, Claude Code (Anthropic) dan Codex (OpenAI), sejak Mei 2024. Meski merupakan salah satu klien terbesar dan sangat bergantung pada alat-alat ini, Meta khawatir output yang dihasilkan dapat menyusup ke dalam data pelatihan untuk pengembangan asisten pemrograman AI internal mereka sendiri, MetaCode (awalnya DevMate). Proses ini, yang dikenal sebagai "distilasi," dapat menyebabkan model internal mereka secara tidak sengaja mempelajari kemampuan dan standar penilaian dari model pesaing, sehingga mengaburkan asal-usul kemampuan mereka yang sebenarnya. Pembatasan internal Meta berfokus pada mencegah AI eksternal terlibat dalam penulisan kode inti, pembuatan soal uji, atau penilaian untuk proyek MetaCode. AI masih diizinkan untuk tugas-tugas pendukung seperti menyusun alur kerja atau mengatur kode, tetapi semua outputnya harus ditinjau oleh manusia. Langkah ini dimaksudkan untuk menjaga kemurnian data pelatihan dan menghindari potensi pelanggaran terhadap ketentuan layanan penyedia model, yang sering melarang penggunaan output mereka untuk membangun produk pesaing. Tindakan Meta menyoroti dilema yang dihadapi seluruh industri AI: bagaimana menyeimbangkan manfaat menggunakan model AI yang kuat dengan risiko ketergantungan dan distilasi yang tidak jelas. Ini juga mencerminkan tekanan finansial, karena Meta berupaya mengurangi tagihan AI internal yang mencapai miliaran dolar dengan beralih ke solusi internal. Pada akhirnya, kebijakan ini bagaikan "peta berjalan di atas tali" yang menunjukkan tantangan dalam membangun AI yang benar-benar orisinal di era di mana AI semakin sering digunakan untuk menciptakan AI lainnya.

marsbit06/30 13:15

Claude dan Codex yang Kamu Pakai Setiap Hari, Di Dalam Meta Dilarang Dipakai Sembarangan

marsbit06/30 13:15

活动图片