Cara Memilih Chunking Strategy dengan Eksperimen Retrieval
Menentukan ukuran chunk sering berubah menjadi debat angka. Ada yang memilih 256 token karena ingin retrieval presisi, ada yang nyaman dengan 512, sementara tim lain menggunakan 1.000 token agar konteks lebih lengkap. Padahal tidak ada angka ajaib yang cocok untuk semua knowledge base. Cara Memilih Chunking Strategy yang lebih masuk akal adalah memperlakukannya sebagai eksperimen … Read more