ফাইন-টিউন খরচ অনুমানকারী

ফাইন-টিউন কস্ট এস্টিমেটর যেভাবে কাজ করে

1. আপনার প্রশিক্ষণ উদাহরণ এবং তাদের গড় টোকেন দৈর্ঘ্য গণনা করুন — শব্দ সংখ্যা নয়, টোকেন সংখ্যা।
2. epoch সংখ্যা নির্ধারণ করুন; খরচ এর সাথে সরলরৈখিকভাবে বাড়ে।
3. আপনার প্রোভাইডারের প্রকাশিত মূল্য থেকে বর্তমান হার লিখুন, কারণ হার পরিবর্তিত হয় এবং মডেল অনুযায়ী ভিন্ন হয়।

পদ্ধতি

প্রশিক্ষণ খরচ নির্ভর করে মোট প্রক্রিয়াকৃত টোকেনের উপর, যা ডেটাসেটের আকার এবং তার উপর দিয়ে যাওয়ার সংখ্যার গুণফল।

total training tokens = examples × average tokens × epochs

৪,০০০ উদাহরণ ৮৫০ টোকেনে প্রতি epoch-এ ৩.৪ মিলিয়ন টোকেন, তাই তিনটি epoch প্রক্রিয়া করে ১০.২ মিলিয়ন — এবং epoch দ্বিগুণ করলে বিল দ্বিগুণ হয়।

আমরা কীভাবে তুলনা করি

ফাইন-টিউন কস্ট এস্টিমেটর একটি হার হার্ড-কোড করার পরিবর্তে জিজ্ঞাসা করে, কারণ প্রকাশিত মূল্য পরিবর্তিত হয় এবং ক্যালকুলেটরে পুরনো সংখ্যা না থাকার চেয়ে খারাপ।