.
الان فکر کن سوار تاکسی شدی و میخوای بری یه جایی:
🌳🌳🌳🌳 🚗...
تو به راننده میگی:
ببین اول میری میدان آزادی، بعد سمت چپ که یه تابلو آبی هست، بعد اون درخت بزرگه رو رد کن، سهتا کوچه بعدش دست راست، بعد یه نونوایی هست که بوی سنگک میاد، بعد یه دوربرگردون، بعد سریع دوتا لاین عوض کن، بعد…
راننده: ها؟😐
.
.
ولی همون آدرس رو اینجوری بگیم:
🎈مرحله ۱: بزن به سمت آزادی، تا میدان نگهدار.
🎈 مرحله ۲: از میدان، خروجی دوم، ۵۰۰ متر جلوتر.
🎈مرحله ۳: کوچه سوم راست، پلاک ۱۲.
🎉نتیجه؟ راننده دقیق میره، گیج نمیشه، تو هم زود میرسی.
.
.
2⃣ببین AI با کلمه کار نمیکنه! ❌
با توکن کار میکنه✅
• توکن یعنی واحد پردازش •
.
.
👀"سلامممممم" برای من و تو یه کلمهاست!
ولی برای AI این یعنی:
سلام
م
م
م
م
م
حدودا= ۶ الی ۷ توکن! 😳
مدل مجبوره هر جمله رو به چند بخش بشکنه تا بتونه پردازش کنه...
.
.
تصور کن AI میخواد یه هات داگ بخوره😂
🤓تو: سلام! من میخوام یه متن تبلیغاتی حرفهای برای محصول جدیدم…
این جمله مثل یه هات داگ بزرگه😑
هوش مصنوعی نمیتونه یهجا قورتش بده.
چی کار میکنه؟
هات داگ رو قاچقاچ میکنه.
.
.
هر قاچ = یک توکن☺️
پس جملهها، کلمهها، حتی بخشی از یه کلمه؛ تبدیل میشن به لقمههای کوچیک (توکنها)
که راحت بتونه بخوره و هضم کنه🦦🥤
.
.
بنابراین:
⭕️هر چی لقمه ها بیشتر=
• حافظه زودتر پر میشه
• مدل دیر تر پاسخ میده
• قاطی میکنه
✅هر چی لقمه کمتر=
•مسیرش راحتتر
•هضمش بهتر
•جوابش دقیق
.
.
🕵🏽♀حافظه کوتاه مدت هر مدل اصلا چقدره؟
🌱 GPT‑4o → حدود 128K
🌱 Claude 3 → تا 200K
🌱 Gemini → تا 1M
.
یعنی یکی مغزش اندازه حافظه گوشیته
یکی اندازه هارد SSD 😂🔥
.
.
🟢میتونید توی وبسایت های هر مدل از میزان ظرفیتش با خبر بشید و اون موقع مدیریت بهتری روی پرامپتهاتون داشته باشین.
🟢یا اینکه از خودِ AI بپرسید.
🟢وبسایت هایی هم هستن(واقعا کی حوصله داره بره😂)
🟢تخمین حدودی هم هست.
حدودا هر ۶ ۷ کلمه= ۱۰ توکن.
.
.
🧪 بنظرت فقط مدلهای متنی توکن دارن؟
نه!
• متن = توکن
• صدا = تبدیل به متن ⬅️توکن
• تصویر = توکن تصویری(بهش پچ میگن)
پس تقریباً همه مدلها توکنمحورن☑️
.