چرا ویدیوی Codebase Memory MCP رو منتشر نمی‌کنم؟🙂
قول داده بودم دربارهٔ این ابزار ویدیو بسازم. مدتی هم با اتکا به مستنداتش ازش استفاده کردم؛ با انتظار کاهش مصرف توکن تا ۹۰٪ و بهتر شدن دقت پاسخ‌ها.
موقع ساخت ویدیو، خواستم این تأثیر رو در عمل هم نشون بدم. برای همین با Codex، روی چند سناریو و شکل مختلف درخواست، استفاده از ابزار رو با حالت بدون اون مقایسه کردم.
🥺اما نتیجه با چیزی که انتظار داشتم جور درنیومد.
توی تست‌های من، مصرف توکن کمتر نشد و در بعضی اجراها حتی چند برابر شد. تفاوت دقت و کیفیت پاسخ‌ها هم اون‌قدر چشمگیر نبود که این هزینهٔ اضافه رو توجیه کنه.
❓این به معنی بی‌فایده بودن ابزار در تمام پروژه‌ها و شرایط نیست؛ اما برای کاربردهایی که من امتحان کردم، شواهد کافی برای توصیه‌کردنش پیدا نکردم. برای همین تصمیم گرفتم ساخت ویدیوی معرفی و توصیهٔ این ابزار رو ادامه ندم. بابت تغییر برنامه هم خواستم دلیلش رو شفاف باهاتون در میون بذارم.
💬 اشتباه من این بود که قبل از اندازه‌گیری، زیادی به ادعاهای مستندات تکیه کردم. حتی تست‌ها رو با این ذهنیت شروع کردم که «این مزیت رو ثابت کنم»، درحالی‌که باید می‌پرسیدم: «اصلاً این مزیت توی شرایط من وجود داره؟»
🗣️ درس این تجربه برای من این بود: مستندات نقطهٔ شروع بررسی‌ان؛ نتیجه رو باید با تست روی کار واقعی خودمون بسنجیم. حتی وقتی برای یاد گرفتن یک ابزار وقت گذاشتیم یا قول معرفی‌ش رو دادیم، باید بتونیم با دیدن نتیجهٔ متفاوت، نظرمون رو عوض کنیم.
اعتماد شما برام مهم‌تر از منتشر کردن ویدیوییه که دیگه پشت توصیه‌ش نمی‌ایستم.
قول داده بودم دربارهٔ این ابزار ویدیو بسازم. مدتی هم با اتکا به مستنداتش ازش استفاده کردم؛ با انتظار کاهش مصرف توکن تا ۹۰٪ و بهتر شدن دقت پاسخ‌ها.
موقع ساخت ویدیو، خواستم این تأثیر رو در عمل هم نشون بدم. برای همین با Codex، روی چند سناریو و شکل مختلف درخواست، استفاده از ابزار رو با حالت بدون اون مقایسه کردم.
🥺اما نتیجه با چیزی که انتظار داشتم جور درنیومد.
توی تست‌های من، مصرف توکن کمتر نشد و در بعضی اجراها حتی چند برابر شد. تفاوت دقت و کیفیت پاسخ‌ها هم اون‌قدر چشمگیر نبود که این هزینهٔ اضافه رو توجیه کنه.
❓این به معنی بی‌فایده بودن ابزار در تمام پروژه‌ها و شرایط نیست؛ اما برای کاربردهایی که من امتحان کردم، شواهد کافی برای توصیه‌کردنش پیدا نکردم. برای همین تصمیم گرفتم ساخت ویدیوی معرفی و توصیهٔ این ابزار رو ادامه ندم. بابت تغییر برنامه هم خواستم دلیلش رو شفاف باهاتون در میون بذارم.
💬 اشتباه من این بود که قبل از اندازه‌گیری، زیادی به ادعاهای مستندات تکیه کردم. حتی تست‌ها رو با این ذهنیت شروع کردم که «این مزیت رو ثابت کنم»، درحالی‌که باید می‌پرسیدم: «اصلاً این مزیت توی شرایط من وجود داره؟»
🗣️ درس این تجربه برای من این بود: مستندات نقطهٔ شروع بررسی‌ان؛ نتیجه رو باید با تست روی کار واقعی خودمون بسنجیم. حتی وقتی برای یاد گرفتن یک ابزار وقت گذاشتیم یا قول معرفی‌ش رو دادیم، باید بتونیم با دیدن نتیجهٔ متفاوت، نظرمون رو عوض کنیم.
اعتماد شما برام مهم‌تر از منتشر کردن ویدیوییه که دیگه پشت توصیه‌ش نمی‌ایستم.