الزحف على موقع إلكتروني كامل كان يستخدم:
سكريبت بايثون.
كاتب مسرحي أو سيلينيوم.
تدوير الوكيل.
منطق تحديد المعدل.
معالجة الأخطاء.
3 ساعات من التصحيح لماذا أعادت الصفحة 47 403.
الآن أصبح استدعاء API واحد.
كل شركة ناشئة في مجال جمع الشبكات التي جمعت ملايين لحل هذه المشكلة أصبحت مجرد نقطة نهاية واحدة.
كل مستقل يفرض 500 دولار على "استخراج بيانات الموقع" فقد نموذج عمله بالكامل بسبب أمر /crawl.
HTML. ماركداون. JSON. اختر تنسيقك. لا نصوص. لا متصفح. لا صداع.
صناعة جمع البيانات عبر الإنترنت بأكملها اختزرت فقط إلى سطر واحد من الكود.
شخص ما سيستخدم هذا لاستنساخ مواقع كل منافس بحلول يوم الجمعة. 💀
هل تنتبه الآن؟
كارباثي قام مؤخرا بفتح مصدر لمستودع حيث يقوم وكيل ذكاء اصطناعي بإجراء أبحاث تعلم آلي خاص به. بشكل مستقل. في حلقة مستمرة. وأنت نائم.
630 سطرا من الكود. كل نقطة في الرسم البياني هي تدريب كامل لنموذج اللغة الكبيرة.
يختار الذكاء الاصطناعي البنية، ويضبط المعاملات الفائقة، وينفذ الكود، ويبدأ من جديد.
لا تدخل بشري.
لقد قضيت 6 أشهر في دورة Udemy تتعلم كيفية ضبط معدلات التعلم.
هذا الوكيل يفعل ذلك 50 مرة قبل قهوتك الصباحية.
الشخص الذي درس التعلم العميق على الإنترنت قام فقط بأتمتة الباحث.
على وشك اكتشاف دكتوراه في التعلم الآلي أن أطروحتهم كانت تدريبا لمدة 5 دقائق على وحدة معالجة رسومات واحدة.
قمت بتجميع مشروع "البحث التلقائي" في مستودع جديد مستقل وبسيط إذا أراد الناس اللعب خلال عطلة نهاية الأسبوع. هي في الأساس نواة تدريب لنماذج اللغة الكبيرة في الدردشة النانوية محصورة إلى وحدة معالجة رسومات واحدة، نسخة ملف واحد تحتوي على ~630 سطرا من الكود، ثم:
- التكرار البشري على الموضوع (.md)
- يقوم وكيل الذكاء الاصطناعي بتعديل كود التدريب (.py)
الهدف هو هندسة وكلائك لتحقيق أسرع تقدم بحثي إلى أجل غير مسمى ودون أي تدخل من نفسك. في الصورة، كل نقطة هي دورة تدريبية كاملة لنموذج اللغة الكبيرة تستغرق بالضبط 5 دقائق. يعمل الوكيل في حلقة مستقلة على فرع ميزات git ويجمع التزامات git في سكريبت التدريب أثناء بحثه عن إعدادات أفضل (بانخفاض فقدان التحقق في النهاية) لبنية الشبكة العصبية، والمحسن، وجميع المعاملات الفائقة، وغيرها. يمكنك أن تتخيل مقارنة تقدم البحث في مواضيع مختلفة، ووكلاء مختلفين، وما إلى ذلك.
جزء منها برمجة، جزء خيال علمي، وقليل من الذهان :)
هذا المنشور على ريديت كان ذهبيا
تحدث مؤسس مع 12 مؤسسا من شركات الميكرو ساس التي تحقق أرباحا تتراوح بين 5000 إلى 30 ألف دولار شهريا
سألتهم جميعا سؤالا واحدا: كيف وجدت فكرتك فعليا؟
لم يقل أي منهم عصف ذهني
هذا ما قالوه بدلا من ذلك: