يعد SegMoE إطارًا مثيرًا لإنشاء نماذج نشر مزيج من الخبراء من الصفر! تم دمج SegMoE بشكل شامل ضمن النظام البيئي Hugging Face ويأتي مدعومًا diffusers 🔥! من بين الميزات والتكاملات التي تم إصدارها اليوم: جدول المحتويات ما هو SegMoE؟ تتبع نماذج SegMoE نفس بنية Stable Diffusion. مثل Mixtral 8x7b، يأتي نموذج SegMoE مع نماذج متعددة في واحد. الطريقة التي يعمل بها هذا هي استبدال بعض طبقات التغذية الأمامية بطبقة MoE متفرقة. تحتوي طبقة MoE على شبكة توجيه لتحديد الخبراء الذين يقومون بمعالجة الرموز المميزة بكفاءة أكبر. يمكنك استخدام segmoe حزمة لإنشاء نماذج وزارة التربية والتعليم الخاصة بك! تستغرق العملية بضع…
الكاتب: eshraag
يسعدنا تقديم واجهة برمجة تطبيقات الرسائل لتوفير توافق OpenAI مع استدلال إنشاء النص (TGI) ونقاط نهاية الاستدلال. بدءًا من الإصدار 1.4.0، تقدم TGI واجهة برمجة تطبيقات متوافقة مع واجهة برمجة تطبيقات OpenAI Chat Completion API. تسمح واجهة برمجة تطبيقات الرسائل الجديدة للعملاء والمستخدمين بالانتقال بسلاسة من نماذج OpenAI إلى LLMs المفتوحة. يمكن استخدام واجهة برمجة التطبيقات مباشرة مع مكتبات عملاء OpenAI أو أدوات الطرف الثالث، مثل LangChain أو LlamaIndex. “تسهل واجهة برمجة تطبيقات الرسائل الجديدة المتوافقة مع OpenAI على منصة تنسيق GenAI في Ryght في الوقت الفعلي تحويل حالات استخدام LLM من OpenAI إلى النماذج المفتوحة. إن ترحيلنا من GPT4…
[-1–> تعمل AMD وHugging Face بنشاط على مساعدة المطورين على نشر نماذج الذكاء الاصطناعي المتطورة بسلاسة على أجهزة AMD. هذا العام، تأخذ AMD التزامها خطوة أخرى إلى الأمام من خلال تزويد المطورين بإمكانية الوصول العملي المجاني إلى أحدث أجهزة AMD من خلال مسابقة مطوري الذكاء الاصطناعي Pervasive AI التي تم الإعلان عنها مؤخرًا. تعد هذه المنافسة العالمية حاضنة لابتكارات الذكاء الاصطناعي، وتحث المطورين في جميع أنحاء العالم على إنشاء تطبيقات فريدة للذكاء الاصطناعي. يمكن للمطورين الاختيار من بين ثلاث فئات مثيرة: الذكاء الاصطناعي التوليدي، والذكاء الاصطناعي الآلي، والذكاء الاصطناعي للكمبيوتر الشخصي، ويحق لكل منهم الحصول على أسعار نقدية تصل إلى…
في المشهد سريع التطور لنماذج اللغات الكبيرة (LLMs)، لم يكن بناء “النظام البيئي” أكثر أهمية من أي وقت مضى. يتجلى هذا الاتجاه في العديد من التطورات الرئيسية مثل Hugging Face لإضفاء الطابع الديمقراطي على البرمجة اللغوية العصبية (NLP) وUpstage لبناء نظام بيئي للذكاء الاصطناعي التوليدي. مستوحاة من معالم الصناعة هذه، في سبتمبر من عام 2023، في Upstage أطلقنا لوحة المتصدرين Open Ko-LLM. كان هدفنا هو تطوير وإدخال نظام بيئي للتقييم بسرعة لبيانات LLM الكورية، بما يتماشى مع الحركة العالمية نحو تطوير الذكاء الاصطناعي المفتوح والتعاوني. تتمثل رؤيتنا لـ Open Ko-LLM Leaderboard في تطوير نظام بيئي لتقييم LLM كوري نابض بالحياة،…
تم إصدار تحديث لموديلات جيما بعد شهرين من هذا المنشور، راجع أحدث الإصدارات في هذه المجموعة. تم إطلاق Gemma، وهي عائلة جديدة من حاملي شهادات LLM المفتوحة والمتطورة، اليوم بواسطة Google! من الرائع أن نرى Google تعزز التزامها بالذكاء الاصطناعي مفتوح المصدر، ويسعدنا أن ندعم الإطلاق بشكل كامل من خلال التكامل الشامل في Hugging Face. يأتي Gemma بحجمين: معلمات 7B، للنشر والتطوير الفعالين على إصدارات GPU وTPU و2B لوحدة المعالجة المركزية والتطبيقات الموجودة على الجهاز. كلاهما يأتي في المتغيرات الأساسية والتعليمات المضبوطة. لقد تعاونا مع Google لضمان أفضل تكامل في نظام Hugging Face البيئي. يمكنك العثور على النماذج الأربعة ذات…
لقد أعلنا مؤخرًا أن Gemma، نموذج لغة الأوزان المفتوحة من Google Deepmind، متاح لمجتمع المصادر المفتوحة الأوسع عبر Hugging Face. إنه متوفر في 2 مليار و7 مليار من أحجام المعلمات مع نكهات مدربة مسبقًا ومضبوطة حسب التعليمات. إنه متوفر على Hugging Face، مدعوم في TGI، ويمكن الوصول إليه بسهولة للنشر والضبط الدقيق في Vertex Model Garden وGoogle Kubernetes Engine. تصادف أيضًا أن عائلة نماذج Gemma مناسبة تمامًا للنماذج الأولية والتجريب باستخدام مورد GPU المجاني المتاح عبر Colab. في هذا المنشور، سنراجع بإيجاز كيف يمكنك إجراء Parameter Efficient FineTuning (PEFT) لنماذج Gemma، باستخدام Hugging Face Transformers ومكتبات PEFT على وحدات معالجة…
تحذير المحتوى: نظرًا لأن منشور المدونة هذا يدور حول لوحة صدارة الفريق الأحمر (اختبار استنباط السلوك الضار في دورات LLM)، فقد يجد بعض المستخدمين محتوى مجموعات البيانات أو الأمثلة ذات الصلة أمرًا مقلقًا. أبحاث LLM تتحرك بسرعة. في الواقع، قد يقول البعض بسرعة كبيرة. بينما يواصل الباحثون في هذا المجال التوسع السريع وتحسين أداء LLM، هناك قلق متزايد بشأن ما إذا كانت هذه النماذج قادرة على تحقيق المزيد من السلوكيات غير المرغوب فيها وغير الآمنة. وفي الأشهر الأخيرة، لم يكن هناك نقص في التشريعات والدعوات المباشرة من مختبرات الصناعة التي تدعو إلى مزيد من التدقيق في النماذج – ليس كوسيلة…
في هذه المدونة، سوف نقدم لك مفهوم زخارف الماتريوشكا ونشرح سبب فائدتها. سنناقش كيفية تدريب هذه النماذج نظريًا وكيف يمكنك تدريبها باستخدام محولات الجملة. بالإضافة إلى ذلك، سنقدم إرشادات عملية حول كيفية استخدام نماذج تضمين ماتريوشكا ومشاركة المقارنة بين نموذج تضمين ماتريوشكا ونموذج التضمين العادي. وأخيرًا، ندعوك للاطلاع على العرض التوضيحي التفاعلي الذي يعرض قوة هذه النماذج. جدول المحتويات فهم التضمينات تعد عمليات التضمين واحدة من أكثر الأدوات تنوعًا في معالجة اللغة الطبيعية، مما يمكّن الممارسين من حل مجموعة كبيرة ومتنوعة من المهام. في جوهره، التضمين هو تمثيل رقمي لكائن أكثر تعقيدًا، مثل النص والصور والصوت وما إلى ذلك. سينتج…
في الأشهر الأخيرة، شهدنا العديد من القصص الإخبارية التي تتضمن “تزييفًا عميقًا”، أو محتوى تم إنشاؤه بواسطة الذكاء الاصطناعي: من صور تايلور سويفت إلى مقاطع فيديو توم هانكس وتسجيلات الرئيس الأمريكي جو بايدن. سواء كانوا يبيعون المنتجات، أو يتلاعبون بصور الأشخاص دون موافقتهم، أو يدعمون التصيد الاحتيالي للحصول على معلومات خاصة، أو ينشئون مواد مضللة تهدف إلى تضليل الناخبين، تتم مشاركة التزييف العميق بشكل متزايد على منصات وسائل التواصل الاجتماعي. وهذا يمكّنهم من الانتشار بسرعة والوصول إلى نطاق أوسع، وبالتالي إمكانية التسبب في أضرار طويلة الأمد. في منشور المدونة هذا، سنصف طرق تنفيذ العلامات المائية للمحتوى الذي تم إنشاؤه بواسطة…
يعد القياس الآلي لجودة نماذج تحويل النص إلى كلام (TTS) أمرًا صعبًا للغاية. يعد تقييم طبيعة الصوت ونبرة الصوت مهمة تافهة بالنسبة للبشر، ولكنها أكثر صعوبة بالنسبة للذكاء الاصطناعي. ولهذا السبب، يسعدنا اليوم أن نعلن عن TTS Arena. مستوحاة من Chatbot Arena الخاص بـ LMSys لـ LLMs، قمنا بتطوير أداة تسمح لأي شخص بمقارنة نماذج TTS جنبًا إلى جنب بسهولة. ما عليك سوى إرسال بعض النصوص، والاستماع إلى نموذجين مختلفين يتحدثان عن ذلك، والتصويت على النموذج الذي تعتقد أنه الأفضل. سيتم تنظيم النتائج في لوحة صدارة تعرض النماذج الأعلى تقييمًا في المجتمع. تحفيز لقد افتقر مجال تركيب الكلام منذ فترة…