في الآونة الأخيرة، أصبحت نماذج توليد التعليمات البرمجية شائعة جدًا، خاصة مع إصدار أحدث النماذج مفتوحة المصدر مثل BigCode’s StarCoder وMeta AI’s Code Llama. يركز عدد متزايد من الأعمال على جعل نماذج اللغات الكبيرة (LLMs) أكثر تحسينًا ويمكن الوصول إليها. في هذه المدونة، يسعدنا أن نشارك أحدث نتائج تحسين LLM على Intel Xeon مع التركيز على توليد التعليمات البرمجية الشهير LLM، StarCoder. يعد StarCoder Model عبارة عن LLM متطور مصمم خصيصًا لمساعدة المستخدم في مهام البرمجة المختلفة مثل إكمال التعليمات البرمجية وإصلاح الأخطاء وتلخيص التعليمات البرمجية وحتى إنشاء مقتطفات التعليمات البرمجية من أوصاف اللغة الطبيعية. يعد نموذج StarCoder عضوًا في…
الكاتب: eshraag
اليوم، يسر فريق Patronus الإعلان عن لوحة المتصدرين لسيناريوهات المؤسسة الجديدة، والتي تم إنشاؤها باستخدام قالب لوحة المتصدرين Hugging Face بالتعاون مع فرقهم. تهدف لوحة المتصدرين إلى تقييم أداء نماذج اللغة في حالات استخدام المؤسسات في العالم الحقيقي. نحن ندعم حاليًا 6 مهام متنوعة – FinanceBench، والسرية القانونية، والكتابة الإبداعية، وحوار دعم العملاء، والسمية، ومعلومات تحديد الهوية الشخصية للمؤسسات. نحن نقيس أداء النماذج بناءً على مقاييس مثل الدقة، والمشاركة، والسمية، والملاءمة، ومعلومات تحديد الهوية الشخصية للمؤسسات. لماذا نحتاج إلى لوحة صدارة لحالات الاستخدام في العالم الحقيقي؟ لقد شعرنا أن هناك حاجة إلى لوحة صدارة LLM تركز على العالم الحقيقي، وحالات…
جاء التكيف في شكل استخدام Microsoft Teams كقناة للهندسة الاجتماعية. أنشأ المهاجمون محادثات لبناء الثقة قبل محاولة سرقة بيانات الاعتماد أو تسليم حمولات ضارة. وقالت مايكروسوفت: “ارتفع حجم التصيد الاحتيالي القائم على الفرق بشكل مطرد طوال الربع الثاني، مع ارتفاع متوسط عدد الهجمات المكتشفة بنسبة 19% من مارس إلى أبريل، وظل ثابتًا تقريبًا حتى مايو (+1%)، ثم زاد بنسبة 10% أخرى في يونيو”. لاحظت Microsoft أيضًا حملة BEC مؤتمتة للغاية وصلت إلى أكثر من 67000 مستخدم باستخدام رسائل البريد الإلكتروني النصية وخدمة Amazon Simple Email Service (SES) وتتبع المشاركة، إلى جانب حملة تصيد منفصلة تستهدف 107000 مستخدم أساءوا استخدام تدفق…
يسعدنا أن نعلن عن التوفر العام لـ Hugging Face Text Generation Inference (TGI) على AWS Inferentia2 وAmazon SageMaker. استنتاج إنشاء النص (TGI)، هو حل مصمم خصيصًا لنشر وتقديم نماذج اللغات الكبيرة (LLMs) لأحمال عمل الإنتاج على نطاق واسع. يتيح TGI إمكانية إنشاء نص عالي الأداء باستخدام Tensor Parallelism والتجميع المستمر لأكثر برامج LLM المفتوحة شيوعًا، بما في ذلك Llama وMistral والمزيد. يُستخدم استدلال إنشاء النص في الإنتاج بواسطة شركات مثل Grammarly وUber وDeutsche Telekom وغيرها الكثير. يقدم دمج TGI في Amazon SageMaker، بالاشتراك مع AWS Inferentia2، حلاً قويًا وبديلاً قابلاً للتطبيق لوحدات معالجة الرسومات لإنشاء تطبيقات LLM للإنتاج. يضمن التكامل…
تعطلت خدمات Microsoft السحابية وAzure المستضافة على الساحل الغربي للولايات المتحدة لساعات يوم الخميس عندما فشل الاتصال بالشبكة. على الرغم من أن الخدمات التي تعمل بالكامل داخل المنطقة السحابية لغرب الولايات المتحدة التابعة لشركة Microsoft لم تتأثر، إلا أن أي حركة مرور تدخل إلى المرافق أو تخرج منها قد تأثرت. نشرت Microsoft الآن مراجعة أولية لما بعد الحادث (PIR) للحادث، حيث أبلغت عن فقدان الاتصال لمدة خمس ساعات بين الساعة 14.44 بالتوقيت العالمي (7.44 صباحًا بتوقيت المحيط الهادئ) والساعة 19.41 بالتوقيت العالمي في 23 يوليو. حدثت المشكلة عندما تمت إزالة مجموعة من مسارات IP عن طريق الخطأ أثناء عزل جهاز…
في هذه المدونة، نقدم أمثلة لكيفية البدء باستخدام PatchTST. نعرض أولاً القدرة على التنبؤ PatchTST على بيانات الكهرباء. سنقوم بعد ذلك بإظهار القدرة على نقل التعلم PatchTST باستخدام النموذج الذي تم تدريبه مسبقًا للقيام بالتنبؤ الصفري على مجموعة بيانات المحولات الكهربائية (ETTh1). سيشير أداء التنبؤ الصفري إلى test أداء النموذج في target المجال، دون أي تدريب على المجال الهدف. بعد ذلك، سنقوم بإجراء فحص خطي و(بعد ذلك) ضبط النموذج المُدرب مسبقًا على train جزء من البيانات المستهدفة، وسوف يتم التحقق من صحة أداء التنبؤ على test جزء من البيانات المستهدفة ال PatchTST تم اقتراح النموذج في سلسلة زمنية تستحق 64…
كانت حجة Google هي أن تصرفات SerpApi تنتهك قانون حقوق النشر الرقمية للألفية الأمريكي (DCMA). لقد قدمت ادعاءين: أولاً، أنه لا يجوز لأي شخص التحايل على الإجراء التكنولوجي الذي يتحكم بشكل فعال في الوصول إلى عمل محمي بموجب هذا العنوان، وثانيًا أنه لا يجوز لأي شخص تصنيع أو استيراد أو عرض للجمهور أو توفير أو الاتجار بأي طريقة أخرى في أي تكنولوجيا أو منتج أو خدمة أو جهاز أو مكون محمي بموجب القانون. ادعى SerpApi أن عناوين URL والروابط الأخرى التي يتم تقديمها بواسطة Google لا تستلزم في حد ذاتها حقوق الطبع والنشر ووافق القاضي. وقالت في حكمها إنه لا…
يسعدنا أن نقدم لوحة المتصدرين NPHardEval، باستخدام NPHardEval، وهو معيار متطور تم تطويره بواسطة باحثين من جامعة ميشيغان وجامعة روتجرز. يقدم NPHardEval إطارًا ديناميكيًا قائمًا على التعقيد لتقييم القدرات الاستدلالية لنماذج اللغة الكبيرة (LLMs). إنه يطرح 900 سؤال خوارزمي يمتد إلى فئة التعقيد NP-Hard والأقل، وهو مصمم لاختبار LLMs بدقة، ويتم تحديثه على أساس شهري لمنع الإفراط في التجهيز! نهج فريد لتقييم LLM تتميز NPHardEval عن غيرها من خلال توظيف فئات التعقيد الحسابي، حيث تقدم مقياسًا قويًا وقابل للقياس لمهارات التفكير المنطقي في LLM. تعكس مهام المعيار تحديات صنع القرار في العالم الحقيقي، مما يعزز أهميته وإمكانية تطبيقه. تعمل التحديثات…
فرضت المفوضية الأوروبية غرامة على شركة جوجل بقيمة إجمالية قدرها 890 مليون يورو (مليار دولار) بسبب انتهاكها لقانون السوق الرقمية (DMA). ما يزيد قليلاً عن نصف الغرامة – 460 مليون يورو – كان بسبب قيام Google بشكل غير قانوني بمنح الأفضلية لخدماتها الخاصة في نتائج بحث Google. والباقي كان لأنه في متجر Google Play لتطبيقات Android، منعت الشركة مطوري التطبيقات من توجيه المستهلكين إلى قنوات شراء بديلة، وغالبًا ما تكون أرخص. بموجب DMA، يجب أن يكون بمقدور مطوري التطبيقات الذين يوزعون تطبيقاتهم عبر Google Play أو متجر تطبيقات Apple إبلاغ العملاء بالعروض البديلة.
يعد SegMoE إطارًا مثيرًا لإنشاء نماذج نشر مزيج من الخبراء من الصفر! تم دمج SegMoE بشكل شامل ضمن النظام البيئي Hugging Face ويأتي مدعومًا diffusers 🔥! من بين الميزات والتكاملات التي تم إصدارها اليوم: جدول المحتويات ما هو SegMoE؟ تتبع نماذج SegMoE نفس بنية Stable Diffusion. مثل Mixtral 8x7b، يأتي نموذج SegMoE مع نماذج متعددة في واحد. الطريقة التي يعمل بها هذا هي استبدال بعض طبقات التغذية الأمامية بطبقة MoE متفرقة. تحتوي طبقة MoE على شبكة توجيه لتحديد الخبراء الذين يقومون بمعالجة الرموز المميزة بكفاءة أكبر. يمكنك استخدام segmoe حزمة لإنشاء نماذج وزارة التربية والتعليم الخاصة بك! تستغرق العملية بضع…