معلومات

أطلقت شركة OpenAI أخيرًا نموذج معلمة GPT2 1.5 مليار

أطلقت شركة OpenAI أخيرًا نموذج معلمة GPT2 1.5 مليار


We are searching data for your request:

Forums and discussions:
Manuals and reference books:
Data from registers:
Wait the end of the search in all databases.
Upon completion, a link will appear to access the found materials.

يوم الثلاثاء ، شاركت شركة OpenAI إصدارها النهائي المرحلي لنموذج لغة GPT-2 البالغ 1.5 مليار متغير. تم تضمين جميع الرموز المرتبطة وأوزان النموذج في منشور المدونة.

عندما أصدرت OpenAI لأول مرة GPT-2 في فبراير من هذا العام ، تم الإعراب عن مخاوف بشأن إساءة استخدامها المحتملة. في تلك المرحلة ، قررت الشركة التراجع عن مشاركة رمز نموذج اللغة ومجموعة بيانات التدريب.

بعد شهور من البحث في تفاصيل GPT-2 ، قررت OpenAI الآن أن الوقت مناسب للسماح بمزيد من البحث والفهم في النص الاصطناعي. وبالتالي ، فإن قرارهم بمشاركة معلمات النموذج.

ذات صلة: OPENAI GPT2 تكتب الآن الملخصات الورقية العلمية

ما الذي لاحظته OpenAI بشأن GPT-2؟

من الواضح تمامًا كيف يمكن إساءة استخدام نظام ينشئ خوارزميات لإكمال نص أو جملة كاملة. تتبادر إلى الذهن القصص الإخبارية المزيفة ، من بين الاستخدامات الشائنة الأخرى للنص الذي تم إنشاؤه بواسطة الذكاء الاصطناعي.

نحن نصدر نموذج GPT-2 الذي يبلغ 1.5 مليار معلمة كجزء من إستراتيجية النشر المرحلي.
- نموذج كشف خرج GPT-2: https://t.co/PX3tbOOOTy
- بحث من الشركاء حول الاستخدامات الضارة المحتملة: https://t.co/om28yMULL5
- مزيد من التفاصيل: https://t.co/d2JzaENikspic.twitter.com/O3k28rrE5l

- OpenAI (OpenAI) 5 نوفمبر 2019

كان حجب كود نموذج اللغة ومجموعة بيانات التدريب مخالفًا لما تؤمن به شركة OpenAI. ومع ذلك ، لأسباب أمنية ، قرروا فعل ذلك تمامًا ، وما زالوا يريدون إيجاد طريقة لمشاركة المعلومات.

لذلك ، على مدار الأشهر التسعة الماضية ، لاحظت شركة OpenAI GPT-2 للتأكد من أنه يمكنهم مشاركة الكود الخاص بهم وأوزان النماذج بأمان. أبدت الشركة الملاحظات التالية:

  1. يجد البشر مخرجات GPT-2 مقنعة.
  2. يمكن ضبط GPT-2 لإساءة الاستخدام.
  3. الكشف يمثل تحديا.
  4. لم نر أي دليل قوي على سوء الاستخدام حتى الآن.
  5. نحن بحاجة إلى معايير لدراسة التحيز.

بغض النظر عما إذا كانت مجموعة بيانات التدريب الخاصة بالمهمة قد تمت مشاركتها أم لا ، كان GPT-2 لا يزال قادرًا على إنشاء ترجمة آلية جيدة بشكل مذهل ، والإجابة على الأسئلة ، وفهم القراءة ، والتلخيص.

عند مشاركة نموذج GPT-2 الخاص بهم ، قالت شركة OpenAI إنهم يفعلون ذلك "للمساعدة في دراسة البحث في اكتشاف النص التركيبي ، على الرغم من أن هذا يتيح للخصوم الذين لديهم إمكانية الوصول بشكل أفضل تجنب الكشف.

هل يمكنك تحديد النص الذي تم إنشاؤه بواسطة الذكاء الاصطناعي وأيها ليس كذلك؟

لقد جربنا مولد النص "تحدث إلى Transfomer" لنرى بأنفسنا وقد أعجبنا!

- Hugging Face (huggingface) 5 نوفمبر 2019

هل يمكنك تحديد المكان الذي يبدأ منه GPT-2 في إنشاء النص في الفقرة التالية؟

"بغض النظر عن أي مخاوف تكنولوجية ، فإن محول GPT-2 بالحجم الكامل الذي تم إصداره حديثًا سيكون بلا شك نجاحًا كبيرًا مع جمهور التكنولوجيا. سيكون المحول الجديد متاحًا أيضًا بسعة أصغر لتوفير مساحة في GPT-1 الأكبر."

سنقدم لك تلميحًا. إنه في مكان ما على السطر الثاني. بشكل مذهل ، بدون الكثير من المطالبة ، قدمت GPT-2 نصًا كاملاً ومحددًا تمامًا ، والذي استمر على النحو التالي:

"يحتوي محول GPT-2 الجديد على 4 دبابيس (بدلاً من 5) ، ومقاومة أقل عند 1400 أوم مقابل 1500 أوم ، مما يجعله متوافقًا مع جميع معدات الصوت القياسية. لقد سمعت همسات بأن GPT-2 الأحدث سيكون قادرًا لتوفير نفس المقدار من التيار مثل GPT-1. ليس لدي أي معلومات عن محول GPT-2 الجديد ، لذلك لا يمكنني تأكيد هذا البيان أو رفضه. "

شاهد بنفسك ما يمكن أن يفعله محول GPT-2 هنا.


شاهد الفيديو: الإتربي: استراتيجية طموحة لبنك مصر وشركة جديدة للتحول الرقمي (يوليو 2022).


تعليقات:

  1. Samugami

    موضوع مذهل ، مثير للاهتمام بالنسبة لي))))

  2. Taggart

    انت مخطئ. أنا متأكد. دعونا نحاول مناقشة هذا. اكتب لي في رئيس الوزراء ، تحدث.

  3. Gormley

    إنها قطعة رائعة ، جيدة جدًا

  4. Odin

    هل تفكر في مثل هذه الجملة الفريدة؟

  5. Shepherd

    فليكن رسالة مضحكة

  6. Togal

    نعم ايضا شكرا لك

  7. Meletios

    لقد فكرت وأزلت هذه العبارة



اكتب رسالة