كرر المؤلف GzDRL نفس البذور تجربة PPO
هاريديفان وكانغ وشان GzDRL الحالي في 2026 ما قبل الطباعة. ويقارن الفرع الخامس - باء، والشكل 6، والجدول الثاني بين عمليات التشغيل المعزول للعمليات مع البذور المتطابقة والمختلفة. يقوم هذا المثال بتنفيذ قطعة أثرية بحثية من نفس البذور تم إصدارها على وحدة المعالجة المركزية ويقارن معلمات نقطة التفتيش الفعلية و evaluation ارجع إلى ورقة.
خلق بيئة كوندا معزولة من البيئة.yml. يتم تسجيل بناء لينكس المحدد في environment-explicit.txt. يتم تسجيل حزم بايثون في requirements-tested.txt. تشغيل sh fetch-source.sh داخل البيئة المنشطة ، ثم sh run.sh..... يتم تثبيت المصدر إلى 3e5c5f9a62c1160b3b2889e6d34d794a5361e178..... رمز المؤلف هو MITمع فصل Gazebo إشعارات تبعية EnvPool المجمعة. احتفظ بملفات الترخيص / THIRD_PARTY_NOTICES.
يستخدم هذا البناء المحمول conda-forge Gazebo 10.6.0 و GCC 15 بدلا من المؤلفين تركيب نظام GCC 11. تصحيح التوافق الميكانيكي يزيل الغموض عن 22 نداءً منشئًا مرتبطًا بالمقياس مع صريح std::tuple; لم يتم تحرير الديناميات ومنطق المهام. احتاج المصدر إلى هذا التصحيح لتجميعه مع سلسلة الأدوات هذه. تم استخدام وحدة المعالجة المركزية PyTorch 2.7.1 وخطوط الأساس المستقرة3 2.7.0. لم يتم إنشاء قفل الاعتماد على الورق التاريخي.
يقوم تكوين المؤلف غير المعدل بتدريب خمس عمليات مستقلة مع البذور 42 ، وثماني بيئات ، وتعطيل النطاقات العشوائية ، و 500000 خطوة زمنية مطلوبة ونقاط تفتيش كل 50،000 خطوة. تنتج عملية تجميع PPO 501,760 خطوات زمنية فعلية. يتم تقييم كل نقطة تفتيش أكثر من 20 حلقة بذرة ثابتة في عملية جديدة مع استعادة تطبيع الملاحظة المحفوظة وتجميدها. الصف مختلف البذور من الجدول الثاني خارج هذا المدى.
اجتاز فحص ما قبل الرحلة المؤلف جميع عمليات التجزئة الخمسة: الملاحظات الأولية ، وتسلسل الانتقال الثابت ، والسياسة الأولية ، وسياسة تحديث PPO واحدة وحالة التطبيع. كما وجد فحص مستقل للدولة والقواميس معايير متطابقة في جميع الجولات الخمس في جميع مواقع نقاط التفتيش الـ 12 المحفوظة. يتم استبعاد الطوابع الزمنية للأرشيف البريدي من مقارنة المعلمة هذه.
تشير الورقة إلى عودة نفس البذور 18.43 ⁇ 0.00 و 100٪ نقاط تفتيش متطابقة. في جميع الجولات الخمس المكتملة ، كان العائد النهائي 16.53216975 ⁇ 0.00 عبر الجولات. تلقت كل نقطة تفتيش 20 بذرة ثابتة evaluation الحلقات, المجموع 1,200 evaluationق. ضمن المدى النهائي حلقة العودة SD كان 14.98144; وكان معدل النجاح في الحلقة الأخيرة 0.55. المعلمات المدربة و evaluation كانت المنحنيات متطابقة عبر العمليات. والمطالبة بالحتمية في نقاط التفتيش مدعومة بهذا الترشح؛ لم يتم استنساخ العائد العددي للورقة. لا يوجد تسامح قبول مخترع لعائدها المستدير ، وتبقى الاختلافات بين البرامج / المجمع مادية.
احتفظ بملفات CSV للحلقة الخام وسجل ما قبل الرحلة ومقارنة السياسة المستقلة والتكوين الفعال ومخرجات تحليل المؤلف. ولا تزال المراجعة العلمية البشرية معلقة. تدريب كامل /evaluation تشغيل هنا يوفر أدلة ملموسة لمثال مختبر مفيد مع الحفاظ على الخلاف مع ورقة.
تحميل الملفات المسجلة#
- checkpoint_variability.csv ⁇ تحليل محلي /evaluation البيانات.
- table_training_reproducibility.tex ⁇ تحليل محلي /evaluation البيانات.
- fig_training_variability.png ⁇ تحليل محلي /evaluation البيانات.
- training_reproducibility_summary.csv ⁇ تحليل محلي /evaluation البيانات.
- final_run_statistics.csv ⁇ تحليل محلي /evaluation البيانات.
- fig_training_reproducibility.png ⁇ تحليل محلي /evaluation البيانات.
- fig_training_reproducibility.svg ⁇ تحليل محلي /evaluation البيانات.
- analysis_manifest.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_run_statistics.csv ⁇ تحليل محلي /evaluation البيانات.
- fig_training_variability.svg ⁇ تحليل محلي /evaluation البيانات.
- determinism_check.json ⁇ تحليل محلي /evaluation البيانات.
- effective_config.json ⁇ تحليل محلي /evaluation البيانات.
- gazebo-independent-policy-comparison.json ⁇ تحليل محلي /evaluation البيانات.
- gazebo-comparison.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_evaluations.csv ⁇ تحليل محلي /evaluation البيانات.
- monitor.csv ⁇ تحليل محلي /evaluation البيانات.
- metadata.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_250000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_100000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_50000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_500000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_501760_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_450000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_0_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_350000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_200000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_300000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_400000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_150000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_evaluations.csv ⁇ تحليل محلي /evaluation البيانات.
- monitor.csv ⁇ تحليل محلي /evaluation البيانات.
- metadata.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_250000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_100000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_50000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_500000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_501760_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_450000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_0_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_350000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_200000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_300000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_400000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_150000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_evaluations.csv ⁇ تحليل محلي /evaluation البيانات.
- monitor.csv ⁇ تحليل محلي /evaluation البيانات.
- metadata.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_250000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_100000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_50000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_500000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_501760_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_450000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_0_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_350000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_200000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_300000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_400000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_150000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_evaluations.csv ⁇ تحليل محلي /evaluation البيانات.
- monitor.csv ⁇ تحليل محلي /evaluation البيانات.
- metadata.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_250000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_100000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_50000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_500000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_501760_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_450000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_0_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_350000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_200000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_300000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_400000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_150000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_evaluations.csv ⁇ تحليل محلي /evaluation البيانات.
- monitor.csv ⁇ تحليل محلي /evaluation البيانات.
- metadata.json ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_250000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_100000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_50000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_500000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_501760_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_450000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_0_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_350000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_200000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_300000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_400000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- checkpoint_150000_episodes.csv ⁇ تحليل محلي /evaluation البيانات.
- model_501760_steps.zip - السياسة المدربة / normalizer.
- model_vecnormalize_501760_steps.pkl - السياسة المدربة / normalizer.
- run.sh - سائق محمول أو سجل البيئة / المصدر.
- environment.yml - سائق محمول أو سجل البيئة / المصدر.
- requirements.txt - سائق محمول أو سجل البيئة / المصدر.
- compatibility.patch - سائق محمول أو سجل البيئة / المصدر.
- fetch-source.sh - سائق محمول أو سجل البيئة / المصدر.
- config.json - سائق محمول أو سجل البيئة / المصدر.
- requirements-tested.txt - سائق محمول أو سجل البيئة / المصدر.
- environment-explicit.txt - سائق محمول أو سجل البيئة / المصدر.
سجل تشغيل كامل · جميع محاولات المرشحين..... ولا تزال المراجعة العلمية البشرية معلقة.