ΠΠ΅ΡΡΠ°ΡΠΊΠ° ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ°
DeepCoder-14B: ΠΠΎΠ΄Π΅Π» Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π° ΠΊΠΎΡΠΈ ΠΏΠΎΠ±ΠΎΡΡΠ°Π²Π° ΠΏΡΠΎΠ΄ΡΠΊΡΠΈΠ²Π½ΠΎΡΡ ΠΈ ΠΈΠ½ΠΎΠ²Π°ΡΠΈΡΠ΅ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ°

ΠΠ΅ΡΡΠ°ΡΠΊΠ° ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ° (ΠΠ) ΠΌΠ΅ΡΠ° Π½Π°ΡΠΈΠ½ Π½Π° ΠΊΠΎΡΠΈ ΡΠ΅ ΡΠΎΡΡΠ²Π΅Ρ ΡΠ°Π·Π²ΠΈΡΠ°. ΠΠ΅Π½Π΅ΡΠ°ΡΠΎΡΠΈ ΠΊΠΎΠ΄Π° Π·Π°ΡΠ½ΠΎΠ²Π°Π½ΠΈ Π½Π° Π²Π΅ΡΡΠ°ΡΠΊΠΎΡ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠΈ ΠΏΠΎΡΡΠ°Π»ΠΈ ΡΡ Π²ΠΈΡΠ°Π»Π½ΠΈ Π°Π»Π°ΡΠΈ ΠΊΠΎΡΠΈ ΠΏΠΎΠΌΠ°ΠΆΡ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈΠΌΠ° Π΄Π° Π΅ΡΠΈΠΊΠ°ΡΠ½ΠΈΡΠ΅ ΠΏΠΈΡΡ, ΠΎΡΠΊΠ»Π°ΡΠ°ΡΡ Π³ΡΠ΅ΡΠΊΠ΅ ΠΈ Π΄ΠΎΠ²ΡΡΠ°Π²Π°ΡΡ ΠΊΠΎΠ΄. ΠΠ΅ΡΡ ΠΎΠ²ΠΈΠΌ Π½ΠΎΠ²ΠΈΠΌ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠ½ΠΈΠΌ Π°ΡΠΈΡΡΠ΅Π½ΡΠΈΠΌΠ°, DeepCoder-14B ΠΏΡΠΈΠ²Π»Π°ΡΠΈ ΠΏΠ°ΠΆΡΡ Π½Π΅ ΡΠ°ΠΌΠΎ Π·Π±ΠΎΠ³ ΡΠ²ΠΎΡΠΈΡ ΡΠ°ΠΊΠΈΡ ΡΠ΅Ρ Π½ΠΈΡΠΊΠΈΡ ΡΠΏΠΎΡΠΎΠ±Π½ΠΎΡΡΠΈ Π²Π΅Ρ ΠΈ Π·Π±ΠΎΠ³ ΡΠ²ΠΎΡΠ΅ ΠΏΡΠΈΡΠΎΠ΄Π΅ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π°.
ΠΠ° ΡΠ°Π·Π»ΠΈΠΊΡ ΠΎΠ΄ ΠΌΠ½ΠΎΠ³ΠΈΡ ΠΏΠΎΠΏΡΠ»Π°ΡΠ½ΠΈΡ AI ΠΌΠΎΠ΄Π΅Π»Π° ΠΊΠΎΡΠΈ ΡΡ Π·Π°ΡΠ²ΠΎΡΠ΅Π½ΠΈ ΠΈ Π²Π»Π°ΡΠ½ΠΈΡΠΊΠΈ, DeepCoder-14B ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎ Π΄Π΅Π»ΠΈ ΡΠ²ΠΎΡ Π΄ΠΈΠ·Π°ΡΠ½, ΠΏΠΎΠ΄Π°ΡΠΊΠ΅ Π·Π° ΠΎΠ±ΡΠΊΡ ΠΈ ΠΈΠ·Π²ΠΎΡΠ½ΠΈ ΠΊΠΎΠ΄. ΠΠ²Π° ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΡΡ ΠΏΠΎΠΌΠ°ΠΆΠ΅ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈΠΌΠ° ΡΠΈΡΠΎΠΌ ΡΠ²Π΅ΡΠ° Π΄Π° ΡΠ»ΠΎΠ±ΠΎΠ΄Π½ΠΎ ΠΈΡΡΡΠ°ΠΆΡΡΡ, ΠΏΠΎΠ±ΠΎΡΡΠ°Π²Π°ΡΡ ΠΈ ΠΊΠΎΡΠΈΡΡΠ΅ ΠΌΠΎΠ΄Π΅Π». ΠΠ° ΡΠ°Ρ Π½Π°ΡΠΈΠ½, DeepCoder-14B ΠΎΡΠ²Π°ΡΠ° Π½ΠΎΠ²Π΅ ΠΌΠΎΠ³ΡΡΠ½ΠΎΡΡΠΈ Ρ ΡΠ°Π·Π²ΠΎΡΡ ΡΠΎΡΡΠ²Π΅ΡΠ° ΠΈ ΠΏΠΎΠ΄ΡΡΠΈΡΠ΅ ΠΊΠΎΠ»Π°Π±ΠΎΡΠ°ΡΠΈΠ²Π½ΠΈΡΠΈ ΠΈ ΡΡΠ°Π½ΡΠΏΠ°ΡΠ΅Π½ΡΠ½ΠΈΡΠΈ ΠΏΡΠΈΡΡΡΠΏ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΡ ΡΠ· ΠΏΠΎΠΌΠΎΡ AI.
Π¨ΡΠ° ΡΠ΅ DeepCoder-14B ΠΈ Π·Π°ΡΡΠΎ ΡΠ΅ Π²Π°ΠΆΠ°Π½?
DeepCoder-14B ΡΠ΅ ΠΠΎΠ΄Π΅Π» Π²Π΅Π»ΠΈΠΊΠΎΠ³ ΡΠ΅Π·ΠΈΠΊΠ° (ΠΠΠ) Π΄ΠΈΠ·Π°ΡΠ½ΠΈΡΠ°Π½ ΠΏΠΎΡΠ΅Π±Π½ΠΎ Π·Π° Π³Π΅Π½Π΅ΡΠΈΡΠ°ΡΠ΅ ΠΊΠΎΠ΄Π°. Π Π°Π·Π²ΠΈΡΠ΅Π½ ΡΠ΅ ΠΊΡΠΎΠ· ΡΠ°ΡΠ°Π΄ΡΡ ΠΈΠ·ΠΌΠ΅ΡΡ ΠΠ³Π΅Π½ΡΠΈΠΊΠ° ΠΠ°ΡΠ΅Π΄Π½ΠΎ ΠΠΠ‘Π° 14 ΠΌΠΈΠ»ΠΈΡΠ°ΡΠ΄ΠΈ ΠΏΠ°ΡΠ°ΠΌΠ΅ΡΠ°ΡΠ°, ΠΌΠ°ΡΠΈ ΡΠ΅ ΠΎΠ΄ Π½Π΅ΠΊΠΈΡ ΠΌΠ°ΡΠΈΠ²Π½ΠΈΡ AI ΠΌΠΎΠ΄Π΅Π»Π° ΠΏΠΎΠΏΡΡ OpenAI-ΡΠ΅Π²ΠΎΠ³ GPT-4, ΠΊΠΎΡΠΈ ΠΈΠΌΠ° ΡΡΠΎΡΠΈΠ½Π΅ ΠΌΠΈΠ»ΠΈΡΠ°ΡΠ΄ΠΈ ΠΏΠ°ΡΠ°ΠΌΠ΅ΡΠ°ΡΠ°. Π£ΠΏΡΠΊΠΎΡ ΠΎΠ²ΠΎΡ ΠΌΠ°ΡΠΎΡ Π²Π΅Π»ΠΈΡΠΈΠ½ΠΈ, DeepCoder-14B ΡΠ΅ Π½Π°ΠΏΡΠ°Π²ΡΠ΅Π½ Π΄Π° Π΅ΡΠΈΠΊΠ°ΡΠ½ΠΎ ΠΎΠ±Π°Π²ΡΠ° ΡΠ»ΠΎΠΆΠ΅Π½Π΅ Π·Π°Π΄Π°ΡΠΊΠ΅ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ°.
ΠΠ½ΠΎ ΡΡΠΎ ΠΈΠ·Π΄Π²Π°ΡΠ° DeepCoder-14B ΡΠ΅ΡΡΠ΅ ΡΠ΅Π³ΠΎΠ²Π° ΠΏΠΎΡΠΏΡΠ½ΠΎ ΠΎΡΠ²ΠΎΡΠ΅Π½Π° ΠΏΡΠΈΡΠΎΠ΄Π°. ΠΡΠ΅Π°ΡΠΎΡΠΈ ΡΡ ΡΡΠΈΠ½ΠΈΠ»ΠΈ ΡΠ΅ΠΆΠΈΠ½ΡΠΊΠ΅ ΠΊΠΎΠ΅ΡΠΈΡΠΈΡΠ΅Π½ΡΠ΅ ΠΌΠΎΠ΄Π΅Π»Π°, ΠΊΠΎΠ΄ Π·Π° ΠΎΠ±ΡΠΊΡ, ΡΠΊΡΠΏΠΎΠ²Π΅ ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ°, ΠΏΠ° ΡΠ°ΠΊ ΠΈ Π»ΠΎΠ³ΠΎΠ²Π΅ ΠΎΠ±ΡΠΊΠ΅ ΡΠ°Π²Π½ΠΎ Π΄ΠΎΡΡΡΠΏΠ½ΠΈΠΌ. ΠΠ²Π°ΠΊΠ°Π² Π½ΠΈΠ²ΠΎ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΡΡΠΈ ΡΠ΅ ΡΠ΅Π΄Π°ΠΊ Ρ ΠΎΠ±Π»Π°ΡΡΠΈ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅. ΠΠ° ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ΅, ΡΠΎ Π·Π½Π°ΡΠΈ Π΄Π° ΠΌΠΎΠ³Ρ Ρ ΠΏΠΎΡΠΏΡΠ½ΠΎΡΡΠΈ ΡΠ°Π·ΡΠΌΠ΅ΡΠΈ ΠΊΠ°ΠΊΠΎ ΠΌΠΎΠ΄Π΅Π» ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΠ΅, ΠΌΠΎΠ΄ΠΈΡΠΈΠΊΠΎΠ²Π°ΡΠΈ Π³Π° ΠΏΡΠ΅ΠΌΠ° ΡΠ²ΠΎΡΠΈΠΌ ΠΏΠΎΡΡΠ΅Π±Π°ΠΌΠ° ΠΈ Π΄ΠΎΠΏΡΠΈΠ½Π΅ΡΠΈ ΡΠ΅Π³ΠΎΠ²ΠΎΠΌ ΠΏΠΎΠ±ΠΎΡΡΠ°ΡΡ.
ΠΠ°ΡΡΠΏΡΠΎΡ ΡΠΎΠΌΠ΅, ΠΌΠ½ΠΎΠ³ΠΈ Π²ΠΎΠ΄Π΅ΡΠΈ Π³Π΅Π½Π΅ΡΠ°ΡΠΎΡΠΈ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ (AI) ΠΊΠΎΠ΄Π° ΠΏΠΎΠΏΡΡ OpenAI Codex-Π° ΠΈΠ»ΠΈ GPT-4 Π·Π°Ρ ΡΠ΅Π²Π°ΡΡ ΠΏΠ»Π°ΡΠ΅Π½Π΅ ΠΏΡΠ΅ΡΠΏΠ»Π°ΡΠ΅, Π° ΡΠΈΡ ΠΎΠ²ΠΎ ΡΠ½ΡΡΡΠ°ΡΡΠ΅ ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΠ°ΡΠ΅ ΠΎΡΡΠ°ΡΠ΅ ΡΠ°ΡΠ½ΠΎ. DeepCoder-14B Π½ΡΠ΄ΠΈ ΠΊΠΎΠ½ΠΊΡΡΠ΅Π½ΡΠ½Ρ Π°Π»ΡΠ΅ΡΠ½Π°ΡΠΈΠ²Ρ ΡΠ° ΠΏΠΎΡΠΏΡΠ½ΠΎΠΌ ΡΡΠ°Π½ΡΠΏΠ°ΡΠ΅Π½ΡΠ½ΠΎΡΡΡ. ΠΠ²ΠΎ ΠΌΠΎΠΆΠ΅ ΡΡΠΈΠ½ΠΈΡΠΈ ΠΏΠΎΠΌΠΎΡ Ρ Π²Π΅ΡΡΠ°ΡΠΊΠΎΡ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠΈ Π΄ΠΎΡΡΡΠΏΠ½ΠΈΡΠΎΠΌ, ΠΏΠΎΡΠ΅Π±Π½ΠΎ Π·Π° Π½Π΅Π·Π°Π²ΠΈΡΠ½Π΅ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ΅, ΠΌΠ°ΡΠ΅ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΡΠ΅ ΠΈ ΠΈΡΡΡΠ°ΠΆΠΈΠ²Π°ΡΠ΅.
ΠΠ°ΠΊΠΎ ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΠ΅ DeepCoder-14B?
DeepCoder-14B ΠΊΠΎΡΠΈΡΡΠΈ Π½Π°ΠΏΡΠ΅Π΄Π½Π΅ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΌΠ΅ΡΠΎΠ΄Π΅ Π·Π° ΠΊΡΠ΅ΠΈΡΠ°ΡΠ΅ ΡΠ°ΡΠ½ΠΎΠ³ ΠΈ ΠΏΠΎΡΠ·Π΄Π°Π½ΠΎΠ³ ΠΊΠΎΠ΄Π°. ΠΠ΅Π΄Π½Π° Π²Π°ΠΆΠ½Π° ΡΠ΅Ρ Π½ΠΈΠΊΠ° ΠΊΠΎΡΡ ΠΊΠΎΡΠΈΡΡΠΈ Π½Π°Π·ΠΈΠ²Π° ΡΠ΅ Π΄ΠΈΡΡΡΠΈΠ±ΡΠΈΡΠ°Π½ΠΈ ΠΊΠΎΠ΄. Π£ΡΠ΅ΡΠ΅ ΡΠ° ΠΏΠΎΡΠ°ΡΠ°ΡΠ΅ΠΌ (Π Π)ΠΠ° ΡΠ°Π·Π»ΠΈΠΊΡ ΠΎΠ΄ ΡΡΠ°Π΄ΠΈΡΠΈΠΎΠ½Π°Π»Π½ΠΈΡ AI ΠΌΠΎΠ΄Π΅Π»Π° ΠΊΠΎΡΠΈ ΡΠ°ΠΌΠΎ ΠΏΠΎΠΊΡΡΠ°Π²Π°ΡΡ Π΄Π° ΠΏΡΠ΅Π΄Π²ΠΈΠ΄Π΅ ΡΠ»Π΅Π΄Π΅ΡΡ ΡΠ΅Ρ ΠΈΠ»ΠΈ ΡΠΎΠΊΠ΅Π½, RL ΠΏΠΎΠΌΠ°ΠΆΠ΅ DeepCoder-14B Π΄Π° Π½Π°ΡΡΠΈ Π΄Π° ΠΏΡΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈ ΠΊΠΎΠ΄ ΠΊΠΎΡΠΈ ΠΏΡΠΎΠ»Π°Π·ΠΈ ΡΠ΅ΡΡΠΎΠ²Π΅. Π’ΠΎ Π·Π½Π°ΡΠΈ Π΄Π° ΡΠ΅ ΠΌΠΎΠ΄Π΅Π» ΡΠΎΠΊΡΡΠΈΡΠ° Π½Π° ΠΊΡΠ΅ΠΈΡΠ°ΡΠ΅ ΡΠ΅ΡΠ΅ΡΠ° ΠΊΠΎΡΠ° Π·Π°ΠΈΡΡΠ° ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΡ, Π° Π½Π΅ ΡΠ°ΠΌΠΎ Π½Π° ΠΊΠΎΠ΄ ΠΊΠΎΡΠΈ ΠΈΠ·Π³Π»Π΅Π΄Π° ΠΈΡΠΏΡΠ°Π²Π½ΠΎ.
ΠΠΎΡ ΡΠ΅Π΄Π½Π° ΠΊΡΡΡΠ½Π° ΠΊΠ°ΡΠ°ΠΊΡΠ΅ΡΠΈΡΡΠΈΠΊΠ° Π½Π°Π·ΠΈΠ²Π° ΡΠ΅ ΠΈΡΠ΅ΡΠ°ΡΠΈΠ²Π½ΠΎ ΠΏΡΠΎΠ΄ΡΠΆΠ°Π²Π°ΡΠ΅ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡΠ°. Π’ΠΎΠΊΠΎΠΌ ΠΎΠ±ΡΠΊΠ΅, ΠΌΠΎΠ΄Π΅Π» ΠΌΠΎΠΆΠ΅ Π΄Π° ΠΎΠ±ΡΠ°Π΄ΠΈ Π΄ΠΎ 16,000 ΡΠΎΠΊΠ΅Π½Π°, Π° ΡΠΎ ΡΠ΅ ΠΏΠΎΠ²Π΅ΡΠ°Π²Π° Π½Π° 32,000 ΡΠΎΠΊΠ΅Π½Π°, Π΄ΠΎΠΊ ΠΊΠ°Π΄Π° ΡΠ΅ ΠΊΠΎΡΠΈΡΡΠΈ, ΠΌΠΎΠΆΠ΅ Π΄Π° ΡΠ°Π·ΡΠΌΠ΅ Π΄ΠΎ 64,000 ΡΠΎΠΊΠ΅Π½Π°. ΠΠ²Π°Ρ Π²Π΅Π»ΠΈΠΊΠΈ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡΡΠ°Π»Π½ΠΈ ΠΏΡΠΎΠ·ΠΎΡ ΠΎΠΌΠΎΠ³ΡΡΠ°Π²Π° DeepCoder-14B Π΄Π° Π΄ΠΎΠ±ΡΠΎ ΡΠ°Π΄ΠΈ ΡΠ° Π²Π΅Π»ΠΈΠΊΠΈΠΌ Π±Π°Π·Π°ΠΌΠ° ΠΊΠΎΠ΄Π°, Π΄Π΅ΡΠ°ΡΠ½ΠΎΠΌ ΡΠ΅Ρ Π½ΠΈΡΠΊΠΎΠΌ Π΄ΠΎΠΊΡΠΌΠ΅Π½ΡΠ°ΡΠΈΡΠΎΠΌ ΠΈ ΡΠ»ΠΎΠΆΠ΅Π½ΠΈΠΌ Π·Π°Π΄Π°ΡΠΈΠΌΠ° ΡΠ΅Π·ΠΎΠ½ΠΎΠ²Π°ΡΠ°. ΠΠ½ΠΎΠ³ΠΈ Π΄ΡΡΠ³ΠΈ ΠΌΠΎΠ΄Π΅Π»ΠΈ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΌΠΎΠ³Ρ Π΄Π° ΠΏΠΎΠ΄Π½Π΅ΡΡ ΡΠ°ΠΌΠΎ ΠΌΠ½ΠΎΠ³ΠΎ ΠΌΠ°ΡΠ° ΠΎΠ³ΡΠ°Π½ΠΈΡΠ΅ΡΠ° ΡΠΎΠΊΠ΅Π½Π°.
ΠΠ²Π°Π»ΠΈΡΠ΅Ρ ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ° ΡΠ΅ Π±ΠΈΠΎ Π²Π΅ΠΎΠΌΠ° Π²Π°ΠΆΠ°Π½ ΠΏΡΠΈ ΠΈΠ·Π³ΡΠ°Π΄ΡΠΈ DeepCoder-14B. ΠΠΎΠ΄Π΅Π» ΡΠ΅ ΠΎΠ±ΡΡΠ΅Π½ Π½Π° ΠΎΠΊΠΎ 24,000 ΠΏΡΠΎΠ±Π»Π΅ΠΌΠ° ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ° ΠΈΠ· ΠΏΠΎΡΠ·Π΄Π°Π½ΠΈΡ ΠΈΠ·Π²ΠΎΡΠ° ΠΊΠ°ΠΎ ΡΡΠΎ ΡΡ TACO, LiveCodeBench ΠΈ PrimeIntellect-ΠΎΠ² ΡΠΊΡΠΏ ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ° SYNTHETIC-1. Π‘Π²Π°ΠΊΠΈ ΠΏΡΠΎΠ±Π»Π΅ΠΌ ΠΈΠΌΠ° Π²ΠΈΡΠ΅ ΡΠ΅Π΄ΠΈΠ½ΠΈΡΠ½ΠΈΡ ΡΠ΅ΡΡΠΎΠ²Π° ΠΈ Π²Π΅ΡΠΈΡΠΈΠΊΠΎΠ²Π°Π½ΠΈΡ ΡΠ΅ΡΠ΅ΡΠ°. ΠΠ²ΠΎ ΠΏΠΎΠΌΠ°ΠΆΠ΅ ΠΌΠΎΠ΄Π΅Π»Ρ Π΄Π° ΡΡΠΈ ΠΈΠ· Π΄ΠΎΠ±ΡΠΈΡ ΠΏΡΠΈΠΌΠ΅ΡΠ° ΠΈ ΡΠΌΠ°ΡΡΡΠ΅ Π³ΡΠ΅ΡΠΊΠ΅ ΡΠΎΠΊΠΎΠΌ ΠΎΠ±ΡΠΊΠ΅.
ΠΡΠΎΡΠ΅Ρ ΠΎΠ±ΡΠΊΠ΅ ΡΠ΅ ΠΏΠ°ΠΆΡΠΈΠ²ΠΎ ΠΎΠΏΡΠΈΠΌΠΈΠ·ΠΎΠ²Π°Π½. ΠΠΎΡΠΈΡΡΠ΅ΡΠΈ 32 Nvidia H100 Π³ΡΠ°ΡΠΈΡΠΊΠ΅ ΠΊΠ°ΡΡΠΈΡΠ΅, ΡΠΈΠΌ ΡΠ΅ ΠΎΠ±ΡΡΠΈΠΎ ΠΌΠΎΠ΄Π΅Π» Π·Π° ΠΎΠΊΠΎ Π΄Π²Π΅ ΠΈ ΠΏΠΎ Π½Π΅Π΄Π΅ΡΠ΅. ΠΡΠΈΠΌΠ΅Π½ΠΈΠ»ΠΈ ΡΡ verl-pipe ΠΎΠΏΡΠΈΠΌΠΈΠ·Π°ΡΠΈΡΠ΅ ΠΊΠ°ΠΊΠΎ Π±ΠΈ ΡΠ±ΡΠ·Π°Π»ΠΈ ΠΎΠ±ΡΠΊΡ Π·Π° Π΄Π²Π° ΠΏΡΡΠ°, ΡΡΠΎ ΡΠ΅ ΡΠΌΠ°ΡΠΈΠ»ΠΎ ΡΡΠΎΡΠΊΠΎΠ²Π΅ ΡΠ· ΠΎΠ΄ΡΠΆΠ°Π²Π°ΡΠ΅ Π²ΠΈΡΠΎΠΊΠΈΡ ΠΏΠ΅ΡΡΠΎΡΠΌΠ°Π½ΡΠΈ. ΠΠ°ΠΎ ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΡΠΎΠ³Π°, DeepCoder-14B Π΄ΠΎΡΡΠΈΠΆΠ΅ ΡΠ°ΡΠ½ΠΎΡΡ ΠΎΠ΄ 60.6% Pass@1 Π½Π° LiveCodeBench-Ρ, ΡΡΠΎ ΡΠ΅ ΡΠΏΠΎΡΠ΅Π΄ΠΈΠ²ΠΎ ΡΠ° ΠΏΠ΅ΡΡΠΎΡΠΌΠ°Π½ΡΠ°ΠΌΠ° OpenAI-ΠΎΠ²ΠΎΠ³ o3-mini-2025-01-031 (Low).
DeepCoder-14B ΡΠ΅ ΡΠ°ΠΊΠΎΡΠ΅ Π½Π°ΠΏΡΠ°Π²ΡΠ΅Π½ Π΄Π° Π΄ΠΎΠ±ΡΠΎ ΡΠ°Π΄ΠΈ Π½Π° ΡΠ°Π·Π»ΠΈΡΠΈΡΠΈΠΌ ΡΠΈΠΏΠΎΠ²ΠΈΠΌΠ° Ρ Π°ΡΠ΄Π²Π΅ΡΠ°. ΠΠ²ΠΎ ΠΎΠ»Π°ΠΊΡΠ°Π²Π° ΠΊΠΎΡΠΈΡΡΠ΅ΡΠ΅ Π½Π΅Π·Π°Π²ΠΈΡΠ½ΠΈΠΌ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈΠΌΠ°, ΠΈΡΡΡΠ°ΠΆΠΈΠ²Π°ΡΠΊΠΈΠΌ Π³ΡΡΠΏΠ°ΠΌΠ° ΠΈ ΠΌΠ°ΡΠΈΠΌ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΡΠ°ΠΌΠ°. ΠΠΎΠΌΠ±ΠΈΠ½ΠΎΠ²Π°ΡΠ΅ΠΌ ΡΡΠ΅ΡΠ° ΡΠ° ΠΏΠΎΡΠ°ΡΠ°ΡΠ΅ΠΌ, ΠΌΠΎΠ³ΡΡΠ½ΠΎΡΡΠΈ ΡΠ°Π·ΡΠΌΠ΅Π²Π°ΡΠ° Π΄ΡΠ³ΠΈΡ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡΠ° ΠΈ ΠΏΡΠΈΡΡΡΠΏΠ° ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠΌ ΠΊΠΎΠ΄Ρ, DeepCoder-14B Π½ΡΠ΄ΠΈ Π·Π½Π°ΡΠ°ΡΠ°Π½ Π½Π°ΠΏΡΠ΅Π΄Π°ΠΊ Ρ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΡ ΡΠ· ΠΏΠΎΠΌΠΎΡ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅.
ΠΠΎΠ»ΠΈΠΊΠΎ Π΄ΠΎΠ±ΡΠΎ ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΠ΅ DeepCoder-14B?
DeepCoder-14B ΠΏΠΎΠΊΠ°Π·ΡΡΠ΅ ΠΈΠΌΠΏΡΠ΅ΡΠΈΠ²Π½Π΅ ΡΠ΅Π·ΡΠ»ΡΠ°ΡΠ΅ Ρ ΠΌΠ½ΠΎΠ³ΠΈΠΌ ΡΡΠ°Π½Π΄Π°ΡΠ΄Π½ΠΈΠΌ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΠΎΠ²ΠΈΠΌΠ° ΠΊΠΎΡΠΈ ΡΠ΅ΡΡΠΈΡΠ°ΡΡ ΡΠΏΠΎΡΠΎΠ±Π½ΠΎΡΡΠΈ Π³Π΅Π½Π΅ΡΠΈΡΠ°ΡΠ° ΠΊΠΎΠ΄Π°. ΠΠ° LiveCodeBench Π±Π΅Π½ΡΠΌΠ°ΡΠΊΡ ΠΈΠ· Π°ΠΏΡΠΈΠ»Π° 2025. Π³ΠΎΠ΄ΠΈΠ½Π΅, DeepCoder-14B ΠΏΠΎΡΡΠΈΠΆΠ΅ Pass@1 ΡΠ°ΡΠ½ΠΎΡΡ ΠΎΠ΄ 60.6%. Π’ΠΎ Π·Π½Π°ΡΠΈ Π΄Π° Π·Π° 60.6% ΠΏΡΠΎΠ±Π»Π΅ΠΌΠ° ΡΠ° ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ΅ΠΌ ΠΏΡΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈ ΡΠ°ΡΠ½ΠΎ ΡΠ΅ΡΠ΅ΡΠ΅ ΠΈΠ· ΠΏΡΠ²ΠΎΠ³ ΠΏΠΎΠΊΡΡΠ°ΡΠ°. ΠΠ²Π°Ρ ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΡΠ΅ Π²Π΅ΠΎΠΌΠ° Π±Π»ΠΈΠ·Π°ΠΊ OpenAI-ΡΠ΅Π²ΠΎΠΌ o3-mini ΠΌΠΎΠ΄Π΅Π»Ρ, ΠΊΠΎΡΠΈ ΡΠ΅ ΠΏΠΎΡΡΠΈΠ³Π°ΠΎ ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΠΎΠ΄ 60.9% Π½Π° ΠΈΡΡΠΎΠΌ ΡΠ΅ΡΡΡ.
Π£ HumanEval+ Π±Π΅Π½ΡΠΌΠ°ΡΠΊΡ, DeepCoder-14B ΡΠ΅ ΠΏΠΎΡΡΠΈΠ³Π°ΠΎ ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΠΎΠ΄ 92.6% Pass@1, ΡΡΠΎ ΡΠ΅ ΡΠ΅Π΄Π½Π°ΠΊΠΎ ΠΏΠ΅ΡΡΠΎΡΠΌΠ°Π½ΡΠ°ΠΌΠ° Π½Π΅ΠΊΠΈΡ Π²ΡΡ ΡΠ½ΡΠΊΠΈΡ Π²Π»Π°ΡΠ½ΠΈΡΠΊΠΈΡ ΠΌΠΎΠ΄Π΅Π»Π°. ΠΠ° Codeforces-Ρ, ΠΏΠΎΠΏΡΠ»Π°ΡΠ½ΠΎΡ ΠΏΠ»Π°ΡΡΠΎΡΠΌΠΈ Π·Π° ΡΠ°ΠΊΠΌΠΈΡΠ°ΡΡΠΊΠΎ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠΈΡΠ°ΡΠ΅, DeepCoder-14B ΠΈΠΌΠ° ΠΎΡΠ΅Π½Ρ 1936, ΡΡΠΎ Π³Π° ΡΡΠ°Π²ΡΠ° Ρ 95. ΠΏΠ΅ΡΡΠ΅Π½ΡΠΈΠ» ΡΡΠ΅ΡΠ½ΠΈΠΊΠ°. ΠΠ²ΠΎ ΠΏΠΎΠΊΠ°Π·ΡΡΠ΅ Π΄Π° ΠΌΠΎΠΆΠ΅ Π΄Π° ΡΠ΅ΡΠ°Π²Π° ΡΠ΅ΡΠΊΠ΅ Π°Π»Π³ΠΎΡΠΈΡΠ°ΠΌΡΠΊΠ΅ ΠΏΡΠΎΠ±Π»Π΅ΠΌΠ΅ Π½Π° Π²Π΅ΠΎΠΌΠ° Π²ΠΈΡΠΎΠΊΠΎΠΌ Π½ΠΈΠ²ΠΎΡ.
ΠΠΎΡΠ΅Π΄ ΡΠΎΠ³Π°, DeepCoder-14B ΡΠ΅ ΠΏΠΎΡΡΠΈΠ³Π°ΠΎ ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΠΎΠ΄ 73.8% Π½Π° AIME ΠΌΠ°ΡΠ΅ΠΌΠ°ΡΠΈΡΠΊΠΎΠΌ ΡΠ΅ΡΡΡ Π·Π° 2024. Π³ΠΎΠ΄ΠΈΠ½Ρ. ΠΠ²ΠΎ ΡΠ΅ ΡΠ½Π°ΠΆΠ°Π½ ΠΏΠΎΠΊΠ°Π·Π°ΡΠ΅Ρ ΡΠ΅Π³ΠΎΠ²Π΅ ΡΠΏΠΎΡΠΎΠ±Π½ΠΎΡΡΠΈ ΠΌΠ°ΡΠ΅ΠΌΠ°ΡΠΈΡΠΊΠΎΠ³ ΡΠ΅Π·ΠΎΠ½ΠΎΠ²Π°ΡΠ°, ΡΡΠΎ ΡΠ΅ ΠΊΠΎΡΠΈΡΠ½ΠΎ Π·Π° ΡΠ΅Ρ Π½ΠΈΡΠΊΠ΅ Π·Π°Π΄Π°ΡΠΊΠ΅ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ° ΠΊΠΎΡΠΈ ΡΠΊΡΡΡΡΡΡ ΠΏΡΠΎΡΠ°ΡΡΠ½Π΅ ΠΈΠ»ΠΈ ΡΠ»ΠΎΠΆΠ΅Π½Ρ Π»ΠΎΠ³ΠΈΠΊΡ.
Π£ ΠΏΠΎΡΠ΅ΡΠ΅ΡΡ ΡΠ° Π΄ΡΡΠ³ΠΈΠΌ ΠΌΠΎΠ΄Π΅Π»ΠΈΠΌΠ°, DeepCoder-14B ΠΏΠΎΠΊΠ°Π·ΡΡΠ΅ Π±ΠΎΡΠ΅ ΡΠ΅Π·ΡΠ»ΡΠ°ΡΠ΅ ΠΎΠ΄ DeepSeek-R1-Distill-Π°, ΠΊΠΎΡΠΈ ΡΠ΅ ΠΏΠΎΡΡΠΈΠ³Π°ΠΎ 53% Π½Π° LiveCodeBench-Ρ ΠΈ 69.7% Π½Π° AIME Π±Π΅Π½ΡΠΌΠ°ΡΠΊΡ. ΠΠ°ΠΊΠΎ ΡΠ΅ Π½Π΅ΡΡΠΎ ΠΌΠ°ΡΠΈ ΠΎΠ΄ ΠΌΠΎΠ΄Π΅Π»Π° ΠΏΠΎΠΏΡΡ OpenAI o3-mini, ΡΡΠΊΠΎ ΡΠ΅ ΡΠ°ΠΊΠΌΠΈΡΠΈ Ρ ΡΠ°ΡΠ½ΠΎΡΡΠΈ, Π° ΠΈΡΡΠΎΠ²ΡΠ΅ΠΌΠ΅Π½ΠΎ Π½ΡΠ΄ΠΈ ΠΏΠΎΡΠΏΡΠ½Ρ ΡΡΠ°Π½ΡΠΏΠ°ΡΠ΅Π½ΡΠ½ΠΎΡΡ ΠΈ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΈ ΠΏΡΠΈΡΡΡΠΏ.
ΠΠ΅Π½Π΅ΡΠ°ΡΠΎΡΠΈ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π° Π½Π°ΡΠΏΡΠ°ΠΌ Π²Π»Π°ΡΠ½ΠΈΡΠΊΠΈΡ Π³Π΅Π½Π΅ΡΠ°ΡΠΎΡΠ° ΠΊΠΎΠ΄Π°
ΠΠ΅Π½Π΅ΡΠ°ΡΠΎΡΠΈ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π°, ΠΏΠΎΠΏΡΡ DeepCoder-14B, Π½ΡΠ΄Π΅ ΡΠ°ΡΠ½Π΅ ΠΏΡΠ΅Π΄Π½ΠΎΡΡΠΈ. ΠΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈ ΠΌΠΎΠ³Ρ Π΄Π° Π²ΠΈΠ΄Π΅ ΡΠ½ΡΡΡΠ°ΡΡΠ΅ ΡΡΠ½ΠΊΡΠΈΠΎΠ½ΠΈΡΠ°ΡΠ΅ ΠΌΠΎΠ΄Π΅Π»Π°, ΡΡΠΎ ΠΈΠΌ ΠΎΠΌΠΎΠ³ΡΡΠ°Π²Π° Π΄Π° Π²Π΅ΡΡΡΡ Ρ ΡΠ΅Π³ΠΎΠ²ΠΎ ΠΏΠΎΠ½Π°ΡΠ°ΡΠ΅ ΠΈ Π΄Π° Π³Π° ΠΏΡΠΎΠ²Π΅ΡΠ΅. Π’Π°ΠΊΠΎΡΠ΅ ΠΌΠΎΠ³Ρ Π΄Π° ΠΏΡΠΈΠ»Π°Π³ΠΎΠ΄Π΅ ΠΌΠΎΠ΄Π΅Π» Π·Π° ΠΎΠ΄ΡΠ΅ΡΠ΅Π½Π΅ Π·Π°Π΄Π°ΡΠΊΠ΅ ΠΈΠ»ΠΈ ΠΏΡΠΎΠ³ΡΠ°ΠΌΡΠΊΠ΅ ΡΠ΅Π·ΠΈΠΊΠ΅, ΠΏΠΎΠ±ΠΎΡΡΠ°Π²Π°ΡΡΡΠΈ ΡΠ΅Π»Π΅Π²Π°Π½ΡΠ½ΠΎΡΡ ΠΈ ΠΊΠΎΡΠΈΡΠ½ΠΎΡΡ.
ΠΠ»Π°ΡΠ½ΠΈΡΠΊΠ΅ ΠΌΠΎΠ΄Π΅Π»Π΅ ΡΠ΅ΡΡΠΎ ΡΠ°Π·Π²ΠΈΡΠ°ΡΡ Π²Π΅Π»ΠΈΠΊΠ΅ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΡΠ΅ ΡΠ° Π²ΠΈΡΠ΅ ΡΠΈΠ½Π°Π½ΡΠΈΡΠ°ΡΠ° ΠΈ ΠΈΠ½ΡΡΠ°ΡΡΡΡΠΊΡΡΡΠ΅. ΠΠ²ΠΈ ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΏΠΎΠ½Π΅ΠΊΠ°Π΄ ΠΌΠΎΠ³Ρ Π±ΠΈΡΠΈ Π²Π΅ΡΠΈ ΠΈ ΠΌΠΎΡΠ½ΠΈΡΠΈ. ΠΠ΅ΡΡΡΠΈΠΌ, ΠΎΠ½ΠΈ Π΄ΠΎΠ»Π°Π·Π΅ ΡΠ° ΠΎΠ³ΡΠ°Π½ΠΈΡΠ΅ΡΠΈΠΌΠ° ΠΊΠ°ΠΎ ΡΡΠΎ ΡΡ ΡΠ΅Π½Π°, Π½Π΅Π΄ΠΎΡΡΠ°ΡΠ°ΠΊ ΠΏΡΠΈΡΡΡΠΏΠ° ΠΏΠΎΠ΄Π°ΡΠΈΠΌΠ° Π·Π° ΠΎΠ±ΡΠΊΡ ΠΈ ΠΎΠ³ΡΠ°Π½ΠΈΡΠ΅ΡΠ° Ρ ΠΊΠΎΡΠΈΡΡΠ΅ΡΡ.
DeepCoder-14B ΠΏΠΎΠΊΠ°Π·ΡΡΠ΅ Π΄Π° Π²Π΅ΡΡΠ°ΡΠΊΠ° ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ° ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π° ΠΌΠΎΠΆΠ΅ Π΄ΠΎΠ±ΡΠΎ Π΄Π° ΡΠ΅ ΡΠ°ΠΊΠΌΠΈΡΠΈ ΡΠ° Π²Π΅Π»ΠΈΠΊΠΈΠΌ ΠΌΠΎΠ΄Π΅Π»ΠΈΠΌΠ° ΡΠΏΡΠΊΠΎΡ ΠΌΠ°ΡΠ΅ ΡΠ΅ΡΡΡΡΠ°. ΠΠ΅Π½ ΡΠ°Π·Π²ΠΎΡ, Π²ΠΎΡΠ΅Π½ ΠΎΠ΄ ΡΡΡΠ°Π½Π΅ Π·Π°ΡΠ΅Π΄Π½ΠΈΡΠ΅, ΡΠ±ΡΠ·Π°Π²Π° ΠΈΡΡΡΠ°ΠΆΠΈΠ²Π°ΡΠ΅ ΠΈ ΠΈΠ½ΠΎΠ²Π°ΡΠΈΡΠ΅ ΠΎΠΌΠΎΠ³ΡΡΠ°Π²Π°ΡΡΡΠΈ ΠΌΠ½ΠΎΠ³ΠΈΠΌ ΡΡΠ΄ΠΈΠΌΠ° Π΄Π° ΡΠ΅ΡΡΠΈΡΠ°ΡΡ, ΠΏΠΎΠ±ΠΎΡΡΠ°ΡΡ ΠΈ ΠΏΡΠΈΠ»Π°Π³ΠΎΠ΄Π΅ ΠΌΠΎΠ΄Π΅Π». ΠΠ²Π° ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΡΡ ΠΌΠΎΠΆΠ΅ ΠΏΠΎΠΌΠΎΡΠΈ Ρ ΡΠΏΡΠ΅ΡΠ°Π²Π°ΡΡ ΠΌΠΎΠ½ΠΎΠΏΠΎΠ»Π° Π½Π° ΡΠ΅Ρ Π½ΠΎΠ»ΠΎΠ³ΠΈΡΡ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅ ΠΈ ΡΡΠΈΠ½ΠΈΡΠΈ ΠΏΠΎΠΌΠΎΡ Ρ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΡ Π΄ΠΎΡΡΡΠΏΠ½ΠΎΠΌ ΡΠΈΡΠΎΡ ΠΏΡΠ±Π»ΠΈΡΠΈ.
ΠΡΠ°ΠΊΡΠΈΡΠ½Π° ΡΠΏΠΎΡΡΠ΅Π±Π° DeepCoder-14B
ΠΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈ ΠΌΠΎΠ³Ρ ΠΊΠΎΡΠΈΡΡΠΈΡΠΈ DeepCoder-14B Π½Π° ΠΌΠ½ΠΎΠ³ΠΎ Π½Π°ΡΠΈΠ½Π°. ΠΠΎΠΆΠ΅ Π³Π΅Π½Π΅ΡΠΈΡΠ°ΡΠΈ Π½ΠΎΠ²Π΅ ΡΡΠ°Π³ΠΌΠ΅Π½ΡΠ΅ ΠΊΠΎΠ΄Π° Π½Π° ΠΎΡΠ½ΠΎΠ²Ρ ΠΊΡΠ°ΡΠΊΠΈΡ ΠΈΠ½ΡΡΡΡΠΊΡΠΈΡΠ° ΠΈΠ»ΠΈ Π΄ΠΎΠ²ΡΡΠΈΡΠΈ Π½Π΅Π΄ΠΎΠ²ΡΡΠ΅Π½Π΅ Π΄Π΅Π»ΠΎΠ²Π΅ ΠΊΠΎΠ΄Π°. ΠΠΎΠΌΠ°ΠΆΠ΅ Ρ ΠΎΡΠΊΠ»Π°ΡΠ°ΡΡ Π³ΡΠ΅ΡΠ°ΠΊΠ° ΡΠ°ΠΊΠΎ ΡΡΠΎ ΠΏΡΠ΅Π΄Π»Π°ΠΆΠ΅ ΠΈΡΠΏΡΠ°Π²ΠΊΠ΅ Π·Π° Π³ΡΠ΅ΡΠΊΠ΅ ΠΈΠ»ΠΈ ΠΏΠΎΠ±ΠΎΡΡΠ°Π²Π° Π»ΠΎΠ³ΠΈΠΊΡ.
ΠΠΎΡΡΠΎ ΠΌΠΎΠΆΠ΅ Π΄Π° ΠΎΠ±ΡΠ°ΡΡΡΠ΅ Π΄ΡΠ³Π°ΡΠΊΠ΅ ΡΠ΅ΠΊΠ²Π΅Π½ΡΠ΅, DeepCoder-14B ΡΠ΅ ΠΏΠΎΠ³ΠΎΠ΄Π°Π½ Π·Π° Π²Π΅Π»ΠΈΠΊΠ΅ Π±Π°Π·Π΅ ΠΊΠΎΠ΄Π°, ΠΏΡΠΎΡΠ΅ΠΊΡΠ΅ ΡΠ΅ΡΠ°ΠΊΡΠΎΡΠΈΡΠ°ΡΠ° ΠΈΠ»ΠΈ Π³Π΅Π½Π΅ΡΠΈΡΠ°ΡΠ΅ ΡΠ»ΠΎΠΆΠ΅Π½ΠΈΡ Π°Π»Π³ΠΎΡΠΈΡΠ°ΠΌΠ°. Π’Π°ΠΊΠΎΡΠ΅ ΠΌΠΎΠΆΠ΅ ΠΏΠΎΠΌΠΎΡΠΈ Ρ ΠΌΠ°ΡΠ΅ΠΌΠ°ΡΠΈΡΠΊΠΎΠΌ ΡΠ΅Π·ΠΎΠ½ΠΎΠ²Π°ΡΡ Ρ ΠΊΠΎΠ΄Ρ, ΡΡΠΎ ΡΠ΅ ΠΊΠΎΡΠΈΡΠ½ΠΎ Ρ Π½Π°ΡΡΠ½ΠΎΠΌ ΡΠ°ΡΡΠ½Π°ΡΡΡΠ²Ρ ΠΈ Π°Π½Π°Π»ΠΈΠ·ΠΈ ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ°.
Π£ ΠΎΠ±ΡΠ°Π·ΠΎΠ²Π°ΡΡ, DeepCoder-14B ΠΌΠΎΠΆΠ΅ ΠΏΠΎΠΌΠΎΡΠΈ ΡΡΠ΅Π½ΠΈΡΠΈΠΌΠ° ΠΏΡΡΠΆΠ°ΡΡΡΠΈ ΠΊΠΎΡΠ°ΠΊ-ΠΏΠΎ-ΠΊΠΎΡΠ°ΠΊ ΡΠ΅ΡΠ΅ΡΠ° ΠΈ ΠΎΠ±ΡΠ°ΡΡΠ΅ΡΠ°. ΠΡΠ΅Π΄ΡΠ·Π΅ΡΠ° Π³Π° ΠΌΠΎΠ³Ρ ΠΊΠΎΡΠΈΡΡΠΈΡΠΈ Π·Π° Π°ΡΡΠΎΠΌΠ°ΡΠΈΠ·Π°ΡΠΈΡΡ ΠΏΠΎΠ½Π°Π²ΡΠ°ΡΡΡΠΈΡ Π·Π°Π΄Π°ΡΠ°ΠΊΠ° ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ° ΠΈΠ»ΠΈ Π·Π° Π³Π΅Π½Π΅ΡΠΈΡΠ°ΡΠ΅ ΠΊΠΎΠ΄Π° ΠΏΡΠΈΠ»Π°Π³ΠΎΡΠ΅Π½ΠΎΠ³ ΡΠΈΡ ΠΎΠ²ΠΎΡ ΡΠΏΠ΅ΡΠΈΡΠΈΡΠ½ΠΎΡ ΠΎΠ±Π»Π°ΡΡΠΈ.
ΠΠ·Π°Π·ΠΎΠ²ΠΈ ΠΈ ΠΎΠ±Π»Π°ΡΡΠΈ Π·Π° ΠΏΠΎΠ±ΠΎΡΡΠ°ΡΠ΅
Π§Π°ΠΊ ΠΈ ΡΠ° ΡΠ²ΠΎΡΠΈΠΌ ΠΈΠΌΠΏΡΠ΅ΡΠΈΠ²Π½ΠΈΠΌ ΠΌΠΎΠ³ΡΡΠ½ΠΎΡΡΠΈΠΌΠ°, DeepCoder-14B ΡΠ΅ ΡΡΠΎΡΠ°Π²Π° ΡΠ° Π½Π΅ΠΊΠΎΠ»ΠΈΠΊΠΎ Π·Π½Π°ΡΠ°ΡΠ½ΠΈΡ ΠΈΠ·Π°Π·ΠΎΠ²Π°:
- DeepCoder-14B ΠΌΠΎΠΆΠ΅ Π΄Π° ΡΠ΅ ΡΡΠΎΡΠΈ ΡΠ° ΠΈΠ·ΡΠ·Π΅ΡΠ½ΠΎ ΡΠ΅ΡΠΊΠΈΠΌ, Π½ΠΎΠ²ΠΈΠΌ ΠΈΠ»ΠΈ Π²ΠΈΡΠΎΠΊΠΎ ΡΠΏΠ΅ΡΠΈΡΠ°Π»ΠΈΠ·ΠΎΠ²Π°Π½ΠΈΠΌ Π·Π°Π΄Π°ΡΠΈΠΌΠ° ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ°. ΠΠ΅Π³ΠΎΠ² ΡΠ΅Π·ΡΠ»ΡΠ°Ρ ΠΌΠΎΠΆΠ΄Π° Π½Π΅ΡΠ΅ ΡΠ²Π΅ΠΊ Π±ΠΈΡΠΈ ΠΏΠΎΡΠ·Π΄Π°Π½ ΠΊΠ°Π΄Π° ΡΠ΅ ΡΠ°Π΄ΠΈ ΠΎ ΠΏΡΠΎΠ±Π»Π΅ΠΌΠΈΠΌΠ° Π²Π°Π½ ΠΎΠ±ΠΈΠΌΠ° ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ° Π·Π° ΠΎΠ±ΡΠΊΡ, ΡΡΠΎ Π·Π°Ρ ΡΠ΅Π²Π° ΠΎΠ΄ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ° Π΄Π° ΠΏΠ°ΠΆΡΠΈΠ²ΠΎ ΠΏΡΠ΅Π³Π»Π΅Π΄Π°ΡΡ ΠΈ Π²Π°Π»ΠΈΠ΄ΠΈΡΠ°ΡΡ Π³Π΅Π½Π΅ΡΠΈΡΠ°Π½ΠΈ ΠΊΠΎΠ΄.
- ΠΡΠΈΠΊΠ°ΡΠ½ΠΎ ΠΏΠΎΠΊΡΠ΅ΡΠ°ΡΠ΅ DeepCoder-14B ΡΠ΅ΡΡΠΎ Π·Π°Ρ ΡΠ΅Π²Π° ΠΏΡΠΈΡΡΡΠΏ ΠΌΠΎΡΠ½ΠΈΠΌ, ΠΌΠΎΠ΄Π΅ΡΠ½ΠΈΠΌ Π³ΡΠ°ΡΠΈΡΠΊΠΈΠΌ ΠΏΡΠΎΡΠ΅ΡΠΎΡΠΈΠΌΠ°. ΠΠ²Π°Ρ Π·Π°Ρ ΡΠ΅Π² ΠΌΠΎΠΆΠ΅ Π±ΠΈΡΠΈ ΠΏΡΠ΅ΠΏΡΠ΅ΠΊΠ° Π·Π° ΠΏΠΎΡΠ΅Π΄ΠΈΠ½Π°ΡΠ½Π΅ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ΅ ΠΈΠ»ΠΈ ΠΌΠ°ΡΠ΅ ΡΠΈΠΌΠΎΠ²Π΅ ΠΊΠΎΡΠΈΠΌΠ° Π½Π΅Π΄ΠΎΡΡΠ°ΡΠ΅ Π²ΡΡ ΡΠ½ΡΠΊΠΈ Ρ Π°ΡΠ΄Π²Π΅Ρ, ΡΡΠΎ ΠΏΠΎΡΠ΅Π½ΡΠΈΡΠ°Π»Π½ΠΎ ΠΎΠ³ΡΠ°Π½ΠΈΡΠ°Π²Π° ΡΠΈΡΠΎΠΊΠΎ ΡΡΠ²Π°ΡΠ°ΡΠ΅.
- ΠΠ°ΠΊΠΎ ΡΠ΅ ΠΌΠΎΠ΄Π΅Π» ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π°, ΠΎΠ±ΡΠΊΠ° Π½ΠΎΠ²ΠΈΡ Π²Π΅ΡΠ·ΠΈΡΠ° ΠΈΠ»ΠΈ ΡΠΈΠ½ΠΎ ΠΏΠΎΠ΄Π΅ΡΠ°Π²Π°ΡΠ΅ DeepCoder-14B Π·Π° ΡΠΏΠ΅ΡΠΈΡΠΈΡΠ½Π΅ ΠΏΠΎΡΡΠ΅Π±Π΅ ΠΈ Π΄Π°ΡΠ΅ Π·Π°Ρ ΡΠ΅Π²Π° Π·Π½Π°ΡΠ°ΡΠ½Ρ ΡΠ΅Ρ Π½ΠΈΡΠΊΡ ΡΡΡΡΡΠ½ΠΎΡΡ ΠΈ ΡΠ°ΡΡΠ½Π°ΡΡΠΊΠ΅ ΡΠ΅ΡΡΡΡΠ΅. ΠΠ²ΠΎ ΠΌΠΎΠΆΠ΅ Π±ΠΈΡΠΈ ΠΏΡΠ΅ΠΏΡΠ΅ΠΊΠ° Π·Π° ΠΎΠ½Π΅ ΠΊΠΎΡΠΈ Π½Π΅ΠΌΠ°ΡΡ ΡΠ°ΠΊΠΎ ΠΈΡΠΊΡΡΡΠ²ΠΎ Ρ ΠΌΠ°ΡΠΈΠ½ΡΠΊΠΎΠΌ ΡΡΠ΅ΡΡ ΠΈΠ»ΠΈ ΠΏΡΠΈΡΡΡΠΏ Π²Π΅Π»ΠΈΠΊΠΎΡ ΠΈΠ½ΡΡΠ°ΡΡΡΡΠΊΡΡΡΠΈ.
- Π Π΄Π°ΡΠ΅ ΠΏΠΎΡΡΠΎΡΠ΅ ΠΏΠΈΡΠ°ΡΠ° Ρ Π²Π΅Π·ΠΈ ΡΠ° ΠΏΠΎΡΠ΅ΠΊΠ»ΠΎΠΌ ΠΊΠΎΠ΄Π° ΠΊΠΎΡΠΈ ΡΠ΅ ΠΊΠΎΡΠΈΡΡΠΈ Ρ ΡΠΊΡΠΏΠΎΠ²ΠΈΠΌΠ° ΠΏΠΎΠ΄Π°ΡΠ°ΠΊΠ° Π·Π° ΠΎΠ±ΡΠΊΡ ΠΈ ΠΏΡΠ°Π²Π½ΠΈΠΌ ΠΈΠΌΠΏΠ»ΠΈΠΊΠ°ΡΠΈΡΠ°ΠΌΠ° ΠΊΠΎΡΠΈΡΡΠ΅ΡΠ° ΠΊΠΎΠ΄Π° Π³Π΅Π½Π΅ΡΠΈΡΠ°Π½ΠΎΠ³ Π²Π΅ΡΡΠ°ΡΠΊΠΎΠΌ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠΎΠΌ Ρ ΠΊΠΎΠΌΠ΅ΡΡΠΈΡΠ°Π»Π½ΠΈΠΌ ΠΏΡΠΎΡΠ΅ΠΊΡΠΈΠΌΠ°. ΠΠΈΡΠ°ΡΠ° Π°ΡΡΠΎΡΡΠΊΠΈΡ ΠΏΡΠ°Π²Π°, ΠΏΡΠΈΠΏΠΈΡΠΈΠ²Π°ΡΠ° Π°ΡΡΠΎΡΡΡΠ²Π° ΠΈ ΠΎΠ΄Π³ΠΎΠ²ΠΎΡΠ½ΠΎΠ³ ΠΊΠΎΡΠΈΡΡΠ΅ΡΠ° ΠΎΡΡΠ°ΡΡ Π°ΠΊΡΠΈΠ²Π½Π° ΠΏΠΎΠ΄ΡΡΡΡΠ° Π΄ΠΈΡΠΊΡΡΠΈΡΠ΅ ΡΠ½ΡΡΠ°Ρ Π·Π°ΡΠ΅Π΄Π½ΠΈΡΠ΅.
- ΠΠ°ΠΎ ΠΈ ΡΠ°Π² ΠΊΠΎΠ΄ Π³Π΅Π½Π΅ΡΠΈΡΠ°Π½ Π²Π΅ΡΡΠ°ΡΠΊΠΎΠΌ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠΎΠΌ, ΠΈΠ·Π»Π°Π·ΠΈ ΠΈΠ· DeepCoder-14B Π½Π΅ ΡΡΠ΅Π±Π° Π΄Π° ΡΠ΅ ΠΊΠΎΡΠΈΡΡΠ΅ ΡΠ»Π΅ΠΏΠΎ. ΠΠ°ΠΆΡΠΈΠ² ΡΡΠ΄ΡΠΊΠΈ ΠΏΡΠ΅Π³Π»Π΅Π΄ ΡΠ΅ Π½Π΅ΠΎΠΏΡ ΠΎΠ΄Π°Π½ ΠΊΠ°ΠΊΠΎ Π±ΠΈ ΡΠ΅ ΠΎΡΠΈΠ³ΡΡΠ°ΠΎ ΠΊΠ²Π°Π»ΠΈΡΠ΅Ρ ΠΊΠΎΠ΄Π°, Π±Π΅Π·Π±Π΅Π΄Π½ΠΎΡΡ ΠΈ ΠΏΠΎΠ³ΠΎΠ΄Π½ΠΎΡΡ Π·Π° ΠΏΡΠΎΠΈΠ·Π²ΠΎΠ΄Π½Π° ΠΎΠΊΡΡΠΆΠ΅ΡΠ°.
Π Π΅Π·ΠΈΠΌΠ΅
DeepCoder-14B ΡΠ΅ Π²Π°ΠΆΠ°Π½ ΠΊΠΎΡΠ°ΠΊ Π½Π°ΠΏΡΠ΅Π΄ Ρ ΠΊΠΎΠ΄ΠΈΡΠ°ΡΡ ΡΠ· ΠΏΠΎΠΌΠΎΡ Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅. ΠΠ΅Π³ΠΎΠ²Π° ΠΏΡΠΈΡΠΎΠ΄Π° ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π° ΡΠ°Π·Π»ΠΈΠΊΡΡΠ΅ Π³Π° ΠΎΠ΄ ΠΌΠ½ΠΎΠ³ΠΈΡ Π΄ΡΡΠ³ΠΈΡ ΠΌΠΎΠ΄Π΅Π»Π° Π²Π΅ΡΡΠ°ΡΠΊΠ΅ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΠ΅, Π΄Π°ΡΡΡΠΈ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠΈΠΌΠ° ΡΠ»ΠΎΠ±ΠΎΠ΄Ρ Π΄Π° Π³Π° ΠΈΡΡΡΠ°ΠΆΡΡΡ ΠΈ ΡΠ½Π°ΠΏΡΠ΅ΡΡΡΡ. Π‘Π° ΡΠ½Π°ΠΆΠ½ΠΈΠΌ ΡΠ΅Ρ Π½ΠΈΡΠΊΠΈΠΌ ΠΌΠΎΠ³ΡΡΠ½ΠΎΡΡΠΈΠΌΠ° ΠΈ ΠΏΠΎΠ΄ΡΡΠΊΠΎΠΌ Π·Π° Π²Π΅Π»ΠΈΠΊΠ΅ ΠΊΠΎΠ½ΡΠ΅ΠΊΡΡΠ΅ ΠΊΠΎΠ΄Π°, ΠΌΠΎΠΆΠ΅ Π΄ΠΎΠ±ΡΠΎ Π΄Π° ΡΠ΅ Π½ΠΎΡΠΈ ΡΠ° ΠΌΠ½ΠΎΠ³ΠΈΠΌ Π·Π°Π΄Π°ΡΠΈΠΌΠ° ΠΊΠΎΠ΄ΠΈΡΠ°ΡΠ°.
ΠΠ΅ΡΡΡΠΈΠΌ, ΠΊΠΎΡΠΈΡΠ½ΠΈΡΠΈ ΠΌΠΎΡΠ°ΡΡ ΠΈΠΌΠ°ΡΠΈ Π½Π° ΡΠΌΡ ΡΠ΅Π³ΠΎΠ²Π΅ ΠΈΠ·Π°Π·ΠΎΠ²Π΅, ΠΏΠΎΠΏΡΡ ΠΏΠΎΡΡΠ΅Π±Π΅ Π·Π° ΠΏΠ°ΠΆΡΠΈΠ²ΠΈΠΌ ΠΏΡΠ΅Π³Π»Π΅Π΄ΠΎΠΌ ΠΊΠΎΠ΄Π° ΠΈ Ρ Π°ΡΠ΄Π²Π΅ΡΡΠΊΠΈΡ Π·Π°Ρ ΡΠ΅Π²Π°. ΠΠ° Π½Π΅Π·Π°Π²ΠΈΡΠ½Π΅ ΠΏΡΠΎΠ³ΡΠ°ΠΌΠ΅ΡΠ΅, ΠΈΡΡΡΠ°ΠΆΠΈΠ²Π°ΡΠ΅ ΠΈ ΠΌΠ°ΡΠ΅ ΠΊΠΎΠΌΠΏΠ°Π½ΠΈΡΠ΅, DeepCoder-14B Π½ΡΠ΄ΠΈ Π²ΡΠ΅Π΄Π°Π½ Π°Π»Π°Ρ Π·Π° ΠΏΠΎΠ²Π΅ΡΠ°ΡΠ΅ ΠΏΡΠΎΠ΄ΡΠΊΡΠΈΠ²Π½ΠΎΡΡΠΈ ΠΈ ΠΈΠ½ΠΎΠ²Π°ΡΠΈΡΠ°. ΠΠ±ΠΎΠ³ ΡΡΠ°Π»Π½ΠΈΡ ΠΏΠΎΠ±ΠΎΡΡΠ°ΡΠ° Π°Π»Π°ΡΠ° Π·Π° Π²Π΅ΡΡΠ°ΡΠΊΡ ΠΈΠ½ΡΠ΅Π»ΠΈΠ³Π΅Π½ΡΠΈΡΡ, ΠΌΠΎΠ΄Π΅Π»ΠΈ ΠΎΡΠ²ΠΎΡΠ΅Π½ΠΎΠ³ ΠΊΠΎΠ΄Π° ΠΏΠΎΠΏΡΡ DeepCoder-14B ΠΈΠ³ΡΠ°ΡΠ΅ Π·Π½Π°ΡΠ°ΡΠ½Ρ ΡΠ»ΠΎΠ³Ρ Ρ ΡΡΠ°Π½ΡΡΠΎΡΠΌΠ°ΡΠΈΡΠΈ ΡΠ°Π·Π²ΠΎΡΠ° ΡΠΎΡΡΠ²Π΅ΡΠ°. ΠΡΠΈΡ Π²Π°ΡΠ°ΡΠ΅ ΠΎΠ²ΠΈΡ Π°Π»Π°ΡΠ° ΡΠ° ΠΎΠ΄Π³ΠΎΠ²ΠΎΡΠ½ΠΎΡΡΡ ΠΌΠΎΠΆΠ΅ Π΄ΠΎΠ²Π΅ΡΡΠΈ Π΄ΠΎ Π±ΠΎΡΠ΅Π³ ΡΠΎΡΡΠ²Π΅ΡΠ° ΠΈ Π²ΠΈΡΠ΅ ΠΌΠΎΠ³ΡΡΠ½ΠΎΡΡΠΈ Π·Π° ΡΠ²Π΅.