ΠŸΠ΅Ρ€Π΅ΠΉΡ‚ΠΈ ΠΊ содСрТимому
ΠœΠ°ΠΊΡΠΈΠΌΠ΅Ρ‚Π΅Ρ€

πŸ“’Π£Π²Π°ΠΆΠ°Π΅ΠΌΡ‹Π΅ ΠΊΠΎΠ»Π»Π΅Π³ΠΈ!

πŸ“’Π£Π²Π°ΠΆΠ°Π΅ΠΌΡ‹Π΅ ΠΊΠΎΠ»Π»Π΅Π³ΠΈ! Π’ срСду, 13 мая 2026 Π³ΠΎΠ΄Π°, состоится Ρ€Π°ΡΡˆΠΈΡ€Π΅Π½Π½ΠΎΠ΅ засСданиС сСминара Β«ΠœΠ°Ρ‚Π΅ΠΌΠ°Ρ‚ΠΈΡ‡Π΅ΡΠΊΠΈΠ΅ основы искусствСнного ΠΈΠ½Ρ‚Π΅Π»Π»Π΅ΠΊΡ‚Π°Β» с ΠΎΠ½Π»Π°ΠΉΠ½-Π΄ΠΎΠΊΠ»Π°Π΄Π°ΠΌΠΈ Π² систСмС ΠšΠΎΠ½Ρ‚ΡƒΡ€.Π’ΠΎΠ»ΠΊ. βœ”οΈΠ’Ρ€Π΅ΠΌΡ: 15:00–17:00 βœ”οΈΠ€ΠΎΡ€ΠΌΠ°Ρ‚: ΠΎΠ½Π»Π°ΠΉΠ½, ΠšΠΎΠ½Ρ‚ΡƒΡ€.Π’ΠΎΠ»ΠΊ πŸ•°15:00–16:00 Lei Wu (Π¨ΠΊΠΎΠ»Π° матСматичСских Π½Π°ΡƒΠΊ, Π¦Π΅Π½Ρ‚Ρ€ ΠΌΠ΅ΠΆΠ΄ΡƒΠ½Π°Ρ€ΠΎΠ΄Π½Ρ‹Ρ… исслСдований машинного обучСния, Peking University) Π”ΠΎΠΊΠ»Π°Π΄: Functional Scaling Laws for LLM Pre-training Аннотация: Scaling laws для Π±ΠΎΠ»ΡŒΡˆΠΈΡ… языковых ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ (LLM) ΠΏΠΎΠΊΠ°Π·Ρ‹Π²Π°ΡŽΡ‚, Ρ‡Ρ‚ΠΎ качСство ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ ΡƒΠ»ΡƒΡ‡ΡˆΠ°Π΅Ρ‚ΡΡ ΠΏΠΎ прСдсказуСмым стСпСнным Π·Π°ΠΊΠΎΠ½Π°ΠΌ ΠΏΡ€ΠΈ ΡƒΠ²Π΅Π»ΠΈΡ‡Π΅Π½ΠΈΠΈ ΠΎΠ±ΡŠΡ‘ΠΌΠ° Π΄Π°Π½Π½Ρ‹Ρ… ΠΈ Π²Ρ‹Ρ‡ΠΈΡΠ»ΠΈΡ‚Π΅Π»ΡŒΠ½Ρ‹Ρ… рСсурсов. НСсмотря Π½Π° ΠΎΠ³Ρ€ΠΎΠΌΠ½ΠΎΠ΅ влияниС этих закономСрностСй Π½Π° Ρ€Π°Π·Π²ΠΈΡ‚ΠΈΠ΅ соврСмСнного ИИ, ΠΈΡ… ΠΏΡ€ΠΈΡ€ΠΎΠ΄Π° Π΄ΠΎ сих ΠΏΠΎΡ€ ΠΎΡΡ‚Π°Π²Π°Π»Π°ΡΡŒ прСимущСствСнно эмпиричСской. Π’ Π΄ΠΎΠΊΠ»Π°Π΄Π΅ Π±ΡƒΠ΄Π΅Ρ‚ прСдставлСн ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ Functional Scaling Laws (FSL), основанный Π½Π° Π°Π½Π°Π»ΠΈΠ·Π΅ стохастичСской Π΄ΠΈΠ½Π°ΠΌΠΈΠΊΠΈ обучСния. ΠœΠ΅Ρ‚ΠΎΠ΄ позволяСт ΠΎΠΏΠΈΡΡ‹Π²Π°Ρ‚ΡŒ Π½Π΅ Ρ‚ΠΎΠ»ΡŒΠΊΠΎ ΠΈΡ‚ΠΎΠ³ΠΎΠ²ΠΎΠ΅ качСство ΠΌΠΎΠ΄Π΅Π»ΠΈ, Π½ΠΎ ΠΈ всю Ρ‚Ρ€Π°Π΅ΠΊΡ‚ΠΎΡ€ΠΈΡŽ обучСния, объСдиняя Π΄ΠΈΠ½Π°ΠΌΠΈΠΊΡƒ ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ Ρ€Π°Π·Π½Ρ‹Ρ… ΠΌΠ°ΡΡˆΡ‚Π°Π±ΠΎΠ², ΠΎΠ±ΡŠΡ‘ΠΌΠΎΠ² Π΄Π°Π½Π½Ρ‹Ρ… ΠΈ Ρ€Π΅ΠΆΠΈΠΌΠΎΠ² обучСния. πŸ•°16:20–16:50 Π•.Π’. Π‘ΡƒΡ€Π½Π°Π΅Π² (Бколковский институт Π½Π°ΡƒΠΊΠΈ ΠΈ Ρ‚Π΅Ρ…Π½ΠΎΠ»ΠΎΠ³ΠΈΠΉ) Π”ΠΎΠΊΠ»Π°Π΄: ΠžΡ†Π΅Π½ΠΊΠ° Π²Π·Π°ΠΈΠΌΠ½ΠΎΠΉ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ с ΠΏΠΎΠΌΠΎΡ‰ΡŒΡŽ ΠΌΠ΅Ρ‚ΠΎΠ΄ΠΎΠ² пСрСноса распрСдСлСний Π½Π° основС Π΄ΠΈΡ„Ρ„ΡƒΠ·ΠΈΠΎΠ½Π½Ρ‹Ρ… процСссов Аннотация: Π’ Π΄ΠΎΠΊΠ»Π°Π΄Π΅ Π±ΡƒΠ΄Π΅Ρ‚ рассмотрСн ΠΏΠΎΠ΄Ρ…ΠΎΠ΄ ΠΊ ΠΎΡ†Π΅Π½ΠΊΠ΅ Π²Π·Π°ΠΈΠΌΠ½ΠΎΠΉ ΠΈΠ½Ρ„ΠΎΡ€ΠΌΠ°Ρ†ΠΈΠΈ ΠΌΠ΅ΠΆΠ΄Ρƒ случайными Π²Π΅Π»ΠΈΡ‡ΠΈΠ½Π°ΠΌΠΈ с использованиСм Π΄ΠΈΡ„Ρ„ΡƒΠ·ΠΈΠΎΠ½Π½Ρ‹Ρ… ΠΌΠΎΠ΄Π΅Π»Π΅ΠΉ. Π—Π°Π΄Π°Ρ‡Π° формулируСтся ΠΊΠ°ΠΊ Π·Π°Π΄Π°Ρ‡Π° пСрСноса распрСдСлСний, Π° ΠΏΡ€Π΅Π΄Π»ΠΎΠΆΠ΅Π½Π½Ρ‹ΠΉ ΠΌΠ΅Ρ‚ΠΎΠ΄ дСмонстрируСт Π²Ρ‹ΡΠΎΠΊΡƒΡŽ ΡΡ„Ρ„Π΅ΠΊΡ‚ΠΈΠ²Π½ΠΎΡΡ‚ΡŒ Π½Π° тСстовых Π΄Π°Π½Π½Ρ‹Ρ…, изобраТСниях ΠΈ биологичСских датасСтах. βž‘οΈΠŸΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π΅Π½ΠΈΠ΅ ΠΊ ΠšΠΎΠ½Ρ‚ΡƒΡ€.Π’ΠΎΠ»ΠΊ πŸ”“ΠŸΠΈΠ½-ΠΊΠΎΠ΄: 6107 πŸ”—Π˜Π‘ΠŸ РАН Π² Telegram πŸ”—Π˜Π‘ΠŸ РАН Π² МАКБ

374 просмотров

Канал Π² ΠΊΠ°Ρ‚Π°Π»ΠΎΠ³Π΅ ΠœΠ°ΠΊΡΠΈΠΌΠ΅Ρ‚Π΅Ρ€Π°

184 подписчиков Β· Госорганы ΠΈ учрСТдСния

Π”Ρ€ΡƒΠ³ΠΈΠ΅ ΠΏΡƒΠ±Π»ΠΈΠΊΠ°Ρ†ΠΈΠΈ ΠΊΠ°Π½Π°Π»Π°

ΠŸΠΎΠΏΡƒΠ»ΡΡ€Π½Ρ‹Π΅ ΠΏΡƒΠ±Π»ΠΈΠΊΠ°Ρ†ΠΈΠΈ ΠΊΠ°Π½Π°Π»Π°

Π•Ρ‰Ρ‘ ΠΏΠΎ Ρ‚Π΅ΠΌΠ΅ «Госорганы ΠΈ учрСТдСния»

Π§ΠΈΡ‚Π°Ρ‚ΡŒ дальшС

Π”Π²Π° Ρ€Π°Π·Π° Π² нСдСлю свСТиС посты этого ΠΊΠ°Π½Π°Π»Π° β€” Π½Π° ΠΏΠΎΡ‡Ρ‚Ρƒ ΠΈ Π² Π»ΠΈΡ‡Π½ΡƒΡŽ Π»Π΅Π½Ρ‚Ρƒ. Π‘Π΅Π· ΠΏΠΎΠ²Ρ‚ΠΎΡ€Π½ΠΎΠ³ΠΎ поиска ΠΊΠ°Π½Π°Π»Π° Π²Ρ€ΡƒΡ‡Π½ΡƒΡŽ.