แกแขแแแคแแ แแแก แฃแแแแแ แกแแขแแขแแก, แแแแแคแแ แแแแก แฃแแแแแ แกแแขแแขแแก, แแแ แแแแก, แชแแฃแ แแฎแแก ETH, แแแแแแแแแแก แฃแแแฆแแแกแ แกแแแแแก, แแแ แแแแ แแแแแแแก แฃแแแแแ แกแแขแแขแแก, แแกแแแ Yandex-แแกแ แแ Meta-แก แแแแแแแแ แแ แฏแแฃแคแแ แแแแแแฅแแแงแแ แซแ แแแแก แกแแฌแงแแกแ แแแแ แ แแกแฃแ แกแแ แแแแ แแแแแ แแแ แแแแแแแแแก แแแกแแจแแแแแ. -แจแแแฆแฃแแฃแแ แกแแกแขแแแแแ. แแแแแแแแแ, แซแ แแแ แแซแแแแ แจแแกแแซแแแแแแแแก แจแแฅแแแแก ChatGPT แแ Copilot-แแก แแกแแแแกแ แคแฃแแฅแชแแแแ, แฌแแแแกแฌแแ แแแฌแแ แแแแแ OPT-175B แแแแแแแก แแแจแแแแแ, แ แแแแแแช แแแแชแแแก 175 แแแแแแ แ แแแ แแแแขแ แก, แฉแแแฃแแแแ แแ แแแแแแฃแขแแ แแ NVIDIA RTX3090 แกแแแแแแจแ แแ แแคแแแฃแแ แแแ แแแแ, แ แแแแแแช แแฆแญแฃแ แแแแแ 24 GB แแแแแ แแแฎแกแแแ แแแแ. แแแแ แแแฌแแ แแแแ แแแแแแจแ, แแงแแแแแก PyTorch แฉแแ แฉแแก แแ แแแฌแแแแแแ Apache 2.0 แแแชแแแแแแ.
แแแกแจแ แจแแแแก แแแขแแแแก แจแแฅแแแแก แแแแแแแแ แกแแ แแแขแ, แ แแแแแแช แกแแจแฃแแแแแแก แแแซแแแแ แฉแแแแขแแแ แแแ แแ แ-แแ แแ แกแแฏแแ แแ แฎแแแแแกแแฌแแแแแ แแแแก แแแแแแ แแ แแแฃแงแแแแแแแแ แแแแฌแงแแ แแแแฃแแแแแชแแ (แแแแแแแแแ, แแ แซแแแแแแก โpython apps/chatbot.py โ แแแแแแ facebook/opt-30b โ -แแ แแชแแแขแ 0โ แแแจแแแแแ. 100 100 0 100 0โ ). แ แแแแ แช แกแแคแฃแซแแแแ, แจแแแแแแแแแแแฃแแแ Facebook-แแก แแแแ แแแแแฅแแแงแแแแฃแแ แแแแ แแแแก แแแแแแแก แแแแแงแแแแแ, แ แแแแแแช แแแฌแแ แแแแแ แแงแ BookCorpus-แแก (10 แแแแกแ แฌแแแแ), CC-Stories, Pile (OpenSubtitles, Wikipedia, DM Mathematics, HackerNews แแ แ.แจ.), Pushshift-แแก แแแแแฅแชแแแแแ. io (Reddit แแแแแชแแแแแแ แแแงแ แแแแแแ) แแ CCNewsV2 (แแฎแแแ แแแแแแแก แแ แฅแแแ). แแแแแแ แแแแชแแแก แแแแฎแแแแแแ 180 แแแแแแ แ แขแแแแแก (800 GB แแแแแชแแแก). แแแแแแแก แขแ แแแแแแแ แแแแฎแแ แฏแ แแแแกแขแแ แแก แแฃแจแแแแแก 33 แแฆแ 992 NVIDIA A100 80 GB GPU-แแ.
OPT-175B แแแแแแแก แแแจแแแแแกแแก แกแแกแขแแแแแ แแ แแ NVIDIA T4 GPU (16GB), FlexGen-แแก แซแ แแแแ แแฉแแแแ แแฃแจแแแแ 100-แฏแแ แฃแคแ แ แกแฌแ แแคแแ, แแแแ แ แแแ แ แจแแแแแแแแแแแฃแแ แแแแแฌแงแแแขแแแแแแแ, แ แแช แฃแคแ แ แฎแแแแแกแแฌแแแแแก แฎแแแก แแกแฎแแแแแแแแแแ แแแแแแแแแก แแแแแงแแแแแแก แแ แกแแจแฃแแแแแแก แแซแแแแก แแแ แแฃแจแแแแแก. แกแแกแขแแแแแ แกแแแชแแแแฃแ แ แแแแฉแฅแแ แแแแแแแก แแแ แแจแ. แแแแแแ แแฃแแแ, FlexGen-แก แจแแฃแซแแแ แแแแคแแ แแแแแก แแแแแแแแแแแก แแแ แแแแแแแแแ แแ แแแแแ GPU-แแ. แแแแแแแก แแแแแก แจแแกแแแชแแ แแแแแ, แแแแแขแแแแ แแแแแแงแแแแแ แแแ แแแแขแ แแก แจแแแฃแแจแแแก แกแฅแแแ แแ แแแแแแแก แฅแแจแแ แแแแก แแแฅแแแแแแ.
แแแแแแแ FlexGen แแฎแแ แก แฃแญแแ แก แแฎแแแแ OPT แแแแก แแแแแแแแก, แแแแ แแ แแแแแแแแจแ แแแแแแแแแ แแแ แแกแแแ แแแแแ แแแแแแ, แ แแ แแแแแแขแแแแ แแฎแแ แแแญแแ แแก BLOOM-แแกแแแแก (176 แแแแแแ แแ แแแ แแแแขแ แ, แแฎแแ แก แฃแญแแ แก 46 แแแแก แแ 13 แแ แแแ แแแแ แแแแก แแแแก), CodeGen-แก (แจแแแซแแแแ แแแแแก แแแแแ แแ แแแ 22 แแ แแแ แแแแ แแแแก แแแแแ) แแ GLM แแแแแแแแ. แแแขแแแ แแแแแแแแก แแแแแแแแ, แ แแแแแแช แแแคแฃแซแแแแฃแแแ FlexGen-แแ แแ OPT-30B แแแแแแแ:
แแแแแแแแ: แ แ แฐแฅแแแ แแกแแคแแแแจแ แงแแแแแแ แแแฆแแ แแแแก?
แแกแแกแขแแแขแ: แแแแ แแกแขแ.
แแแแแแแแ: แแ แแแแแแแ แแแแแแฃแ แแแแก แฉแแแแ แฌแแแกแแแแแกแแแแก. แ แ แจแแแแแซแแแ แแแแแแแแแ?
แแกแแกแขแแแขแ: แแแ แแ, แแ แกแแแแแก แแ แแแแแ แ แแ, แ แแกแ แแแแแแแแแช แจแแแแซแแแแ แแฅแแแแ แฌแแแกแแแแแกแแแแก. แแแ แแแ แ แแแจแ, แจแแแแซแแแแ แแแ แขแแก แแแแแจแ. แแแแ แแช, แจแแแแซแแแแ แแแจแฅแ แแแแแ แฌแแกแแแ. แแแกแแแ, แจแแแแซแแแแ แแฃแแแฃแแจแ แฌแแกแแแ.
แฌแงแแ แ: opennet.ru