Ua paʻi ʻo Google i kahi ʻohana hou o nā kumu hoʻohālike ʻōlelo nui, ʻo Gemma 4, e pili ana i ke kumu hoʻohālike Gemini 3. Hoʻolaha ʻia ʻo Gemma 4 ma lalo o ka Laikini Apache ma nā ʻano like ʻole me 2.3, 4.5, 25.2, a me 30.7 biliona mau palena (E2B, E4B, 31B, a me 26B A4B). He kūpono nā ʻano like ʻole E2B a me E4B no ka hoʻohana ʻana ma nā polokalamu kelepona, nā ʻōnaehana Pūnaewele o nā Mea (IoT), a me nā papa like Raspberry Pi, ʻoiai ʻo nā ʻano like ʻole ʻē aʻe he kūpono no ka hoʻohana ʻana ma nā kahua hana a me nā ʻōnaehana me nā GPU mea kūʻai aku. ʻO ka nui o ka pōʻaiapili i manaʻo ʻia e ke kumu hoʻohālike he 128 mau hōʻailona no nā kumu hoʻohālike E2B a me E4B, a me 256 mau hōʻailona no nā kumu hoʻohālike 31B a me 26B A4B.
He ʻōlelo ʻōlelo a he multimodal nā kumu hoʻohālike: kākoʻo ʻia he 35 mau ʻōlelo mai ka hoʻomaka ʻana (ua hoʻohana ʻia ma mua o 140 mau ʻōlelo i ka wā o ke aʻo ʻana), a hiki ke hana ʻia nā kikokikona a me nā kiʻi ma ke ʻano he mea hoʻokomo (kākoʻo pū nā kumu hoʻohālike E2B a me E4B i ka hana leo). Hoʻokumu ʻia ke kumu hoʻohālike 26B A4B ma ka hoʻolālā Mixture-of-Experts (MoE), kahi i māhele ʻia ai ke kumu hoʻohālike i loko o kahi moʻo o nā pūnaewele loea (hiki i ka hana pane ke hoʻohana wale i 3.8 biliona mau palena, akā ʻoi aku ka wikiwiki ma mua o nā kumu hoʻohālike nui maʻamau), ʻoiai ʻo nā ʻano ʻē aʻe e hoʻohana i kahi hoʻolālā monolithic maʻamau.
Kākoʻo nā kumu hoʻohālike i ka noʻonoʻo ʻana a me nā ʻano kūkākūkā hiki ke hoʻopilikino ʻia, a kākoʻo i kahi Kūlana ʻōnaehana no ka hana ʻana i nā kuhikuhi (nā lula, nā palena) ma kahi ʻokoʻa mai ka ʻikepili. Hiki ke hoʻohana ʻia nā kumu hoʻohālike no ke kākau ʻana i ke code, ka ʻike ʻana i nā mea i loko o nā kiʻi, ka nānā ʻana i nā wikiō frame-by-frame, ka wehewehe ʻana i nā palapala a me nā PDF, ka ʻike ʻana i nā huapalapala optical (OCR) o ke kikokikona i paʻi ʻia a kākau lima ʻia, ka ʻike ʻana i ka ʻōlelo, a me ka unuhi ʻana ma waena o nā ʻōlelo. Hiki ke hoʻohana ʻia hoʻi lākou ma ke ʻano he mau ʻelele kūʻokoʻa e launa pū ana me nā mea hana like ʻole a me nā API.
Ma ka hapa nui o nā hoʻokolohua, ua ʻoi aku ka maikaʻi o nā hiʻohiʻona Gemma 4 ma mua o ke kumu hoʻohālike Gemma 3 me nā palena he 27-biliona. Kākoʻo ʻo Gemma 4 iā LiteRT-LM, vLLM, llama.cpp, MLX, Ollama, NVIDIA NIM a me NeMo, LM Studio, Unsloth, SGLang, Cactus, Basetan, MaxText, Tunix, a me Keras.
Source: opennet.ru
