Very excited to present MinervaЁЯжЙ: a language model capable of solving mathematical questions using step-by-step natural language reasoning.
Combining scale, data and others dramatically improves performance on the STEM benchmarks MATH and MMLU-STEM. https://t.co/bQJOyMSCD4

Starting from PaLMЁЯМ┤, Minerva was trained on a large dataset made of webpages with mathematical content and scientific papers. At inference time, we used chain-of-thought/scratchpad and majority voting to boost performance without the assistance of external tools.
Models' mistakes are easily interpretable. Despite impressive arithmetic skills it still makes calculation mistakes. We estimate the false positive rate due to achieving the right answer from incorrect reasoning and find it relatively low. More samples: https://t.co/YFvsFd6kZ1!
Evaluating our model in 2022 PolandтАЩs National Math Exam it performed above the national average, it solved more than 80% GCSE Higher Mathematics problems and evaluated a variety of STEM undergraduate problems from MIT, it solved nearly a third of them.
Paper: https://t.co/W8t2m02UO8
Great collaboration with Anders, @dmdohan, @ethansdyer, @hmichalewski, @vinayramasesh, @AmbroseSlone, @cem__anil, Imanol, Theo, @Yuhu_ai_, @bneyshabur, @guygr and @vedantmisra !
#minerva
This was a collaboration between multiple teams at Google Research including Blueshift, Brain, and others. See https://t.co/ttf5HvXSG8 for more info about our team.

More from All

рдХреБрдВрдбрд▓реА рдореЗрдВ 12 рднрд╛рд╡ рд╣реЛрддреЗ рд╣реИрдВред рдХреИрд╕реЗ рдЬреНрдпреЛрддрд┐рд╖ рджреНрд╡рд╛рд░рд╛ рд░реЛрдЧ рдХреЗ рдЖрдВрдХрд▓рди рдХрд░рддреЗ рд╕рдордп рдХреБрдВрдбрд▓реА рдХреЗ рд╡рд┐рднрд┐рдиреНрди рднрд╛рд╡реЛрдВ рд╕реЗ рдЧрдгрдирд╛ рдХрд░рддреЗ рд╣реИрдВ рдЖрдЬ рдЗрд╕ рдкрд░ рдЪрд░реНрдЪрд╛ рдХрд░реЗрдВрдЧреЗред
рдХреБрдгреНрдбрд▓реА рдХреЛ рдХрд╛рд▓рдкреБрд░реБрд╖ рдХреА рд╕рдВрдЬреНрдЮрд╛ рджреЗрдХрд░ рдЗрд╕рдореЗрдВ рд╢рд░реАрд░ рдХреЗ рдЕрдВрдЧреЛрдВ рдХреЛ рд╕реНрдерд╛рдкрд┐рдд рдХрд░ рдЙрдирд╕реЗ рд░реЛрдЧ, рд░реЛрдЧреЗрд╢, рд░реЛрдЧ рдХреЛ рдмрдврд╝рд╛рдиреЗ рдШрдЯрд╛рдиреЗ рд╡рд╛рд▓реЗ рдЧреНрд░рд╣


рд░реЛрдЧ рдХреА рд╕реНрдерд┐рддрд┐ рдореЗрдВ рдЙрддреНрдкреНрд░реЗрд░рдХ рдХрд╛ рдХрд╛рд░реНрдп рдХрд░рдиреЗ рд╡рд╛рд▓реЗ рдЧреНрд░рд╣, рдЖрдпреБрд░реНрд╡реЗрджрд┐рдХ/рдРрд▓реЛрдкреИрдереА/рд╣реЛрдорд┐рдпреЛрдкреИрдереА рдореЗрдВ рд╕реЗ рдХреМрди рдХрд╛рд░рдЧрд░ рд╣реЛрдЧрд╛ рдЗрд╕рдХрд╛ рдЖрдБрдХрд▓рди, рд░рдХреНрдд рд╡рд┐рдХрд╛рд░, рд░рдХреНрдд рдФрд░ рдЖрдкрд░реЗрд╢рди рдХреА рд╕реНрдерд┐рддрд┐, рдХреМрди рд╕рд╛ рдЖрдВрддрд░рд┐рдХ рдпрд╛ рдмрд╛рд╣рд░реА рдЕрдВрдЧ рдкреНрд░рднрд╛рд╡рд┐рдд рд╣реЛрдЧрд╛ рдЗрддреНрдпрд╛рджрд┐ рдЧрдгрдирд╛ рдХрд░рдиреЗ рдореЗрдВ рдХреБрдВрдбрд▓реА рдХрд╛ рдкреНрд░рдпреЛрдЧ рдХрд┐рдпрд╛ рдЬрд╛рддрд╛ рд╣реИред


рдореЗрдбрд┐рдХрд▓ рдЬреНрдпреЛрддрд┐рд╖ рдореЗрдВ рдЖрдЬ рдХреЗ рд╕рдордп рдореЗрдВ Dr. K. S. Charak рдХрд╛ рдирд╛рдо рдирд┐рд░реНрд╡рд┐рд╡рд╛рдж рд░реВрдк рд╕реЗ рдкреНрд░рдердо рд╕реНрдерд╛рди рд░рдЦрддрд╛ рд╣реИред рдЙрдирдХреА рд▓рд┐рдЦреА рдХрдИ рдкреБрд╕реНрддрдХреЗрдВ рдЖрдЬ рдЗрд╕ рдХреНрд╖реЗрддреНрд░ рдореЗрдВ рдирдП рдЬреНрдпреЛрддрд┐рд╖реЛрдВ рдХрд╛ рдорд╛рд░реНрдЧрджрд░реНрд╢рди рдХрд░ рд░рд╣реА рд╣реИрдВред
рдкреНрд░рдердо рднрд╛рд╡ -
рдЗрд╕ рднрд╛рд╡ рд╕реЗ рд╣рдо рд╡реНрдпрдХреНрддрд┐ рдХреА рд░реЛрдЧрдкреНрд░рддрд┐рд░реЛрдзрдХ рдХреНрд╖рдорддрд╛, рд╕рд┐рд░, рдорд╖реНрддрд┐рд╕реНрдХ рдХрд╛ рд╡рд┐рдЪрд╛рд░ рдХрд░рддреЗ рд╣реИрдВред


рджреНрд╡рд┐рддреАрдп рднрд╛рд╡-
рджрд╛рд╣рд┐рдирд╛ рдиреЗрддреНрд░, рдореБрдЦ, рд╡рд╛рдгреА, рдирд╛рдХ, рдЧрд░реНрджрди рд╡ рдЧрд▓реЗ рдХреЗ рдКрдкрд░реА рднрд╛рдЧ рдХрд╛ рд╡рд┐рдЪрд╛рд░ рд╣реЛрддрд╛ рд╣реИред
рддреГрддреАрдп рднрд╛рд╡-
рдЕрд╕реНрдерд┐, рдЧрд▓рд╛,рдХрд╛рди, рд╣рд╛рде, рдХрдВрдзреЗ рд╡ рдЫрд╛рддреА рдХреЗ рдЖрдВрддрд░рд┐рдХ рдЕрдВрдЧреЛрдВ рдХрд╛ рд╢реБрд░реБрдЖрддреА рднрд╛рдЧ рдЗрддреНрдпрд╛рджрд┐ред

рдЪрддреБрд░реНрде рднрд╛рд╡- рдЫрд╛рддреА рд╡ рдЗрд╕рдХреЗ рдЖрдВрддрд░рд┐рдХ рдЕрдВрдЧ, рдЬрд╛рддрдХ рдХреА рдорд╛рдирд╕рд┐рдХ рд╕реНрдерд┐рддрд┐/рдкреНрд░рдХреГрддрд┐, рд╕реНрддрди рдЖрджрд┐ рдХреА рдЧрдгрдирд╛ рдХреА рдЬрд╛рддреА рд╣реИ


рдкрдВрдЪрдо рднрд╛рд╡-
рдЬрд╛рддрдХ рдХреА рдмреБрджреНрдзрд┐ рд╡ рдЙрд╕рдХреА рддреАрд╡реНрд░рддрд╛,рдкреАрда, рдкрд╕рд▓рд┐рдпрд╛рдВ,рдкреЗрдЯ, рд╣реГрджрдп рдХреА рд╕реНрдерд┐рддрд┐ рдЖрдВрдХрд▓рди рдореЗрдВ рдкреНрд░рдпреЛрдЧ рд╣реЛрддрд╛ рд╣реИред

рд╖рд╖реНрда рднрд╛рд╡-
рд░реЛрдЧ рднрд╛рд╡ рдХрд╣рд╛ рдЬрд╛рддрд╛ рд╣реИред рдХреБрдВрдбрд▓реА рдореЗ рдЗрд╕рдХреЗ рддрддреНрдХрд╛рд▓рд┐рдХ рднрд╛рд╡ рд╕реНрд╡рд╛рдореА, рдХрд╛рд▓рдкреБрд░реБрд╖ рдХреБрдВрдбрд▓реА рдХреЗ рд╕реНрд╡рд╛рдореА, рджреГрд╖реНрдЯрд┐ рд╕рдВрдмрдВрдз, рд░реЛрдЧреЗрд╢ рдХреА рд╕реНрдерд┐рддрд┐, рд░реЛрдЧреЗрд╢ рдХреЗ рдирдХреНрд╖рддреНрд░ рдФрд▒ рд░реЛрдЧреЗрд╢ рд╡ рднрд╛рд╡ рдХреА рдбрд┐рдЧреНрд░реА рдЗрддреНрдпрд╛рджрд┐ред

You May Also Like