Sahara AIとマイクロソフトが共同でAI推論評価ベンチマークMATHVISTAを発表

Odailyの報道によると、人工知能企業Sahara AIは、マイクロソフトと提携し、マイクロソフトに高精度なアノテーションデータを提供し、オープンソースのベンチマーク「MATHVISTA」を共同で立ち上げたと発表した。このベンチマークは、GPT-4V、Claude、Geminiなどのモデルの実世界シナリオにおける推論および意思決定能力をテストするために特別に設計されており、現在までの累計ダウンロード数は27万回を超えている。

現在、マイクロソフト、アマゾン、Snap、マサチューセッツ工科大学（MIT）などの機関が、すでにSahara AIのデータサービスとAgentic AIソリューションを採用している。