Sahara AIとマイクロソフトが共同でAI推論評価ベンチマーク「MATHVISTA」を発表

人工知能企業Sahara AIは、マイクロソフトとの提携を発表し、同社に高精度なラベリングデータを提供するとともに、オープンソースのベンチマーク「MATHVISTA」を共同でリリースした。このベンチマークは、GPT-4V、Claude、Geminiなどのモデルが実環境下で示す推論・意思決定能力をテストするために特別に設計されており、現在の累計ダウンロード数は27万回を超えている。現在、マイクロソフト、アマゾン、Snap、マサチューセッツ工科大学（MIT）などの機関が、Sahara AIのデータサービスとAgentic AIソリューションを採用している。