Genebench-Proの内部
概要
GeneBench-Proは、腫瘍学、機能ゲノミクス、集団遺伝学、臨床ゲノミクスなどの多様な領域において計算モデルを評価するために設計された10のケーススタディを提供します。各ケーススタディでは、構造バリアントに基づく治療方針の決定やCRISPR標的のバリデーションといった具体的な研究課題が提示され、必要なプロンプト、データセット、文脈上のパラメータが提供されます。モデルに対し、技術的なアーティファクトの修正、祖先の推論、ノイズの多い時系列データの管理といった複雑な生物学的データの扱いを要求することで、これらのベンチマークは生物学研究におけるAIシステムの分析の厳密さと解釈の正確性を評価するのに役立ちます。
(出典：OpenAI)