既存のチップ設計ベンチマークは、仕様からRTLを記述するといった個別の工程のみをテストしており、その多くがすでに飽和状態にあります。ChipAgentsは、Nvidiaからの貢献を受けて、ベンチマークスイートおよび採点基準を整備し、Build-A-Chip-Benchを開発しています。このベンチマークでは、オープンソースツールとオープンソースPDKを活用し、ワークロード仕様からGDSレイアウトに至るまでの各段階でAIエージェントの能力を評価します。各設計は、隠された検証IPに対する機能的正しさに加え、配線可能率、ホールドタイミング、DRCなどの要件も満たすハードゲートをクリアしなければなりません。合格した設計は、タスクの制約条件に基づきPPA(性能・面積・消費電力)でスコアリングされます。最優秀エージェントは、タスクの65%でハードゲートを通過し、総合スコア16.6%に到達しました。一方で、フロンティア系エージェントは、過去の決定を見直すことや、最適化中に動作を保つこと、さらに処理時間が長いツールの実行を考慮して計画を立てるといった課題に苦戦しています。
詳しくはこちらをご覧ください。
記事「Build-A-Chip-Benchの紹介:ワークロード仕様からGDSまで」はSemiconductor Engineeringに最初に掲載されました。