金融モデリングのためにchatgptを勧める人を見かけることが多いのですが、私は反対したいです。というのも、マルチファミリーのアンダーライティング用途で1か月かけて検証した結果が、実用に程遠いものでした。
家賃のレントロール、T12、損益計算書（オペレーティング・ステートメント）を貼り付けて、モデルを作るように依頼すると、断片が出てきます。数個の数式、キャッシュフローの表、もしかしたらキャップレートの計算がある程度です。投資委員会にそのまま渡せるような、ひとつにまとまったブック（ワークブック）には何もつながりません。プロンプトを15回ほど重ねたところで、結局Excelで作っているのと同じ時間がかかるだけで、しかも今度は、chatgptがセルD47で捏造（ハルシネーション）した内容をデバッグしなければならなくなります。
chatgptの問題は、複雑な多段階タスクにおいて状態を保持できないことです。同じスレッドであっても、各プロンプトを新しい会話として扱ってしまいます。前提がキャッシュフローに影響し、キャッシュフローがリターンに影響し、リターンが感度分析に影響するようなアンダーライティングのモデルには、これらすべての層にわたる整合性が必要ですが、それが断片化します。
用途に合わせて作られたツールは、設計思想が根本的に異なります。タスクを分解し、15〜30分自律的に動作し、中間出力を検査し、実際のExcelの数式を使った完成したワークブックを返します。これはモデル品質の違いではなく、設計思想の違いです。
chatgptをちょっとした質問やブレインストーミングに使うのは、もちろんアリです。でも、出力そのものが成果物になるような用途ではダメです。仕事ごとに異なるアーキテクチャ。
[link] [comments]
