日
← すべての記事

StripeがAIの決済実装を評価。決済画面が動くのは第一関門

Stripeは項目別の点数と、必須項目をすべて満たした割合を分けた。差が示すのは、公開前に残る確認作業だ。

コラムAI最前線著者Open Market Notes種類記事
手描きの決済カードと台帳が赤い点線でつながっている。

11月19日、Stripeはコーディングエージェントが作る決済連携の評価を公開した。単発決済、サブスクリプション、Connectを含む69のシナリオで、モデルと実行環境の14組をStripeプラグインの有無で試した。同社の集計では、項目別の平均点が78.1%、必須項目をすべて満たす場合だけを数えた合格率が29.4%だった。二つの指標は意味が異なり、加盟店が本番公開できる確率でもない。多数の条件を満たしていても、会計や顧客への提供を左右する一点を落とすことがある。

起きてはいけない結果を先に決める

後から成否が確定する決済手段を扱うサブスクリプションを考える。客がフォームを送信し、結果を受け取る前にサービスが利用可能になる。普通のカードのテストは通っても、時間差のある手段では早すぎる提供になる。Stripeの文書は決済画面の完了と、遅延決済の成功・失敗を分けて説明している。どの通知を根拠に自社の状態を変え、誰が例外を調べるのかは、画面の文言から推測せずに決める必要がある。

同じ通知が複数回来たり、想定と異なる順で届いたりする場合もある。返金の確認が遅いだけで同額を再び返すべきではない。支払い通知が二度届いても出荷は一度だ。受け入れ条件は結果で書く。部分返金後の残高が一致し、決済代行と自社の記録が異なるなら理由を後から説明できるようにする。財務と業務担当者がその条件を決め、生成したコードだけで前提を変更しない。これらは説明用の例で、Stripeが観測した個々の不具合ではない。

部分点は診断に使い、承認と混同しない

評価ではモデルが依頼者を演じ、別の評価手順でコードや応答などの証拠を確認した。項目別の点数は改善箇所を示す。全必須項目の合格率は一つの漏れの重大さを捉えるが、評価側が証拠を見逃すと、実際に動くものも不合格になり得る。単一の点数を加盟店全般の選定指標にはできない。ホスト型決済画面を使う小売店と、複数の売り手に資金を分ける事業者では、失敗時の負担が違う。

Stripeによると、同社プラグインを使うと14組すべての項目別の点数が上がった。プラットフォーム固有の資料を参照しやすくなった可能性はある。一方、自社サービス用の条件で自社の補助機能を試した結果であり、他社にも当てはまるとは限らない。実務で比べるなら、コードと業務シナリオは同じにして、設定ごとに人の確認工数を記録する。点数の差だけで本番決済や照合が改善したとは言えない。

合格までの費用で比べる

モデルの料金以外に、ケースの準備、実行、目視確認、照合やサポート処理の補完に時間がかかる。公開後なら顧客対応や帳簿の訂正も必要になる。受け入れ条件を満たした連携一件あたりの時間と総費用を比べ、未達の必須条件は別に記録したい。まずサンドボックスで主要パターンと代表的な例外を試し、人による確認が必須の条件を決める。高い点が出るまで走らせるのでなく、確認可能な証拠を残す。

小さな店舗はホスト型画面で自作部分を減らせるが、注文と支払いの状態をそろえる必要は残る。サブスクリプションや分配では、帳簿との照合、配分、例外の責任分担にも時間を確保する。評価で得たいのは、どの業務結果にまだ裏付けがないかを、公開前に把握することだ。

出典

情報提供を目的とした内容です。投資・法律・税務・財務上の助言には該当しません。