現在は最も安いモデルが勝つのが一般的ですが、それは奇妙です
私の実際の仕事のほとんどでは、リーダーボードよりも価格差の方が重要です。
いくつかのモデルで日常業務のベンチマークを行ったところ、おそらくそのうちの 3 分の 1 は高価なモデルが勝っていました。
要約、タグ付け、およびドラフトの場合、安価なモデルはエンド ユーザーにとって区別がつきません。
リーダーボードには別のことが書かれていますが、午後11時の時点でリーダーボードは私の受信箱ではありません。
現在はタスク別にルーティングしています。量の割には安く、品質が分かる少数の通話の場合は高価です。
分類のために大金を支払うことは、新たな無駄です。私たちが話している時点で、市場はそれを織り込んでいます。
