最安モデルは今や無視できないほど優れています
私の仕事のほとんどでは、リーダーボードよりも価格差の方が重要です。
いくつかのモデルで日々のタスクをベンチマークしましたが、おそらくそのうちの 3 分の 1 は高価なモデルが勝ちました。
要約、タグ付け、およびドラフトの場合、安価なモデルはエンド ユーザーにとって区別がつきません。
リーダーボードには別のことが書かれていますが、午後11時の時点でリーダーボードは私の受信箱ではありません。
今はタスクごとにルーティングしています。量の割には安く、品質が分かる少数の通話の場合は高価です。
分類のために大金を支払うことは新たな無駄であり、私たちが話している間に市場はそれを織り込んでいます。
