重要なツールとして信頼する前に、すべての AI ツールを退屈なタスクでテストしてください
デモは設計されたタスクです。私の評価方法では、すべての新しいツールをその週で最も退屈なジョブに対して実行します。結果は驚くほど予測的です。
すべての AI ツールのデモは、注目を集めている最良のケースです。私の評価方法は逆です。すべての新しいツールには、実際の 1 週間で最も退屈なタスクを与えてから、重要なことに近づくようにします。退屈な作業は、マーケティングが衰退する場所です。
この退屈なタスクには、デモにはない特性があります。入力内容が不明確で、成功のファンファーレがなく、「いつでも」という実際の期限があり、疲れている火曜日の午後に作業する必要があるということです。文字起こしツールでは、開いたウィンドウの横で録音された通話という最悪の品質の音声が得られます。執筆ツールには、誰も書きたくない更新メールという最も魅力的な仕事が与えられます。
ボーリング試験で測定されるのは信頼性であり、信頼性が重要な唯一の特徴です。デモタスクでは優れているが、ありふれたタスクでは不安定なツールは、不安定な上に何も構築しないため、節約できる以上にコストが高くなります。目立たず常に機能するツールがインフラになります。
このテストでは、デモでは隠れている統合の摩擦も明らかになります。デモにはクリーンな入力がプリロードされています。私の火曜日には、ツールが半分サポートしている形式のファイルと、最初にどこかからエクスポートする必要があるワークフローがあります。使用ごとに 10 分間の摩擦は、日用品にとっては死刑宣告に相当し、5 分間の試用では目に見えません。
私の得点は、退屈なテストを 1 週間続けた後の 1 つの質問です。そのテストの存在を覚えていないのに、その問題に手を伸ばしたでしょうか?それだけです。合格したツールは実際の作業に昇格します。機能するには私の熱意が必要なツールが静かに機能不全に陥っているため、クライアントの成果物で学ぶよりも更新メールで学ぶ方が良いでしょう。