有効期限のないAPIキーの問題点
何年も前に発行され、一度もローテーションされず、今も有効なキーは、便利なものではありません。何年も誰も実際に確認していない負債です。
「信頼度スコア」をめぐるマーケティングが間違えていること
確信度スコア0.87を返すジオコーディングのレスポンスは、一致したかどうかだけを返すものより厳密に見えます。小数点があり、その背後に測定可能な何かに対して調整されたモデルがあることをほのめかしています。実際にそのとおりの場合もあります。しかし多くの場合、その数字は科学的に見える形式をまとったヒューリスティックに近いものであり、外から両者を見分けるのは困難です。
確信度スコアだけを示すことの問題は、誰もそのような形では尋ねていない質問に答えている点にあります。住所フォームを作っている開発者に必要なのは、0から1の間の確率ではありません。もっと具体的なことを知る必要があります。番地まで一致したのか、それとも通りだけか。郵便番号が見つかったのか、それとも市区町村だけか。建物レベルの一致なのか、それともより広い区域の中心点へのフォールバックなのか。1つの浮動小数点数は、こうした有用で行動につながる詳細をすべて1つの数字に押し込めてしまい、精密に見えながら、平易な説明よりも少ない情報しか伝えません。
誠実なやり方は、根拠となる手法が裏付けられる以上の確実性をほのめかすスコアに圧縮するのではなく、実際に何が一致したのかを平易な言葉で説明することだと私たちは考えます。これがさらに重要なのは、ジオコーディングと逆ジオコーディングが、精度を誇張すると後工程で実害を生む、まさにその種の機能だからです。ある閾値を超える確信度スコアが誤った一致を黙って通したために、住所が市の反対側に解決されてしまうのは、丸め誤差ではありません。間違った場所に送られる荷物であり、実際にはサービスエリア外にいる顧客を含めてしまうエリア判定なのです。
私たちは、自社のジオコーディング、逆ジオコーディング、オートコンプリートが、あらゆるケースで検証済みの精度をもってすべての住所パターンにすでに対応している、と主張するつもりはありません。その主張こそ、ここで述べている誇張そのものだからです。私たちがはっきり言えるのは、エンドポイントが何をするのか、どのように作られているのかということです。その説明を、実態が裏付ける以上に確信度を高く聞こえさせるための数字で包むことはしません。
確信度スコアが本質的に不誠実なわけではありません。うまく使えば、一致について実際にある何かを本当に要約できます。特に、その数字が実際に何から計算されているのかを開発者が理解できるほど明確に文書化されている場合はそうです。問題になるのは、スコアがいくつかあるシグナルの1つとして開示されるのではなく、精度の証明として売り込まれ、根拠となる手法が明かされないまま、スコアが答えのすべてになってしまう場合です。説明のない数字は、言葉より正確なわけではありません。反論しにくいだけであり、それはまったく別のことです。
マーケティングのページ上では見栄えが悪くなるとしても、解決策は複雑ではありません。何が一致したのかを平易な言葉で説明し、その詳細さで自分が作っているものに十分かどうかは、開発者自身に判断してもらうのです。平易に説明された通りレベルの一致は、何の説明もない0.91というスコアよりも役に立ちます。平易な言葉は次に何を確認すべきかを教えてくれますが、数字だけではそれがわからないからです。