生成AIの台頭は、業務効率化の枠を超え、企業と生活者の接点のあり方を根本から変えようとしています。前号では、顧客と企業の間に「AI媒介層」が入り込み、情報の伝わり方が構造的に変化したことを指摘。こうした変化はマーケターにとって脅威であると同時に、強力な武器にもなり得ます。後編では、最新の分析手法と、これからのマーケターが担うべき真の価値について考えます。
LLMが変える顧客理解の解像度
BERTopicがもたらす分析の進化
前号では、マーケティングにおける「AI媒介層」の出現とその構造的な影響について解説した。今回は、まずこのLLM(大規模言語モデル)の具体的な手法について具体例を挙げてみる。
ひとつ目は、BERTopicという手法だ。これはTransformer系の埋め込み + UMAP(次元削減) +HDBSCAN(クラスタリング)+c-TF-IDF(トピックラベル生成)を組み合わせたトピックモデリング手法である。単なる単語の共起関係に基づくトピック抽出を行うLDAと比べて何が優れているかというと、まず、意味的に一貫したトピックが抽出されやすい。文脈情報を含む埋め込みにより、類似した意味を持つ文章が近くに配置されるため、クラスタリングの精度が高くなりやすい。
また、トピック数を事前に固定する必要がない。HDBSCANはクラスタ数を直接指定せず、データの密度構造からクラスタを推定できる(ただしパラメータ設定と結果検証は必要である)。さらに、c-TF-IDFにより、各トピックを代表する...

