分析方法と論文記載用情報

指定語を含む箇所を文書横断で探し、前後の文脈を確認します。

方法

原文の文字列を検索し、改行・句点・またはその両方で区切った範囲から一致箇所を抽出します。形態素解析で数える語の頻度とは別の集計です。

指定条件

検索語、区切り方法

結果

ファイル名、行、前文脈、ヒット語、後文脈。前後の文脈を並べるKWIC表としてCSV出力できます。文書名から原文を開いて確認できます。

文書をタグや順序で整理し、文書群の構成と変化を確認します。

方法

文書に付けたタグ、文字数、並び順を一覧と集計で表示します。並び順は時系列順として振り直せます。

指定条件

タグによる絞り込み、並び順（時系列順 / 文書名 / タグ）。

結果

タグ別の文書数・文字数、文書長の分布、特に長い文書、文書一覧。

数値の見方

複数タグを持つ文書がある場合、タグ別件数の合計は文書総数を超えます。文書の並び順だけで時期による変化を断定しないでください。

同じ種類の保存済み分析結果を2つ選び、項目ごとの差や比率を確認します。

方法

2つの結果に共通する項目と片方だけにある項目を揃え、値の増減や相対値を計算します。同じプロジェクトの別結果と、異なるプロジェクトの結果のどちらも選べます。

対象

頻度分析、TF-IDF、N-gram、N-gramの周辺語、関係パターン分析。

結果

共通項目、片方だけにある項目、増減、差、比率。関係パターン分析ではヒット文書や代表例も比較できます。

比較条件

対象文書数、辞書、語の形、絞り込み条件を確認してください。特にTF-IDFは対象文書集合によって重みが変わるため、異なる集合の値を単純に比較できません。

語ごとの出現回数を数え、文書群全体と文書別の頻度を確認します。

方法

形態素解析後の語を単位として出現回数を合計します。空白や改行は集計対象から除外します。

指定条件

画面上は標準設定で実行。結果画面で表記（SURFACE）と基本形（LEMMA）、品詞・除外語・文書列を切り替えできます。

結果

表記または基本形、品詞、総頻度、文書別頻度、その語を含む文書数。語の「原文」から用例を確認できます。

数値の見方

同じ文書内の繰り返しも数えます。出現回数は文書数や人数ではなく、多いことだけで重要性や賛否は決まりません。

各文書に特徴的な語を重みづけします。

方法

文書ごとの語の出現をもとに TF-IDF を計算します。語の形は SURFACE または LEMMA を選べます。

指定条件

語の形（SURFACE / LEMMA）

前提

文書が2件以上必要です。

数値の見方

合計は文書ごとの重みの総和、文書あたりの平均は合計を対象文書数で割った値です。同じ文書集合では順位は同じです。出現回数・文書割合・正確さを表す数値ではありません。

TF-IDFで表した語の使われ方をもとに、内容が近い文書を探します。

方法

文書ごとのTF-IDFベクトル間のコサイン類似度を計算します。樹形図ではコサイン距離とグループ間の平均を使って文書をまとめます。

前提

文書が2件以上あり、現在の文書を対象にしたTF-IDFが完了している必要があります。

結果

基準文書に近い順の一覧、上位文書どうしの類似度表、似た文書がまとまる順序を示す樹形図。

数値の見方

「近い順」と「行列表」はコサイン類似度を100倍した表示です。文章や意見が何％一致するかを表すものではありません。比較する文書の原文も確認してください。

連続して出てくる語のまとまりを抽出し、特徴的な表現を確認します。

方法

N個の連続する語を1つの単位として数えます。たとえば N=2 は2語の並びを数えます。

指定条件

N の値（2〜5）、語の形（SURFACE / LEMMA）

前提

先に頻度分析を完了している必要があります。

数値の見方

同じ文書内の繰り返しも含む出現回数です。Nが異なる結果は別集計で、回数をそのまま比較できません。

注目語の前後に現れる語を集計し、語同士の結びつきを調べます。

方法

注目語の前後 N 語に出る語を数え、MI と T-score を算出します。

指定条件

注目語、前後何語まで見るか（1〜5）、語の形（SURFACE / LEMMA）

指標

MI は共起の相対的な強さ、T-score は出現回数を考慮した結びつきの強さを表します。

解釈

近くに現れることだけでは同じ主張や因果関係を示しません。回数と前後の原文を併せて確認してください。

頻度分析やN-gramなどの結果をもとに、概要、注目語、仮説、追加調査の観点を文章化します。

主な入力

対象語プリセット、参照する分析結果、対象文書の概要。

利用上の注意

統計値そのものではなく、結果を読むための補助情報として扱ってください。

記載方法

論文では、非AI分析の結果と、AIによる要約・解釈支援を分けて記載することをおすすめします。

補助パラメータ

既定の推論モデルは amazon.nova-lite-v1:0。 temperature=0.1、各生成段階の出力上限（max_tokens）は4,096です。レポート全体の文字数上限ではありません。 頻度分析、N-gram、関係パターン分析、N-gramの周辺語を参照し、複数文書ではTF-IDFも使います。 注目語候補は最大8件、頻度の根拠行は上位30行を使います。

分析結果画面から質問し、数値や図の見方、原文で確かめる点を確認できます。

参照する範囲

質問時の分析結果と画面の条件をもとに、必要に応じて同じ分析の語・文書・トピックを追加確認します。別の分析やプロジェクトの結果は、その結果画面で質問してください。

原文と使い方案内

原文が未準備の場合は「原文の準備」から準備します。集計値の説明と原文を読んだ説明を区別してください。KOTOPYの使い方は公開の利用ガイドを参照して答えます。

モデルと利用量

回答モデルの既定値は openai.gpt-oss-120b-1:0 です。必要な追加確認も処理量に含まれるため、回答後に表示される消費AIクレジットを確認してください。

研究記録

質問、回答、参照した結果と原文、検索・絞り込み条件を残し、AIの説明を数値と原文で確かめてください。

プロジェクト内文書をもとに質問し、関連箇所を参照しながら回答を確認できます。

主な入力

質問文と対象プロジェクト。文書内の関連箇所を検索し、取得した根拠を使って回答します。全原文を毎回読んだ回答ではありません。

利用上の注意

回答は文書確認の補助です。重要な引用や主張は、元文書と分析結果で確認してください。

記載方法

研究で使った場合は、AIチャットを探索的な補助として用いたことを明記してください。

補助パラメータ

既定の埋め込みモデルは amazon.titan-embed-text-v2:0、回答モデルは openai.gpt-oss-120b-1:0。 通常の原文準備では800文字ごとに分割し、隣り合う区間を120文字重ねます。 1文書あたり最大200分割、読み込み上限200,000文字が既定で、大規模な文書群では処理範囲を調整します。 質問の入力上限は2,000文字、回答生成の出力上限は4,000トークン、temperature=0.1です。 出力上限は画面に表示される回答の文字数とは異なります。

文書の内容をベクトル化し、近い文書同士をグループ化します。

方法

文書ベクトルを作成し、K-means で分類します。グループ名、要約、分類理由はAIが補助的に生成します。

指定条件

グループ数の決め方（自動 / 手動）、手動時のグループ数。利用には文書10件以上が必要です。

記載方法

分類結果を使う場合は、グループ数の決め方、文書数、AI生成の要約を利用した範囲を明記してください。

補助パラメータ

既定の埋め込みモデルは amazon.titan-embed-text-v2:0、要約モデルは amazon.nova-lite-v1:0。 各文書は先頭2,000文字をベクトル化に使います。 自動グループ数は、候補ごとにグループ内の近さとグループ間の離れ具合を比較するシルエットスコアで選びます。 手動時は2〜20件かつ文書数の半数以下が上限です。同じ内容の文書が多い場合、実際のグループ数は指定数より少なくなることがあります。 K-meansと2次元配置の乱数の種は42、K-meansの初期化回数は10です。 グループ説明は代表文書を最大6件使い、要約生成はtemperature=0、max_tokens=500です。

文脈を踏まえて、文書内の感情と判定理由を確認します。

主な入力

対象文書の本文と、判定単位（段落 / 改行）。

方法

外部のAIモデルを使い、14種類の感情、感情スコア、判定の確からしさ、理由を出します。

利用上の注意

AIクレジットを使用します。感情スコアは文章表現についての推定で、書き手の本心や人数を測るものではありません。文書単位と段落単位の集計を区別し、理由と原文を見比べて確認してください。

補助パラメータ

既定モデルは amazon.nova-lite-v1:0、temperature=0です。代表語の数値は、その語が代表語として抽出された段落数です。