地理と音響

離れているほど音は違うのか。図にすると答えが見える

録音を二本ずつ組にして、地理的にどれだけ離れているか音響的にどれだけ違うかを並べました。 組は全部で 49,141 通りあり、 そのまま点で打つと潰れて読めないので、 距離で束ねて束ごとの平均を線にしています。

線を二本に分けているのが要点です。同じ人が投稿した組違う人が投稿した組。 投稿者はたいてい「どのアーカイブがデジタル化したか」を意味します。

読み方。「違う投稿者」の線が右へ行っても上がらなければ、どれだけ離れていても音の違いは変わらない——つまり地理は音響を説明していません。 いっぽう二本の線が離れていれば、同じアーカイブから来たかどうかが効いていることになります。

同じ投稿者の対違う投稿者の対帯は四分位範囲(真ん中の半分がどこに散らばるか)

従来型音響特徴量 ラベルを見ていない

縦軸は音響距離(1 − コサイン類似度)。モデルごとに縦軸の目盛が違いますので、 比べるのは高さではなく線の形です。

0.300.550.801.051.29同じ国 / 違う投稿者の対: 平均 0.963(1281 対)0,000–1,000km / 違う投稿者の対: 平均 0.981(3913 対)1,000–2,000km / 違う投稿者の対: 平均 1.024(11206 対)2,000–3,000km / 違う投稿者の対: 平均 1.010(5916 対)3,000–4,000km / 違う投稿者の対: 平均 1.018(1514 対)4,000–5,000km / 違う投稿者の対: 平均 0.992(2058 対)5,000–6,000km / 違う投稿者の対: 平均 1.021(3472 対)6,000–8,000km / 違う投稿者の対: 平均 1.016(9870 対)8,000–10,000km / 違う投稿者の対: 平均 1.003(5214 対)10,000–12,000km / 違う投稿者の対: 平均 1.009(2126 対)12,000–15,000km / 違う投稿者の対: 平均 0.978(1132 対)15,000km 以上 / 違う投稿者の対: 平均 1.015(58 対)同じ国 / 同じ投稿者の対: 平均 0.650(1016 対)0,000–1,000km / 同じ投稿者の対: 平均 0.959(299 対)1,000–2,000km / 同じ投稿者の対: 平均 0.869(32 対)同国0–1k1–2k2–3k3–4k4–5k5–6k6–8k8–10k10–12k12–15k15k+二本の録音が地理的にどれだけ離れているか

点にふれると、その束の平均と対の数が出ます。

自作 CNN(自己教師あり) ラベルを見ていない

縦軸は音響距離(1 − コサイン類似度)。モデルごとに縦軸の目盛が違いますので、 比べるのは高さではなく線の形です。

0.000.150.300.440.59同じ国 / 違う投稿者の対: 平均 0.283(1281 対)0,000–1,000km / 違う投稿者の対: 平均 0.326(3913 対)1,000–2,000km / 違う投稿者の対: 平均 0.309(11206 対)2,000–3,000km / 違う投稿者の対: 平均 0.321(5916 対)3,000–4,000km / 違う投稿者の対: 平均 0.297(1514 対)4,000–5,000km / 違う投稿者の対: 平均 0.290(2058 対)5,000–6,000km / 違う投稿者の対: 平均 0.329(3472 対)6,000–8,000km / 違う投稿者の対: 平均 0.301(9870 対)8,000–10,000km / 違う投稿者の対: 平均 0.340(5214 対)10,000–12,000km / 違う投稿者の対: 平均 0.301(2126 対)12,000–15,000km / 違う投稿者の対: 平均 0.321(1132 対)15,000km 以上 / 違う投稿者の対: 平均 0.373(58 対)同じ国 / 同じ投稿者の対: 平均 0.105(1016 対)0,000–1,000km / 同じ投稿者の対: 平均 0.187(299 対)1,000–2,000km / 同じ投稿者の対: 平均 0.180(32 対)同国0–1k1–2k2–3k3–4k4–5k5–6k6–8k8–10k10–12k12–15k15k+二本の録音が地理的にどれだけ離れているか

点にふれると、その束の平均と対の数が出ます。

wav2vec 2.0(外部・事前学習) ラベルを見ていない

縦軸は音響距離(1 − コサイン類似度)。モデルごとに縦軸の目盛が違いますので、 比べるのは高さではなく線の形です。

0.030.170.300.440.57同じ国 / 違う投稿者の対: 平均 0.297(1281 対)0,000–1,000km / 違う投稿者の対: 平均 0.343(3913 対)1,000–2,000km / 違う投稿者の対: 平均 0.379(11206 対)2,000–3,000km / 違う投稿者の対: 平均 0.389(5916 対)3,000–4,000km / 違う投稿者の対: 平均 0.351(1514 対)4,000–5,000km / 違う投稿者の対: 平均 0.311(2058 対)5,000–6,000km / 違う投稿者の対: 平均 0.333(3472 対)6,000–8,000km / 違う投稿者の対: 平均 0.362(9870 対)8,000–10,000km / 違う投稿者の対: 平均 0.344(5214 対)10,000–12,000km / 違う投稿者の対: 平均 0.312(2126 対)12,000–15,000km / 違う投稿者の対: 平均 0.306(1132 対)15,000km 以上 / 違う投稿者の対: 平均 0.280(58 対)同じ国 / 同じ投稿者の対: 平均 0.180(1016 対)0,000–1,000km / 同じ投稿者の対: 平均 0.235(299 対)1,000–2,000km / 同じ投稿者の対: 平均 0.196(32 対)同国0–1k1–2k2–3k3–4k4–5k5–6k6–8k8–10k10–12k12–15k15k+二本の録音が地理的にどれだけ離れているか

点にふれると、その束の平均と対の数が出ます。

地理的に遠いのに、音響的に近い組

仕様の問い Q2「地理的に遠い民謡にも音響的な類似性はあるか」です。 8,000km 以上離れた組のうち、音響距離がいちばん小さかったものを並べます。

こうした組を「大陸をまたいだ発見」と読みたくなりますが、そう読む前に確かめることがあります。音響的に近い組は、録音の年代や機材が似ているだけのことがあります。 この地図帳の測定では、音響的な近さを主に説明していたのは出自でした。