プログラムで効果音を作る仕組み ― 音のたからばこの素材ができるまで

当サイトの効果音の多くは、マイクで録音したものではありません。音の波を、プログラムで一から計算して作っています。録音を使わないので権利の心配がなく、長さや高さを細かく調整でき、何度でも同じ音を作り直せます。この記事では、その仕組みを、実際の素材の音を聴きながら紹介します。

音は「空気の波」を数字で表したもの

パソコンの中の音は、空気の振動(波)の大きさを、1秒間に何万回も記録した数字の列です。当サイトの素材は、1秒あたり44,100回(44.1kHz)の数字でできています。つまり、この数字の列を計算で作れば、録音しなくても音ができます。

たとえば、電子機器の「ピッ」という音は、次のような短いプログラムで作れます(Python と numpy の例)。

import numpy as np
sr = 44100                                   # 1秒あたりの数字の数
t = np.arange(int(sr * 0.12)) / sr           # 0.12秒ぶんの時刻
x = np.sin(2 * np.pi * 2000 * t)             # 1秒に2000回ゆれる波(正弦波)
env = np.minimum(t / 0.003, 1) * np.minimum((0.12 - t) / 0.02, 1)
beep = 0.5 * x * env                         # 3ミリ秒で立ち上がり、最後の20ミリ秒で消える

実際の素材では、これに倍音(元の音の整数倍の高さの成分)を少し混ぜたり、機器の小さなスピーカーらしい音色にしたりして、本物らしく仕上げています。

基本の3つの部品

正弦波のビープ、ノイズの風切り、FMのベルの3つの音の、波形と周波数の図
基本の3つの音。それぞれ、上が波形(音の大きさ)、下がスペクトログラム(どの高さの成分が、いつ鳴っているか。下が低く、上が高い)

① 波と「音量の形」

正弦波は、余分な成分のない、一番単純な音です。同じ波でも、鳴り始めから消えるまでの音量の変化(エンベロープ)を変えると、まったく違う音に聞こえます。すぐに立ち上がってすぐ止まれば「ピッ」、すぐに立ち上がってゆっくり消えれば「ポーン」になります。

② ノイズとフィルター

ノイズは、いろいろな高さの成分がでたらめに混ざった「ザー」という音です。ノイズから一部の高さだけを通す(フィルターをかける)と、風、水、こすれる音などが作れます。通す高さを時間とともに動かすと、動画の場面転換でよく使う「シュッ」という風切り音になります。

③ FM合成

1つの波の高さを、別の波で細かくゆらす方法です。ゆらし方によって、ベルや金属、エレクトリックピアノのような、複雑で明るい響きが生まれます。ゆらす量を時間とともに小さくすると、鳴った瞬間だけ明るく、だんだん丸くなる、ベルらしい音になります。

本物の楽器や物の「仕組み」をまねる

楽器や物の音は、その物がどう振動するかで決まります。その振動の仕組みを計算でまねると、より自然な音になります(物理モデルと呼ばれる方法です)。

場所の響きとスピーカーの音色

同じ音でも、どこで鳴っているかで聞こえ方が変わります。当サイトの「日常生活で聞く電子音」では、音が鳴る場所に合わせて、響きと音色を変えています。

仕上げと確認

作った音は、そのまま配るのではなく、次の仕上げをしています。

  1. 音量をそろえる: 素材どうしを並べて使いやすいように、聞こえの大きさをそろえます(BGMと声の音量バランスで数値を紹介しています)。
  2. 前後の無音を切り、終わりを自然に消す: 音が途中で切れると「プツッ」と雑音が出るので、最後はなめらかに消します。
  3. ループのつなぎ目をなめらかにする: 繰り返して使う素材は、末尾の余韻を先頭に足し戻して、つなぎ目で音が切れないようにしています。
  4. 図で確かめる: すべての音を、この記事の図と同じ、波形とスペクトログラムの図にして、音切れや雑音、意図しない無音がないかを確かめています。

録音やAIを使っている素材もあります

すべてを計算で作っているわけではありません。動物の鳴き声や森の音のように、計算では本物らしさを出しにくいものは、パブリックドメインやCC0で公開されている実際の録音を選んで編集しています(出典・ライセンスに記載)。また、ボイスとBGMは、オープンソースのAIで作っています。ボイスの作り方は、AI音声のイントネーションを自動でチェックするで紹介しています。

どの作り方の素材も、実在の企業の音や有名な曲には似せない方針で作っています。気になる音があれば、お問い合わせからお知らせください。