プログラムで効果音を作る仕組み ― 音のたからばこの素材ができるまで
当サイトの効果音の多くは、マイクで録音したものではありません。音の波を、プログラムで一から計算して作っています。録音を使わないので権利の心配がなく、長さや高さを細かく調整でき、何度でも同じ音を作り直せます。この記事では、その仕組みを、実際の素材の音を聴きながら紹介します。
音は「空気の波」を数字で表したもの
パソコンの中の音は、空気の振動(波)の大きさを、1秒間に何万回も記録した数字の列です。当サイトの素材は、1秒あたり44,100回(44.1kHz)の数字でできています。つまり、この数字の列を計算で作れば、録音しなくても音ができます。
たとえば、電子機器の「ピッ」という音は、次のような短いプログラムで作れます(Python と numpy の例)。
import numpy as np
sr = 44100 # 1秒あたりの数字の数
t = np.arange(int(sr * 0.12)) / sr # 0.12秒ぶんの時刻
x = np.sin(2 * np.pi * 2000 * t) # 1秒に2000回ゆれる波(正弦波)
env = np.minimum(t / 0.003, 1) * np.minimum((0.12 - t) / 0.02, 1)
beep = 0.5 * x * env # 3ミリ秒で立ち上がり、最後の20ミリ秒で消える
実際の素材では、これに倍音(元の音の整数倍の高さの成分)を少し混ぜたり、機器の小さなスピーカーらしい音色にしたりして、本物らしく仕上げています。
基本の3つの部品
① 波と「音量の形」
正弦波は、余分な成分のない、一番単純な音です。同じ波でも、鳴り始めから消えるまでの音量の変化(エンベロープ)を変えると、まったく違う音に聞こえます。すぐに立ち上がってすぐ止まれば「ピッ」、すぐに立ち上がってゆっくり消えれば「ポーン」になります。
② ノイズとフィルター
ノイズは、いろいろな高さの成分がでたらめに混ざった「ザー」という音です。ノイズから一部の高さだけを通す(フィルターをかける)と、風、水、こすれる音などが作れます。通す高さを時間とともに動かすと、動画の場面転換でよく使う「シュッ」という風切り音になります。
③ FM合成
1つの波の高さを、別の波で細かくゆらす方法です。ゆらし方によって、ベルや金属、エレクトリックピアノのような、複雑で明るい響きが生まれます。ゆらす量を時間とともに小さくすると、鳴った瞬間だけ明るく、だんだん丸くなる、ベルらしい音になります。
本物の楽器や物の「仕組み」をまねる
楽器や物の音は、その物がどう振動するかで決まります。その振動の仕組みを計算でまねると、より自然な音になります(物理モデルと呼ばれる方法です)。
- 弦(ギターなど): 弦をはじくと、振動が弦の上を行ったり来たりしながら、少しずつ弱まります。これを、短い遅れ(ディレイ)と、高い音から先に弱める仕組みで計算します。エレキギターでは、これにアンプのひずみと、スピーカーの箱の音色を加えています。
- 金属(シンバル、ベル、チャイムなど): 金属を叩くと、整数倍にならない、いくつもの高さで同時に振動します。この「ずれた倍音」を重ねると、金属らしい響きになります。
- 太鼓: 叩いた瞬間に高さが急に下がる胴の鳴りと、叩いた瞬間の当たりの音を重ねて作ります。
場所の響きとスピーカーの音色
同じ音でも、どこで鳴っているかで聞こえ方が変わります。当サイトの「日常生活で聞く電子音」では、音が鳴る場所に合わせて、響きと音色を変えています。
- 家電: 小さなスピーカーから出る、低い音の少ない音色と、部屋の短い響き
- エレベーター: 狭い箱の中の、短く明るい響き
- 駅のホーム: 広い空間の、長く遅れて返ってくる響き
- トラックの拡声器: 中くらいの高さだけが強い、少しひずんだ音色と、屋外の反射
仕上げと確認
作った音は、そのまま配るのではなく、次の仕上げをしています。
- 音量をそろえる: 素材どうしを並べて使いやすいように、聞こえの大きさをそろえます(BGMと声の音量バランスで数値を紹介しています)。
- 前後の無音を切り、終わりを自然に消す: 音が途中で切れると「プツッ」と雑音が出るので、最後はなめらかに消します。
- ループのつなぎ目をなめらかにする: 繰り返して使う素材は、末尾の余韻を先頭に足し戻して、つなぎ目で音が切れないようにしています。
- 図で確かめる: すべての音を、この記事の図と同じ、波形とスペクトログラムの図にして、音切れや雑音、意図しない無音がないかを確かめています。
録音やAIを使っている素材もあります
すべてを計算で作っているわけではありません。動物の鳴き声や森の音のように、計算では本物らしさを出しにくいものは、パブリックドメインやCC0で公開されている実際の録音を選んで編集しています(出典・ライセンスに記載)。また、ボイスとBGMは、オープンソースのAIで作っています。ボイスの作り方は、AI音声のイントネーションを自動でチェックするで紹介しています。
どの作り方の素材も、実在の企業の音や有名な曲には似せない方針で作っています。気になる音があれば、お問い合わせからお知らせください。