音風景ブログ

目隠しテストによるエンコーダの音質評価などを行うブログです。

Opus,Ogg,AACの音質比較

概要

Opus Audio Codec, Ogg Vorbis, AACの80kbpsでの音質比較。

結果

Opus ≒ Ogg > AAC
OpusとOggが互角、qaac(Apple社のAACエンコーダを借りてエンコードするソフト)でtvbrエンコードしたAACの音質は比較的悪い。

評価

エンコーダ opus aoTuV aoTuV qaac
リリース年 2012 2011 2009 2012
バージョン v0.9.9 B6.03 B5.7 1.31
フォーマット Opus Ogg Ogg AAC
ビットレート 80000 q0.80 q0.86 tv36
41_30sec 打楽器 2.8 3.0 3.1 2.6
finalfantasy 撥弦楽 2.9 3.3 3.2 3.1
ATrain ジャズ 2.8 2.8 3.0 3.5
BigYellow POPS 3.3 3.3 3.4 2.8
FloorEssence テクノ 3.3 3.3 3.4 3.0
macabre オケ 3.2 2.9 3.0 3.0
mybloodrusts 弦楽器 3.5 3.4 3.3 3.1
Quizas ラテン 3.2 3.3 3.1 2.9
VelvetRealm テクノ 3.1 3.6 3.3 3.3
雨降花 POPS 3.5 3.1 3.2 2.8
Trust Gosp 3.0 3.3 3.3 2.6
Waiting ロック 3.1 2.8 2.9 2.8
Experiencia ラテン 3.6 3.3 3.3 2.9
HeartToHeart POPS 3.3 3.1 3.0 2.6
Tom's Diner 女声 3.4 3.3 3.3 3.0
ReunionBlues ジャズ 3.2 3.1 3.0 3.5
French 男女声 3.5 3.3 3.2 3.1
undelete POPS 3.3 3.5 3.3 3.2
Dimmu Borgir メタル 3.4 3.3 3.3 2.9
Run up POPS 3.6 3.7 3.6 3.1
↑音源 平均点 3.23 3.22 3.19 2.97
実レート 83k 83k 83k 80k
全サイズ(KB) 4850 4859 4853 4676
エンコーダ opus aoTuV aoTuV qaac

テストに利用した音源を試聴したい方、ダウンロードしたい方、ログを見たい方はこちらへ。
http://zak.s206.xrea.com/bitratetest/main.htm

方法

銘柄に対する先入観が影響しないように、PSP abc/hr v2.1とRP-HT560を利用して、4個の音声ファイルをランダムに並び替えてして、銘柄を伏せた状態で聴いて採点した。1.0=音質劣化が非常に気になる 2.0=気になる 3.0=少し気になる 4.0=原音からの音質変化が分かるが、気にならない 5.0=音質変化がわからない、区別できない。4.9点以下の評点をつける場合は、ABXYテストを15回行い、12回以上(これ以上の成績をまぐれで出す確率は約2%)正解して、違いを聞き取れることを確認してからそうした。
同じテストをもう一度行い、2評点の平均を求めた。このテストでの採点は、20(音源)×4(エンコーダ)×2(回)=160(回)。

使用したオプション

sox -D %wavfile% -b 16 "temp1.wav" gain -1 rate -v 48000
sox -D "temp1.wav" "temp1.raw"
opus -e audio 48000 2 80000 "temp1.raw" %outfile.opus%
opus -d 48000 2 "outfile.opus" "temp2.raw"
sox -D -r 48000 -e signed -b 16 -c 2 "temp2.raw" -b 16 %outfile.wav% gain 1 rate -v 44100
venc570 -q0.86 %wavfile% %outfile.ogg%
venc603 -q0.80 %wavfile% %outfile.ogg%
qaac --tvbr 36 -o %outfile.mp4% %wavfile%

詳細な優劣の分析

FRIEDMAN version 1.24 (Jan 17, 2002) http://ff123.net/
Blocked ANOVA analysis

Number of listeners: 20
Critical significance:  0.05
Significance of data: 8.46E-005 (highly significant)
---------------------------------------------------------------
ANOVA Table for Randomized Block Designs Using Ratings

Source of         Degrees     Sum of    Mean
variation         of Freedom  squares   Square    F      p

Total               79           4.59
Testers (blocks)    19           1.71
Codecs eval'd        3           0.90    0.30    8.60  8.46E-005
Error               57           1.98    0.03
---------------------------------------------------------------
Fisher's protected LSD for ANOVA:   0.118

Means:

opus     ao_new   ao_old   qaac
  3.22     3.22     3.19     2.97

---------------------------- p-value Matrix ---------------------------

         ao_new   ao_old   qaac
opus     0.899    0.528    0.000*
ao_new            0.613    0.000*
ao_old                     0.000*
-----------------------------------------------------------------------

opus is better than qaac
ao_new is better than qaac
ao_old is better than qaac

整形済みデータ

% Opus/Ogg/Aac 80kbps ABC/HR score
opus_v0.9.9	aoTuV_b6.03	aoTuV_b5.7	qaac_tvbr
%features	7	Opus	Ogg Vorbis	Ogg Vorbis	AAC-LC	
2.850	3.000	3.100	2.550	
2.900	3.250	3.150	3.050	
2.800	2.850	3.000	3.450	
3.250	3.300	3.400	2.850	
3.250	3.350	3.400	2.950	
3.150	2.850	2.950	2.950	
3.500	3.350	3.250	3.050	
3.200	3.300	3.050	2.900	
3.050	3.550	3.300	3.250	
3.450	3.100	3.200	2.850	
3.000	3.250	3.250	2.600	
3.100	2.850	2.850	2.800	
3.550	3.300	3.250	2.900	
3.300	3.050	3.000	2.600	
3.350	3.250	3.250	2.950	
3.150	3.050	3.000	3.450	
3.500	3.250	3.200	3.050	
3.250	3.450	3.300	3.200	
3.350	3.350	3.250	2.900	
3.550	3.650	3.600	3.050	

注:公開試聴試験での多人数の平均評点と管理人の評点が似たような傾向になることは確認しているので言えるが、ある個人がある再生環境で、ある価値観のもとに聞いたときの評価が、ここに書いた管理人の評価に似るかどうかまでは何とも言えない。また、今回利用した音源とは傾向の異なる音を多くエンコードした場合、結果や順位が異なる可能性があります。