[ English | Japanese ]


VocaListener2�i�ڂ��肷2�j: ���[�U�̏��̉����Ɖ��ʂ����łȂ����F�ω����^����̐������V�X�e��

This project is proposed and researched by Tomoyasu Nakano and Masataka Goto.
twitter�A�J�E���g: @VocaListener
twitter�n�b�V���^�O: #vocalis

Abstract:

�@�{�e�ł́A���[�U�̉̏��������炻�̐��F�i���킢��j�ω���^���ĉ̐��������� �V�X�e��VocaListener2 ���Ă���B��X���ȑO�J������VocaListener �ł́A�� ���Ɖ��ʂ݂̂�^���ĉ̐������p�����[�^�𐄒肵�Ă������AVocaListener2 �ł͂� ����g�����Đ��F�ω��ɂ��Ή�����B�]���A��ɐ����ϊ��⃂�[�t�B���O�̂��߂ɁA �����𑀍삷��Z�p�͂��������A���[�U�̏��̐��F�ω��𔽉f���邱�Ƃ͂ł��Ȃ��� ���BVocaListener2 ���������邽�߂ɁA�܂�VocaListener �ɂ���ă��[�U�̏��̉� ���Ɖ��ʂ�^�������l�ȉ̐����������Đ��F��Ԃ��\�����A���̌��ʂ�p���ă��[�U �̏��̐��F�ω��𔽉f���č�������B�s�̂̉̐������V�X�e����p���Ď����������ʁA VocaListener2 �ł͉����Ɖ��ʂɉ����Đ��F�ω����^���邱�Ƃ��ł��Ă����B


Overview:

�܂��A��X���ȑO�J������ VocaListener1 ��p���āA ���[�U�̏���^���āA�������������������̉̏��҂ɂ��̏������������I�ɐ�������B �����ŁA �����ΏۂƂȂ铯��̏��҂̐��F���قȂ�̏��i��: �����~�N�Ə����~�N�E�A�y���h�j�� �����ɍ�������B ����ɂ���āA �e�����ɂ����ĉ����E���ʁE���C�����������̏��������邽�߁A �����S�Ă����p���āA���F�ω��ȊO�̐�����}���������F��Ԃ��\������B �����ł́A�S�Ẳ̏����e�����ɂ����Đ��F��ԏ�̈�_�ɑΉ����A ���̎��ԕω��́A���F��ԏ�̎��ԕω�����O�ՂƂ��ĕ\���ł���B

�����āA�����ۑ�(2) ���������邽�߂ɁAVocaListener1 �ɂ�� ����̏��҂̐��F���قȂ鍇�����ʁi���������̏��j�́A ���F��ԏ�ɂ����镡���̋O�Ղɂ‚��āA �������܂ނ悤�ȑ��ʑ́i�|���g�[�v�j�Ƃ��̎��ԋO�Ղ��l���A ����𐺐F�ω��`���[�u�ƌĂԁB ���F��Ԃ� 3 ������ԂƂ���ƁA�����Ώۂ̐��F�́A �e�����ɂ����� 7 �i�����~�N�ADARK�ALIGHT�ASOFT�ASOLID�ASWEET�AVIVID�j �� 3 �����x�N�g�������̋�ԏ�ɑ��݂��A ����� 7 �‚̓_�Ɉ͂܂ꂽ�������A ��������������̉̏��҂̕ό`�”\�ȗ̈�Ɩ{�����ł͉��肷��B �‚܂�A���̎��X���X�ƕω����鑽�ʑ́i3 �����|���g�[�v�j �����F�ω��”\�ȗ̈�ł���ƍl����B ���������āA���������F��Ԃ̕ʂ̏ꏊ�ɑ��݂��郆�[�U�̏��̋O�Ղ� ���F�ω��`���[�u���ɂȂ�ׂ�����悤�ɃV�t�g�E�X�P�[�����O�����邱�ƂŁA �e�����ɂ����鐺�F��ԏ�̍����ڕW�ʒu�����肷��B ���̈ʒu����o�͂��鍇���̏��̃X�y�N�g����𐶐����� VocaListener2 ����������B

Overview of VocaListener2
�}1: VocaListener2 �ɂ����鏈���̗���B
���[�U�̏��̉̂�����^���������̐����ƕ����̐��F�̉̏�����A
���F��Ԃ��\�z���A���[�U�̏��̐��F�ω���^����悤�ɍ�������B

Demonstrations:

�{�����̃f�����X�g���[�V��������̈ꕔ���A

�Ɍf�ڂ����Ē����܂����i2010�N7��26���j�B
VocaListener2 Demo 01a
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u�����~�N�v�Ɓu�����~�NAppend�iDARK, LIGHT, SOFT, SOLID, SWEET, VIVID�j�v)

VocaListener2 Demo 01b
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iDARK�j�v)

VocaListener2 Demo 01c
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iLIGHT�j�v)

VocaListener2 Demo 01d
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iSOFT�j�v)

VocaListener2 Demo 01e
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iSOLID�j�v)

VocaListener2 Demo 01f
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iSWEET�j�v)

VocaListener2 Demo 01g
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�A�X�y�N�g���ό`�Ȗ�: �u�����~�N�v����u�����~�NAppend�iVIVID�j�v)

VocaListener2 Demo 01h
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-G-2001 No.91�u�務�D�v�A��������:�u���������v�Ɓu���������[��Append�v)




�{�����̃f�����X�g���[�V��������̈ꕔ���A

�Ɍf�ڂ����Ē����܂����i2010�N8��6���j�B
VocaListener2 Demo 02
VocaListener2�f�����X�g���[�V���� (�g�p�y��: RWC-MDB-P-2001 No.7�uPROLOGUE�v�A��������:�u�����~�N�v�Ɓu�����~�NAppend�iDARK, LIGHT, SOFT, SOLID, SWEET, VIVID�j�v�A�ҋ�: �c���A�}�m)



Acknowledgments:

�{�����̈ꕔ�́A�Ȋw�Z�p�U���@�\CrestMuse �v���W�F �N�g�ɂ��x�����󂯂܂����B�{�����ł́A ���}�n������Ђ̊J������ Vocaloid �y�� Vocaloid 2 �̉��p���i�ł���A �N���v�g���E�t���[�`���[�E���f�B�A������Ђ� �uKAITO�v, �uMEIKO�v�i�ȏ�AVocaloid�j�A �u�����~�N�v, �u���������v, �u���������v, �u�������J�v, �u�����~�NAppend�v�i�ȏ�AVocaloid 2�j ���g�p�����Ă��������܂����B �܂��A������ Vocaloid 2 �̉��p���i�ł��� ������ЃC���^�[�l�b�g�� �u�������ۂ��ǁv, �u���O�b�|�C�h�v�A AH-Software�� �u�X�R�L���e���v, �u�̈����L�v, �uSF-A2�J���R�[�hmiki�v���g�p�����Ă��������܂����B

�{�����ł́ARWC �����p���y�f�[�^�x�[�X(���y�W������ RWC-MDB-G-2001) ���g�p���܂����B

�u���������[��Append�v�̖��̂̎g�p�́A�N���v�g���E�t���[�`���[�E���f�B�A������Ђ��狖�‚𓾂܂����B


References:

  1. ���� �ϖ�, �㓡�^�F:
    VocaListener2: ���[�U�̏��̉����E���ʂɉ����Đ��F�ω����^����̐������V�X�e��,
    ��񏈗��w��_����,
    Vol.54, No.6, pp.1771-1783, June 2013.
    [�_��PDF]
  2. �㓡 �^�F, ���� �ϖ�, ���c �G�i, ���� �v��, ���� �T��Y, ���� ��m:
    "�l�Ԃ̉̂�����^����̐������V�X�e��VocaListener�ƃ��{�b�g�瓮�쐶���V�X�e��VocaWatcher",
    �V�X�e��/����/���(�V�X�e��������w�),
    Vol.56, No.5, pp.249-255, May 2012.
  3. Masataka Goto, Tomoyasu Nakano, Shuuji Kajita, Yosuke Matsusaka, Shin'ichiro Nakaoka, and Kazuhito Yokoi:
    "VocaListener and VocaWatcher: Imitating a Human Singer by Using Signal Processing",
    In Proceedings of the 2012 IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP 2012),
    pp.5393-5396, March 2012.
    [PDF]
  4. Tomoyasu Nakano and Masataka Goto:
    VocaListener2: A Singing Synthesis System Able to Mimic a User's Singing in Terms of Voice Timbre Changes as well as Pitch and Dynamics,
    In Proceedings of the 36th International Conference on Acoustics, Speech and Signal Processing (ICASSP2011),
    pp.453-456, May 2011.
    [�_��PDF]
  5. ���� �ϖ�, �㓡�^�F:
    VocaListener2: ���[�U�̏��̐��F�ω���^����̐������V�X�e��,
    ���{�����w�� 2011�N �t�G�������\�� �u���_���W,
    3-7-11, pp.321-324, March 2011,
    [�_��PDF]
  6. ����ϖ�, �㓡�^�F:
    VocaListener2: ���[�U�̏��̉����Ɖ��ʂ����łȂ����F�ω����^����̐������V�X�e���̒��,
    ��񏈗��w�� ������ ���y���Ȋw������,
    Vol.2010-MUS-86, No.3, pp.1-10, July 2010.
    (��񏈗��w�� ���y���Ȋw������ �w�ẴV���|�W�E��2010�x �x�X�g�v���[���e�[�V������ ���)
    [�_��PDF] [���\����PDF]

The copyright of each publication is retained by the corresponding academic society (copyright holder). The IPSJ publications are published on this web site under the copyright guidelines of the IPSJ (in Japanese).


���f�B�A�񓹁A�L���ꗗ:

  1. ITmedia News: 2010�N7��30��(��)
    3�������F��ԂŐ��̕ω��܂ł�͕킷��u�ڂ��肷2�v�@���������^��Append�̎d�g�݂Ƃ́H
  2. �C���v���X AV Watch: 2010�N8��16��(��)
    �g�̐��h�̍Ő�[�Z�p���W�߂��V���|�W�E�� �`�u�ڂ��肷2�v�����\���ꂽ�u�̐���񏈗��őO��! �v�`

Tomoyasu Nakano and Masataka Goto