表情の時系列変化を可視化する表情空間チャート

本論文では,表情空間の動的多様性を定量化する表情空間チャートという枠組みを提案する.表情空間チャートは,「喜び」,「怒り」,「悲しみ」の3表情を対象として,各表情の覚醒度を軸とする表情の表出レベルをチャート状に表現したものであり,教師ニューラルネットワークのSOM(Self-Organizing Maps)とFuzzy ART(Adaptive Resonance Theory)を用いて生成する.評価実験では,Ekman が定義した基本6表情の中から「喜び」,「怒り」,「悲しみ」の3表情を対象として,被験者 10 名の7週間から 20 週間に及ぶ独自の長期表情画像データセットを構築し,各被験者...

Full description

Saved in:
Bibliographic Details
Published in知能と情報 Vol. 23; no. 2; pp. 157 - 169
Main Authors 門脇, さくら, 間所, 洋和, 佐藤, 和人
Format Journal Article
LanguageJapanese
Published 日本知能情報ファジィ学会 2011
Subjects
Online AccessGet full text
ISSN1347-7986
1881-7203
DOI10.3156/jsoft.23.157

Cover

Abstract 本論文では,表情空間の動的多様性を定量化する表情空間チャートという枠組みを提案する.表情空間チャートは,「喜び」,「怒り」,「悲しみ」の3表情を対象として,各表情の覚醒度を軸とする表情の表出レベルをチャート状に表現したものであり,教師ニューラルネットワークのSOM(Self-Organizing Maps)とFuzzy ART(Adaptive Resonance Theory)を用いて生成する.評価実験では,Ekman が定義した基本6表情の中から「喜び」,「怒り」,「悲しみ」の3表情を対象として,被験者 10 名の7週間から 20 週間に及ぶ独自の長期表情画像データセットを構築し,各被験者の表情空間チャートを生成した結果,被験者間の表情の多様性と各被験者における時系列変化を可視化することができた.更に,表情空間チャートから人間が抱える心理的ストレスが表情に与える影響について分析するために,心理的ストレスシートを用いて慢性的ストレスを測定し,SVM(Support Vector Machines)によりストレスレベルを推定した.その結果,10 名全体で 68.6%,10 週間以上の被験者5名では 77.4%の推定率が得られたことから,表情空間チャートからストレスレベルを推定できる見通しが得られた.
AbstractList 本論文では,表情空間の動的多様性を定量化する表情空間チャートという枠組みを提案する.表情空間チャートは,「喜び」,「怒り」,「悲しみ」の3表情を対象として,各表情の覚醒度を軸とする表情の表出レベルをチャート状に表現したものであり,教師ニューラルネットワークのSOM(Self-Organizing Maps)とFuzzy ART(Adaptive Resonance Theory)を用いて生成する.評価実験では,Ekman が定義した基本6表情の中から「喜び」,「怒り」,「悲しみ」の3表情を対象として,被験者 10 名の7週間から 20 週間に及ぶ独自の長期表情画像データセットを構築し,各被験者の表情空間チャートを生成した結果,被験者間の表情の多様性と各被験者における時系列変化を可視化することができた.更に,表情空間チャートから人間が抱える心理的ストレスが表情に与える影響について分析するために,心理的ストレスシートを用いて慢性的ストレスを測定し,SVM(Support Vector Machines)によりストレスレベルを推定した.その結果,10 名全体で 68.6%,10 週間以上の被験者5名では 77.4%の推定率が得られたことから,表情空間チャートからストレスレベルを推定できる見通しが得られた.
Author 佐藤, 和人
間所, 洋和
門脇, さくら
Author_xml – sequence: 1
  fullname: 門脇, さくら
  organization: SmartDesign 株式会社
– sequence: 1
  fullname: 間所, 洋和
  organization: 秋田県立大学システム科学技術学部
– sequence: 1
  fullname: 佐藤, 和人
  organization: 秋田県立大学システム科学技術学部
BookMark eNo9UMtKw0AUHaSCbXXnbyTOo8lMlrX4goIbXQ-TyYw21FaSbFwmQahYEBQiXYoiutGFO_VvhrT1L6xG3JwH53DhngaoDYYDBcA6gjZBjrsRxkOd2JjYyKFLoI4YQxbFkNQWmrSoRT3mroBGHIcQuh50UB1szu-epvm5SV-mk2z29lGObsuHi3JcmOy6vHqdPxY_Op2Y7LJqzp7fv4obk6cmvzf5p8lHq2BZi36s1v64CQ63tw46u1Z3f2ev0-5aIYYUWi4UCilGPEKRiyVUkmHqScfXmgk_0L6jlCaYau35amEEZFIELQYZgRh5AWmCdnU3jBNxpPhp1DsR0RkXUdKTfcV_v-eYcFzBYoT_TB6LiIeCfANw6286
ContentType Journal Article
Copyright 2011 日本知能情報ファジィ学会
Copyright_xml – notice: 2011 日本知能情報ファジィ学会
DOI 10.3156/jsoft.23.157
DatabaseTitleList
DeliveryMethod fulltext_linktorsrc
Discipline Engineering
Mathematics
EISSN 1881-7203
EndPage 169
ExternalDocumentID article_jsoft_23_2_23_2_157_article_char_ja
GroupedDBID 29K
2WC
5GY
ABJNI
ACGFS
ALMA_UNASSIGNED_HOLDINGS
CS3
D-I
E3Z
EBS
EJD
JSF
KQ8
OK1
RJT
RNS
ID FETCH-LOGICAL-j2070-60ae1e83937162c0ec8279c5bff8abdfb5eef327ff9beb5ea08cad480830219d3
ISSN 1347-7986
IngestDate Wed Sep 03 06:29:07 EDT 2025
IsDoiOpenAccess true
IsOpenAccess true
IsPeerReviewed false
IsScholarly true
Issue 2
Language Japanese
LinkModel OpenURL
MergedId FETCHMERGED-LOGICAL-j2070-60ae1e83937162c0ec8279c5bff8abdfb5eef327ff9beb5ea08cad480830219d3
OpenAccessLink https://www.jstage.jst.go.jp/article/jsoft/23/2/23_2_157/_article/-char/ja
PageCount 13
ParticipantIDs jstage_primary_article_jsoft_23_2_23_2_157_article_char_ja
PublicationCentury 2000
PublicationDate 2011
PublicationDateYYYYMMDD 2011-01-01
PublicationDate_xml – year: 2011
  text: 2011
PublicationDecade 2010
PublicationTitle 知能と情報
PublicationTitleAlternate 日本知能情報ファジィ学会誌
PublicationYear 2011
Publisher 日本知能情報ファジィ学会
Publisher_xml – name: 日本知能情報ファジィ学会
References [19] 柏野明美,柏英康,末森一恵,“臨床検査技師の当直時における唾液アミラーゼモニターによるストレス評価,” 川崎病院医学ジャーナル,vol.5,pp.25-27,2010
[9] H. Madokoro, K. Sato, and M. Ishii, “Orientation Selectivity for Representation of Facial Expression Changes,” The IEEE International Joint Conference on Neural Networks (IJCNN), Orlando, Florida, Aug. 2007.
[14] 鈴木伸一,嶋田洋徳,坂野雄二,福井至,長谷川誠, “心理ストレス反応測定尺度 -Stress Response Scale-18,“ July 2007.
[18] C. Kosniowski, “A first course in algebraic topology,” Cambridge University Press 1980.
[8] H. Madokoro, K. Sato, A. Kawasumi, and S. Kadowaki, “Facial Expression Spatial Charts for Representing of Dynamic Diversity of Facial Expressions,” IEEE Int'l Conf. System, Man, and Cybernetics, (SMC), Oct. 2009.
[7] M. Nishiyama, H. Kawashima, T. Hirayama, and T. Matsuyama, “Facial Expression Representation based on Timing Structures in Faces,” IEEE International Workshop on Analysis and Modeling of Faces and Gestures (W. Zhao et al. (Eds.): AMFG 2005, LNCS 3723), pp.140-154, 2005.
[23] G.A Carpenter, S. Grossberg, and D.B. Rosen, “Fuzzy ART: Fast stable learning and categorization of analog patterns by an adaptive resonance system,” Neural Networks, No.4, pp.759-771, 1991.
[5] J.N. Bassili, “Facial motion in the perception of faces and of emotional expression,” Journal of Experimental Psychology: Human Perception and Performance, Vol.4, No.3, pp.373-379, 1978.
[10] G. Donato, M. S. Bartlett, J. C. Hager, P. Ekman, T. J. Sejnowski, “Classifying Facial Actions,” IEEE Trans. PAMI, Vol.21, No.10, pp.974-989, Oct. 1999.
[3] 赤松茂,“人間とコンピュータによる顔表情の認識[I]-コミュニケーションにおける表情とコンピュータによるその自動解析-,” 信学誌,Vol.85,No.9,pp.680-685,Sep 2002
[2] P. Ekman and W. V. Friesen, “Unmasking the Face: A Guide to Recognizing Emotions from Facial Clues,” Malor Books, 2003.
[21] A. M. Kring and A. H. Gordon, “Sex Differences in Emotion: Expression, Experience, and Physiology,” Journal of Personality and Social Psychology, vol.74, pp.686-703, 1998.
[1] M. Pantic, L. J.M. Rothkrantz, “Automatic Analysis of Facial Expressions: The State of the Art,” IEEE Trans. PAMI, Vol.22, No.12, pp.1424-1445, Dec 2000.
[4] J.A. Russell and M. Bullock, “Multidimensional Scaling of Emotional Facial Expressions: Similarity From Preschoolers to Adults,” Journal of Personality and Social Psychology, vol.48, 1985, pp.1290-1298.
[6] 太田寛志,佐治斉,中谷広正,“顔面筋に基づいた顔構成要素モデルによる表情変化の認識”,信学論(D-II),Vol.J82-DII,No.7,pp.1129-1139,Jul 1999
[13] M. Pantic, M.F. Valstar, R. Rademaker and L. Maat, “Web-based Database for Facial Expression Analysis,“ Proc. IEEE Int'l Conf. Multmedia and Expo, Amsterdam, The Netherlands, July 2005
[17] A.K. Jain and S.K. Bhattacharjee, “Address block location on envelopes using Gabor filters: supervised method,” The 11th IAPR International Conference on Pattern Recognition, vol.II, pp.264-267, Sep. 1992.
[12] M. Bartlett, J. Hager, P. Ekman, and T. Sejnowski. Measuring facial expressions by computer image analysis. Psychophysiology, 36:253-264, 1999.
[15] V. Vapnik, “Statistical Learning Theory,” Wiley, 1998.
[22] T. Kohonen, “Self-organized formation of topologically correct feature maps,” Biological Cybernetics, vol.43, no.1, pp.59-69, 1982.
[20] P. Ekman, “Emotions Revealed: Understanding Faces and Feelings,”” Orion Publishing, 2004.
[16] P. Viola and M.J. Jones, “Rapid Object Detection using a Boosted Cascade of Simple Features,” IEEE Conference on Computer Vision and Pattern Recognition, pp.511-518, 2001.
[11] T. Kanade, J.F. Cohn, and Y. Tian, “Comprehensive database for facial expression analysis,” IEEE Face and Gesture, pp.46-53, 2000.
References_xml – reference: [21] A. M. Kring and A. H. Gordon, “Sex Differences in Emotion: Expression, Experience, and Physiology,” Journal of Personality and Social Psychology, vol.74, pp.686-703, 1998.
– reference: [3] 赤松茂,“人間とコンピュータによる顔表情の認識[I]-コミュニケーションにおける表情とコンピュータによるその自動解析-,” 信学誌,Vol.85,No.9,pp.680-685,Sep 2002.
– reference: [6] 太田寛志,佐治斉,中谷広正,“顔面筋に基づいた顔構成要素モデルによる表情変化の認識”,信学論(D-II),Vol.J82-DII,No.7,pp.1129-1139,Jul 1999.
– reference: [4] J.A. Russell and M. Bullock, “Multidimensional Scaling of Emotional Facial Expressions: Similarity From Preschoolers to Adults,” Journal of Personality and Social Psychology, vol.48, 1985, pp.1290-1298.
– reference: [20] P. Ekman, “Emotions Revealed: Understanding Faces and Feelings,”” Orion Publishing, 2004.
– reference: [15] V. Vapnik, “Statistical Learning Theory,” Wiley, 1998.
– reference: [22] T. Kohonen, “Self-organized formation of topologically correct feature maps,” Biological Cybernetics, vol.43, no.1, pp.59-69, 1982.
– reference: [13] M. Pantic, M.F. Valstar, R. Rademaker and L. Maat, “Web-based Database for Facial Expression Analysis,“ Proc. IEEE Int'l Conf. Multmedia and Expo, Amsterdam, The Netherlands, July 2005
– reference: [23] G.A Carpenter, S. Grossberg, and D.B. Rosen, “Fuzzy ART: Fast stable learning and categorization of analog patterns by an adaptive resonance system,” Neural Networks, No.4, pp.759-771, 1991.
– reference: [16] P. Viola and M.J. Jones, “Rapid Object Detection using a Boosted Cascade of Simple Features,” IEEE Conference on Computer Vision and Pattern Recognition, pp.511-518, 2001.
– reference: [7] M. Nishiyama, H. Kawashima, T. Hirayama, and T. Matsuyama, “Facial Expression Representation based on Timing Structures in Faces,” IEEE International Workshop on Analysis and Modeling of Faces and Gestures (W. Zhao et al. (Eds.): AMFG 2005, LNCS 3723), pp.140-154, 2005.
– reference: [11] T. Kanade, J.F. Cohn, and Y. Tian, “Comprehensive database for facial expression analysis,” IEEE Face and Gesture, pp.46-53, 2000.
– reference: [10] G. Donato, M. S. Bartlett, J. C. Hager, P. Ekman, T. J. Sejnowski, “Classifying Facial Actions,” IEEE Trans. PAMI, Vol.21, No.10, pp.974-989, Oct. 1999.
– reference: [18] C. Kosniowski, “A first course in algebraic topology,” Cambridge University Press 1980.
– reference: [2] P. Ekman and W. V. Friesen, “Unmasking the Face: A Guide to Recognizing Emotions from Facial Clues,” Malor Books, 2003.
– reference: [19] 柏野明美,柏英康,末森一恵,“臨床検査技師の当直時における唾液アミラーゼモニターによるストレス評価,” 川崎病院医学ジャーナル,vol.5,pp.25-27,2010.
– reference: [5] J.N. Bassili, “Facial motion in the perception of faces and of emotional expression,” Journal of Experimental Psychology: Human Perception and Performance, Vol.4, No.3, pp.373-379, 1978.
– reference: [12] M. Bartlett, J. Hager, P. Ekman, and T. Sejnowski. Measuring facial expressions by computer image analysis. Psychophysiology, 36:253-264, 1999.
– reference: [17] A.K. Jain and S.K. Bhattacharjee, “Address block location on envelopes using Gabor filters: supervised method,” The 11th IAPR International Conference on Pattern Recognition, vol.II, pp.264-267, Sep. 1992.
– reference: [1] M. Pantic, L. J.M. Rothkrantz, “Automatic Analysis of Facial Expressions: The State of the Art,” IEEE Trans. PAMI, Vol.22, No.12, pp.1424-1445, Dec 2000.
– reference: [8] H. Madokoro, K. Sato, A. Kawasumi, and S. Kadowaki, “Facial Expression Spatial Charts for Representing of Dynamic Diversity of Facial Expressions,” IEEE Int'l Conf. System, Man, and Cybernetics, (SMC), Oct. 2009.
– reference: [9] H. Madokoro, K. Sato, and M. Ishii, “Orientation Selectivity for Representation of Facial Expression Changes,” The IEEE International Joint Conference on Neural Networks (IJCNN), Orlando, Florida, Aug. 2007.
– reference: [14] 鈴木伸一,嶋田洋徳,坂野雄二,福井至,長谷川誠, “心理ストレス反応測定尺度 -Stress Response Scale-18,“ July 2007.
SSID ssj0069051
ssib023159992
ssib058986276
ssib029852168
ssib002484266
ssib001106413
ssib017172185
ssib002484577
ssib002222523
ssib000937382
Score 1.8481989
Snippet 本論文では,表情空間の動的多様性を定量化する表情空間チャートという枠組みを提案する.表情空間チャートは,「喜び」,「怒り」,「悲しみ」の3表情を対象として,各表情の...
SourceID jstage
SourceType Publisher
StartPage 157
SubjectTerms サポートベクタマシーン
自己組織化マップ
表情空間チャート
適応共鳴理論
Title 表情の時系列変化を可視化する表情空間チャート
URI https://www.jstage.jst.go.jp/article/jsoft/23/2/23_2_157/_article/-char/ja
Volume 23
hasFullText 1
inHoldings 1
isFullTextHit
isPrint
ispartofPNX 知能と情報, 2011/04/15, Vol.23(2), pp.157-169
journalDatabaseRights – providerCode: PRVAFT
  databaseName: Open Access Digital Library
  customDbUrl:
  eissn: 1881-7203
  dateEnd: 99991231
  omitProxy: true
  ssIdentifier: ssj0069051
  issn: 1347-7986
  databaseCode: KQ8
  dateStart: 20060101
  isFulltext: true
  titleUrlDefault: http://grweb.coalliance.org/oadl/oadl.html
  providerName: Colorado Alliance of Research Libraries
link http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMwpR1Na9VAMNR60YP4id_04B5Tk_3IznpLXlOKUEFoobdH8l5yeIcqtr14ax9CRUFQqPQoiiiIHryp_ya8tv4LZ3aT99LSg1V4LJvZmd2dmQ0zs9md53l3MgVa4kvkQxb2famC0gcjMeZRXGYFRELYFBuLD6KFZXl_Ra1MnfrSOrW0sZ7P9p4ee6_kX7SKMNQr3ZI9gWbHnSIA66hfLFHDWP6VjlkKLA5ZDCyNGAgGiqVYIiQliDEMOEs1SwRLEpYqBsCMpkqMLqSxkA4zkaXizHALmWfxvO05sk1tnJD6dMiQHDe6ZrFhScxSQyRGWGRL6CpxA0k6TRO0_WPqweAEFHVOaHMNR-1RcP4BS8aLpR4NAkuEnGlaOM2EG5kgX_XMzRFCmmZE8qBzkEQYsURaBhXJBDoTfEkzMnYgFCRK0eLXaLY5ZvXWR7_ZGx4ve6sTbZnDSofFnePYPcplLaeaD04id5UEGoiwyHOkMZoCqituGRshta9NkwrcwQBCnz6Nty2Uu5Fdv4m8ZW5Cl9y79lxC96c3R42iwBCdjOIa2vVZLmbHRIfSjNeLuGvRulx0uSsQu9u00UXA7gCjkdOcdr_oCMTDljNvKEtW6xZ2iO7uIWcRbUfb2ZZA7uGhZzW5FR1q2p2YZFbCQERhNDPunxtA13MSLCtASXJyrp0fFlHmObvdUkvZXXshadxtywJdzwEGYs0hTutXLp33ztUB4UzsmL_gTQ2yi97ZVppQfFoc51Zeu-QlB-8-7Q2fVZtf93a39r__HG2_HX14Pnq5U229Hr36dvBxh-qbu9XWC4e5__nH75031XCzGr6vhr-q4fZlb3k-Xeos-PU_ofgDjjbZj4KsCAuwySsj3guKHnBteiovS8jyfpmroigF12Vp8gIfsgB6WV9CQNn9QtMXV7zp1UerxVVvJhAFSBkVUhmQfW1yLXIUNgnfZCrX17x7Thzdxy7dTfcEK-P6_xDf8M64Dzb0u-lNrz_ZKG6hx7-e37YL7Q94hsny
linkProvider Colorado Alliance of Research Libraries
openUrl ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E8%A1%A8%E6%83%85%E3%81%AE%E6%99%82%E7%B3%BB%E5%88%97%E5%A4%89%E5%8C%96%E3%82%92%E5%8F%AF%E8%A6%96%E5%8C%96%E3%81%99%E3%82%8B%E8%A1%A8%E6%83%85%E7%A9%BA%E9%96%93%E3%83%81%E3%83%A3%E3%83%BC%E3%83%88&rft.jtitle=%E7%9F%A5%E8%83%BD%E3%81%A8%E6%83%85%E5%A0%B1&rft.au=%E9%96%80%E8%84%87%2C+%E3%81%95%E3%81%8F%E3%82%89&rft.au=%E9%96%93%E6%89%80%2C+%E6%B4%8B%E5%92%8C&rft.au=%E4%BD%90%E8%97%A4%2C+%E5%92%8C%E4%BA%BA&rft.date=2011&rft.pub=%E6%97%A5%E6%9C%AC%E7%9F%A5%E8%83%BD%E6%83%85%E5%A0%B1%E3%83%95%E3%82%A1%E3%82%B8%E3%82%A3%E5%AD%A6%E4%BC%9A&rft.issn=1347-7986&rft.eissn=1881-7203&rft.volume=23&rft.issue=2&rft.spage=157&rft.epage=169&rft_id=info:doi/10.3156%2Fjsoft.23.157&rft.externalDocID=article_jsoft_23_2_23_2_157_article_char_ja
thumbnail_l http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/lc.gif&issn=1347-7986&client=summon
thumbnail_m http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/mc.gif&issn=1347-7986&client=summon
thumbnail_s http://covers-cdn.summon.serialssolutions.com/index.aspx?isbn=/sc.gif&issn=1347-7986&client=summon