HAPTIC PRESENTATION DEVICE AND PROGRAM

• Main Authors: MOCHIZUKI TAKAHIRO, TAKAHASHI MASAKI, SASAKI MOMOKO
• Format: Patent
• Language: English; Japanese
• Published: 08.02.2024
• Subjects: DEAF-AID SETS; ELECTRIC COMMUNICATION TECHNIQUE; ELECTRICITY; LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKEACOUSTIC ELECTROMECHANICAL TRANSDUCERS; PICTORIAL COMMUNICATION, e.g. TELEVISION; PUBLIC ADDRESS SYSTEMS; STEREOPHONIC SYSTEMS

To generate information for presenting haptic stimulus that contributes to improvement of immersiveness when a viewer views video.SOLUTION: A video analysis unit 11 of a haptic presentation device 1 is configured to: obtain a plurality of time-series frames by sampling video E; detect rectangular coordinates of one or more objects in each of the frames; calculate rectangular data v (a moving amount v1(n) of a center of a rectangle, a rectangle area v2(n), and a rectangle magnification v3(n)) of an object having a maximum area; extract maximum rectangle data vmax; and calculate a sound volume amplification amount a(n) on the basis of the rectangle data v and the maximum rectangle data vmax. A sound volume control unit 12 extracts a low-frequency sound signal S or the like from the video E, and multiples the sound volume amplification amount a(n) by sound volume A of the low-frequency sound signal S, to generate a new low-frequency sound signal S' with the amplified sound volume A. A haptic presentation unit 13 outputs the low-frequency sound signal S' to a haptic device 7.SELECTED DRAWING: Figure 1 【課題】視聴者が映像を視聴する際に、没入感向上に寄与する触覚刺激を提示するための情報を生成する。【解決手段】触覚提示装置１の映像解析部１１は、映像Ｅをサンプリングして時系列の複数のフレームを取得し、複数のフレームのそれぞれについて、１または複数の物体の矩形座標を検出し、面積が最大の物体の矩形データｖ（矩形中心の移動量ｖ1（ｎ）、矩形面積ｖ2（ｎ）及び矩形拡大率ｖ3（ｎ））を算出し、最大矩形データｖmaxを抽出し、矩形データｖ及び最大矩形データｖmaxに基づいて音量増幅量ａ（ｎ）を算出する。音量制御部１２は、映像Ｅから低周波音声信号Ｓ等を抽出し、低周波音声信号Ｓの音量Ａに音量増幅量ａ（ｎ）を乗算することで、音量Ａを増幅した新たな低周波音声信号Ｓ'を生成する。触覚提示部１３は、低周波音声信号Ｓ'を触覚デバイス７へ出力する。【選択図】図１