2024/04/11 更新

写真a

シュ シンヨウ
朱 臻陽
Shinyo Shu
所属
大学院 総合研究部 工学域 電気電子情報工学系(コンピュータ理工学) 助教
職名
助教

共同研究・競争的資金等の研究

  • 色覚障がいシミュレーションモデル及び障がいの度合計測技術開発に関する研究

    研究課題/領域番号:23K16899  2023年4月 - 2026年3月

    日本学術振興会  山梨大学  若手研究

    朱臻陽

      詳細を見る

    担当区分:研究代表者  資金種別:競争的資金  資金の種類:科学研究費補助金

  • 深層学習による色覚障がい支援のための意味論的情報補償

    研究課題/領域番号:22K21274  2022年8月 - 2024年3月

    日本学術振興会  山梨大学  研究活動スタート支援

    朱 臻陽

      詳細を見る

    担当区分:研究代表者  資金種別:競争的資金  資金の種類:科学研究費補助金

    本研究課題では,色覚障がいによる意味論的情報損失を補償するために,深層学習モデル及びAR Glassesを取り入れた色覚補償技術の確立に向けて,以下の3つの課題に取り組む.(1)AR Glassesを装着するユーザを中心にし,深層学習モデルを搭載するサーバと連携し,ユーザに色覚支援用情報を提供する.(2)ユーザがおかれるシチュエーションに合わせて,二つの使用モードを設計し,それぞれに必要な深層学習モデルを実装する.(3)実装される深層学習モデルの学習に必要とされる色ラベル付き画像データセットを収集するために,既存のオブジェクト検出用深層学習モデルを利用して,自動的な収集方法を開発する.

  • 深層学習による色覚障がい支援用焼肉補償用システムの開発

    2022年7月 - 2023年3月

    山梨大学工学部  萌芽研究トライアル

    朱 臻陽、茅 暁陽

      詳細を見る

    担当区分:研究代表者  資金の種類:他の外部資金

論文

  • Seamless Image Editing for Perceptual Size Restoration Based on Seam Carving 査読

    Naohiko Ishikawa, Zhenyang Zhu, Jong-Nam Kim, Wan-Young Chung, Kentaro Go, Xiaoyang Mao

    CGI 2023: Advances in Computer Graphics   2024年1月( ISSN:0302-9743 )

     詳細を見る

    記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    DOI: 10.1007/978-3-031-50069-5_27

  • Image recoloring for color vision deficiency compensation using Swin transformer 査読

    Ligeng Chen, Zhenyang Zhu, Wangkang Huang, Kentaro Go, Xiaodiao Chen, Xiaoyang Mao

    NEURAL COMPUTING & APPLICATIONS   2024年1月( ISSN:0941-0643 )

     詳細を見る

    記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1007/s00521-023-09367-2

  • Metamorphopsia Insepction System based on Relevance Feedback 査読

    Zhenyang Zhu, Katsuhito Moritake, Kenji Kashiwagi, Masahiro Toyoura, Kentaro Go, Issei Fujishiro, Xiaoyang Mao

    International Conference on System, Man and Cybernetics 2023   2023年10月

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    DOI: 10.1109/SMC53992.2023.10394105

  • Fast Image Recoloring for Anomalous Trichromacy with Contrast Enhancement and Naturalness Preservation 査読

    Haiqiang Zhou,Wangkang Huang,Zhenyang Zhu,Xiaodiao Chen,Xiaoyang Mao

    2023年9月

     詳細を見る

    担当区分:責任著者   記述言語:英語   掲載種別:研究論文(研究会,シンポジウム資料等)  

  • Deep Learning and Augmented-Reality Glasses based Meat Cooking Support for Color Vision Disorder Compensation 査読

    Shota Chiba, Zhenyang Zhu, Daisuke Inoue, Xiaoyang Mao

    NICOGRAPH International 2023   62 - 67   2023年8月

     詳細を見る

    記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    DOI: 10.1109/NICOINT59725.2023.00019

  • CC-Glasses: Color Communication Support for People with Color Vision Deficiency Using Augmented Reality and Deep Learning 査読

    Zhenyang Zhu, Jiyi Li, Ying Tang, Kentaro Go, Masahiro Toyoura, Kenji Kashiwagi, Issei Fujishiro, Xiaoyang Mao

    Augmented Humans International Conference   190 - 199   2023年3月

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    DOI: 10.1145/3582700.3582707

  • A Study on Contextual Task Performance of Simulated Homonymous Hemianopia Patients with Computational Glasses-based Compensation 査読

    Chao Ge, Zhenyang Zhu, Keisuke Ichinose, Issei Fujishiro, Kentaro Go, Kenji Kashiwagi, Masahiro Toyoura, Xiaoyang Mao

    Virtual Reality Continuum and its Applications in Industry   2023年1月

     詳細を見る

    記述言語:英語   掲載種別:研究論文(国際会議プロシーディングス)  

    DOI: 10.1145/3574131.3574441

  • Image recoloring for Red-Green dichromats with compensation range-based naturalness preservation and refined dichromacy gamut 査読

    Wangkang Huang, Zhenyang Zhu, Ligeng Chen, Kentaro Go, Xiaodiao Chen, Xiaoyang Mao

    VISUAL COMPUTER   38   3405 - 3418   2022年6月( ISSN:0178-2789 )

     詳細を見る

    記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1007/s00371-022-02549-4

  • Personalized Image Recoloring for Color Vision Deficiency Compensation 査読 重要な業績

    Zhenyang Zhu, Masahiro Toyoura, Kentaro Go, Kenji Kashiwagi, Issei Fujishiro, Tien-Tsin Wong, Xiaoyang Mao

    IEEE TRANSACTIONS ON MULTIMEDIA   24   1721 - 1734   2022年3月( ISSN:1520-9210 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1109/TMM.2021.3070108

  • Image Recoloring for Color Vision Deficiency Compensation: A Survey 招待 査読 重要な業績

    Zhenyang Zhu, Xiaoyang Mao

    VISUAL COMPUTER   37 ( 12 )   2999 - 3018   2021年7月( ISSN:0178-2789 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1007/s00371-021-02240-0

  • Fast contrast and naturalness preserving image recolouring for dichromats 査読

    Xinyi Wang, Zhenyang Zhu, Xiaodiao Chen, Kentaro Go, Masahiro Toyoura, Xiaoyang Mao

    COMPUTERS & GRAPHICS-UK   98   19 - 28   2021年5月( ISSN:0097-8493 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1016/j.cag.2021.04.027

  • LineM: Assessing Metamorphopsia Symptom Using Line Manipulation Task 査読

    Zhenyang Zhu, Masahiro Toyoura, Issei Fujishiro, Kentaro Go, Kenji Kashiwagi, Xiaoyang Mao

    VISUAL COMPUTER   38   1607 - 1617   2021年2月( ISSN:0178-2789 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1007/s00371-021-02091-9

  • ALCC-Glasses: Arriving Light Chroma Controllable Optical See-Through Head-Mounted Display System for Color Vision Deficiency Compensation 査読

    Ying Tang, Zhenyang Zhu, Masahiro Toyoura, Kentaro Go, Kenji Kashiwagi, Issei Fujishiro, Xiaoyang Mao

    Applied Sciences-Basel   10 ( 7 )   2020年3月( ISSN:2076-3417 )

     詳細を見る

    記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.3390/app10072381

  • Naturalness- and information-preserving image recoloring for red–green dichromats 査読

    Zhenyang Zhu, Masahiro Toyoura, Kentaro Go, Issei Fujishiro, Kenji Kashiwagi, Xiaoyang Mao

    SIGNAL PROCESSING-IMAGE COMMUNICATION   76   68 - 80   2019年8月( ISSN:0923-5965 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1016/j.image.2019.04.004

  • Processing images for red–green dichromats compensation via naturalness and information-preservation considered recoloring 査読

    Zhenyang Zhu, Masahiro Toyoura, Kentaro Go, Issei Fujishiro, Kenji Kashiwagi, Xiaoyang Mao

    VISUAL COMPUTER   35 ( 6-8 )   1053 - 1066   2019年5月( ISSN:0178-2789 )

     詳細を見る

    担当区分:筆頭著者   記述言語:英語   掲載種別:研究論文(学術雑誌)  

    DOI: 10.1007/s00371-019-01689-4

▼全件表示

講演・口頭発表等

  • 知覚サイズを反映した写真生成のための画像自動部分拡大方法

    石川 直彦

    VCシンポジウム2022  2022年10月 

     詳細を見る

    開催年月日: 2022年10月

    記述言語:日本語   会議種別:口頭(一般)  

  • Swin Transformerを利用した色覚障がい支援用色変換手法

    陳 立庚

    VCシンポジウム2022  2022年10月 

     詳細を見る

    開催年月日: 2022年10月

    記述言語:日本語   会議種別:口頭(一般)  

  • Personalized Image Recoloring for Color Vision Deficiency Compensation 招待

    朱 臻陽, 豊浦 正広, 郷 健太郎, 柏木 賢治, 藤代 一成, 黄 田津, 茅 暁陽

    Visual Computing シンポジウム  2021年9月  画像電子学会 ビジュアル・コンピューティング研究会 情報処理学会 コンピュータグラフィックスとビジュアル情報学研究会 映像情報メディア学会 映像表現&コンピュータグラフィックス研究会

     詳細を見る

    開催年月日: 2021年9月

    記述言語:日本語   会議種別:口頭(招待・特別)  

    開催地:オンライン  

    世界中に一億以上の人がそれぞれに異なるレベルの色覚障がいを持っている.色覚障がいによるコントラストロスを補償するために, コントラスト強調と自然さ保存の両方を考慮した支援画像を作る手法がいくつか提案されている.しかし, ほとんどの既存技術は一色が完全に知覚できない二色覚者を対象としている.本研究は障がい者それぞれの障がいの度合に合わせて最適な変換を行う新しい技術を提案する.シミュレーション画像を用いた定量評価と被験者によるパイロットテストにより, 生成された支援画像は元画像のコントラストおよび自然さを保存できることを示した.

  • Eye-tracker-free compensation for metamorphopsia 国際会議

    Katsuhito Moritake, Zhenyang Zhu, Masahiro Toyoura, Kentaro Go, Kenji Kashiwagi, Issei Fujishiro, Xiaoyang Mao

    2021 International Conference on Cyberworlds (CW)  2021年9月 

     詳細を見る

    開催年月日: 2021年9月

    記述言語:英語   会議種別:口頭(一般)  

  • Individual Adaptive Recoloring Method for Color Vision Deficiency Compensation 国際会議

    Zhenyang Zhu

    Eurographics 2021 Doctoral Consortium  2021年5月 

     詳細を見る

    開催年月日: 2021年5月

    記述言語:英語   会議種別:シンポジウム・ワークショップ パネル(公募)  

  • 最適化を利用した二色覚補償のための高速色変換技術

    Zhenyang Zhu, Xinyi Wang, Xiaodiao Chen, Masahiro Toyoura, Xiaoyang Mao

    Visual Computing シンポジウム  2020年12月  画像電子学会 ビジュアル・コンピューティング研究会 情報処理学会 コンピュータグラフィックスとビジュアル情報学研究会 映像情報メディア学会 映像表現&コンピュータグラフィックス研究会

     詳細を見る

    開催年月日: 2020年12月

    記述言語:日本語   会議種別:口頭(一般)  

    開催地:オンライン  

    二色覚は色覚障がいの一種で,人間の色覚空間において,色のコントラストを低下させる.既存研究では,本来の画像の自然さを保存しながら,二色覚によるコントラスト損失を補償するための色変換技術を提案した.しかし,最先端の既存手法において,自然さ保存及びコントラスト強調の重みの制御はユーザに任されていて,計算コストも高い故,日常生活上での使用にも制限されるという問題が存在している.本研究では,二色覚を補償するための自然さ保存とコントラスト強調の重みが自動的に制御できる高速の色変換アルゴリズムを提案する.また,定量的評価及び主観的評価実験を行い,提案手法が計算コストを大幅に削減しながら,最先端の既存手法と同等品質の補償画像を生成できることを示している.

  • Evaluation of Color Vision Compensation Algorithms for People with Varying Degree of Color Vision Deficiency 国際会議

    Xinyi Wang, Zhenyang Zhu, Xiaodiao Chen, Masahiro Toyoura, and Xiaoyang Mao

    2020 International Conference on Cyberworlds (CW)  2020年9月 

     詳細を見る

    開催年月日: 2020年9月

    記述言語:英語   会議種別:ポスター発表  

  • 色覚障がい支援のための色変換技術

    茅 暁陽,朱 臻陽,豊浦 正広,柏木 賢治,郷 健太郎,藤代 一成

    やまなし産学官連携研究交流事業  2019年10月  山梨県、国立大学法人山梨大学

     詳細を見る

    開催年月日: 2019年10月

    記述言語:日本語   会議種別:ポスター発表  

    開催地:ベルクラシック甲府  

  • 色覚障がい支援のための個人適応型色変換アルゴリズム

    朱 臻陽,豊浦 正広,郷 健太郎,柏木 賢治,藤代 一成,茅 暁陽

    Visual Computing シンポジウム  2019年6月  画像電子学会 ビジュアル・コンピューティング研究会 情報処理学会 コンピュータグラフィックスとビジュアル情報学研究会 映像情報メディア学会 映像表現&コンピュータグラフィックス研究会

     詳細を見る

    開催年月日: 2019年6月

    記述言語:日本語   会議種別:口頭(一般)  

    開催地:早稲田大学国際会議場 1階 井深大ホール  

    世界中に一億以上の人がそれぞれに異なるレベルの色覚障がいを持っている.色覚障がいによるコントラストロスを補償するために, コントラスト強調と自然さ保存の両方を考慮した支援画像を作る手法がいくつか提案されている.しかし, ほとんどの既存技術は一色が完全に知覚できない二色覚者を対象としている.本研究は障がい者それぞれの障がいの度合に合わせて最適な変換を行う新しい技術を提案する.シミュレーション画像を用いた定量評価と被験者によるパイロットテストにより, 生成された支援画像は元画像のコントラストおよび自然さを保存できることを示した.

  • その色は 味わいは 本物か 技術で五感を操る 仮想現実が拓く世界(4)

    2019年5月 

     詳細を見る

    開催年月日: 2019年5月

    記述言語:日本語   会議種別:メディア報道等  

  • 自然さ保存とコントラスト強調を考慮した色覚補償のための色変換アルゴリズム

    朱 臻陽,豊浦 正広,郷 健太郎,柏木 賢治,藤代 一成,茅 暁陽

    Visual Computing シンポジウム  2018年6月  画像電子学会 ビジュアル・コンピューティング研究会 情報処理学会 コンピュータグラフィックスとビジュアル情報学研究会 映像情報メディア学会 映像表現&コンピュータグラフィックス研究会

     詳細を見る

    開催年月日: 2018年6月

    記述言語:日本語   会議種別:口頭(一般)  

    開催地:山形テルサ 3階 アプローズ  

    世界中に一億人以上が異なるレベルの色覚障がいをもっている.近年,ディジタル機器の普及により,色覚補償のための画像処理技術が注目されている.本研究では,既存手法におけるコントラスト強調と自然さ保存が両立できていないという問題に着目し,自然さとコントラストの両方の保存を目的関数とする最適処理に基づく新しい色変換方法を提案した.画像内の主要な色のみに変換を適用し,Edit Propagationにより結果を画像全体に伝搬させることにより最適化処理の高速化を実現した.シミュレーション画像を用いた定量的評価と被験者による主観的な評価実験において提案手法の優位性を確認することができた.

▼全件表示

産業財産権

  • 画像処理方法、画像処理プログラム、及び表示装置

    茅 暁陽,王 欣怡,朱 臻陽,豊浦 正広

     詳細を見る

    出願人:国立大学法人山梨大学

    出願番号:特願2020-117905  出願日:2020年7月

    公開番号:特開2022-15209  公開日:2022年1月

    出願国:国内  

    入力画像の画素の色を変換する画像処理方法であって、評価関数に基いて統一線形変換式を決定する統一線形変換式決定ステップと、前記決定した統一線形変換式を用いて前記入力画像の全ての画素の色を変換する色変換ステップと、を備える画像処理方法が提供される。

  • 画像処理方法、画像処理プログラム、及び表示装置

    茅 暁陽,朱 臻陽,豊浦 正広,柏木 賢治

     詳細を見る

    出願人:国立大学法人山梨大学

    出願番号:特願2018-025389  出願日:2018年2月

    公開番号:特開2019-145876  公開日:2019年8月

    出願国:国内  

    本来有している色味を維持しつつも色覚障がい者にとっても視認し易い支援画像を生成することができる画像処理方法、画像処理プログラム及びこれを表示することができる表示装置を提供すること。

受賞

  • Honorable Mention Award

    2023年6月   NICOGRAPH International Committee   Deep Learning and Augmented-Reality Glasses based Meat Cooking Support for Color Vision Disorder Compensation

    Shota Chiba, Zhenyang Zhu, Daisuke Inoue and Xiaoyang Mao

     詳細を見る

    受賞区分:国際学会・会議・シンポジウム等の賞 

担当授業科目(学内)

  • アルゴリズムとデータ構造I演習 重要な業績

    2023年度

指導実績

  • 2023年度

    種別:学部(専攻科Aコース)卒業論文指導

    指導人数 :4人  (内 留学生):1人

    卒業/修了/学位取得人数 :4人  (内 留学生):1人

    担当教員数:3人

  • 2022年度

    種別:学部(専攻科Aコース)卒業論文指導

    指導人数 :5人 

    卒業/修了/学位取得人数 :5人 

  • 2021年度

    種別:学部(専攻科Aコース)卒業論文指導

    指導人数 :3人 

    卒業/修了/学位取得人数 :3人 

    担当教員数:2人

外部発表指導の実績

  • 2023年度

    英語 論文発表指導・口頭発表 (指導人数):2人 

  • 2022年度

    日本語論文発表指導・口頭発表 (指導人数):1人 

    英語 論文発表指導・口頭発表 (指導人数):3人 

国際交流・国際貢献

  • 2023年度  種別:国際交流・地域交流を含む、国際貢献(本人)

    HDU学生河口湖研修

所属学協会

  • 一般社団法人芸術科学会

    2023年4月 - 現在

委員歴

  • Publication Chair  

    2022年11月 - 現在   

      詳細を見る

    団体区分:学協会