Masashi Yoshikawa

Machine learning engineer at Apple

Publications

Journal

• 「ニューラル数式ソルバーにおける途中結果の追跡と操作」松本 悠太, Benjamin Heinzerling, 吉川 将司, 乾 健太郎, 自然言語処理 (Journal of natural language processing), Vol 30, No. 4
• 「大学・大学院におけるレポート採点支援システムの開発」 佐々木健太, 鈴木健一, 君島朋子, 吉川将司, 乾健太郎, 情報処理学会論文誌教育とコンピュータ (TCE), Vol.8, No.3
• Instance-Based Neural Dependency Parsing, Hiroki Ouchi, Jun Suzuki, Sosuke Kobayashi, Sho Yokoi, Tatsuki Kuribayashi, Masashi Yoshikawa, Kentaro Inui, TACL-2021, [arXiv]
• A* CCG Parsing with a Supertag and Dependency Factored Model
  Masashi Yoshikawa, Hiroshi Noji, and Yuji Matsumoto, 自然言語処理 (Journal of natural language processing), Vol.26 No.1 [link]

Refereed

• Do Deep Neural Networks Capture Compositionality in Arithmetic Reasoning?, Keito Kudo, Yoichi Aoki, Tatsuki Kuribayashi, Ana Brassard, Masashi Yoshikawa, Keisuke Sakaguchi and Kentaro Inui, EACL-2023
• Empirical Investigation of Neural Symbolic Reasoning Strategies, Yoichi Aoki, Keito Kudo, Tatsuki Kuribayashi, Ana Brassard, Masashi Yoshikawa, Keisuke Sakaguchi and Kentaro Inui, EACL-2023 Findings
• Tracing and Manipulating Intermediate Values in Neural Math Problem Solvers, Yuta Matsumoto, Benjamin Heinzerling, Masashi Yoshikawa and Kentaro Inui, MathNLP 2022
• Tracing and Manipulating Intermediate Results in Neural Math Problem Solvers, Yuta Matsumoto, Benjamin Heinzerling, Masashi Yoshikawa and Kentaro Inui, BlackboxNLP 2022
• Empirical Investigation of Neural Symbolic Reasoning Strategies, Yoichi Aoki, Keito Kudo, Tatsuki Kuribayashi, Ana Brassard, Masashi Yoshikawa, Keisuke Sakaguchi and Kentaro Inui, AACL-IJCNLP SRW 2022, Non-archival
• Tracing and Manipulating Intermediate Results in Neural Math Problem Solvers, Yuta Matsumoto, Benjamin Heinzerling, Masashi Yoshikawa and Kentaro Inui, AACL-IJCNLP SRW 2022
• Automatic Generation of High Quality CCGbanks for Parser Domain Adaptation, Masashi Yoshikawa, Hiroshi Noji, Koji Mineshima and Daisuke Bekki, ACL-2019, [pdf][code][slides(google)][reviews]
• Building a Logical Inference System for Visual-Textual Entailment, Riko Suzuki, Hitomi Yanaka, Masashi Yoshikawa, Koji Mineshima and Daisuke Bekki, ACL-SRW 2019, [pdf]
• Towards building a logical inference system for image retrieval, Riko Suzuki, Hitomi Yanaka, Masashi Yoshikawa, Koji Mineshima and Daisuke Bekki, Workshop on Shortcomings in Vision and Language (SiVL), NAACL-HLT2019 (Extended abstract)
• Combining Axiom Injection and Knowledge Base Completion for Efficient Natural Language Inference,
  Masashi Yoshikawa, Koji Mineshima, Hiroshi Noji and Daisuke Bekki, AAAI-2019, [pdf][code][reviews][slides(pdf)][slides(keynote)]
• Neural sentence generation from formal semantics,
  Kana Manome, Masashi Yoshikawa, Hitomi Yanaka, Pascual Martínez-Gómez, Koji Mineshima and Daisuke Bekki, INLG-2018, [pdf]
• Consistent CCG Parsing over Multiple Sentences for Improved Logical Reasoning
  Masashi Yoshikawa, Koji Mineshima, Hiroshi Noji and Daisuke Bekki, NAACL-2018 [pdf][poster][reviews]
• A* CCG Parsing with a Supertag and Dependency Factored Model
  Masashi Yoshikawa, Hiroshi Noji, and Yuji Matsumoto, ACL-2017 [pdf][code][reviews]
• Joint Transition-based Dependency Parsing and Disfluency Detection for Automatic Speech Recognition Texts
  Masashi Yoshikawa, Hiroyuki Shindo, and Yuji Matsumoto, EMNLP-2016 [pdf][reviews]

Unrefereed

• 「ニューラル記号推論における推論過程の教示方法」
  青木洋一, 工藤慧音, Ana Brassard, 栗林樹生, 吉川将司, 坂口慶祐, 乾健太郎, 言語処理学会第29回年次大会
• 「算術問題におけるニューラルモデルの構成的推論能力」
  工藤慧音, 青木洋一, 栗林樹生, Ana Brassard, 吉川将司, 坂口慶祐, 乾健太郎, 言語処理学会第29回年次大会
• 「ニューラル数式ソルバーにおける途中結果の追跡と操作」
  松本悠太, Benjamin Heinzerling, 吉川将司, 乾健太郎, 言語処理学会第29回年次大会 (委員特別賞)
• 「End-to-End 学習可能な記号処理層の検討と数量推論への応用における課題の分析」
  吉川将司, Benjamin Heinzerling, 乾健太郎 言語処理学会第28回年次大会
• 「多段の数量推論タスクに対する適応的なモデルの振る舞いの検証」
  青木洋一, 工藤慧音, Ana Brassard, 栗林樹生, 吉川将司, 乾健太郎 言語処理学会第28回年次大会
• 「四則演算を用いた Transformer の再帰的構造把握能力の調査」
  松本悠太, 吉川将司, Benjamin Heinzerling, 乾健太郎 言語処理学会第28回年次大会 (スポンサー賞)
• 「数量推論モデルに対する人工データを活用した表層的な手がかりに頑健な評価法の検討」
  工藤慧音, 青木洋一, 吉川将司, 乾健太郎 NLP若手の会第16回シンポジウム
• 「大規模言語モデルの語彙的関係知識推定における日英間の比較調査」
  阿部香央莉, 北山晃太郎, 松田耕史, 吉川将司, 乾健太郎 情報処理学会 第250回自然言語処理研究会
• 「離散記号処理に対する近似的な微分構造の考察と数量推論を要する文章読解問題への応用」
  吉川将司, 乾健太郎 言語処理学会第27回年次大会
• 「オンラインコミュニティにおける単語頻度の通時的変化を利用した新語リストの獲得」
  阿部香央莉, 松田耕史, 吉川将司, 乾健太郎 言語処理学会第27回年次大会
• 「事例ベース依存構造解析のための依存関係表現学習」
  大内啓樹, 鈴木潤, 小林颯介, 横井祥, 栗林樹生, 吉川将司, 乾健太郎 言語処理学会第27回年次大会
• 「スパン埋め込みと最適輸送に基づく非構成的な句に頑健な文類似性尺度」
  神戸 隆志, 横井 祥, 吉川 将司, NLP若手の会第15回シンポジウム
• 「テキスト情報と画像情報を組み合わせた論理推論システムの構築」
  鈴木莉子, 吉川将司, 谷中瞳, 峯島宏次, 戸次大介, 人工知能学会第33回全国大会 (優秀賞(口頭発表部門)) [pdf]
• 「係り受け木を用いたツリーバンク自動生成によるCCG解析分野適応」
  吉川将司, 能地宏, 峯島宏次, 戸次大介 言語処理学会第24回年次大会 (若手奨励賞) [pdf]
• 「安価な統語情報からの変換モデルの学習によるCCG解析ドメイン適応」
  吉川将司, 能地宏, 峯島宏次, 戸次大介 NLP若手の会第13回シンポジウム
• 「形式意味論に基づくニューラル文生成」
  馬目華奈, 吉川将司, 谷中瞳, 峯島浩次, 戸次大介 NLP若手の会第13回シンポジウム
• 「知識ベース補完を用いた高階論理推論のための自動公理生成」
  吉川将司, 峯島宏次, 能地宏, 戸次大介 言語処理学会第24回年次大会 [pdf]
• 「RNN系列変換モデルを用いた高階論理式からの文生成」
  馬目華奈, 谷中瞳, 吉川将司, 峯島宏次, 戸次大介 言語処理学会第24回年次大会 [pdf]
• 「係り受け構造とスーパータグの同時予測による A* CCG解析」
  吉川 将司, 能地 宏, 松本 裕治, 情報処理学会 第231回自然言語処理研究会
• 「係り受け構造との同時予測によるA* CCG解析」(優秀賞) [pdf]
  吉川将司, 能地宏, 松本裕治 言語処理学会第23回年次大会
• 「話し言葉の依存構造解析における音声認識誤りの影響と評価」[pdf]
  吉川将司, 進藤裕之, 松本裕治, 言語処理学会第22回年次大会

Talk

• 「(秘密)」 AIP Open Seminar #40 (2021/9/1)
• 「深層学習とシンボリックな推論を統合する基礎技術の開発」, 東北大学 タフ･サイバーフィジカルAI研究センターシンポジウム (2021/3/8)
• 「理論言語学に基づいた自然言語処理システム」, MiCS (2019/9/23) [pdf] [keynote]
• 「深層学習とA*アルゴリズムによる高速なCCG解析」, TokyoCL (2018/9/28) [slide]

Activities

• Sep. 2021 - Sep. 2023: 言語処理学会 会誌編集委員

Software

See my github repository.

Education

• 2007 - 2010: Hyogo Prefectural International High School
• 2010 - 2015: Osaka University Faculty of Foreign Studies (major: Turkish)
• 2012 - 2013: Kuwait University Language Center
• 2015 - 2017: M.E., Nara Institute of Science and Technology Graduate School of Information Science
• 2017 - 2020: Ph.D. student, Nara Institute of Science and Technology Graduate School of Information Science

Experience

• Sep. 2015: Intern at NTT Comunication Science Laboratory
• Sep. 2016: Intern at STAIR Lab, Chiba Institute of Technology
• Apr. - Jun. 2017, Oct. 2017 - Jul. 2019: Affiliated Researcher at Center of Simulation Sciences in Ochanomizu University
• Apr. 2020 - Jun. 2022: Assistant Professor at Tohoku University TCPAI Research center
• July. 2022 - now: Machine learning engineer at Apple

Research Grant

• Apr. 2021 - Mar. 2024: Japan Society for the Promotion of Science (JSPS) Grant-in-Aid for Scientific Research (C) 「ハイブリッドCGパーザの開発」, 研究代表者:窪田 悠介 (分担)21K00541
• Jul. 2021 - Mar. 2022: TCPAI共同研究プロジェクト 「深層学習における記号処理層の多層化と金融文章解析への応用」, 研究代表者:吉川将司
• Jul. 2020 - Mar. 2021: TCPAI共同研究プロジェクト 「深層学習とシンボリックな推論を統合する基礎技術開発の共同研究」, 研究代表者:吉川将司
• Sep. 2020 - Mar. 2022: JSPS Grant-in-Aid for Research Activity start-up (科研費スタートアップ支援) 20K23314
• Apr. 2018 - Mar. 2020: Research Fellowship of Japan Society for the Promotion of Science for Young Scientists (JSPS DC2) [proposal]
• Aug. 2018 - Mar. 2019: AIP Challenge Research Funding

Awards and Funding

• 2012: Kuwait Goverment Scholarship
• Mar. 2017: Exellence Award in 23rd Annual Meeting of NLP
• Jun. 2017: NAIST Excellent Student Scholarship
• Jun. 2017: JASSO Scholarship Full Exemption from Refund
• Mar. 2019: Young Researcher Encouragement Award in 25th Annual Meeting of NLP
• Mar. 2020: NAIST Excellent Student Award

Skills

Natural Languages

• Japanese (native; also passed Japanese Language Teaching Competency Test)
• English (fluent; TOEIC 945)
• Turkish (fluent; major in undergraduate school)
• Modern Standard Arabic (ok)

Programming Languages

• Love: Python(Cython), C++, Haskell, OCaml
• OK: Java, Scala, Julia, JavaScript
• I type in Dvorak key conf and like Vim :)

Contact

masashi.yoshikawa.d8 [at] alumni.tohoku.ac.jp