日鉄ソリューションズ株式会社（本社：東京都港区、代表取締役社長：森田 宏之、以下「NSSOL」）の技術本部システム研究開発センターおよびDX＆イノベーションセンター（以下「DXIC」）の有志社員チームが強化学習に関する世界大会「Automatic Reinforcement Learning for Dynamic JobShop Scheduling Problem」（2021/4/15～2021/7/23）に参加し、世界第5位（全32チーム）に入賞しました。
強化学習とは機械学習※1の手法の一つであり、エージェントの行動に応じて状態が変化する環境において得られる最終的な価値を最大化することを目指し、エージェント自身が試行錯誤によって学習をする手法です。環境の変化に応じた最適な行動を選択することができるため、リアルタイムでのスケジューリングや自動運転などの分野において適用が進んでいます。
本大会はIJCAI（国際人工知能会議）が主催した「IJCAI 2021 Competitions」※2のうち、強化学習の分野を対象としたものです。課題は製造現場における生産計画の立案であり、参加者には前提条件として製造プロセス上のタスクとそれらを実行する複数の製造設備についての情報が与えられますが、製造設備の故障がランダムで発生することになっているなど、現実の製造現場の環境を想定したものとなっています。参加者は状況の変化によって生じる新たな条件をリアルタイムに反映し、最も効率の良い生産計画を立案できるモデルを作成しなければならないため、強化学習と組合せ最適化問題に関する技術との両方の知見、およびそれらを組み合わせて適用していく技術力が必要となります。
本大会に出場した社員が所属しているシステム研究開発センターはお客様のDXにおいての活用が見込まれる具体的な技術に対して実用化を見据えた応用研究を行い、DXICはDX戦略の策定を上流工程から行っています。この両組織が連携することでNSSOL全体として最先端の研究成果をタイムリーに実際のビジネスに適用していく体制を整えています。今回の大会でも機械学習や最適化に関する豊富な技術蓄積を基に実現場のニーズに応えてきた経験※3により、高い精度のモデルを構築することができました。
今後もNSSOLは「ファーストDXパートナー」として、強化学習やAI/データ利活用をはじめITの先進領域における研究開発を推進し、蓄積した知見を生かしてお客様のDX推進に貢献してまいります。
以上
出場チーム概要
- チーム名：shun274
- メンバー
- DXIC：永井 秀稔、榊原 大介
- システム研究開発センター：秋里 由佳、福田 俊、市村 千晃、酒向 亮、在原 大樹、太田 憲昭
以上8名
- コメント
「メンバーそれぞれの探究心・改善意欲がこのような結果をもたらし、たいへん嬉しく思います。今回のコンペには、強化学習のビジネス応用を検討する一環で参加しており、この結果もあくまで通過点です。強化学習に対してはこれまでにない新たな可能性を感じます。今後も強化学習の活用検討を続けて、皆様のお役に立つソリューションのご提供を目指していきます。」（チームリーダー 永井 秀稔）
（※1）機械学習
AI（人工知能）技術の一分野で、機械（コンピュータ）がアルゴリズムにそって経験や教師データを学習し、法則やパターンを見つけ出す技術領域。
（※2）大会概要
（※3）
- NSSOLチーム、医療画像の最高峰国際会議MICCAI2020ワークショップにて汎化賞を受賞
- 進化する最適化技術 VOL.1－「日程くん」でJリーグの試合日程作成を絶妙にアシスト！
- 進化する最適化技術 VOL.2 ～最適化問題を解決に導くNSSOLの技術と実績 －量子アニーリングは万能ではない－～
・NS Solutions、NSSOL、NS（ロゴ）は、日鉄ソリューションズ株式会社の登録商標です。
・本文中の会社名および商品名は、各社の商標または登録商標です。
本件の参照先：https://www.nssol.nipponsteel.com/press/2021/20210831_110000.html