仕事の詳細
職場での仕事内容から生かせる経験・スキル、諸条件など詳細を確認できます
企業名
ストックマーク株式会社
職種
1012【Dev】VLM / MLLM リサーチャー
仕事内容
【業務内容】 Research DivisionのVLMユニットにおいて、日本語・ビジネス・製造業ドキュメントを対象としたVLM / Document AIの研究開発を行っていただきます。 モデル開発・データ合成・評価などの技術開発業務だけでなく、論文執筆による国際会議への投稿もお任せします。 ■具体的な業務内容 - ビジネスドキュメント・製造業に特化したVLM / MLLMの研究開発 - ドキュメント読解、テーブル理解、チャート理解、図面解析、化学式理解、レイアウト理解に関するモデル改善 - VQA, CoT, Visual Grounding, Document Parsing, Document Structuringに関連す研究開発 - 学習データ、評価データ、ベンチマーク、アノテーション基準、品質フィルタリング手法の構築 - VLMの出力に対する信頼性評価、ハルシネーション抑止、根拠提示、バリデーション手法の研究 - 論文執筆、学会発表、技術ブログ、モデル・データセット公開などの社外発信 現在は東北大学乾教授・産総研石垣研究員らと共同研究を進めています。 ※変更の範囲:開発業務全般 【配属チーム】 VLM Unit(現在 4名) [組織体制] Research Division(8名) - Knowledge Unit(4名) - VLM Unit(4名) [主な使用言語] Python, SQL
求める人物像
必須スキル ※すべて必須 - 画像処理・自然言語処理に対する深い知識と業務経験 (特に、深層学習を用いた画像処理・自然言語処理の実務経験) - 査読あり国際学会や英文学術誌での論文採択の実績 - 理工系大学院修了 歓迎スキル 1. 以下の技術領域における研究経験・実務経験 1. VLM / MLLM / Document AI / OCR / Layout Analysisに関する研究または実務経験 2. Qwen-VL, InternVL, LLaVA, LayoutLM等の関連モデルの利用・評価・改善経験 3. ドキュメント読解、図表理解、図面解析に関する研究開発経験 4. SFT、Instruction Tuning、GRPO、DPO、RLHF等を用いたモデル改善経験 5. 製造業、化学、機械、電気、材料、特許、研究開発領域に関するドメイン知識 2. ビジネスレベルの英語力 求める人物像 - 本質的にテクノロジーに興味があり、その分野の第一人者となる気概がある - ビジネスサイドとコミュニケーションしながら、いかにお客様に届け、事業を成長させるかを考えられる - 論文を読みながら最新の理論をフォロー、検証するのが好き <その他> ・日本国内に居住可能な方 ・開発に関する技術的な内容含め、日本語で円滑にコミュニケーションが取れる方 目安:ビジネス会話レベル
勤務予定地
【本社所在地】 ■東京都港区南青山 1 丁目12-3 LIFORK MINAMI AOYAMA S209 【就業場所】 ■本社または自宅その他リモートワークが行える場所(変更の範囲なし) ※フルリモートワーク可
博士卒の初任給
■想定年収:7,500,000円〜15,000,000円 ※月給×12ヶ月 ■月給:625,000円〜1,250,000円 <内訳> 基本給:408,423円〜871,847円 生涯設計手当:55,000円 固定残業代45時間分:161,577円〜323,153円(超過分は別途支給) ■昇給あり(年2回/5月、11月)