職種検索へ戻る

仕事の詳細

職場での仕事内容から生かせる経験・スキル、諸条件など詳細を確認できます

企業名

ストックマーク株式会社

職種

1012【Dev】VLM / MLLM リサーチャー

仕事内容

【業務内容】 Research DivisionのVLMユニットにおいて、日本語・ビジネス・製造業ドキュメントを対象としたVLM / Document AIの研究開発を行っていただきます。 モデル開発・データ合成・評価などの技術開発業務だけでなく、論文執筆による国際会議への投稿もお任せします。 ■具体的な業務内容 - ビジネスドキュメント・製造業に特化したVLM / MLLMの研究開発 - ドキュメント読解、テーブル理解、チャート理解、図面解析、化学式理解、レイアウト理解に関するモデル改善 - VQA, CoT, Visual Grounding, Document Parsing, Document Structuringに関連す研究開発 - 学習データ、評価データ、ベンチマーク、アノテーション基準、品質フィルタリング手法の構築 - VLMの出力に対する信頼性評価、ハルシネーション抑止、根拠提示、バリデーション手法の研究 - 論文執筆、学会発表、技術ブログ、モデル・データセット公開などの社外発信 現在は東北大学乾教授・産総研石垣研究員らと共同研究を進めています。 ※変更の範囲:開発業務全般 【配属チーム】 VLM Unit(現在 4名) [組織体制] Research Division(8名) - Knowledge Unit(4名) - VLM Unit(4名) [主な使用言語] Python, SQL

求める人物像

必須スキル ※すべて必須 - 画像処理・自然言語処理に対する深い知識と業務経験 (特に、深層学習を用いた画像処理・自然言語処理の実務経験) - 査読あり国際学会や英文学術誌での論文採択の実績 - 理工系大学院修了 歓迎スキル 1. 以下の技術領域における研究経験・実務経験 1. VLM / MLLM / Document AI / OCR / Layout Analysisに関する研究または実務経験 2. Qwen-VL, InternVL, LLaVA, LayoutLM等の関連モデルの利用・評価・改善経験 3. ドキュメント読解、図表理解、図面解析に関する研究開発経験 4. SFT、Instruction Tuning、GRPO、DPO、RLHF等を用いたモデル改善経験 5. 製造業、化学、機械、電気、材料、特許、研究開発領域に関するドメイン知識 2. ビジネスレベルの英語力 求める人物像 - 本質的にテクノロジーに興味があり、その分野の第一人者となる気概がある - ビジネスサイドとコミュニケーションしながら、いかにお客様に届け、事業を成長させるかを考えられる - 論文を読みながら最新の理論をフォロー、検証するのが好き <その他> ・日本国内に居住可能な方 ・開発に関する技術的な内容含め、日本語で円滑にコミュニケーションが取れる方 目安:ビジネス会話レベル

勤務予定地

【本社所在地】 ■東京都港区南青山 1 丁目12-3 LIFORK MINAMI AOYAMA S209 【就業場所】 ■本社または自宅その他リモートワークが行える場所(変更の範囲なし) ※フルリモートワーク可

博士卒の初任給

■想定年収:7,500,000円〜15,000,000円 ※月給×12ヶ月 ■月給:625,000円〜1,250,000円 <内訳> 基本給:408,423円〜871,847円 生涯設計手当:55,000円 固定残業代45時間分:161,577円〜323,153円(超過分は別途支給) ■昇給あり(年2回/5月、11月)

外部サイトの情報を見る

https://herp.careers/v1/stockmark/Ot-tR_ASZkRM

類似した職種

株式会社サイバーエージェント

職種
【AI Lab】リサーチインターンシップ(博士後期課程対象・テーマ選択型)

【概要】 AI Labのリサーチインターンシップは、大学院博士後期課程に在学中の学生のみを対象としています。リサーチサイエンティスト(研究員)として活躍する現役社員とともに、「AI Lab」が取り組む様々な技術課題に対し、AI技術を用いた実践的かつ高度な研究テーマのもと課題解決に取り組みます。研究成果は各学術分野の国際トップカンファレンスへの論文投稿・採択を目指すことも可能で、採択された場合カンファレンス参加に関する費用は全額会社負担です。 実施時期や業務時間・形式等は個別相談が可能で、2ヶ月間のフルコミットの参加が難しい方や海外を含む遠方にお住まいの方にも応募しやすい体制が用意されています(遠方の方が出社形式を選んだ場合、宿泊場所(通信費含む)を会社が負担するなどの対応実績あり)。 【研究テーマ例】 <Agent Research>実世界インタラクションデータを用いたユーザ理解・ロボット行動学習/リアル体験を拡張する次世代HCIメディアの研究 <Activity Understanding>店舗環境における自律移動ロボットの状況理解と意思決定/実世界データの言語化と分析/人物行動理解のためのマルチモーダル基盤モデル <Creative Research>グラフィックデザインの制作編集に関する研究 <Media Fundamentals>LLM・VLM・Agentを用いた漫画の構造理解と創作支援技術の研究 <NLP>自然言語処理によるインターネット広告の生成・理解/大規模言語モデルの出力品質に関する研究 <Reinforcement Learning>オンライン広告配信のためのバンディットアルゴリズムの研究 <Algorithms>ブラックボックス最適化 <3D Vision & Graphics>コンテンツ制作を支援するための3Dビジョン・コンピュータグラフィックス <Generative Media>動画像制作編集に関する研究 <Applied ML>AbemaTVにおける動画理解支援 【実績】 インターン生の論文採択実績は通算67本(うちCVPR・ICML・IUI・ICCV・NAACL等のトップカンファレンスを含む査読付き国際学会・国際論文誌は44本)。