1_06 Perception Engineer(認識/センサデータ基盤) | 自動運転開発室

• 1_06 Perception Engineer(認識/センサデータ基盤) | 自動運転開発室
• 仕事概要
• ◆newmoのミッション◆
• newmoは、「移動で地域をカラフルに。」をミッションに掲げるモビリティスタートアップです。
• タクシーやハイヤーなど、これまで地域の移動を支えてきた仕組みをアップデートし、誰もが安心して移動できる社会をつくっていきます。
• 地域によっては公共交通が減り、移動が不便になりつつあります。一方で都市部では、業務の煩雑さや人手不足といった課題が残っています。
• newmoは、こうした現場の課題に真正面から向き合い、テクノロジーを使ってより良い"移動のかたち"をつくり続けています。
• ◆募集背景◆
• newmoでは「自動運転タクシーサービスの社会実装」に向けて、自社での自動運転ソフトウェア開発を進めています。
• 現在は、

• 実車データの収集
• 学習用データセットの作成
• シミュレーション
• 自動運転モデルの評価・改善

• といった開発基盤の整備を進めています。
• newmoではEnd-to-End自動運転モデルを開発しており、Perceptionはその入力品質を直接左右する重要な領域です。
• 本ポジションでは、センサデータ基盤の設計・整備から認識モデルの開発・評価・改善までの一連の流れを横断して、Perceptionシステム全体の品質を引き上げる役割を担っていただきます。
• ◆業務内容◆
• ※ 下記の全てを担当するわけではなく、特定領域に強みを持ちながら、周辺領域にも越境して開発を進めていただきます

• Perceptionアルゴリズム開発
• 物体検出・セグメンテーション・トラッキングなどの認識モデルの調査・実装・改善
• カメラ・LiDARを用いた3D空間認識やセンサフュージョンの設計・開発
• センサデータ基盤・表現設計
• キャリブレーション、座標変換、時刻同期などセンサシステムの設計
• センサデータ処理パイプラインの設計・改善
• 下流モデルが扱いやすい入力表現・データ仕様の設計
• データ・評価ループの構築
• オートラベリング、難例抽出、評価データ整備などのData-Centricな改善
• オフライン評価・実車ログ解析・失敗事例分析
• 認識精度とデータ品質を継続的に改善するサイクルの構築
• システム連携
• Planningとのインターフェース設計
• E2Eモデル学習時の入力設計
• 実車・シミュレーションを含めた評価基盤との連携

◆ポジションの魅力◆

• \*\*Perception全体の設計に関われるフェーズ\*\*
• 自動運転の立ち上げ段階において、認識モデル単体ではなく、データや評価を含めたPerception全体の設計に関わることができます
• \*\*実車データに基づく改善サイクル\*\*
• 自社のタクシー事業から得られる実車データをもとに、認識・データ・評価の改善サイクルを継続的に回すことができます
• \*\*End-to-Endモデル開発チームとの密な連携\*\*
• Perceptionの出力はEnd-to-Endモデル学習時の入力としても使われます。MLエンジニアと連携しながら、モデルが求める入力表現の設計にまで踏み込んで開発できる環境です

• 必須スキル
• ◆newmoのミッション◆
• newmoは、「移動で地域をカラフルに。」をミッションに掲げるモビリティスタートアップです。
• タクシーやハイヤーなど、これまで地域の移動を支えてきた仕組みをアップデートし、誰もが安心して移動できる社会をつくっていきます。
• 地域によっては公共交通が減り、移動が不便になりつつあります。一方で都市部では、業務の煩雑さや人手不足といった課題が残っています。
• newmoは、こうした現場の課題に真正面から向き合い、テクノロジーを使ってより良い"移動のかたち"をつくり続けています。
• ◆募集背景◆
• newmoでは「自動運転タクシーサービスの社会実装」に向けて、自社での自動運転ソフトウェア開発を進めています。
• 現在は、

• 実車データの収集
• 学習用データセットの作成
• シミュレーション
• 自動運転モデルの評価・改善

• といった開発基盤の整備を進めています。
• newmoではEnd-to-End自動運転モデルを開発しており、Perceptionはその入力品質を直接左右する重要な領域です。
• 本ポジションでは、センサデータ基盤の設計・整備から認識モデルの開発・評価・改善までの一連の流れを横断して、Perceptionシステム全体の品質を引き上げる役割を担っていただきます。
• ◆業務内容◆
• ※ 下記の全てを担当するわけではなく、特定領域に強みを持ちながら、周辺領域にも越境して開発を進めていただきます

• Perceptionアルゴリズム開発
• 物体検出・セグメンテーション・トラッキングなどの認識モデルの調査・実装・改善
• カメラ・LiDARを用いた3D空間認識やセンサフュージョンの設計・開発
• センサデータ基盤・表現設計
• キャリブレーション、座標変換、時刻同期などセンサシステムの設計
• センサデータ処理パイプラインの設計・改善
• 下流モデルが扱いやすい入力表現・データ仕様の設計
• データ・評価ループの構築
• オートラベリング、難例抽出、評価データ整備などのData-Centricな改善
• オフライン評価・実車ログ解析・失敗事例分析
• 認識精度とデータ品質を継続的に改善するサイクルの構築
• システム連携
• Planningとのインターフェース設計
• E2Eモデル学習時の入力設計
• 実車・シミュレーションを含めた評価基盤との連携

◆ポジションの魅力◆

• \*\*Perception全体の設計に関われるフェーズ\*\*
• 自動運転の立ち上げ段階において、認識モデル単体ではなく、データや評価を含めたPerception全体の設計に関わることができます
• \*\*実車データに基づく改善サイクル\*\*
• 自社のタクシー事業から得られる実車データをもとに、認識・データ・評価の改善サイクルを継続的に回すことができます
• \*\*End-to-Endモデル開発チームとの密な連携\*\*
• Perceptionの出力はEnd-to-Endモデル学習時の入力としても使われます。MLエンジニアと連携しながら、モデルが求める入力表現の設計にまで踏み込んで開発できる環境です

歓迎スキル

• カメラ・LiDAR等を用いたマルチモーダルな3D Perceptionの開発経験
• BEVベースの認識手法や最新の3D Perceptionアーキテクチャに関する知識・経験
• 自動運転・ロボティクス、車載センサシステムに関する開発経験
• TensorRT / CUDA などを用いた推論最適化の経験
• トップカンファレンス（CVPR, ICCV, NeurIPS等）での論文発表実績
• エンジニアリングチームのリードまたはメンタリング経験

• 求める人物像
• 求める人物像 newmoの大事にしている以下のコンピーテンシーを体現できる方
• ・持続的改革を実行するための精神（Grit)
• ・自走力
• ・誠実さ
• ・チームへの信頼、貢献
• ・熱意
• ・ステイクホルダーへのリスペクト
• ・高い目標意識
• ・リスクと安全のバランスを取る力
• 応募概要
• 給与
• 給与 800万円〜3000万円
• ※最終的にはスキルや経験に応じて決定します
• 勤務地
• 東京都大田区平和島6-1-1
• 東京流通センター物流A棟
• 雇用形態
• 正社員または業務委託
• 勤務体系
• 裁量労働制またはフレックスタイム（コアタイム11:00-14:00）
• 出社ポリシー: 事業立ち上げフェイズにつき、原則週５日出社
• 試用期間
• あり（3ヶ月）
• 福利厚生
• 福利厚生:有給休暇、慶弔休暇、出産育児休暇、産前産後休暇、看護/介護休暇、夏季休暇、Welcome休暇、Sick Leave
• 加入保険:完備（健康保険、厚生年金、雇用保険、労災保険）
• 受動喫煙対策:屋内全面禁煙