Engineering Manager, Data Ingestion - Mercari
- Employment Status: Full-time
- Work Hours: Full Flextime (no core time)
- Office: Roppongi
For more details, see the Overview of Our Positions section on our Careers site.
About Mercari
Circulate all forms of value to unleash the potential in all people
"What can I do to help society thrive with the finite resources we have?" The Mercari marketplace app was born in 2013 out of this thought by our founder Shintaro Yamada as he traveled the world. We believe that by circulating all forms of value, not just physical things and money, we can create opportunities for anyone to realize their dreams and contribute to society and the people around them. Mercari aims to use technology to connect people all over the world and create a world where anyone can unleash their potential. For more information about Mercari Group’s mission, see Mercari’s Culture Doc
Organization/Team Mission
Mercari Engineering Principles
Mercari Engineering Principles are a shared understanding that serves as the foundation of engineering beliefs and behavior at Mercari. The Engineering Principles are designed to complement the organizational identity (Mercari’s mission, values, and culture) from an engineering viewpoint.
These principles ultimately help us achieve Mercari’s mission by defining the ideal state we seek to realize in the long term.
- Passion For The Product
- Grow Together
- Solve Through Mechanisms
- Collaborate Openly
For more details, please see the following link:
At Mercari, data drives decision-making across product, marketing, and machine learning. As Engineering Manager for the Data Ingestion Team, you will lead the foundational systems that collect, process, and deliver high-volume event and operational data across Mercari Group — owning the technical strategy, people leadership, and operational health of the platform, in close partnership with Data Management, BI Analytics, SRE, and Platform Engineering.
As part of the Japan Business JB Data (Data Ingestion team), you will also be collaborating with the following
teams:
- Data Management Team
- Data Analytics Teams
- Machine Learning Teams (Search, Recommendation, Credit, Anti-Fraud, etc.)
- Product Teams (Marketing, CRM, Customer Support, Anti-Fraud, etc.)
Through these partnerships, the team enables reliable, scalable, and timely data delivery to support analytics, experimentation, machine learning, and business decision-making across Mercari.
See here for more information about our mission and values.
Work Responsibilities
Team Leadership & People Management
- Lead, mentor, and grow a team of Data Ingestion Engineers.
- Foster a culture of psychological safety, operational excellence, ownership, and continuous improvement.
- Support engineers through coaching, performance management, career development, and technical mentorship.
- Hire and onboard engineers to strengthen team capability and diversity.
- Manage execution planning, prioritization, and delivery of roadmap initiatives.
Technical Strategy & Platform Ownership
- Define and drive the long-term technical vision and roadmap for Mercari’s data ingestion.
- Lead architectural discussions and technical decision-making for large-scale distributed data systems.
- Drive improvements in scalability, reliability, maintainability, and developer productivity.
- Partner with stakeholders to align platform investments with company-wide data strategy and business goals.
- Establish engineering standards, operational practices, and self service ownership and pipeline management.
Reliability, Operations & Cost Optimization
- Oversee the reliability and operational health of mission-critical ingestion pipelines and event processing systems.
- Lead incident management and post-incident reviews for high-severity production issues.
- Drive continuous improvements in observability, SLIs/SLOs, monitoring, and operational readiness.
- Partner with FinOps and infrastructure teams to optimize platform costs while maintaining performance and reliability.
- Improve resource efficiency through partitioning, clustering, right-sizing, storage lifecycle management, and pipeline optimization.
Unique Challenges
- Sustain a high-volume, mission-critical platform with a lean team. Over the past two years the platform has shifted to a self-service model for backend teams. You will keep this model resilient and reliable while the team operates lean, partnering with FinOps on major platform contracts such as BigQuery Enterprise Edition and Confluent Cloud.
- Expand the platform's frontier. Grow ingestion coverage to 3rd-party, unstructured, and company-wide data sources (e.g. HR, Finance), and help drive JB Data's Data × AI direction.
Qualifications
- Required Experience/Skills
- Shared belief in Mercari’s mission and values.
- 2+ more years in people management.
- Experience in writing design documents or technical proposals and reaching agreements with stakeholders.
- Experience designing, developing, and operating large-scale services and/or distributed systems or data pipelines using a variety of programming languages including Go, Python, Java, Scala.
- Excellent communication skills to effectively collaborate with stakeholders and explain complex technical risks to non-technical leadership.
- Preferred Experience/Skills
- Experience with streaming data processing frameworks like Apache Beam or Spark or Flink.
- Experience with Data Warehouse technologies like Google BigQuery, Amazon Redshift, Hive/Hadoop or Snowflake.
- Familiarity with monitoring and alerting tools.
- Experience with Google Cloud Platform (Dataflow, Pubsub, Kubernetes Engine, Compute Engine)
- Experience with Confluent Cloud or Apache Kafka.
- Experience with Workflow engines like Argo Workflow or Apache Airflow.
- Experience publishing and contributing to OSS.
- Language
- English: Independent (CEFR - B2)
- Japanese: Independent (CEFR - B2)
For details about CEFR, see here.
Learn More About Mercari Group
- Careers site:
- Mercan:
- Social media: X / Linkedin
- Data Processing overview (Japanese Only)
- Data Streaming for server side logging (Japanese Only)
- Data Processing batch pipeline overview (Japanese Only)
- Data Processing Change Data Capture (Japanese Only)
Recruiting at Mercari
At Mercari Group, we value empathizing with and embodying the mission and values of the Group and each company. To promote the creation of an organization that maximizes the total amount of value exhibited by all members, we would like to understand the experience and skills of each candidate as accurately as possible.
Recruiting cycle at Mercari Group
- Application screening
- Skill assessment: For engineering positions, you will be asked to complete a skill assessment on HackerRank or GitHub. For non-engineering positions, you may be asked to complete an assessment depending on the position. (The timing of the assessment may coincide with the interview process.)
- Interview: The number of interviews may vary depending on the position.
- Reference check: We will ask for online references around the timing of the final interview.
- Offer: Offers will be determined carefully in consideration of the final interview and the reference check.
Learn more about our recruiting process here.
Equal Opportunity Hiring
Here at Mercari, we work to realize a world in which no one’s potential is limited by their background and everyone has the opportunity to freely create value. We also firmly believe that a mindset of Inclusion & Diversity is essential for us to achieve our mission.
This, of course, extends to our hiring practices as well. Mercari is committed to eliminating discrimination based on age, gender, sexual orientation, race, religion, physical disability, and other such factors so that anyone who shares our mission and values can join us, regardless of their background. For more details, please read our I&D statement.
Please read and acknowledge our Privacy Policy prior to submitting your application.
Engineering Manager, Data Ingestion - Mercari
- 雇用形態： 正社員
- 働き方： フルフレックス（コアタイムなし・フレキシブルタイムなし）
- 勤務地：六本木
詳細はキャリアサイトの募集要項よりご確認ください
メルカリグループについて
あらゆる価値を循環させ、あらゆる人の可能性を広げる
「地球資源が限られているなか、より豊かな社会をつくるために何ができるか」。2013年、創業者の山田進太郎が世界一周の旅で抱いた課題意識から、フリマアプリ「メルカリ」は生まれました。私たちは、物理的なモノやお金に限らずあらゆる価値を循環させることで、誰もがやりたいことを実現し、人や社会に貢献するための選択肢を増やすことができると信じています。
テクノロジーの力で世界中の人々をつなぎ、あらゆる人の可能性が発揮される世界を実現していきます。メルカリグループの目指すべき方針についてはMercari Culture Docをご覧ください。
組織・チームのミッション
MercariのEngineering Principles
メルカリのEngineering Principlesは、メルカリにおけるエンジニアリングの信念や行動の基盤となる共通認識です。Engineering Principlesは、組織のアイデンティティ（メルカリのミッション、バリュー、カルチャー）をエンジニアリングの観点から補完するよう設計されています。
これらEngineering Principlesは私たちが長期的に実現したい理想の姿を明確にし、最終的にメルカリのミッション達成に貢献するものです。
- Passion For The Product
- Grow Together
- Solve Through Mechanisms
- Collaborate Openly
詳細については以下のリンクをご覧ください。
メルカリでは、プロダクト、マーケティング、機械学習のあらゆる領域において、データにもとづく意思決定が行われています。Data Ingestion TeamのEngineering Managerとして、メルカリグループ全体の大量のイベントデータおよびオペレーショナルデータを収集・処理し、各所へ届ける基盤システムをリードしていただきます。技術戦略の策定、ピープルマネジメント、プラットフォームの運用健全性に責任を持ち、Data Management、BI Analytics、SRE、Platform Engineeringの各チームと密に連携しながら推進していただくポジションです。
Japan Business Data組織のData Ingestion Teamの一員として、以下のチームとも連携していただきます。
- Data Management Team
- Data Analytics Team
- Machine Learning Team（検索、レコメンデーション、クレジット、不正対策など）
- Product Team（マーケティング、CRM、カスタマーサポート、不正対策など）
Data Ingestion Teamはこれらの連携を通じて、信頼性が高く、スケーラブルかつタイムリーなデータ提供を実現し、メルカリ全体の分析、実験、機械学習、そしてビジネスにおける意思決定を支えています。
メルカリのミッション・バリューについての詳細はこちらをご覧ください
業務内容
チームリーダーシップ＆ピープルマネジメント
- Data Ingestionチームを率い、各エンジニアに助言し、チームの成長を促す
- 心理的安全性、オペレーショナルエクセレンス、オーナーシップ、継続的改善を重視したチーム文化を醸成する
- コーチング、パフォーマンスマネジメント、キャリア開発、技術的なメンタリングを通じてエンジニアを支援する
- チーム力を強化し、多様性を高めるため、エンジニアの採用とオンボーディングを推進する
- ロードマップに基づく各施策の実行計画、優先順位づけ、デリバリーをマネジメントする
技術戦略＆プラットフォームオーナーシップ
- メルカリのデータ取り込み領域における長期的な技術ビジョンおよびロードマップを策定し、その実行をリードする
- 大規模分散データシステムに関するアーキテクチャの議論および技術的意思決定をリードする
- 拡張性、信頼性、保守性、および開発者生産性の向上を推進する
- ステークホルダーと連携し、プラットフォームへの投資を全社的なデータ戦略および事業目標と整合させる
- エンジニアリング標準と運用プラクティスを確立し、各チームが自律的にオーナーシップを持ってパイプラインを管理できる体制を整える
信頼性、運用、＆コスト最適化
- ミッションクリティカルなデータ取り込みパイプラインとイベント処理システムの信頼性・安定稼働を管理する
- 重大な本番障害におけるインシデントマネジメントおよびポストモーテムを主導する
- オブザーバビリティ、SLI/SLO、モニタリング、運用体制の継続的な改善を推進する
- FinOpsおよびインフラチームと連携し、パフォーマンスと信頼性を維持しながらプラットフォームコストの最適化を進める
- リソース効率の向上に向けて、パーティショニング、クラスタリング、リソースの適正化、ストレージライフサイクル管理、パイプライン最適化に取り組む
ユニークなチャレンジ
- 少人数のチームで、大容量かつミッションクリティカルなプラットフォームを維持：本プラットフォームは、この2年間でバックエンドチーム向けのセルフサービス型モデルへと移行しました。少数精鋭のチームでセルフサービス型モデルの障害耐性と信頼性を維持しつつ、BigQuery Enterprise EditionやConfluent Cloudなどの主要なプラットフォーム契約についてFinOpsと連携する、チャレンジングなポジションです。
- プラットフォームの領域拡大：データ取り込みの対象を、サードパーティデータ、非構造化データ、人事・財務など全社的なデータソースへと拡大し、Japan Business Data組織の「Data × AI」構想を推進していただきます。
応募要件
- 求める経験・スキル
- メルカリのミッションとバリューに共感していただける方
- 設計書または技術提案書を作成し、ステークホルダーとの合意形成を行った経験
- Go、Python、Java、Scalaなど多様なプログラミング言語を用いて、大規模サービスおよび分散システム・データパイプラインの設計・開発・運用を行った経験
- ステークホルダーと円滑に協業し、技術的な専門知識を持たないリーダー層に複雑な技術リスクを分かりやすく説明できる、優れたコミュニケーション能力
- 歓迎する経験・スキル
- Apache Beam、Spark、Flinkなどのストリーミングデータ処理フレームワークの利用経験
- Google BigQuery、Amazon Redshift、Hive/Hadoop、Snowflakeなどのデータウェアハウス技術の利用経験
- モニタリングやアラートツールに関する知見
- Google Cloud Platform（Dataflow、Pub/Sub、Kubernetes Engine、Compute Engine）の利用経験
- Confluent CloudまたはApache Kafkaの利用経験
- Argo WorkflowやApache Airflowなどのワークフローエンジンの利用経験
- OSSの公開およびコントリビュート経験
- 語学力
- 英語：Independent (CEFR - B2)
- 日本語：Independent (CEFR - B2)
CEFRの詳細については、こちらをご覧ください
メルカリグループについて知る
- キャリアサイト：
- メルカン：
- SNS：X / Linkedin
- メルペイ DataPlatform Team の設立とその背景
- 僕たちはどうマイクロサービスのログを収集するのか
- メルペイにおける大規模バッチ処理
- メルペイDataPlatformのCDC DataPipeline
選考について
メルカリグループでは、グループおよび各カンパニーのミッションとバリューへの共感・体現を大切にしています。メンバーが発揮する価値の総量が最大化されるような組織づくりを推進するために、候補者のみなさんの経験やスキルをより正しく理解したいと考えています。
選考の流れ
- 書類選考
- 技術課題：エンジニアリング関連のポジションではHackerRankまたはGitHubでのスキル評価を受けていただきます。非エンジニアポジションでは、職種に応じてアセスメントを受けていただく場合があります。（面接タイミングと前後することがあります）
- 面接：ポジションにより、複数回の面接をお願いする場合があります
- リファレンスチェック：オンライン回答形式のもので、最終選考の前後でお願いします
- オファー：最終選考とリファレンスの内容より決定されます
詳しくはこちらのページをご覧ください
選考における機会の平等
メルカリでは、バックグラウンドによって個人の可能性が決めつけられることなく、自由に価値を生みだす機会を手にできる社会の実現を目指しています。そしてメルカリがミッションを実現するために「Inclusion & Diversity」という考え方は不可欠な存在だと考えています。
これはもちろん、私たちの採用方針にもあてはまります。採用活動においても、メルカリのミッション・バリューに共感する、様々なバックグラウンドの方にジョインしていただけるよう、年齢、性別、性的指向、人種、宗教、身体障がい、その他の要因に基づくあらゆる差別をなくすことを約束します。詳しくはI&D statementをご覧ください。
なお、ご応募の際にはプライバシーポリシーをご確認ください。