求人名

【映画・映像】データクローラーの開発・運用エンジニア(アーキテクト候補)

提供できる機会

業務を継続しつつ、より適切なアーキテクチャーへと段階的に切り替えていくことは常に必要なので、アーキテクトとしての自分の力を発揮していきたい方は、弊社の環境(ある程度の量のデータ、AWS、TreasureData、TableauServerなどを利用中)で、とてもよい実践経験を積むことができると思います。
* もちろん計画や設計のレビューはあります。

概要・業務内容

概要

  • ENG1. データエンジニア
  • ENG2. データクローラーの開発、運用
  • ENG3. 顧客向けのWebシステムの開発、運用(マイナーupdateがメイン)
     
  • ENG4. アーキテクト(業務委託ではない直営のうち、これができる人)
  • ENG5. SRE(業務委託ではない直営のうち、R3,R4,R5の人全員)

募集はENG1,ENG2,ENG3の3つの職で行なっています。経験済みの得意分野、少しだけ経験があり興味のある分野など、人によって様々な組み合わせがあるので、以下のような相談ができればと思っています。

・ENG1は経験済みで今もやっている
・ENG2は未経験。ENG3は以前3年間くらい開発と運用をしていた
・今後はENG1を中心にENG3を時たまやるくらいが希望

当面の想定

基本的なセルフマネジメントのできるメンバーが3~5名いるエンジニアリングチーム

業務内容

  • データ分析を行う会社なので、業務の中心にデータが様々なタイプのETLがあります
  • Webサイトからのスクレイピングや、API経由でのデータ収集、有償で購入したデータの取り込みなどは「ENG2」が中心となって行います。ケースによっては「ENG1」もその開発、運用を行います
  • 収集対象サイトの特性や変更などへの対応
  • 時には何らかの原因でデータ収集が失敗する場合もあるため、リカバリーする方法の事前検討、開発
  • 収集したデータを、使いやすく、意味のある構造へと変換するためのデータ設計、およびETL

特徴

  • データ収集業務は、もっとも短い実行サイクルは日次です。日次処理に異常が発生することは稀で、時間を少し置いて再実行するくらいでたいていは解決します。このため、定時内の勤務でだいたい間にあっています
  • 月次のデータ収集は対象サイトの変更の影響を受けることが多いですが、今までの対処経験やスキル等で、超過勤務もあまりなく対応できています
  • 現在のこの安定した勤務時間は、過去1-2年で積み上げた改良によって得られています。毎月の積み重ねがその後の1-2年の勤務状況に効いてきます

応募資格

必須スキル・経験

得意範囲や守備範囲は人により様々だと考えています。以下の内容のうち、未経験の項目がある場合でも、別項目においてそれを上回るスキル・経験の有無や、募集中の他のエンジニアリング職種でできることの有無などで十分にカバーできる可能性があります。

  • 設計、実装スキル
  • データ処理のための言語やそれらを管理するためのスクリプト言語など
    (Ruby、Python、SQL各種など)
  • サイトクローリングに必要な一般的な知識と経験
    (Webシステムの開発、運用で得られるような、認証、HTTP/HTML、負荷分散等の理解)
  • Linux(Microsoft系だけの経験だと厳しいかと思います)
  • AWSをメインに使っているため、クラウドアーキテクチャーの理解
    (システムのデザインパターンの基本がわかっていれば、学習等で補えると思います)

歓迎スキル・経験

アーキテクトの能力があれば、裁量が広がります。

求める人物像

  • 収集したり導出したデータ自体が資産になるので、データの精度や正確性などに長い目で気を配れること
  • 時には失敗することもあるので、ダメージを少なくするための事前準備や、計測システムの開発、運用などに気を配れること
  • 大ハマりし続けることがないように、自らマイルストーンを切ってチェックし、時には路線変更、退却も含めて判断、実行できること

勤務地

東京都港区北青山3-3-13 共和五番館9F

Google Map
  • 東京メトロ半蔵門線・千代田線・銀座線 表参道駅A3出口から徒歩5分
  • 東京メトロ銀座線 外苑前駅3出口から徒歩6分

待遇

【待遇】経験能力などを考慮し、当社規定により決定。入社後6か月は試用期間。
【福利厚生】各種社会保険完備

勤務時間

10:00~19:00 (裁量労働制・フレックス制導入)
★下記のような時短ケースも可能です。
週3日、8時間/日
週5日、5時間/日

休日・休暇

土日祝日、年次有給休暇、特別休暇、慶弔特別休暇

応募方法

個人情報の取扱いに関する同意書(採用応募者用)」に同意のうえ、履歴書(写真添付必須)、職務経歴書を以下のメールアドレスにお送りください。

【宛先】 recruit[#]gempartners.com
([#]を@に変えてお送りください)
履歴書・職務経歴書を受領後、2週間以内に書類選考通過者のみ面接日をご連絡いたします

応募期限

定員になり次第締め切り