エンド直/データエンジニア/エンタープライズSaaSプロダクトにおけるデータパイプライン構築業務
運用/監視担当
750,000 ~ 850,000 / 月額
140H-180H
業務委託/西新宿駅
募集概要·背景
エンド直/データエンジニア/エンタープライズSaaSプロダクトにおけるデータパイプライン構築業務
エンタープライズSaaSプロダクトにおけるデータパイプラインの設計、構築、および最適化をご担当いただきます。
▼具体的な業務内容
・様々な外部データソース(例:Google Drive, Dropbox, Web page, etc)とのデータ連携のための処理の実装
・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築
[関連ワード]フリーランス、案件、エンジニア、プログラマー、業務委託
求める人物像
・Pythonを用いたデータ処理(Flask, Pandas, NumPy, Daskなど)の実務経験3年以上
・Git および Github もしくは Gitlab を利用した開発経験3年以上
・GCPを用いたデータウェアハウス、データレイク、またはデータパイプライン構築の実務経験・リレーショナルデータベース(例:PostgreSQL, MySQL)またはデータウェアハウス(例:BigQuery)におけるSQLを用いたデータ操作、分析、および最適化の実務経験
・バッチ処理およびストリーミング処理を含む、データパイプラインの設計、構築、運用の実務経験
求めるスキル
Git, BigQuery, Flask, MySQL, GitLab, Numpy, Pandas, Python, PostgreSQL, SQL