Conema

エンド内エンタープライズSaaSプロダクトにおけるデータパイプラインの設計、構築、および最適化をご担当いただきます。 ・様々な外部データソース（例：Google Drive, Dropbox, Web page, etc）とのデータ連携のための処理の実装 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築

・Pythonを用いたデータ処理（Flask, Pandas, NumPy, Daskなど）の実務経験（3年以上） ・Git および Github もしくは Gitlab を利用した開発経験（3年以上） ・GCPを用いたDWH、データレイク、またはデータパイプライン構築の実務経験 ・RDB（PostgreSQL, MySQLなど）またはDWH（BigQueryなど）におけるSQLを用いたデータ操作、分析、および最適化の実務経験 ・バッチ処理およびストリーミング処理を含む、データパイプラインの設計、構築、運用の実務経験