【SQL】データエンジニアリング業務
- ■必須スキル:
- ・データマート設計を行う経験 ・SQLの開発経験(テストもしっかり実施できる)
- ■歓迎スキル:
- ・システム開発 または システム運用保守経験(特に設計・運用・保守) ・顧客とのコミュニケーション(問合せ対応や仕様調整など)
402件中 61〜90件を表示
:データ分析やデータ利活用等、データ関連の案件を複数受託されている企業様で、 データに関連する業務を支援して頂けるメンバーを探しております。 複数企業様からの案件となるため、1案件に特化した対応ではなく、 マルチに案件対応をして頂く形となります。
:データ分析やデータ利活用等、データ関連の案件を複数受託されている企業様で、 データに関連する業務を支援して頂けるメンバーを探しております。 複数企業様からの案件となるため、1案件に特化した対応ではなく、 マルチに案件対応をして頂く形となります。
・Tableauを用いた製品・機器に関する情報を集計・分析する業務です。 ・案件内容を確認し、分析観点についての認識合わせを行うことがあります。 ・ログ集計時にデータを加工するスキルや環境の設定が必要な場合があります。 ・AWSなどのクラウドで作業を実施しています。
・Tableauを用いた製品・機器に関する情報を集計・分析する業務です。 ・案件内容を確認し、分析観点についての認識合わせを行うことがあります。 ・ログ集計時にデータを加工するスキルや環境の設定が必要な場合があります。 ・AWSなどのクラウドで作業を実施しています。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行います。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築を行います。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行います。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築を行います。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行っていただきます。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築です。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行っていただきます。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築です。
データパイプラインの構築やデータ処理の開発を担当するデータエンジニアを募集します。 ETL、DWH、データマート、BIなどのスキルと実務経験を持ち、データアーキテクチャに基づいたデータ処理の開発ができる方
データパイプラインの構築やデータ処理の開発を担当するデータエンジニアを募集します。 ETL、DWH、データマート、BIなどのスキルと実務経験を持ち、データアーキテクチャに基づいたデータ処理の開発ができる方
・SQLを利用してデータを抽出いたします。 ・データカタログ等の仕様書を参照し、自立してSQLクエリの作成・実行を行います。 ・複数テーブルの結合やサブクエリを利用し、実務レベルのクエリを作成いたします。 ・大規模データの利用時には、システム負荷を軽減するためのクエリチューニングを行います。
・SQLを利用してデータを抽出いたします。 ・データカタログ等の仕様書を参照し、自立してSQLクエリの作成・実行を行います。 ・複数テーブルの結合やサブクエリを利用し、実務レベルのクエリを作成いたします。 ・大規模データの利用時には、システム負荷を軽減するためのクエリチューニングを行います。
【募集背景】 業務ボリュームが増加に伴う増員のためです。 【作業内容】 ・データ抽出/集計業務を行います。 ・データマート構築のQuery構築業務を行います。 ・BIツール(Looker)の可視化環境構築業務を行います。 ・案件定義、基本設計、詳細設計、開発(クエリ作成/レポーティング)、保守改修を担当します。 【開発環境】 プログラミング言語はSQLを使用します。インフラはGCP(BigQuery 等)を使用します。ツールはJIRA、Confluence、GitHub、Slack、BIツールはLookerを使用します。PCはWindowsまたはMacから選択します。
【募集背景】 業務ボリュームが増加に伴う増員のためです。 【作業内容】 ・データ抽出/集計業務を行います。 ・データマート構築のQuery構築業務を行います。 ・BIツール(Looker)の可視化環境構築業務を行います。 ・案件定義、基本設計、詳細設計、開発(クエリ作成/レポーティング)、保守改修を担当します。 【開発環境】 プログラミング言語はSQLを使用します。インフラはGCP(BigQuery 等)を使用します。ツールはJIRA、Confluence、GitHub、Slack、BIツールはLookerを使用します。PCはWindowsまたはMacから選択します。
【募集背景】 顧客要望に応じたデータ分析およびデータプロダクト開発のニーズ拡大に伴い、専門性の高いデータサイエンティストを募集しております。 【作業内容】 顧客の要望に応じた統計・機械学習モデルの構築を行い、分析結果の解釈および説明資料を作成していただきます。適切なアルゴリズムを用いたシミュレーションやモデリング手法の考案、PoCの推進および実装支援を行っていただきます。機器データからの分析用データ生成や、自社提供データの統計的な観点からの検証および改善案の提示も担当していただきます。 【求める人物像】 データに基づき論理的に思考し、分析結果をわかりやすく説明できる方を求めております。顧客の課題に寄り添い、自ら仮説立案や手法検討を主体的に進められる方を歓迎いたします。 【ポジションの魅力】 統計・機械学習モデルの構築から分析結果の提案まで一貫して携わることができ、多様な業界や課題に対して高度な分析スキルを発揮できる環境です。PoCやソリューション開発を通じて、データプロダクトの企画・改善にも関与していただけます。 【開発環境】 Pythonを用いたデータ分析環境およびBIツール・可視化ライブラリ、クラウド上のDWHや分析基盤を利用した環境で作業していただきます。
【募集背景】 顧客要望に応じたデータ分析およびデータプロダクト開発のニーズ拡大に伴い、専門性の高いデータサイエンティストを募集しております。 【作業内容】 顧客の要望に応じた統計・機械学習モデルの構築を行い、分析結果の解釈および説明資料を作成していただきます。適切なアルゴリズムを用いたシミュレーションやモデリング手法の考案、PoCの推進および実装支援を行っていただきます。機器データからの分析用データ生成や、自社提供データの統計的な観点からの検証および改善案の提示も担当していただきます。 【求める人物像】 データに基づき論理的に思考し、分析結果をわかりやすく説明できる方を求めております。顧客の課題に寄り添い、自ら仮説立案や手法検討を主体的に進められる方を歓迎いたします。 【ポジションの魅力】 統計・機械学習モデルの構築から分析結果の提案まで一貫して携わることができ、多様な業界や課題に対して高度な分析スキルを発揮できる環境です。PoCやソリューション開発を通じて、データプロダクトの企画・改善にも関与していただけます。 【開発環境】 Pythonを用いたデータ分析環境およびBIツール・可視化ライブラリ、クラウド上のDWHや分析基盤を利用した環境で作業していただきます。
①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
【募集背景】 大手HR事業におけるデータ分析および活用を強化するため、データマネジメント体制を拡充する目的で募集しております。 【作業内容】 HR系クライアントのデータマネジメント部署において、データマートの開発業務を担当いただきます。具体的には、分析用データ基盤およびワークフローの開発・保守運用、データマートの開発・保守運用、データに関わる各種調査などを実施していただきます。データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じた調査業務も一部お任せいたします。 【求める人物像】 自らドメイン知識などの情報収集を行い、主体的にデータエンジニアとしての業務を推進できる方を求めております。また、周囲と適切にコミュニケーションをとりながら抽象的な課題を整理し、解決に導くスタンスをお持ちの方が望ましいです。 【ポジションの魅力】 大手HR事業のデータ分析・活用プロジェクトに参画し、クラウドDWHや最新のデータ基盤技術を用いたデータマート開発に携わることができます。多様なデータソースを扱う環境で、大量データのハンドリングやワークフロー構築を通じて、データエンジニアとしての専門性を高めることができるポジションです。 【開発環境】 インフラはAzureをメインに、AWSやGoogle Cloudを利用しております。データベースとしてAzure Databricks、Amazon Redshift、BigQueryを使用し、ワークフローにはAirflowおよびdbtを採用しております。コミュニケーションにはOutlook、Teams、Slack、Backlogを利用しております。
【募集背景】 大手HR事業におけるデータ分析および活用を強化するため、データマネジメント体制を拡充する目的で募集しております。 【作業内容】 HR系クライアントのデータマネジメント部署において、データマートの開発業務を担当いただきます。具体的には、分析用データ基盤およびワークフローの開発・保守運用、データマートの開発・保守運用、データに関わる各種調査などを実施していただきます。データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じた調査業務も一部お任せいたします。 【求める人物像】 自らドメイン知識などの情報収集を行い、主体的にデータエンジニアとしての業務を推進できる方を求めております。また、周囲と適切にコミュニケーションをとりながら抽象的な課題を整理し、解決に導くスタンスをお持ちの方が望ましいです。 【ポジションの魅力】 大手HR事業のデータ分析・活用プロジェクトに参画し、クラウドDWHや最新のデータ基盤技術を用いたデータマート開発に携わることができます。多様なデータソースを扱う環境で、大量データのハンドリングやワークフロー構築を通じて、データエンジニアとしての専門性を高めることができるポジションです。 【開発環境】 インフラはAzureをメインに、AWSやGoogle Cloudを利用しております。データベースとしてAzure Databricks、Amazon Redshift、BigQueryを使用し、ワークフローにはAirflowおよびdbtを採用しております。コミュニケーションにはOutlook、Teams、Slack、Backlogを利用しております。
上流システム更改に伴うシステム移行対応及びデータマートの構築、運用、保守の対応。 詳細設計、製造、テスト、運用作業、調査、障害対応を担当します。
上流システム更改に伴うシステム移行対応及びデータマートの構築、運用、保守の対応。 詳細設計、製造、テスト、運用作業、調査、障害対応を担当します。
某ネット系企業のデータ利活用案件にてデータマートの共通化や開発生産性の改善、モダンなデータエンジニアリングの実践を担当します。リードエンジニアとして参画し、プロジェクト全体の効率向上と拡大を推進します。
某ネット系企業のデータ利活用案件にてデータマートの共通化や開発生産性の改善、モダンなデータエンジニアリングの実践を担当します。リードエンジニアとして参画し、プロジェクト全体の効率向上と拡大を推進します。
案件名:製薬企業データ分析基盤拡張案件 環 境:・お客様AWS環境上にデータ統合基盤を構築 ・複数部門横断の基盤プロジェクトとしてお客様統合運用環境との連携を実現 ・最先端のテクノロジー/ソリューションを活用し、以下を実現 - 大容量データを高速で処理できる処理性能 - 他システムとの連携性や利用拡大に伴う基盤の拡張性の担保 - 利用量に対してコスト発生する従量課金型を採用 内 容:a SnowflakeのSSO認証構築 ゼロトラスト施策によりDCへの迂回が不可が見込まれるため、 セキュリティの見直しとSnowflake-SSO認証環境の構築を行う。 b 分析環境立ち上げ/ADAM(PowerBI) 必要なデータをEDIPに集約し分析を行うための環境を構築する。 将来的には定型的な分析を自動化するデータパイプラインを構築することを目指す。 c データカタログ導入 マルチベンダ開発のガバナンス強化と営業系データの探索の効率化向上を図る。 今後のデータカタログ利用に対するデータカタログ構想策定/アーキ選択を実施後、 営業本部向けに1ユースケース実現する ※想定される比較対象ソリューション:Snowflake-Horizon、Alation、Collibra、他 d データメッシュPoC 他に倣ってデータメッシュのプロトタイプを立ち上げたい ビジネス部門にどういった使い方ができるかイメージをしてもらうためにもまずは作ってみる想定 ⇒業務システムから断面を拾ってSnowflakeにおきかえてアクセスできる事。 自動パイプラインでなくても良い。複数ベンダーに協業してやってほしい。 e 非構造データ取り込み(MI部) 他APとの連携 生成AI(RAG)を7月リリースしており、現在手作業でSPOに配置している対象を Snowflake側の非構造管理領域に接続先に変更し切り替え ※年内はつなぐぐらいか
案件名:製薬企業データ分析基盤拡張案件 環 境:・お客様AWS環境上にデータ統合基盤を構築 ・複数部門横断の基盤プロジェクトとしてお客様統合運用環境との連携を実現 ・最先端のテクノロジー/ソリューションを活用し、以下を実現 - 大容量データを高速で処理できる処理性能 - 他システムとの連携性や利用拡大に伴う基盤の拡張性の担保 - 利用量に対してコスト発生する従量課金型を採用 内 容:a SnowflakeのSSO認証構築 ゼロトラスト施策によりDCへの迂回が不可が見込まれるため、 セキュリティの見直しとSnowflake-SSO認証環境の構築を行う。 b 分析環境立ち上げ/ADAM(PowerBI) 必要なデータをEDIPに集約し分析を行うための環境を構築する。 将来的には定型的な分析を自動化するデータパイプラインを構築することを目指す。 c データカタログ導入 マルチベンダ開発のガバナンス強化と営業系データの探索の効率化向上を図る。 今後のデータカタログ利用に対するデータカタログ構想策定/アーキ選択を実施後、 営業本部向けに1ユースケース実現する ※想定される比較対象ソリューション:Snowflake-Horizon、Alation、Collibra、他 d データメッシュPoC 他に倣ってデータメッシュのプロトタイプを立ち上げたい ビジネス部門にどういった使い方ができるかイメージをしてもらうためにもまずは作ってみる想定 ⇒業務システムから断面を拾ってSnowflakeにおきかえてアクセスできる事。 自動パイプラインでなくても良い。複数ベンダーに協業してやってほしい。 e 非構造データ取り込み(MI部) 他APとの連携 生成AI(RAG)を7月リリースしており、現在手作業でSPOに配置している対象を Snowflake側の非構造管理領域に接続先に変更し切り替え ※年内はつなぐぐらいか
・某メーカーのDX案件におけるデータ利活用・可視化対応作業を行います。 ・9月よりデータ整備・データマートの概要設計等を実施し、性能要件がありその点を踏まえた検討も実施します。 ・10月以降はデータ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発およびダッシュボード(PowerBI)開発を行います。
・某メーカーのDX案件におけるデータ利活用・可視化対応作業を行います。 ・9月よりデータ整備・データマートの概要設計等を実施し、性能要件がありその点を踏まえた検討も実施します。 ・10月以降はデータ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発およびダッシュボード(PowerBI)開発を行います。
・顧客が扱う商品情報のデータ品質を向上させる活動においてデータクレンジング作業を実施しています。 多岐に渡る要件を元に継続的に行っていく業務支援案件となります。 SQLを使ったデータの抽出・加工業務をご支援いただきます。 チーム3名体制で稼働しており、リーダーの指示のもとでSQLを使用して実作業をご担当いただきます。
・顧客が扱う商品情報のデータ品質を向上させる活動においてデータクレンジング作業を実施しています。 多岐に渡る要件を元に継続的に行っていく業務支援案件となります。 SQLを使ったデータの抽出・加工業務をご支援いただきます。 チーム3名体制で稼働しており、リーダーの指示のもとでSQLを使用して実作業をご担当いただきます。
・カード会社の新規事業であるデータサービスプロジェクトになります。 カードの決済情報を要件に基づいて抽出・加工を行い、レポーティングし、ユーザーのマーケティング活動を支援するサービスです。 データアナリストは、データ抽出のための要件決め、抽出されたデータをもとにレポーティングと示唆出しを行います。
・カード会社の新規事業であるデータサービスプロジェクトになります。 カードの決済情報を要件に基づいて抽出・加工を行い、レポーティングし、ユーザーのマーケティング活動を支援するサービスです。 データアナリストは、データ抽出のための要件決め、抽出されたデータをもとにレポーティングと示唆出しを行います。
大手SIer企業にてダッシュボード(Tableau)の運用、開発PJTにご参画いただきます。 具体的には以下の業務がございます。 ・データマートの設計・開発、運用 ・データパイプライン(データ整備、収集)の設計・開発、運用 ・その他関連業務(データ提供・メタデータ管理・社内QA対応・障害対応)
大手SIer企業にてダッシュボード(Tableau)の運用、開発PJTにご参画いただきます。 具体的には以下の業務がございます。 ・データマートの設計・開発、運用 ・データパイプライン(データ整備、収集)の設計・開発、運用 ・その他関連業務(データ提供・メタデータ管理・社内QA対応・障害対応)
・クライアントのスマホアプリに導入された自社製品SDKより 集計されるログデータを分析 ・Python等のプログラム言語や、SQLを活用したデータ集計、統計分析 ・アプリでコンバージョンしやすいユーザーの傾向、 離脱しやすいユーザーの傾向を見出す ・顧客説明用にパワーポイントにて分析結果レポートを作成 (可能なら顧客報告もお任せ)
・クライアントのスマホアプリに導入された自社製品SDKより 集計されるログデータを分析 ・Python等のプログラム言語や、SQLを活用したデータ集計、統計分析 ・アプリでコンバージョンしやすいユーザーの傾向、 離脱しやすいユーザーの傾向を見出す ・顧客説明用にパワーポイントにて分析結果レポートを作成 (可能なら顧客報告もお任せ)
・大手自動車会社での車の故障診断等のデータを分析します。 ・大規模DBからPython Pandasを使ってデータを加工し、 さらにデータ分析用の既存の加工コードの追加処理、速度改善などを行います。 ・データ分析のロジック(アルゴリズム等)の検討も行います。 ・検討に内容に対して実装やテストなどもアジャイルで実施します。
・大手自動車会社での車の故障診断等のデータを分析します。 ・大規模DBからPython Pandasを使ってデータを加工し、 さらにデータ分析用の既存の加工コードの追加処理、速度改善などを行います。 ・データ分析のロジック(アルゴリズム等)の検討も行います。 ・検討に内容に対して実装やテストなどもアジャイルで実施します。
メディアの収集データを分析してくれるシステムを開発していく案件での人員募集になります。 元請け側のチームに参画し、 維持管理しているシステムの定常業務+案件が発生したときに対応するメンバーを募集します。 直近だとSnowflakeに移行する案件などが維持管理に移ったりしているのでそういった案件を維持しつつ発生案件に対応していきます。
メディアの収集データを分析してくれるシステムを開発していく案件での人員募集になります。 元請け側のチームに参画し、 維持管理しているシステムの定常業務+案件が発生したときに対応するメンバーを募集します。 直近だとSnowflakeに移行する案件などが維持管理に移ったりしているのでそういった案件を維持しつつ発生案件に対応していきます。
某美容系アプリのサービスを展開されている企業様において、 DX推進責任者(顧客)をサポートしながら、下記の内容を円滑に進めるデータ移行(ディレクション業務)を遂行できる要員を募集しております。 具体的な業務内容としては下記を想定しております。 ・業務側と要件のヒアリング・擦り合わせを行い、社内および外部ベンダーの開発体制と協業しシステム要件の定義、仕様検討や課題解決の取り纏めを行い、各所との調整を行うなど開発を円滑に進めるためのディレクション業務を実施します。 ・中でも今回募集するポジションは、データ移行の業務を中心に担当頂きます。 データ移行計画は作成されており、それに従い準じ作業を行っていただきます。 ex) 開発の作成したプログラムを通して移行されたデータの確からしさなどを検証環境にて実施 ・顧客PLがやるべきことは抑えておりますので、不明点はヒアリングしながら進めていくイメージです。 ・自身が主体で行う打ち合わせやディレクター内での進捗確認会ではファシリテータを行うシーンもございます。
某美容系アプリのサービスを展開されている企業様において、 DX推進責任者(顧客)をサポートしながら、下記の内容を円滑に進めるデータ移行(ディレクション業務)を遂行できる要員を募集しております。 具体的な業務内容としては下記を想定しております。 ・業務側と要件のヒアリング・擦り合わせを行い、社内および外部ベンダーの開発体制と協業しシステム要件の定義、仕様検討や課題解決の取り纏めを行い、各所との調整を行うなど開発を円滑に進めるためのディレクション業務を実施します。 ・中でも今回募集するポジションは、データ移行の業務を中心に担当頂きます。 データ移行計画は作成されており、それに従い準じ作業を行っていただきます。 ex) 開発の作成したプログラムを通して移行されたデータの確からしさなどを検証環境にて実施 ・顧客PLがやるべきことは抑えておりますので、不明点はヒアリングしながら進めていくイメージです。 ・自身が主体で行う打ち合わせやディレクター内での進捗確認会ではファシリテータを行うシーンもございます。