【SQL】データエンジニアリング業務
- ■必須スキル:
- ・データマート設計を行う経験 ・SQLの開発経験(テストもしっかり実施できる)
- ■歓迎スキル:
- ・システム開発 または システム運用保守経験(特に設計・運用・保守) ・顧客とのコミュニケーション(問合せ対応や仕様調整など)
377件中 91〜120件を表示
:データ分析やデータ利活用等、データ関連の案件を複数受託されている企業様で、 データに関連する業務を支援して頂けるメンバーを探しております。 複数企業様からの案件となるため、1案件に特化した対応ではなく、 マルチに案件対応をして頂く形となります。
:データ分析やデータ利活用等、データ関連の案件を複数受託されている企業様で、 データに関連する業務を支援して頂けるメンバーを探しております。 複数企業様からの案件となるため、1案件に特化した対応ではなく、 マルチに案件対応をして頂く形となります。
・Tableauを用いた製品・機器に関する情報を集計・分析する業務です。 ・案件内容を確認し、分析観点についての認識合わせを行うことがあります。 ・ログ集計時にデータを加工するスキルや環境の設定が必要な場合があります。 ・AWSなどのクラウドで作業を実施しています。
・Tableauを用いた製品・機器に関する情報を集計・分析する業務です。 ・案件内容を確認し、分析観点についての認識合わせを行うことがあります。 ・ログ集計時にデータを加工するスキルや環境の設定が必要な場合があります。 ・AWSなどのクラウドで作業を実施しています。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行います。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築を行います。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行います。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築を行います。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行っていただきます。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築です。
・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行っていただきます。 ・具体的には様々な外部データソースとのデータ連携のための処理の実装です。 ・データの正確性、完全性、一貫性を保証するためのデータ品質管理プロセスの設計と実装、およびデータパイプラインの健全性を監視するシステムの構築です。
データパイプラインの構築やデータ処理の開発を担当するデータエンジニアを募集します。 ETL、DWH、データマート、BIなどのスキルと実務経験を持ち、データアーキテクチャに基づいたデータ処理の開発ができる方
データパイプラインの構築やデータ処理の開発を担当するデータエンジニアを募集します。 ETL、DWH、データマート、BIなどのスキルと実務経験を持ち、データアーキテクチャに基づいたデータ処理の開発ができる方
・SQLを利用してデータを抽出いたします。 ・データカタログ等の仕様書を参照し、自立してSQLクエリの作成・実行を行います。 ・複数テーブルの結合やサブクエリを利用し、実務レベルのクエリを作成いたします。 ・大規模データの利用時には、システム負荷を軽減するためのクエリチューニングを行います。
・SQLを利用してデータを抽出いたします。 ・データカタログ等の仕様書を参照し、自立してSQLクエリの作成・実行を行います。 ・複数テーブルの結合やサブクエリを利用し、実務レベルのクエリを作成いたします。 ・大規模データの利用時には、システム負荷を軽減するためのクエリチューニングを行います。
◆業務内容 ・課題・仮説を設定し、データ抽出・加工~データ観察~データモデル開発、 精度検証~ビジネス適用・評価のPDCAサイクルに関わって頂きます。 【備考】 データサイエンティストの立ち位置・ミッションとしては データ分析・データ利活用におけるノウハウの展開です。 成功体験を全社へスケールすることで全社的な利益への貢献を目指します。 何かわからないことがあっても周囲の者のサポートが得られる協力的な雰囲気の職場です。
◆業務内容 ・課題・仮説を設定し、データ抽出・加工~データ観察~データモデル開発、 精度検証~ビジネス適用・評価のPDCAサイクルに関わって頂きます。 【備考】 データサイエンティストの立ち位置・ミッションとしては データ分析・データ利活用におけるノウハウの展開です。 成功体験を全社へスケールすることで全社的な利益への貢献を目指します。 何かわからないことがあっても周囲の者のサポートが得られる協力的な雰囲気の職場です。
【内容】 衛星データの機械学習による解析に関わる幅広い業務をお任せします。 現在、衛生データを利用し、農業や地方自治体における 公務のDX化を推進するプロダクトをいくつか展開しております。 データの分析から予測データの精度向上・活用方法の提案まで スキルに応じて幅広くお手伝い頂ける方大歓迎です。 【開発環境】 ・言語:Python ・ライブラリ・フレームワーク:PyTorch / pandas / numpy / scikit-learn etc… ・DB:PostgreSQL ( PostGIS ) ・インフラ:AWS / GCP ・バージョン管理:Git ・リポジトリ管理:GitHub ・GISツール : QGIS ・コミュニケーションツール : Slack / Zoom / Discord
【内容】 衛星データの機械学習による解析に関わる幅広い業務をお任せします。 現在、衛生データを利用し、農業や地方自治体における 公務のDX化を推進するプロダクトをいくつか展開しております。 データの分析から予測データの精度向上・活用方法の提案まで スキルに応じて幅広くお手伝い頂ける方大歓迎です。 【開発環境】 ・言語:Python ・ライブラリ・フレームワーク:PyTorch / pandas / numpy / scikit-learn etc… ・DB:PostgreSQL ( PostGIS ) ・インフラ:AWS / GCP ・バージョン管理:Git ・リポジトリ管理:GitHub ・GISツール : QGIS ・コミュニケーションツール : Slack / Zoom / Discord
データ活用最大化のための分析基盤の構築/運用 データ民主化を実現するための仕掛けづくりと啓蒙/教育 ID-POSやパネルデータを用いた顧客インサイトの抽出 協力会社やIT部門に対するコントロール及びコラボレーション <データ分析案件の例> ・全社統一KGI/KPI指標の設計および提供 ・チャネル×価格帯でのBiz Opportunity分析 ・ブランド中期計画のためのプロモーション効果検証 ・離脱者&再購入者の分析 ・情緒的価値観の指標化
データ活用最大化のための分析基盤の構築/運用 データ民主化を実現するための仕掛けづくりと啓蒙/教育 ID-POSやパネルデータを用いた顧客インサイトの抽出 協力会社やIT部門に対するコントロール及びコラボレーション <データ分析案件の例> ・全社統一KGI/KPI指標の設計および提供 ・チャネル×価格帯でのBiz Opportunity分析 ・ブランド中期計画のためのプロモーション効果検証 ・離脱者&再購入者の分析 ・情緒的価値観の指標化
【募集背景】 大手人材会社のデータ推進部門において、HR領域のデータ活用推進を行うための体制強化を目的としております。 【作業内容】 ・ビジネス要件のヒアリングを実施いたします。 ・ビジネス要件を基にデータマートの要件を整理し、設計を行います。 ・BPにて開発された成果物のレビューを実施いたします。 【開発環境】 ・Google GCPを基盤として利用いたします。
【募集背景】 大手人材会社のデータ推進部門において、HR領域のデータ活用推進を行うための体制強化を目的としております。 【作業内容】 ・ビジネス要件のヒアリングを実施いたします。 ・ビジネス要件を基にデータマートの要件を整理し、設計を行います。 ・BPにて開発された成果物のレビューを実施いたします。 【開発環境】 ・Google GCPを基盤として利用いたします。
【募集背景】 業務ボリュームが増加に伴う増員のためです。 【作業内容】 ・データ抽出/集計業務を行います。 ・データマート構築のQuery構築業務を行います。 ・BIツール(Looker)の可視化環境構築業務を行います。 ・案件定義、基本設計、詳細設計、開発(クエリ作成/レポーティング)、保守改修を担当します。 【開発環境】 プログラミング言語はSQLを使用します。インフラはGCP(BigQuery 等)を使用します。ツールはJIRA、Confluence、GitHub、Slack、BIツールはLookerを使用します。PCはWindowsまたはMacから選択します。
【募集背景】 業務ボリュームが増加に伴う増員のためです。 【作業内容】 ・データ抽出/集計業務を行います。 ・データマート構築のQuery構築業務を行います。 ・BIツール(Looker)の可視化環境構築業務を行います。 ・案件定義、基本設計、詳細設計、開発(クエリ作成/レポーティング)、保守改修を担当します。 【開発環境】 プログラミング言語はSQLを使用します。インフラはGCP(BigQuery 等)を使用します。ツールはJIRA、Confluence、GitHub、Slack、BIツールはLookerを使用します。PCはWindowsまたはMacから選択します。
【募集背景】 顧客要望に応じたデータ分析およびデータプロダクト開発のニーズ拡大に伴い、専門性の高いデータサイエンティストを募集しております。 【作業内容】 顧客の要望に応じた統計・機械学習モデルの構築を行い、分析結果の解釈および説明資料を作成していただきます。適切なアルゴリズムを用いたシミュレーションやモデリング手法の考案、PoCの推進および実装支援を行っていただきます。機器データからの分析用データ生成や、自社提供データの統計的な観点からの検証および改善案の提示も担当していただきます。 【求める人物像】 データに基づき論理的に思考し、分析結果をわかりやすく説明できる方を求めております。顧客の課題に寄り添い、自ら仮説立案や手法検討を主体的に進められる方を歓迎いたします。 【ポジションの魅力】 統計・機械学習モデルの構築から分析結果の提案まで一貫して携わることができ、多様な業界や課題に対して高度な分析スキルを発揮できる環境です。PoCやソリューション開発を通じて、データプロダクトの企画・改善にも関与していただけます。 【開発環境】 Pythonを用いたデータ分析環境およびBIツール・可視化ライブラリ、クラウド上のDWHや分析基盤を利用した環境で作業していただきます。
【募集背景】 顧客要望に応じたデータ分析およびデータプロダクト開発のニーズ拡大に伴い、専門性の高いデータサイエンティストを募集しております。 【作業内容】 顧客の要望に応じた統計・機械学習モデルの構築を行い、分析結果の解釈および説明資料を作成していただきます。適切なアルゴリズムを用いたシミュレーションやモデリング手法の考案、PoCの推進および実装支援を行っていただきます。機器データからの分析用データ生成や、自社提供データの統計的な観点からの検証および改善案の提示も担当していただきます。 【求める人物像】 データに基づき論理的に思考し、分析結果をわかりやすく説明できる方を求めております。顧客の課題に寄り添い、自ら仮説立案や手法検討を主体的に進められる方を歓迎いたします。 【ポジションの魅力】 統計・機械学習モデルの構築から分析結果の提案まで一貫して携わることができ、多様な業界や課題に対して高度な分析スキルを発揮できる環境です。PoCやソリューション開発を通じて、データプロダクトの企画・改善にも関与していただけます。 【開発環境】 Pythonを用いたデータ分析環境およびBIツール・可視化ライブラリ、クラウド上のDWHや分析基盤を利用した環境で作業していただきます。
上流システム更改に伴うシステム移行対応及びデータマートの構築、運用、保守の対応。 詳細設計、製造、テスト、運用作業、調査、障害対応を担当します。
上流システム更改に伴うシステム移行対応及びデータマートの構築、運用、保守の対応。 詳細設計、製造、テスト、運用作業、調査、障害対応を担当します。
某ネット系企業のデータ利活用案件にてデータマートの共通化や開発生産性の改善、モダンなデータエンジニアリングの実践を担当します。リードエンジニアとして参画し、プロジェクト全体の効率向上と拡大を推進します。
某ネット系企業のデータ利活用案件にてデータマートの共通化や開発生産性の改善、モダンなデータエンジニアリングの実践を担当します。リードエンジニアとして参画し、プロジェクト全体の効率向上と拡大を推進します。
案件名:製薬企業データ分析基盤拡張案件 環 境:・お客様AWS環境上にデータ統合基盤を構築 ・複数部門横断の基盤プロジェクトとしてお客様統合運用環境との連携を実現 ・最先端のテクノロジー/ソリューションを活用し、以下を実現 - 大容量データを高速で処理できる処理性能 - 他システムとの連携性や利用拡大に伴う基盤の拡張性の担保 - 利用量に対してコスト発生する従量課金型を採用 内 容:a SnowflakeのSSO認証構築 ゼロトラスト施策によりDCへの迂回が不可が見込まれるため、 セキュリティの見直しとSnowflake-SSO認証環境の構築を行う。 b 分析環境立ち上げ/ADAM(PowerBI) 必要なデータをEDIPに集約し分析を行うための環境を構築する。 将来的には定型的な分析を自動化するデータパイプラインを構築することを目指す。 c データカタログ導入 マルチベンダ開発のガバナンス強化と営業系データの探索の効率化向上を図る。 今後のデータカタログ利用に対するデータカタログ構想策定/アーキ選択を実施後、 営業本部向けに1ユースケース実現する ※想定される比較対象ソリューション:Snowflake-Horizon、Alation、Collibra、他 d データメッシュPoC 他に倣ってデータメッシュのプロトタイプを立ち上げたい ビジネス部門にどういった使い方ができるかイメージをしてもらうためにもまずは作ってみる想定 ⇒業務システムから断面を拾ってSnowflakeにおきかえてアクセスできる事。 自動パイプラインでなくても良い。複数ベンダーに協業してやってほしい。 e 非構造データ取り込み(MI部) 他APとの連携 生成AI(RAG)を7月リリースしており、現在手作業でSPOに配置している対象を Snowflake側の非構造管理領域に接続先に変更し切り替え ※年内はつなぐぐらいか
案件名:製薬企業データ分析基盤拡張案件 環 境:・お客様AWS環境上にデータ統合基盤を構築 ・複数部門横断の基盤プロジェクトとしてお客様統合運用環境との連携を実現 ・最先端のテクノロジー/ソリューションを活用し、以下を実現 - 大容量データを高速で処理できる処理性能 - 他システムとの連携性や利用拡大に伴う基盤の拡張性の担保 - 利用量に対してコスト発生する従量課金型を採用 内 容:a SnowflakeのSSO認証構築 ゼロトラスト施策によりDCへの迂回が不可が見込まれるため、 セキュリティの見直しとSnowflake-SSO認証環境の構築を行う。 b 分析環境立ち上げ/ADAM(PowerBI) 必要なデータをEDIPに集約し分析を行うための環境を構築する。 将来的には定型的な分析を自動化するデータパイプラインを構築することを目指す。 c データカタログ導入 マルチベンダ開発のガバナンス強化と営業系データの探索の効率化向上を図る。 今後のデータカタログ利用に対するデータカタログ構想策定/アーキ選択を実施後、 営業本部向けに1ユースケース実現する ※想定される比較対象ソリューション:Snowflake-Horizon、Alation、Collibra、他 d データメッシュPoC 他に倣ってデータメッシュのプロトタイプを立ち上げたい ビジネス部門にどういった使い方ができるかイメージをしてもらうためにもまずは作ってみる想定 ⇒業務システムから断面を拾ってSnowflakeにおきかえてアクセスできる事。 自動パイプラインでなくても良い。複数ベンダーに協業してやってほしい。 e 非構造データ取り込み(MI部) 他APとの連携 生成AI(RAG)を7月リリースしており、現在手作業でSPOに配置している対象を Snowflake側の非構造管理領域に接続先に変更し切り替え ※年内はつなぐぐらいか
・某メーカーのDX案件におけるデータ利活用・可視化対応作業を行います。 ・9月よりデータ整備・データマートの概要設計等を実施し、性能要件がありその点を踏まえた検討も実施します。 ・10月以降はデータ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発およびダッシュボード(PowerBI)開発を行います。
・某メーカーのDX案件におけるデータ利活用・可視化対応作業を行います。 ・9月よりデータ整備・データマートの概要設計等を実施し、性能要件がありその点を踏まえた検討も実施します。 ・10月以降はデータ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発およびダッシュボード(PowerBI)開発を行います。
①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
・顧客が扱う商品情報のデータ品質を向上させる活動においてデータクレンジング作業を実施しています。 多岐に渡る要件を元に継続的に行っていく業務支援案件となります。 SQLを使ったデータの抽出・加工業務をご支援いただきます。 チーム3名体制で稼働しており、リーダーの指示のもとでSQLを使用して実作業をご担当いただきます。
・顧客が扱う商品情報のデータ品質を向上させる活動においてデータクレンジング作業を実施しています。 多岐に渡る要件を元に継続的に行っていく業務支援案件となります。 SQLを使ったデータの抽出・加工業務をご支援いただきます。 チーム3名体制で稼働しており、リーダーの指示のもとでSQLを使用して実作業をご担当いただきます。
・カード会社の新規事業であるデータサービスプロジェクトになります。 カードの決済情報を要件に基づいて抽出・加工を行い、レポーティングし、ユーザーのマーケティング活動を支援するサービスです。 データアナリストは、データ抽出のための要件決め、抽出されたデータをもとにレポーティングと示唆出しを行います。
・カード会社の新規事業であるデータサービスプロジェクトになります。 カードの決済情報を要件に基づいて抽出・加工を行い、レポーティングし、ユーザーのマーケティング活動を支援するサービスです。 データアナリストは、データ抽出のための要件決め、抽出されたデータをもとにレポーティングと示唆出しを行います。
大手SIer企業にてダッシュボード(Tableau)の運用、開発PJTにご参画いただきます。 具体的には以下の業務がございます。 ・データマートの設計・開発、運用 ・データパイプライン(データ整備、収集)の設計・開発、運用 ・その他関連業務(データ提供・メタデータ管理・社内QA対応・障害対応)
大手SIer企業にてダッシュボード(Tableau)の運用、開発PJTにご参画いただきます。 具体的には以下の業務がございます。 ・データマートの設計・開発、運用 ・データパイプライン(データ整備、収集)の設計・開発、運用 ・その他関連業務(データ提供・メタデータ管理・社内QA対応・障害対応)
・大手自動車会社での車の故障診断等のデータを分析します。 ・大規模DBからPython Pandasを使ってデータを加工し、 さらにデータ分析用の既存の加工コードの追加処理、速度改善などを行います。 ・データ分析のロジック(アルゴリズム等)の検討も行います。 ・検討に内容に対して実装やテストなどもアジャイルで実施します。
・大手自動車会社での車の故障診断等のデータを分析します。 ・大規模DBからPython Pandasを使ってデータを加工し、 さらにデータ分析用の既存の加工コードの追加処理、速度改善などを行います。 ・データ分析のロジック(アルゴリズム等)の検討も行います。 ・検討に内容に対して実装やテストなどもアジャイルで実施します。