【Python/Lambda/データ分析】Lambdaを用いたデータ取り込みの経験ある方!リモート可!大量データ取り込みに関する運用・保守・開発
- ■必須スキル:
- ・PythonでのLambdaを用いたデータ取り込みのご経験 ・PythonまたはNode.jsのご経験2年上 ・AWS Lambdaのご経験1年以上 ・Amazon DynamoDBのご経験1年以上 ・大規模(1000万レコード程度)のデータ取り込み、データ加工スクリプトの開発、チューニング経験
更新日: 2024/11/17
240件中 151〜180件を表示
薬局をメインにtoBやtoCの自社サービス展開をしている某企業において、AWS Lambda、Amazon DynamoDBを用いて連携先からデータ取り込み、サイトコンテンツとして利用に適したデータフォーマットへの変換バッチの開発、サイト側への表示するための共通ロジックの開発を行っていただきます。
更新日: 2024/11/17
薬局をメインにtoBやtoCの自社サービス展開をしている某企業において、AWS Lambda、Amazon DynamoDBを用いて連携先からデータ取り込み、サイトコンテンツとして利用に適したデータフォーマットへの変換バッチの開発、サイト側への表示するための共通ロジックの開発を行っていただきます。
更新日: 2024/11/17
データを用いて、クライアントの課題解決や新規サービス開発、 支援をリードしプロジェクトの成功を導くチームにおいて業務を行っていただきます。 ・事業課題を解決するために必要な分析要件の定義 ・各種ツールを用いたデータ分析・インサイトの作成 ・データエンジニアと協力し、データ分析基盤を整備 ・BIツールを用いたデータ可視化やダッシュボードの作成 ・各種API、サービス、オープンデータからのデータ取得
更新日: 2024/11/17
データを用いて、クライアントの課題解決や新規サービス開発、 支援をリードしプロジェクトの成功を導くチームにおいて業務を行っていただきます。 ・事業課題を解決するために必要な分析要件の定義 ・各種ツールを用いたデータ分析・インサイトの作成 ・データエンジニアと協力し、データ分析基盤を整備 ・BIツールを用いたデータ可視化やダッシュボードの作成 ・各種API、サービス、オープンデータからのデータ取得
更新日: 2024/11/17
◆業務内容 ・課題・仮説を設定し、データ抽出・加工~データ観察~データモデル開発、 精度検証~ビジネス適用・評価のPDCAサイクルに関わって頂きます。 【備考】 データサイエンティストの立ち位置・ミッションとしては データ分析・データ利活用におけるノウハウの展開です。 成功体験を全社へスケールすることで全社的な利益への貢献を目指します。 何かわからないことがあっても周囲の者のサポートが得られる協力的な雰囲気の職場です。
更新日: 2024/11/13
◆業務内容 ・課題・仮説を設定し、データ抽出・加工~データ観察~データモデル開発、 精度検証~ビジネス適用・評価のPDCAサイクルに関わって頂きます。 【備考】 データサイエンティストの立ち位置・ミッションとしては データ分析・データ利活用におけるノウハウの展開です。 成功体験を全社へスケールすることで全社的な利益への貢献を目指します。 何かわからないことがあっても周囲の者のサポートが得られる協力的な雰囲気の職場です。
更新日: 2024/11/13
・ピアノ製造工場で取得しているデータの可視化、すでに成形されたデータを見やすく提供できる アプリケーション開発「技術情報」:データ分析(ETL)、Python、React 【やっていただきたい作業】 ・実装業務
更新日: 2024/11/17
・ピアノ製造工場で取得しているデータの可視化、すでに成形されたデータを見やすく提供できる アプリケーション開発「技術情報」:データ分析(ETL)、Python、React 【やっていただきたい作業】 ・実装業務
更新日: 2024/11/17
基盤運用担当としてインフラ周りのサポートや日時運用チェックして頂きつつ 担当作業が落ち着ている場合はフロントエンドの開発やTableauを利用した分析をして頂きます。
更新日: 2024/11/17
基盤運用担当としてインフラ周りのサポートや日時運用チェックして頂きつつ 担当作業が落ち着ている場合はフロントエンドの開発やTableauを利用した分析をして頂きます。
更新日: 2024/11/17
予約、発券、搭乗に関わる業務のシステムの運用保守をお願いいたします。 予約発券システム保守メンバーの募集となります。 保守作業、設計~ST インシデント管理、変更管理、問題管理…などをお任せいたします。
更新日: 2024/11/17
予約、発券、搭乗に関わる業務のシステムの運用保守をお願いいたします。 予約発券システム保守メンバーの募集となります。 保守作業、設計~ST インシデント管理、変更管理、問題管理…などをお任せいたします。
更新日: 2024/11/17
※全て担当する訳ではなく、チームとしての作業予定です。 ・切替リハーサル、本番切替タイムチャート取りまとめ ・切替リハーサル、本番切替内部実施要領作成 ・移行計画書作成 ・移行関連課題推進 ・移行関連事務局依頼タスク推進 ・切替リハーサル、本番切替全体窓口対応 ・移行タスク環境調整 ・通信要件表とりまとめ ・移行タスク顧客への進捗報告 ・移行成果物顧客説明 ・移行作業実施
更新日: 2024/11/17
※全て担当する訳ではなく、チームとしての作業予定です。 ・切替リハーサル、本番切替タイムチャート取りまとめ ・切替リハーサル、本番切替内部実施要領作成 ・移行計画書作成 ・移行関連課題推進 ・移行関連事務局依頼タスク推進 ・切替リハーサル、本番切替全体窓口対応 ・移行タスク環境調整 ・通信要件表とりまとめ ・移行タスク顧客への進捗報告 ・移行成果物顧客説明 ・移行作業実施
更新日: 2024/11/17
下記の業務を担当して頂きます。 1. データ基盤の開発・改修・保守運用 ・データ基盤の物理・論理データモデル設計・開発・保守運用 ・ データ基盤のシステムアーキテクチャの設計 ・データパイプライン (ETL) の設計・開発・保守運用 開発環境は下記になります。 ● インフラ ○ GCP (データ基盤) / AWS (関連システム) ● データパイプライン (ETL) ○ CloudComposer (Airflow) ● DWH ○ BigQuery ● その他インフラ管理 ○ Docker ○ GKE / GAE / CloudRun ● 可視化ツール ○ Google Data Portal / Tableau ● 分析環境 ○ Jupyter Notebook / Google Colab / Google Cloud ML ● その他 ○ GitHub / Slack / Notion
更新日: 2024/11/17
下記の業務を担当して頂きます。 1. データ基盤の開発・改修・保守運用 ・データ基盤の物理・論理データモデル設計・開発・保守運用 ・ データ基盤のシステムアーキテクチャの設計 ・データパイプライン (ETL) の設計・開発・保守運用 開発環境は下記になります。 ● インフラ ○ GCP (データ基盤) / AWS (関連システム) ● データパイプライン (ETL) ○ CloudComposer (Airflow) ● DWH ○ BigQuery ● その他インフラ管理 ○ Docker ○ GKE / GAE / CloudRun ● 可視化ツール ○ Google Data Portal / Tableau ● 分析環境 ○ Jupyter Notebook / Google Colab / Google Cloud ML ● その他 ○ GitHub / Slack / Notion
更新日: 2024/11/17
・Webサイトのアクセスログの収集、分析 ・Tableau、BQ・SQLでの計測確認や集計業務 ・アクセスログ出力設計・実装、ログ運用 ・ビジネス要件に関する提案や分析
更新日: 2024/11/17
・Webサイトのアクセスログの収集、分析 ・Tableau、BQ・SQLでの計測確認や集計業務 ・アクセスログ出力設計・実装、ログ運用 ・ビジネス要件に関する提案や分析
更新日: 2024/11/17
・主にAIのプロダクト設計や映像データ解析、人事領域のデジタル技術による改革(デジタルトランスフォーメーション、DX)を促進させるサービスを開発しています ・大学や外部パートナーとの共同研究を行うメンバーとしても活動いただく可能性があります
更新日: 2024/11/17
・主にAIのプロダクト設計や映像データ解析、人事領域のデジタル技術による改革(デジタルトランスフォーメーション、DX)を促進させるサービスを開発しています ・大学や外部パートナーとの共同研究を行うメンバーとしても活動いただく可能性があります
更新日: 2024/11/17
・稼働しているシステムのEOLに伴い、新サービスへの再構築を行う。 ・現行システムはSeaser2ベースの独自FWで実装されているが、新システムではSpringBootで開発を行う。
更新日: 2024/11/17
・稼働しているシステムのEOLに伴い、新サービスへの再構築を行う。 ・現行システムはSeaser2ベースの独自FWで実装されているが、新システムではSpringBootで開発を行う。
更新日: 2024/11/17
・導入先企業の既存Excelマクロ(+SQL)システムをTableauへ置き換え ・導入先企業からの依頼にてTableau作成(Tableauは参画後習得可) ・上記導入先企業からの問い合わせ対応、調査(コンサル)
更新日: 2024/11/17
・導入先企業の既存Excelマクロ(+SQL)システムをTableauへ置き換え ・導入先企業からの依頼にてTableau作成(Tableauは参画後習得可) ・上記導入先企業からの問い合わせ対応、調査(コンサル)
更新日: 2024/11/17
ローコードノーコードでアプリケーション開発とデータ利活用ができる 営業基盤(ETL、snowflake、Salesforce、Tableau)を、4月から半年かけてSIerと構築していきます。 アプリケーション開発については、各業務部門が使っているパッケージのアプリケーションを、 Salesforceに置き換えていきますが、担当はDX推進部門の1名しかいない状況なので支援をいただきたいです。
更新日: 2024/11/17
ローコードノーコードでアプリケーション開発とデータ利活用ができる 営業基盤(ETL、snowflake、Salesforce、Tableau)を、4月から半年かけてSIerと構築していきます。 アプリケーション開発については、各業務部門が使っているパッケージのアプリケーションを、 Salesforceに置き換えていきますが、担当はDX推進部門の1名しかいない状況なので支援をいただきたいです。
更新日: 2024/11/17
某企業のDX支援に伴い、PowerAppsを用いたモデル駆動型アプリの開発及びPowerAutomateを用いたワークフローシステムの開発 要件定義/基本設計書をもとに、詳細設計~テストをご担当頂きます
更新日: 2024/11/17
某企業のDX支援に伴い、PowerAppsを用いたモデル駆動型アプリの開発及びPowerAutomateを用いたワークフローシステムの開発 要件定義/基本設計書をもとに、詳細設計~テストをご担当頂きます
更新日: 2024/11/17
加工された画像に対し「この画像の加工は、悪意のあるDeepFakeではない加工である」 を判定するための画像解析処理の開発。 その他、関連のWeb機能開発 言語:OpenCV, Python, Javascript, PHP, C
更新日: 2024/11/17
加工された画像に対し「この画像の加工は、悪意のあるDeepFakeではない加工である」 を判定するための画像解析処理の開発。 その他、関連のWeb機能開発 言語:OpenCV, Python, Javascript, PHP, C
更新日: 2024/11/17
LaKeel BIを使用してお客様要件に合わせたデータ可視化(表作成・グラフ化)を行います。 要件定義、基本設計、開発、テストの参画となります。 技術要素:BI、SQL
更新日: 2024/11/13
LaKeel BIを使用してお客様要件に合わせたデータ可視化(表作成・グラフ化)を行います。 要件定義、基本設計、開発、テストの参画となります。 技術要素:BI、SQL
更新日: 2024/11/13
(ダッシュボードの運用支援) ・既存のPowerBIのレポート、ダッシュボードの運用保守業務。 ・基幹システムのデータをMicrosoft Azureの「Azure Synapse Analytics(DWH)」で構築した データ基盤と連携し、連携されたデータを利用して、MicrosoftのPowerBIを用いて、 レポート・ダッシュボードを作成します。 (既存レポートの保守開発) ・ユーザーから改善要望をヒアリングし開発仕様を検討することがメイン業務 ・ユーザー要望をレポート・ダッシュボードに反映するための要件定義~開発実装までを担当。 ・実際にPowerBIやPowerクエリを使った開発ができると望ましい。 ・チームメンバーとコミュニケーションを取りながらチームのタスクを推進 ・具体的には、様々な業務部署からくるレポートやデータ活用の依頼に対して、 要件の整理から、レポートの修正・製作(PowerBI・Powerクエリ)までを実施。
更新日: 2024/11/17
(ダッシュボードの運用支援) ・既存のPowerBIのレポート、ダッシュボードの運用保守業務。 ・基幹システムのデータをMicrosoft Azureの「Azure Synapse Analytics(DWH)」で構築した データ基盤と連携し、連携されたデータを利用して、MicrosoftのPowerBIを用いて、 レポート・ダッシュボードを作成します。 (既存レポートの保守開発) ・ユーザーから改善要望をヒアリングし開発仕様を検討することがメイン業務 ・ユーザー要望をレポート・ダッシュボードに反映するための要件定義~開発実装までを担当。 ・実際にPowerBIやPowerクエリを使った開発ができると望ましい。 ・チームメンバーとコミュニケーションを取りながらチームのタスクを推進 ・具体的には、様々な業務部署からくるレポートやデータ活用の依頼に対して、 要件の整理から、レポートの修正・製作(PowerBI・Powerクエリ)までを実施。
更新日: 2024/11/17
■データ分析基盤チーム ①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
更新日: 2024/11/13
■データ分析基盤チーム ①新しく立ち上げるサービスのリリースに向けてデータの収集、加工、可視化対応を行う ②既存のデータ抽出の移行や統合対応 ⇒イメージ:要件化したものを自動化し更新できる仕組みづくりを対応いただく ③マーケティング施策のための顧客データ基盤構築対応
更新日: 2024/11/13
ビックデータを独自のAI分析で情報を加工し提供している会社にて、 ビッグデータ分析担当者が開発や検討を効率的に行えるようなライブラリ(API群)の設計・実装を行っていただきます。 主にビッグデータ定量評価、特徴量への加工・変換、計算、レポーティング機能などを開発致します。 利用者ニーズを理解した上で、チームメンバーと議論・提案しあいながら作り上げていける方を求めております。
更新日: 2024/11/17
ビックデータを独自のAI分析で情報を加工し提供している会社にて、 ビッグデータ分析担当者が開発や検討を効率的に行えるようなライブラリ(API群)の設計・実装を行っていただきます。 主にビッグデータ定量評価、特徴量への加工・変換、計算、レポーティング機能などを開発致します。 利用者ニーズを理解した上で、チームメンバーと議論・提案しあいながら作り上げていける方を求めております。
更新日: 2024/11/17
◆クラウド上での機械学習基盤の構築・支援 AzureやAWSやGoogle Cloudなどのクラウドサービスに関する専門知識を活かし、データ分析基盤を含む機械学習基盤構築を実施します。 機械学習モデル作成から周囲のシステムまでMLOpsを意識した環境構築を実施します。 ◆機械学習ソリューションの設計・実装 / PoC実施 機械学習に関する専門知識を活かしたソリューション提案から設計・実装までを行います。 案件のフェーズによってはPoCから実施し、徐々に要件を明確化できるような提案を行います。 ◆機械学習サービスの技術検証 主にAzureやAWSやGoogle Cloudの機械学習サービスについて技術検証を行います。 検証結果は案件へのフィードバックや社外発信(登壇・ブログ投稿など)でアウトプットします。 ◆統計/機械学習手法の調査・検証 最新手法や知見を強化したい分野について論文やライブラリなどの調査・検証を行います。 成果は案件へのフィードバックや社外発信(登壇・ブログ投稿など)でアウトプットします。
更新日: 2024/11/17
◆クラウド上での機械学習基盤の構築・支援 AzureやAWSやGoogle Cloudなどのクラウドサービスに関する専門知識を活かし、データ分析基盤を含む機械学習基盤構築を実施します。 機械学習モデル作成から周囲のシステムまでMLOpsを意識した環境構築を実施します。 ◆機械学習ソリューションの設計・実装 / PoC実施 機械学習に関する専門知識を活かしたソリューション提案から設計・実装までを行います。 案件のフェーズによってはPoCから実施し、徐々に要件を明確化できるような提案を行います。 ◆機械学習サービスの技術検証 主にAzureやAWSやGoogle Cloudの機械学習サービスについて技術検証を行います。 検証結果は案件へのフィードバックや社外発信(登壇・ブログ投稿など)でアウトプットします。 ◆統計/機械学習手法の調査・検証 最新手法や知見を強化したい分野について論文やライブラリなどの調査・検証を行います。 成果は案件へのフィードバックや社外発信(登壇・ブログ投稿など)でアウトプットします。
更新日: 2024/11/17
・BIツールのクラウド運用の改善、マッピング整備 ・DICEの可視化、ロードマップ検討などの戦略検討 ・若手プロパーメンバーがおり、一緒に検討し、指示出しなど自走して動いていただきたい
更新日: 2024/11/17
・BIツールのクラウド運用の改善、マッピング整備 ・DICEの可視化、ロードマップ検討などの戦略検討 ・若手プロパーメンバーがおり、一緒に検討し、指示出しなど自走して動いていただきたい
更新日: 2024/11/17
某大手製造業の工場向けプラットフォームを開発 エッジサーバからデータ集約を行い、エンドユーザーにてデータ閲覧・解析が出来るようにする ・データ調査プログラムの作成 ・データ定義(特性、データソース定義ほか) ・データ集計計画 ・基本設計~実装、テストまでの実施対応想定
更新日: 2025/01/20
某大手製造業の工場向けプラットフォームを開発 エッジサーバからデータ集約を行い、エンドユーザーにてデータ閲覧・解析が出来るようにする ・データ調査プログラムの作成 ・データ定義(特性、データソース定義ほか) ・データ集計計画 ・基本設計~実装、テストまでの実施対応想定
更新日: 2025/01/20
保険商品の契約情報と自然災害やリスクマップなどの情報やお客様の行動情報を分析し、 分析モデルチームが検討した仕様を基にモデル開発を実施。 継続的に新商品などの発売に向けてモデル開発が続いて行くため、 検討・設計・開発を4~5ヶ月のサイクルで繰り返す。
更新日: 2024/11/17
保険商品の契約情報と自然災害やリスクマップなどの情報やお客様の行動情報を分析し、 分析モデルチームが検討した仕様を基にモデル開発を実施。 継続的に新商品などの発売に向けてモデル開発が続いて行くため、 検討・設計・開発を4~5ヶ月のサイクルで繰り返す。
更新日: 2024/11/17
Excelマクロによるデータ加工処理設計・構築・テスト QuickSightレポートの設計・構築・テスト ユーザ引き継ぎ
更新日: 2024/11/17
Excelマクロによるデータ加工処理設計・構築・テスト QuickSightレポートの設計・構築・テスト ユーザ引き継ぎ
更新日: 2024/11/17
■案 件:【データアナリスト】大手エンタメ事業 サービス内(App/Web)におけるユーザーの活動分析 ■内 容: ・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) <業務詳細> ・分析基盤整備 └ダッシュボードの作成(KPIツリー、目的別ボード) └ユーザー行動の可視化(推移、利用特性) └分析基盤整備の推進(データ取得の推進、課題点洗い出し) ・分析 └データを用いた仮説検証(機能、UI改善、施策) └ユーザー行動(数値化、可視化、セグメント分類) └効果検証(広告、キャンペーン、メールマガジン等) └得られたデータを元にしたインサイトの提供
更新日: 2024/11/17
■案 件:【データアナリスト】大手エンタメ事業 サービス内(App/Web)におけるユーザーの活動分析 ■内 容: ・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) <業務詳細> ・分析基盤整備 └ダッシュボードの作成(KPIツリー、目的別ボード) └ユーザー行動の可視化(推移、利用特性) └分析基盤整備の推進(データ取得の推進、課題点洗い出し) ・分析 └データを用いた仮説検証(機能、UI改善、施策) └ユーザー行動(数値化、可視化、セグメント分類) └効果検証(広告、キャンペーン、メールマガジン等) └得られたデータを元にしたインサイトの提供
更新日: 2024/11/17
・CoE活動の情報展開チャネルとしてSharepointサイトの設計・開発 ・クラウド利用申請用のワークフロー開発(Power Automate および Microsfot Forms等) 主に上記作業を行っていただきます。
更新日: 2024/11/17
・CoE活動の情報展開チャネルとしてSharepointサイトの設計・開発 ・クラウド利用申請用のワークフロー開発(Power Automate および Microsfot Forms等) 主に上記作業を行っていただきます。
更新日: 2024/11/17