【ETL/PySpark/フルリモート】受発注管理システム更改
- ■必須スキル:
- ・AWS Glue(VisualETL)の経験 ・PySparkの経験 ・RDBMSの利用経験
- ■歓迎スキル:
- ・Python ・SQL ・Amazon Redshift ・Amazon S3 ・Power BIの知見
1310件中 1081〜1110件を表示
・需要予測システムから出力されたデータを抽出・変換し、DWHからデータマートに登録するETL設計・開発業務を行います。 ・一度Python Shellで実装されたETLが性能要件を満たさず、VisualETLおよびPySparkでの再構築を実施予定です。 ・DWH・データマートはAmazon Redshiftを使用します。
・需要予測システムから出力されたデータを抽出・変換し、DWHからデータマートに登録するETL設計・開発業務を行います。 ・一度Python Shellで実装されたETLが性能要件を満たさず、VisualETLおよびPySparkでの再構築を実施予定です。 ・DWH・データマートはAmazon Redshiftを使用します。
・AWS上へのWAS/IHS基盤構築を行います。 ・環境構築に関わる負荷検証や構築ツール作成を担当します。 ・運用スクリプトの作成も行います。 ・構築環境のテスト対応を行い、システム移行支援を行います。
・AWS上へのWAS/IHS基盤構築を行います。 ・環境構築に関わる負荷検証や構築ツール作成を担当します。 ・運用スクリプトの作成も行います。 ・構築環境のテスト対応を行い、システム移行支援を行います。
・顧客の業務プロセスの分析を行います。 ・課題解決に最適なAIエージェントの設計・開発を行います(営業支援、カスタマーサポート、データ分析など)。
・顧客の業務プロセスの分析を行います。 ・課題解決に最適なAIエージェントの設計・開発を行います(営業支援、カスタマーサポート、データ分析など)。
全国の不動産情報を集め、顧客属性の分析や顧客への提案活動を可能にする、SaaS製品の開発案件です。 ・バックエンドメイン(フロントも含む)の実装から、インフラ構築まで幅広くご担当いただきます。 ・ビッグデータを活用したWebアプリ開発経験をお持ちの方を歓迎します。
全国の不動産情報を集め、顧客属性の分析や顧客への提案活動を可能にする、SaaS製品の開発案件です。 ・バックエンドメイン(フロントも含む)の実装から、インフラ構築まで幅広くご担当いただきます。 ・ビッグデータを活用したWebアプリ開発経験をお持ちの方を歓迎します。
・可用性管理を行います。 ・SLO/SLIの設計と可用性指標の定義・理解を進めます。 ・冗長化設計や高可用性構成を提供します。 ・AutoScalingの活用やマルチAZ構成の設計・導入を行います。 ・監視・可観測性の強化を図ります。 ・メトリクス、ログ、トレースの収集・管理を行います。 ・監視基盤設計・構築をします(Prometheus、Grafana、CloudWatch、Fluentdを使用)。 ・アラート・インシデント対応を行います。 ・アラート閾値の設定とノイズ抑制を行います。 ・Slackなどと連携した通知設計を行います。 ・一時対応やログ調査を実施します。 ・自動化スクリプトの作成を行います(Bash、Pythonを使用)。 ・継続的改善(SRE原則に基づくPDCA)を実施します。 ・SLO違反の分析とSLI/SLOデータの可視化を行います。 ・違反要因の仮説立案と検証を行います。 ・容量・性能管理を行います。 ・スケーリング戦略の立案と実行をします。 ・Kubernetesを用いたAWS上のコンテナ自動スケール設計を行います。 ・AWS OpsWorks、Terraformなどを用いたIaCによる構成管理と自動化を行います。
・可用性管理を行います。 ・SLO/SLIの設計と可用性指標の定義・理解を進めます。 ・冗長化設計や高可用性構成を提供します。 ・AutoScalingの活用やマルチAZ構成の設計・導入を行います。 ・監視・可観測性の強化を図ります。 ・メトリクス、ログ、トレースの収集・管理を行います。 ・監視基盤設計・構築をします(Prometheus、Grafana、CloudWatch、Fluentdを使用)。 ・アラート・インシデント対応を行います。 ・アラート閾値の設定とノイズ抑制を行います。 ・Slackなどと連携した通知設計を行います。 ・一時対応やログ調査を実施します。 ・自動化スクリプトの作成を行います(Bash、Pythonを使用)。 ・継続的改善(SRE原則に基づくPDCA)を実施します。 ・SLO違反の分析とSLI/SLOデータの可視化を行います。 ・違反要因の仮説立案と検証を行います。 ・容量・性能管理を行います。 ・スケーリング戦略の立案と実行をします。 ・Kubernetesを用いたAWS上のコンテナ自動スケール設計を行います。 ・AWS OpsWorks、Terraformなどを用いたIaCによる構成管理と自動化を行います。
・電力会社向け電力消費量予測モデルを構築します。 ・PoCフェーズが完了し、本番運用と同量のモデルを構築するフェーズです。 ・元となるデータ加工・モデル構築・精度算出のソースコードはあるので、それを流用しつつ、PoC対象外のモデル構築・精度検証・誤差分析を想定しています。 ・学習用モデルデータ作成を行います。 ・予測モデル(LightGBM)の構築、精度検証を行います。 ・上記をSagemakerジョブにて並列実行する仕組みを構築します。 ・精度検証結果より、乖離要因の分析・レポート出力を行います。
・電力会社向け電力消費量予測モデルを構築します。 ・PoCフェーズが完了し、本番運用と同量のモデルを構築するフェーズです。 ・元となるデータ加工・モデル構築・精度算出のソースコードはあるので、それを流用しつつ、PoC対象外のモデル構築・精度検証・誤差分析を想定しています。 ・学習用モデルデータ作成を行います。 ・予測モデル(LightGBM)の構築、精度検証を行います。 ・上記をSagemakerジョブにて並列実行する仕組みを構築します。 ・精度検証結果より、乖離要因の分析・レポート出力を行います。
・アルゴリズムの逐次処理化対応を行います。 ・複数アルゴリズムの統合を実施します。 ・分散処理ライブラリを用いた評価環境構築を担当します(Kafka、Redis Streams、ROS2)。 ・Git等のツールによる開発管理を行います。
・アルゴリズムの逐次処理化対応を行います。 ・複数アルゴリズムの統合を実施します。 ・分散処理ライブラリを用いた評価環境構築を担当します(Kafka、Redis Streams、ROS2)。 ・Git等のツールによる開発管理を行います。
・某メーカーのDX案件における、データ利活用・可視化対応作業を行います。 ・データ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発を行います。
・某メーカーのDX案件における、データ利活用・可視化対応作業を行います。 ・データ収集・加工プログラム(AWS Glue でのSparkジョブ(python))の開発を行います。
・GitHubActionsを用いたCIパイプラインの作成、設定見直しを行います。 ・YoctoProjectを用いたビルド環境整備を行います。
・GitHubActionsを用いたCIパイプラインの作成、設定見直しを行います。 ・YoctoProjectを用いたビルド環境整備を行います。
・既存システム及びパッケージをオープン系システムへ移植における非機能検証の検討を行います。 ・非機能検証方式検討や検証ツール開発を担当します。
・既存システム及びパッケージをオープン系システムへ移植における非機能検証の検討を行います。 ・非機能検証方式検討や検証ツール開発を担当します。
【作業内容】 NW運用保守・支援業務です。 【求める人物像】 積極的に行動でき、コミュニケーション能力が高い方を求めています。 タスク管理/判断力を有し、自ら動けて柔軟に対応できる方が望ましいです。
【作業内容】 NW運用保守・支援業務です。 【求める人物像】 積極的に行動でき、コミュニケーション能力が高い方を求めています。 タスク管理/判断力を有し、自ら動けて柔軟に対応できる方が望ましいです。
お客様にてPoCで開発された、メンテナンス者向けのRAGシステムの商用化を行います。 ただし、RAGシステム自体の改良は本開発では実施しません。(次フェーズ以降を予定) インフラ構築は弊社別チームが実施します。 開発スタイルはスクラム開発となります。(お客様PO、弊社SM)
お客様にてPoCで開発された、メンテナンス者向けのRAGシステムの商用化を行います。 ただし、RAGシステム自体の改良は本開発では実施しません。(次フェーズ以降を予定) インフラ構築は弊社別チームが実施します。 開発スタイルはスクラム開発となります。(お客様PO、弊社SM)
【作業内容】 データ分析システムの設計・開発を行っている部署において、Azure Databrikcs環境上でのデータ分析環境の構築を支援いただきたいです。
【作業内容】 データ分析システムの設計・開発を行っている部署において、Azure Databrikcs環境上でのデータ分析環境の構築を支援いただきたいです。
【作業内容】 パブリッククラウドにおけるセキュリティ基盤の設計開発を担当します。具体的にはAWS、GCP、Azureなどにおけるサービス拡張開発です。 【ポジションの魅力】 多様なクラウド環境でのセキュリティ基盤開発に携わり、新しい技術やアーキテクチャの学びを深めることができます。
【作業内容】 パブリッククラウドにおけるセキュリティ基盤の設計開発を担当します。具体的にはAWS、GCP、Azureなどにおけるサービス拡張開発です。 【ポジションの魅力】 多様なクラウド環境でのセキュリティ基盤開発に携わり、新しい技術やアーキテクチャの学びを深めることができます。
【作業内容】 AWS環境の設計・構築を行います。 【求める人物像】 プロジェクトを一緒に完遂して頂ける様なスタンス・やる気のある方(重視)。キャッチアップ力、意欲のある方。
【作業内容】 AWS環境の設計・構築を行います。 【求める人物像】 プロジェクトを一緒に完遂して頂ける様なスタンス・やる気のある方(重視)。キャッチアップ力、意欲のある方。
ネイティブゲームの運用作業(App Store/Google Play向けゲーム)を行っていただきます。 具合的には下記のような業務を行っていただきます。 ・新機能追加・既存機能の改修 ・運用ツールの保守・開発 ・ユーザ様からのお問い合わせの調査
ネイティブゲームの運用作業(App Store/Google Play向けゲーム)を行っていただきます。 具合的には下記のような業務を行っていただきます。 ・新機能追加・既存機能の改修 ・運用ツールの保守・開発 ・ユーザ様からのお問い合わせの調査
ネイティブゲームの運用作業(App Store/Google Play向けゲーム)を行っていただきます。 具合的には下記のような業務を行っていただきます。 ・新機能追加・既存機能の改修 ・運用ツールの保守・開発 ・ユーザ様からのお問い合わせの調査
ネイティブゲームの運用作業(App Store/Google Play向けゲーム)を行っていただきます。 具合的には下記のような業務を行っていただきます。 ・新機能追加・既存機能の改修 ・運用ツールの保守・開発 ・ユーザ様からのお問い合わせの調査
- ロボット、カメラ等を使った製品の研究/試作/開発 - センシングデバイス等を使用した回路設計 ※経験スキル、稼働率によりますが、複数案件をご対応頂く可能性ございます。
- ロボット、カメラ等を使った製品の研究/試作/開発 - センシングデバイス等を使用した回路設計 ※経験スキル、稼働率によりますが、複数案件をご対応頂く可能性ございます。
ホテル業界のクライアント様向けシステム開発プロジェクトにご参画いただきます。 今回は基本設計書をもとに詳細設計書の作成、開発者への実装指示、ソースコードのレビュー、実装(可能性は低い)を行って頂ける方を募集します。オフショアのアウトプットの品質確認作業なども行っていただきます。 【技術要件】 ・Python ・Fast API(PythonのRestfulAPIフレームワーク) ・SQL Alchemy(PythonのORMライブラリ) ・PostgreSQL ・AWS(あれば尚良い)
ホテル業界のクライアント様向けシステム開発プロジェクトにご参画いただきます。 今回は基本設計書をもとに詳細設計書の作成、開発者への実装指示、ソースコードのレビュー、実装(可能性は低い)を行って頂ける方を募集します。オフショアのアウトプットの品質確認作業なども行っていただきます。 【技術要件】 ・Python ・Fast API(PythonのRestfulAPIフレームワーク) ・SQL Alchemy(PythonのORMライブラリ) ・PostgreSQL ・AWS(あれば尚良い)
・社内向け分析用システムの開発とデータベースメンテナンスを担当 ・Python技術者は様々なデータソースからのデータ収集を行い、Tableau技術者は集めたデータの編成やDB格納方法の検討・実施を行う
・社内向け分析用システムの開発とデータベースメンテナンスを担当 ・Python技術者は様々なデータソースからのデータ収集を行い、Tableau技術者は集めたデータの編成やDB格納方法の検討・実施を行う
音声認識ソリューションや顧客DX支援における自然言語処理分野のAI技術者として、LLM・RAGを活用した自然言語系アプリケーションの開発と精度向上を行います。 具体的には、要約・チャットボットソリューション・業務用帳票改良に関連する開発と、LLM・RAG自体の開発及び精度向上の2つのケースがあります。
音声認識ソリューションや顧客DX支援における自然言語処理分野のAI技術者として、LLM・RAGを活用した自然言語系アプリケーションの開発と精度向上を行います。 具体的には、要約・チャットボットソリューション・業務用帳票改良に関連する開発と、LLM・RAG自体の開発及び精度向上の2つのケースがあります。