NEW
リモート可

【Python/AIチャットボット/】公共系向けオンプレLLM基盤(vLLM+GPU)構築・AIチャットボット開発支援

報酬
560,000円/月
場所
豊洲(東京都)
雇用形態
業務委託(フリーランス)
業務内容
【作業内容】 ・H100 クラス相当 GPU を搭載したオンプレサーバ 3 台による ローカル LLM 推論環境(vLLM)構築 ・GitLab Duo 等の AI コーディング支援機能をオンプレ環境で利用するための LLM 推論基盤整備 ・GPU 調達待ち期間における プロンプトエンジニアリング中心の事前検証 ・将来的な RAG 構築/ファインチューニング の検討・実装 ・LLM 活用による AI チャットボットの開発支援(会話設計・意図判定・プロンプト整備) ・物理サーバ作業に伴う三鷹拠点での初期セットアップ対応
スキルタグ
求めるスキル
■必須スキル:
・LLM を活用したシステム開発または検証経験 ・プロンプトエンジニアリング、RAG、モデル評価など ・Linux サーバ構築・運用スキル ・Python による開発経験(規模不問) ・新技術のキャッチアップに前向きに取り組める方 ・公共系システムでのセキュリティ要件・制約下での開発に前向きに取り組める方
■歓迎スキル:
・GitLab(CI/CD)の利用経験 ・オンプレ環境でのサーバ構築・NW・ストレージの基本知識 ・vLLM によるオンプレ LLM 推論基盤の構築・運用経験 ・LLM ベースのチャットボット開発経験

更新日: 3日前

【Python/AIチャットボット/】公共系向けオンプレLLM基盤(vLLM+GPU)構築・AIチャットボット開発支援 | ITフリーランスエンジニアの求人・案件 - 【ココナラテック(旧:フリエン)】