shoet

案件概要

⾃社内の経費精算フローがメールや対⾯での申請であったため、
モバイルアプリを開発し申請フローをリモート・⾃動化した。
社内担当者とヒアリングを⾏いながらリリースまで⼀気通貫で開発。

システム概要

モバイルアプリをFlutter、バックエンドはAWSでサーバレスに構築を⾏った。
⼀部GCPのAPIを使⽤。

扱った技術

モバイルアプリ

Flutter2.0

バックエンド(AWS)

Cognito: ユーザ認証
Lambda: API
DynamoDB: DB
APIGateway: APIエンドポイント
S3: ストレージ

バックエンド(GCP)

Cloud Vision API: レシート・領収書のOCR処理に使⽤

⼯夫したこと

レシート・領収書から経費申請に関わる⽂字列を抜き出す(OCR)処理で精度にバラつきが⽣じたが、
撮影時にガイド(⽬盛)を設けたり画像の⾓度を調整することにより改善を図った。

案件概要

客先常駐にて参画。
AWS上でのBIシステムのデータ基盤の構築。
データの流れは、①S3へファイル連携 → ②Athena → ③Aurora → ④QuickSight
ETL処理は上記の①②③層でそれぞれ共通化し、各層で500テーブル程のETL処理をGlueジョブにて実⾏。
AWS側のAPI実⾏制限に収まる範囲で並列で実⾏できるように、GlueWFとStepFunctionsを組み合わせてワークフローを設計。

案件の現在

• リリースに向けてのUAT期間中

扱った技術

インフラ(AWS)

Glue/GlueWF: ETLジョブ
StepFunctions: ワークフロー
EventBridge: ワークフロートリガー
Lambda: 外部サーバとのファイル連携に使⽤
Aurora PostgreSQL: DB(DWH)
Athena/S3: データレイク

⾔語

Python: Glue上のETLスクリプトにて使⽤
ShellScript(コマンド): AWSへのジョブデプロイや単発の作業の効率化に使⽤

日々のタスク

• テーブル定義変更による本番・開発環境へのデプロイ作業
  • DDLの実行
  • Glueジョブ・ワークフローの組み換え
• PythonによるETL処理の実装やデータ移行時のETL処理作成
• 他システムからのデータ移行作業
  • リリースに向けてのデータ移行検証

⼯夫したこと

• ジョブ数が多いため、Excel上でジョブ表を作成し管理を⾏った。
  管理するとともに、それらの資料からデプロイに必要なコマンドを発⾏できるように効率化を図った。
• AWS上でのAPI実⾏制限によりジョブの同時実⾏制限が回避できない事象が発⽣し、リトライ処理の実装や
  WFの組み換えによる調整を⾏った。

案件概要

客先常駐にて参画。
病院が保有する患者データをBIで利⽤するための基盤の構築。
データの流れは、①MariaDB(オンプレミス) → ②S3 → ③Snowflake → ④Tableau
各ETL処理にはAWS Glueを使⽤。

扱った技術

インフラ(AWS,その他)

Glue: ETLジョブ
GlueWF: ワークフロー
S3: ストレージ
Snowflake: DWH
AWS EC2: Tableauサーバ、お問い合わせアプリケーション

⾔語

• Python
  • Glue上のETLスクリプトにて使⽤
  • Flaskを使い、Webアプリケーションを構築
• ShellScript: Tableau⽤Linux上でのログ収集などに利⽤

⼯夫したこと、⼤変だったが乗り越えたこと

• 問い合わせ画⾯をWebアプリケーションで構築する要件が発⽣したが、チーム内に知⾒を持っているメンバーがおらず、それでも開発・リリースできたこと。
• TableauからSnowflakeへのクエリの際、複雑な条件をリクエストするとパフォーマンスに課題が⽣じ、急遽JavaScriptでTableaAPIを使⽤しパフォーマンスの改善を図ったこと。

案件概要

客先常駐にて参画。
財務データのBI上での可視化。

システム概要

データの流れは、①S3 → ②S3 → ③QuickSight
①でCSVを取得しGlue上で加⼯を⾏い②にてS3に出⼒。
ファイルをQuickSight上で可視化。
各ETL処理にはAWS Glueを使⽤。

担当⼯程

詳細設計、開発、テスト

チームでの役割

ETL処理作成

扱った技術

インフラ(AWS)
Glue: ETLジョブ
GlueWF: ワークフロー
S3: ストレージ
QuickSight: BI

案件概要

iPad上で⾼齢者向けの免許更新試験を実施するためのアプリ
サーバー⽤iPad、クライアント⽤iPadがローカルネットワーク上でUDP通信を⾏い、
試験を進めるアプリケーション
サーバー端末がiPadだったものをPCに移植し、アプリケーションをPHPでリプレイスする案件

扱った技術

クライアント

• iOS(Swift)

  サーバ

• PHP(Laravel)
• MySQL

⼤変だったが乗り越えたこと

• 参画時には前任者が離任しており、納期も迫っていた。また設計書も無かったため起票された不具合を動作確認したながらトライ&エラーで乗り越えた。
• 旧(Swift版サーバ)と新(PHP版サーバ)を並べて動きを確認しデバッグを⾏った。
• 必要に応じてPHPのソースコードも読み不具合改修を⾏った。

案件概要

客先常駐にて参画。

• データ分析基盤のエンハンス・クラウド移⾏(GCP)。
• 常駐先グループ会社の事業部とのデータ分析結果の壁打ち。
• BI(metabase)へのダッシュボード構築

システム概要

データ分析基盤
常駐先グループ会社のモバイルアプリにレコメンドするバッチ処理

担当⼯程

開発、テスト、データ分析

チームでの役割

開発メンバー

扱った技術

• Hadoop: バッチ処理
• GCP
  • BigQuery: データ分析
• Metabase: BI