フリーランスエンジニア / バックエンドエンジニア
法人情報のクローリングシステムの開発
銀行等の法人の審査を行う機関において、法人情報の調査を自動化するシステムの開発に参画している。主にクローラの設計・開発からAWS Lambdaへのデプロイ効率化を担当しています。クローラはwebページの構造上、リアルタイムにデータを取得する必要があったり、バッチ的に取得するものだったりと要件が異なる場合があるので、これを汎用化する設計が必要となりました。(Python/SQLAlchemy/FastAPI/Docker/AWS)