Python– tag –

NeeNetです。 今回はAWS環境でAmazon EMRを用いて、Apache Sparkを実行してみたいと思います。 【はじめに】 Amazon EMRとは Amazon EMR（Elastic MapReduce）は、AWSが提供するマネージドクラウドサービスで、Hadoop, Spark, HBaseなどのビッグデータフレ...

NeeNetです。 今回はAWS環境でLambdaを用いて、Seleniumによるスクレイピングを定期実行してみたいと思います。 以前AWS環境上でSeleniumを動かすのにECS (Fargate)を利用した方法をご紹介しましたが、今回はそのLambda版です。 https://neenet-pro.com/ec...

NeeNetです。 今回はAWS環境でECS (Fargate)を用いて、Seleniumによるスクレイピングを定期実行してみたいと思います。 AWS環境で定期実行するため、スクレイピングをするために自分のPCを立ち上げて手動実行する必要がなくなります。 また、今回作成する...

【アプリケーション概要】 今回、お客様からのご依頼で生成AI（LLM）であるAnthropic社の「Claude」とOpenAI社の「GPT」を利用した医療診断システムを作成しました。 作成後、お客様からも「たいへん素晴らしいシステム」とお褒めの言葉を頂けました。 早...

【アプリケーション概要】 お客様からの要望で、AWS LambdaとAmazon Connectを利用して、電話番号を記載したcsvファイルをS3にアップロードすると記載した電話番号に同時に営業の架電を行うアプリケーションを構築しました。 概要図 具体的には、csvファイ...

NeeNetです。 今回はS3のPutイベントで起動するLambdaをAWS SAMでデプロイする方法をご紹介します。 具体的には、以下のリソースをAWS SAMで作成したいと思います。 S3バケット バケットポリシー Lambda Lambdaの実行ロール 構成図 【事前準備】 AWS SAM C...

NeeNetです。 今回はPySimpleGUIを利用して「Parquet Viewer」というGUIツールを作成してみたいと思います。 実際に作成したツール 【はじめに】 Apache Parquet は、効率的なデータの保存と検索のために設計された、オープンソースの列指向データファイル...

NeeNetです。 今回はPythonのモジュールであるkeras_efficientnetでファインチューニングを行い、Grad-CAMを適用して予測根拠を可視化してみたいと思います。 【環境】 今回、実行を行った環境は以下の通りです。 OSWindows 11 ProGPUGeForce RTX 3060 TiP...

【アプリケーション概要】 Pythonとタートルグラフィックス（Turtle Graphics）モジュールを利用したアメリカの国旗の描画プログラムを作成しました。 ご依頼者様はタートルグラフィックスを用いてプログラミングを学習中のようでしたが、どうしてもアメリ...

NeeNetです。 今回はPythonを利用して、証明写真の背景色を変更してみたいと思います。 iPhoneやAndroidで似たようなことができるアプリも存在するのですが、右下にウォーターマークが付いてしまうことも多いので、今回は純粋にPythonのみを用いて実行しま...

NeeNetです。 PythonのWebアプリケーションフレームワークであるFlaskは非常に使い勝手の良いフレームワークなので、皆さんも利用することが多いかと思います。 「世界に公開したい！」と思った際は今だとAWSのEC2などクラウドを利用するのが一般的です。 ...

【システム概要】 今回、OpenCVとArUcoモジュールを使って、画像の射影変換を行うアプリケーションを作成しました。 きっかけは、以下のようなご依頼からでした。 イラストコンテストを主催しているものです。作品応募は写真で受付していますが、歪みや斜...