Knowledge Oasis

AWS Technical Essentialsを進めているなかでS3への接続が上手く行きませんでした。その際に表示されたのがタイトルにあるエラーです。エラー内容と対応方法にギャップがあったので対処法を記録しておきます。 【発生したエラー】 AWS Technical Essentialsで使用するアプリケーションでS3の接続を確認する箇所で上手く動きませんでした。エラーが発生していたコードは以下です。 async function hasS3Access() { try { // console.log('settings::hasS3Access'); if (constants.PHOTOS_BUCKET === '&...

AWSの学習でAWS Technical Essentialsを進めています。「デモンストレーション: VPC を作成し、Amazon EC2 で社内ディレクトリアプリケーションを再起動する」の動画の内容が古く、2024年6月時点ではVPC Wizardの動きが違い過ぎていました。古くなっているポイントとあたしいVPC Wizardの動きについて解説したので参考にしてください。 【動画で情報が古いポイント】 Elastic IP アドレスの作成が必要ない 動画の最初でElastic IP アドレスを作成しています。新しいVPC WizardではNAT ゲートウェイの作成を指示す...

画像生成AIのMidjourneyからPersonalizationという機能が発表になりました。早速ですが使い方を解説します。 【Personalizationとは】 Midjourneyで画像を生成する際、プロンプトで表現しきれなかった部分はMidjourneyがその空白部分を「好み」で埋めてくれました。コミュニティ全体のバイアスや好みの集合体から導きだされる「好み」でした。 Personalizationではその「好み」を各個人の「好み」で埋められるようにするということです。 各個人の「好み」とは？ じゃ、その個人ごとの「好み」をどうやって把握す...

AWSの学習でAWS Technical Essentialsを進めています。「デモンストレーション: Amazon EC2 で従業員ディレクトリアプリケーションの起動」の動画の内容が古く、2024年6月時点では動画の通りにやっても動きませんでした。古くなっているポイントと動くユーザーデータを作ったので参考にしてください。 【動画で情報が古いポイント】 AMI 一番最初のAMIの選択から違っています。動画ではAmazon Linux 2 AMIを選択していますが、これを選択すると最新のnode.jsがインストールできません。新しいAmazon Linux 2023 AM...

今回はOpenAI APIで関数呼び出し(Function calling)をおこなうためのパラメータtoolsとtool_choiceについて解説します。GPTsのアクションと動きが違うので注意が必要です。 【今回解説するパラメータ】 今回解説するパラメータはマーカーを付けた2つです。２つとも関数呼び出し(Function calling)に関するパラメータです。 model (string, 必須): 使用するモデルのID。 messages (array, 必須): 会話を構成するメッセージのリスト。 temperature (number, オプション): 0から2.0までの範囲。出力のランダム性を制...

API完全制覇パート２ではPlaygroundでは試せないパラメータについて解説していきます。Function callingについてはパート３で解説する予定です。 【今回解説するパラメータ】 今回解説するパラメータはマーカーを付けた７つです。 model (string, 必須): 使用するモデルのID。 messages (array, 必須): 会話を構成するメッセージのリスト。 temperature (number, オプション): 0から2.0までの範囲。出力のランダム性を制御。 top_p (number, オプション): 0から1の範囲。上位の確率質量のトークンのみを考慮。 n (...

ライブラリが充実していて色々な事を簡単に行えるスクリプト言語Python。そんなPythonを実行するための環境構築方法を解説します。Pythonって聞いたことあるけど難しそうっと思っている方は読んで試してみてください。難しくないですよ。 【Pythonのインストール方法】 早速インストールの手順を見ていきましょう。以下の手順でインストールできます。 ダウンロードページから環境にあったインストーラーをダウンロードします。 インストーラーを実行します。 Install Nowをクリックします。 完了画面にてDisable ...

Windowsで開発環境を構築していると必ず出てくる環境変数。その中でもpathの設定はよく出てきます。プログラムの学習を始めたばかりの人はどうすれば良いのか分からないかもしれません。ここで躓いて先に進めないのはもったいないです。今回は「基本は大事」ということで環境変数について解説します。 【環境変数とは】 環境変数とは料理の下準備のような物です。プログラムを動かすには事前に必要となる情報があります。それを設定しておくのが環境変数です。 パスタのレシピで「パスタをゆで始めたら、フライパ...

自己学習でAWSアカウントを取得したり、会社でクラウドの調査を任されてAWSアカウントを取得したりしている方も多いと思います。AWSアカウントを取得したらまず最初にやるべき大切な事があります。今回はその大切な事について解説します。私もASSの学習する前はやっていませんでした。 【AWSアカウントの種類】 最初にメールアドレスでAWSアカウントを取得すると思います。このメールアドレスで取得したAWSアカウントはルートアカウントというとても重要なアカウントです。請求などの管理の他すべてのAWSサービス...

AWSの学習をしています。AWSに携わるにあたって必ず出てくるのがクラウド構成図です。これをExcelやPower Pointで描くのは大変だと思います。そこでPythonで描く方法を調べました。Pythonで描くことで様々なメリットが得られます。参考にしてください。 【環境準備】 Diagramsというライブラリを使用します。Diagramsでは内部でGraphvizを使用するのでまずはGraphvizからインストールしていきます。 この記事で使用する環境は以下の通りです。 Windows11 Python 3.12.3 graphviz 11.0.0 Diagrams 0.23.4 Graphviz...

私はHugging FaceのTransformersをインストールしようとした際に以下のようなエラーが発生しました。対処方法の記録を残しておきます。同じ問題で困っている人の役に立てれば幸いです。fbgemm.dllで同様のエラーが出ている場合も対応できると思います。参考にしてください。 OSError: [WinError 126] 指定されたモジュールが見つかりません。 Error loading "C:\Users\username\python\openai-env\Lib\site-packages\torch\lib\fbgemm.dll" or one of its dependencies. 【発生したエラー】 Hugging FaceのTransfo...

OpenAIのLambdaレイヤーを作成した際にレイヤーの構造は正しいのに上手く動かないという事象に遭遇しました。ローカルでは上手く動くのにLambdaレイヤーにすると動かないという困った事象について解説します。 2024/8/9に原因と対応方法を修正しました。 【発生したエラー】 OpenAIのLambdaレイヤーを作成してLambda関数を動かしたところ、以下のエラーが発生しました。 Response { "errorMessage": "Unable to import module 'lambda_function': No module named 'pydantic_core._pyd...

AWS Builders Online Seriesで紹介されていたGenUを構築してみました。生成AIアプリケーションを簡単に構築できます。ChatGPTのTeamプランでは難しい利用状況のモニタリングも簡単に行えたり、IP制限をかけられるので安全に利用することができます。 【GenUとは】 正式名称を『Generative AI Use Cases JP』と言い、通称がGenU。GenUはAWSが提供する生成 AI を安全に業務活用するための、ビジネスユースケース集を備えたアプリケーション実装です。 生成AIを業務に導入するに際していくつかの懸念があります。GenU...

PythonでAWSの構成図を描くことができるDiagramsライブラリ。Diagramsをpipでインストールする際に以下のエラーが発生しました。対処方法の記録を残しておきます。同じ問題で困っている人の役に立てれば幸いです。 【発生したエラー】 Diagramsライブラリをpipでインストールする際に以下のエラーが発生しました。 error: Microsoft Visual C++ 14.0 or greater is required. Get it with "Microsoft C++ Build Tools": https://visualstudio.microsoft.com/visual-cpp-build-tools/ 環境 Visual Studioがインスト...

前回の記事ではOpenAIのAPIの始め方と必須のパラメータについてご紹介しました。今回は残りのオプションパラメータを解説したいと思います。オプションパラメータは数が多いので2回に分けて解説していきます。今回はPlaygroundで動作確認ができる7項目について解説します。パラメータを自在に使いこなしてAPIマスターになりましょう！ 【パラメータ一覧】 まずは全パラメータを確認しましょう。なんと19個もあります。今回はマーカーを引いた7個を解説したいと思います。今回解説するパラメータはPlaygroundで試せ...

PHPの浮動小数点数を理解していなかったために、消費税計算の結果が正しくなく本番障害になった話です。障害連絡をもらって調査を開始したさい、電卓叩いてもその結果にならず頭を悩ませました。 【障害内容】 インボイス対応で消費税対象額と消費税額の内訳を請求書に表示する対応を行いました。障害連絡があった請求書の内容は以下の通りでした。税率は10%です。 金額404800消費税対象額368001消費税額36799消費税額が36800ではなく1円不足しています…… 消費税計算の処理を抜粋すると以下のようなコードになりま...

今回はOpenAI APIで関数呼び出し(Function calling)をおこなうためのパラメータtoolsとtool_choiceについて解説します。GPTsのアクションと動きが違うので注意が必要です。 【今回解説するパラメータ】 今回解説するパラメータはマーカーを付けた2つです。２つとも関数呼び出し(Function calling)に関するパラメータです。 model (string, 必須): 使用するモデルのID。 messages (array, 必須): 会話を構成するメッセージのリスト。 temperature (number, オプション): 0から2.0までの範囲。出力のランダム性を制...

AWS Technical Essentialsを進めているなかでS3への接続が上手く行きませんでした。その際に表示されたのがタイトルにあるエラーです。エラー内容と対応方法にギャップがあったので対処法を記録しておきます。 【発生したエラー】 AWS Technical Essentialsで使用するアプリケーションでS3の接続を確認する箇所で上手く動きませんでした。エラーが発生していたコードは以下です。 async function hasS3Access() { try { // console.log('settings::hasS3Access'); if (constants.PHOTOS_BUCKET === '&...

先日初めてローカル環境にnode.jsをインストールしました。cloudshellやdockerなどだと最初からインストールされているのでローカル環境でnpm が動かないことが衝撃でした。公式のダウンロードページではfnm を使ったインストールが紹介されており、fnm が便利だったのでご紹介します。 【fnmとは】 fnmは複数のnode.jsのバージョンを管理するパッケージマネージャーです。例えばプロジェクトAではnode.jsのv19を使っており、新しく始まるプロジェクトBではnode.jsのv20を使うとします。手動でnode.jsをインストー...

BedrockのナレッジベースをS3データソースで作成した際に同期に失敗しました。ある思い込みのために解決に時間がかかってしまいました。その時の対処方法を教訓とともに解説します。 【発生したエラー】 データソースに指定したS3にファイルを追加してデータソースの同期を行った際に以下のエラーが発生しました。 Encountered error: Access Denied (Service: S3, Status Code: 403, Request ID: hoge, Extended Request ID: foobar). Issue occurred while processing file: s3://my-bucket/user01/test.txt. Ca...