機械学習重回帰分析を行うデータから重回帰式を算出してみた
purin_it ITエンジニアとして経験・学習したこと
以下の記事で読み込んだデータを元に、住宅価格の最適解を求めることを考える。 https://www.purin-it.com/py … 機械学習
機械学習重回帰分析を行うデータを読み込んでみた
purin_it ITエンジニアとして経験・学習したこと
以下の「カリフォルニアの住宅価格データ」で、所得・築年数・部屋数・寝室数・人口・世帯人数・緯度・経度を元に、住宅価格を決めるモデルを考える。 出所：Califor …
機械学習ベクトル微分の公式を確認してみた
purin_it ITエンジニアとして経験・学習したこと
行列のうち、\(m\)行\(1\)列のものを「列ベクトル」という。\(\boldsymbol x\)と\(\boldsymbol a\)を列ベクトル、\(c\)を定数、\(A\ …
機械学習転置行列の性質を確認してみた
purin_it ITエンジニアとして経験・学習したこと
以下の記事で、転置行列の定義について記載している。 https://www.purin-it.com/python-numpy-calc-matrix この転置行列 …
機械学習PythonのNumpyライブラリを用いて行列の計算をしてみた
purin_it ITエンジニアとして経験・学習したこと
PythonのNumpyライブラリを利用すると、機械学習で大量のデータを扱う際に必要な、行列の計算を簡単に行うことができる。 今回 …
機械学習3σ法で（正規分布に従う）入力データから外れ値を削除してみた
purin_it ITエンジニアとして経験・学習したこと
入力データが正規分布に従うと仮定した場合の外れ値の検出方法の1つに「3σ法」がある。 3σ法は、σを標準偏差として、(平均)-3σ～( …
機械学習回帰直線を算出するクラスのモデルを保存してみた
purin_it ITエンジニアとして経験・学習したこと
これまでこのブログで、回帰直線\(y=ax+b\)を算出するクラスに入力データをあてはめ、\(a\),\(b\)の値を算出するモデルを作 …
機械学習回帰直線を算出するクラスで抽象メソッドを利用してみた
purin_it ITエンジニアとして経験・学習したこと
PythonにはJavaと同じ「オブジェクト指向」という概念があり、データと処理をまとめた「クラス」を定義し、その「クラス」から「インスタン …
機械学習回帰直線を算出するクラスを作成してみた
purin_it ITエンジニアとして経験・学習したこと
PythonにはJavaと同じ「オブジェクト指向」という概念があり、データと処理をまとめた「クラス」を定義し、その「クラス」から「インスタンス」を複数作成することができる。 …
機械学習Pandasを利用してOracle DBのデータを取得してみた
purin_it ITエンジニアとして経験・学習したこと
Pythonでデータの取り込みや加工・集計、分析処理に利用できるライブラリの一つにPandasがあり、これを利用するとCSVファイルの読み込 …
Spring Boot 基本Spring BootのWebアプリケーションでmessages.propertiesに定義した完了メッセージを表示してみた
purin_it ITエンジニアとして経験・学習したこと
Spring BootのWebアプリケーションでは、messages.propertiesに定義したメッセージを、入力チェックエラーのメッセ …
Spring Boot 基本Spring BootのWebアプリケーションでセッションスコープを利用してみた
purin_it ITエンジニアとして経験・学習したこと
プルダウンリストのように、複数のコントローラ間でデータを持ち回りたい場合、Spring FrameworkのセッションスコープのBeanを利 …
JUnitSpring Boot 2.7を利用したJavaアプリケーションでPowerMockを利用したテストを実行してみた
purin_it ITエンジニアとして経験・学習したこと
Spring Boot 2.7を利用したJavaアプリケーションでPowerMockを利用する際、mockito-coreやpowermoc …
JUnitSpring Boot 2.7を利用したJavaアプリケーションでJUnit4とJUnit5のテストを実行してみた
purin_it ITエンジニアとして経験・学習したこと
Spring Boot 2.7を利用したJavaアプリケーションでJUnitを用いると、通常はJUnit5で動作するが、JUnit4とJUn …
Spring Boot DB連携Spring BootでMyBatisを利用しSQL Serverに接続するアプリケーションで楽観ロックを利用してみた
purin_it ITエンジニアとして経験・学習したこと
これまでこのブログで、Spring BootでMyBatisを利用しDB更新するアプリケーションをいくつか取り上げてきたが、DB更新時に、楽 …
Spring Boot CSSCSSでカスタマイズしたチェックボックスをSpring Bootで表示してみた
purin_it ITエンジニアとして経験・学習したこと
チェックボックスは、inputタグのtype属性でtype="checkbox"を指定することで作成されるが、このタグの標準スタイルは、ラジ …
Spring Boot CSSCSSでカスタマイズしたラジオボタンをSpring Bootで表示してみた
purin_it ITエンジニアとして経験・学習したこと
ラジオボタンは、inputタグのtype属性でtype="radio"を指定することで作成されるが、このタグの標準スタイルは、CSSでオリジ …
JakartaEE(JavaEE)JBoss Seamアプリケーションでチェック処理を実装してみた
purin_it ITエンジニアとして経験・学習したこと
JBoss Seamとは、Java EEベースで、JSF(JavaServer Faces)からEJB(Enterprise Java Be …
JakartaEE(JavaEE)JBoss Seamアプリケーションで複数画面をもつWebアプリケーションを作成してみた
purin_it ITエンジニアとして経験・学習したこと
JBoss Seamとは、Java EEベースで、JSF(JavaServer Faces)からEJB(Enterprise Java Be …
JakartaEE(JavaEE)JBoss Seamアプリケーションで初期表示画面を作成してみた
purin_it ITエンジニアとして経験・学習したこと
JBoss Seamとは、Java EEベースで、JSF(JavaServer Faces)からEJB(Enterprise Java Be …
DBSQL Serverで一定件数ずつデータ更新とデータ追加をしてみた
purin_it ITエンジニアとして経験・学習したこと
テーブルデータを更新する際に、テーブル全件を一括更新しようとすると、テーブルロックによりデッドロックが発生する可能性があるため、一定件数(例 …
DBSQL Serverで一定件数ずつデータ更新してみた
purin_it ITエンジニアとして経験・学習したこと
テーブルデータを更新する際に、テーブル全件を一括更新しようとすると、テーブルロックによりデッドロックが発生する可能性があるため、一定件数(例 …
DBSQL Serverで複雑なクエリをもつデータ間の差分を抽出してみた
purin_it ITエンジニアとして経験・学習したこと
SQL Serverで、2つのSELECT文の抽出結果差分を取得するにはEXCEPT演算子を利用すればよいが、WITH句を含むSELECT文 …
DBSQL Serverでピリオドを複数含む同一ユーザーのGメールを検索してみた
purin_it ITエンジニアとして経験・学習したこと
Gmail アドレスの場合、ピリオドを複数含む場合も、同一ユーザーとして扱われる。
https://support.google.com/ …
DBSQL ServerでJSON文字列を別行に分割してみた
purin_it ITエンジニアとして経験・学習したこと
SQL ServerでJSON文字列を含むカラムがある場合、ISJSON関数でJSON文字列かどうか判断でき、OPENJSON関数でJSON …
DBSQL Serverでログインユーザーの権限を確認してみた
purin_it ITエンジニアとして経験・学習したこと
SQL Serverでログインユーザーの権限を確認するには、sys.fn_my_permissionsビュー等で確認できる。今回は、ログイン …
DBSQL Serverの一時テーブルを利用してみた
purin_it ITエンジニアとして経験・学習したこと
SQL Serverに接続している(同一セッション内の)間だけ有効なテーブルを、一時テーブルという。
今回は、SQL Serverで一時テ …
DBT-SQLでSQL Serverの特定テーブルのバックアップ取得／リストアを行うプログラムを作成してみた
purin_it ITエンジニアとして経験・学習したこと
T-SQL(Transact-SQL)はSQLの拡張機能として開発されたもので、SQLに、条件分岐や繰り返しなどを含む制御構造を加えることが …
DBA5M2でテーブル定義書出力とCSVエクスポート／インポートをしてみた
purin_it ITエンジニアとして経験・学習したこと
A5M2(A5:SQL Mk-2)には、テーブル定義書を出力したり、CSVファイルによるテーブルデータのエクスポート／インポートする機能があ …
DBA5M2でSQL自動作成やSQL整形をしてみた
purin_it ITエンジニアとして経験・学習したこと
A5M2(A5:SQL Mk-2)には、選択したテーブルに関するSQLを自動作成したり、指定したSQLを整形する機能がある。 今回は、 …
Azure DB連携Azure エラスティックジョブを作成してみた
purin_it ITエンジニアとして経験・学習したこと
Azure エラスティックジョブを利用すると、多数のデータベースを対象にまとまったSQL文(Transact-SQL,T-SQL)を並列実行 …
Azure DB連携Azure SQL DatabaseでSTRING_AGG関数を利用してみた
purin_it ITエンジニアとして経験・学習したこと
SQL Server 2017 の新機能の中に、複数行のデータを1行にまとめて表示することができるSTRING_AGG関数がある。 今 …
Azure PythonAzure Pipelinesで「Invalid clientid or client secret」エラーを解決してみた
purin_it ITエンジニアとして経験・学習したこと
久しぶりに、Azure Pipelinesを利用して、Dockerコンテナを利用したPythonアプリケーションをContainer Reg …
Azure PythonAzure Pipelinesを利用してDockerコンテナを利用したPythonアプリケーションをContainer Registryに自動反映してみた
purin_it ITエンジニアとして経験・学習したこと
Azure DevOpsとは、Azure 上で DevOps(計画→開発→デリバリー→運用)を実現するために必要なサービスが揃ったプラットフ …
Azure DB連携BULK INSERT文を利用してAzure SQL Databaseへデータ追加するSQLファイルを作成し実行してみた
purin_it ITエンジニアとして経験・学習したこと
BULK INSERT文を利用したAzure SQL Databaseへのデータ追加は、以下の記事のように実施できる。 https:/ …
Azure DB連携BULK INSERT文を利用してCSVファイルのデータをAzure SQL Databaseのテーブルに追加してみた
purin_it ITエンジニアとして経験・学習したこと
BULK INSERT文を利用すると、以下のサイトのように、CSVファイルのデータをSQL Serverのテーブルに追加することができる。
…
Azure PythonAzure DevOps上のAzure Reposにブランチを作成しソースコードを配置してみた
purin_it ITエンジニアとして経験・学習したこと
Azure DevOpsとは、Azure 上で DevOps(計画→開発→デリバリー→運用)を実現するために必要なサービスが揃ったプラットフ …
Azure PythonAzure Functions上で動作するPythonアプリケーションで環境変数を利用してみた
purin_it ITエンジニアとして経験・学習したこと
Azure Functions上で動作するアプリケーションにおいて、環境変数を定義し利用することができる。 今回は、Azure Fun …
Azure PythonAzure Functions上で動作するDockerコンテナを利用したPythonアプリケーションをContainer Registryに配置してみた
purin_it ITエンジニアとして経験・学習したこと
Azure Functions上でDockerイメージを利用してPythonアプリケーションを構築する際、Dockerイメージの配置先を(D …
Azure PythonAzure Logic AppsからDurable Functionsを呼び出してみた
purin_it ITエンジニアとして経験・学習したこと
Azure Logic Appsは、コードをほとんど使わずに、自動化されたワークフローを作成して実行できるツールで、これを利用すると、例えば …