shell CSVファイルの整形処理(2) – 1カラムの中に、カンマを含む – 改行だけでなく、以下にあるカンマを含んだCSVファイルは、(1)での対応でもできないので、順番に対応します。 1.まず、カラムの改行を整える 2.””内の改行を修正する 2021.06.07 shellデータ分析プログラミング言語
docker DockerイメージとDockerコンテナの基本 DockerイメージとDockerコンテナの基本を忘れないようにメモしておきます。 仕様や概要を知る。Dockerイメージから、コンテナを作成する。 Dockerイメージ取得 $ docker image pull gihyodocker/... 2023.03.23 dockerソフトウェア系プログラミング言語
Apache 複数コンテナ間の通信について(Docker VS AWS-ECS:Fargate) docker-compseやAWS-ECSを使って、複数のコンテナを利用するときに、コンテナ間でどのようにやり取りするのか説明しています。 2024.07.04 ApacheAWSdockerMysqlクラウドソフトウェア系データベースネットワーク
docker GCPを使ってみる(3)Google App Engine で簡単なWebアプリ作成 GCP Cloud Console にログインした後、右上にあるアイコンの「>_」とある部分をクリックすると、シェルが実行可能になる Welcome to Cloud Shell! Type "help" to get started. Y... 2023.01.16 dockerGCPpythonクラウド
docker Docker imageのSave/Load Docker imageのSave/Load 開発環境を移動したりするときに、力作のDockerImageを一からビルドするのではなく、コピーする対応 2023.09.14 dockerソフトウェア系
Postgres Postgresデータベースへの道(その1) 基本は、Postgresデータベースを使って、テーブル作成し、CSVファイルをインポートするまで、 端的に言うと、新潟市Opendataをうまく使って公開してゆく取組のメモです。 まずは接続し、環境確認 $ psql -h 172.18.0... 2021.05.29 Postgresデータベースデータ分析情報系
docker GCPを使ってみる(1)Cloud Build を使用して Docker イメージのビルドし、pushする GitHubのGCP版です。ローカル環境に、Dockerを使ったイメージです -参考- そのままです。 Google Cloud CLI が必要(インストールして初期化)現状の環境 $ gcloud config list region =... 2023.01.16 dockerGCPgitクラウド
python サーバーなど環境を移動した時に、Pythonの対応 コピー後、以下のようなエラーが出て実行できない。 基本は、OS上のPythonではなく、コピーした仮想環境下で実行すべきかと思う。 (OS上のPythonを汚さないため、できるだけ以前の環境を維持し、UpgradeもNG。) 2022.03.31 pythonソフトウェア系データ分析プログラミング言語
docker GCPを使ってみる(2)主なコマンド GCPの主なコマンド。忘れると困るので備忘録程度。参考 gcloud CLIのインストール 上の「参考」のまま、 gcloud CLI の初期化 $ gcloud init (色々、聞かれる。メニュー通り) 主要なコマンドの実行 認証情報が... 2023.01.16 dockerGCPgitクラウドプログラミング言語
shell CSVファイルの整形処理(1) – 1カラムの中に、改行を含む – 改行のあるセルを含んだExcelファイルをそのまま、CSVで保存すると 1カラムの中に、改行を含んだCSVファイルになります。 これを修正します。 2021.05.22 shellデータ分析