ソフトウェア系

docker

DockerイメージとDockerコンテナの基本

DockerイメージとDockerコンテナの基本を忘れないようにメモしておきます。 仕様や概要を知る。Dockerイメージから、コンテナを作成する。 Dockerイメージ取得 $ docker image pull gihyodocker/...
docker

GCPを使ってみる(1)Cloud Build を使用して Docker イメージのビルドし、pushする

GitHubのGCP版です。ローカル環境に、Dockerを使ったイメージです -参考- そのままです。 Google Cloud CLI が必要(インストールして初期化)現状の環境 $ gcloud config list region =...
shell

CSVファイルの整形処理(1) – 1カラムの中に、改行を含む –

改行のあるセルを含んだExcelファイルをそのまま、CSVで保存すると 1カラムの中に、改行を含んだCSVファイルになります。 これを修正します。
Redash

オープンデータを使ったデータ分析結果 -その2(会派交付)-

新潟市のオープンデータを利用して、データ分析の実証実験を行います。 目指すことは、唯のデータを価値ある情報に加工し、利用者の知識を深め、知恵として生かす。 最終的には、この反響をAWS-Conperhendにかけて、インサイトや関係性を検出を行う。
AWS

git操作 含む、codecommit

Aws codecommit コマンドライン上からの利用 参考 (バージョン確認) $ aws --version aws-cli/1.18.147 Python/2.7.18 Linux/5.10.75-79.358.amzn2.x86_...
Postgres

Postgresデータベースへの道(その1)

基本は、Postgresデータベースを使って、テーブル作成し、CSVファイルをインポートするまで、 端的に言うと、新潟市Opendataをうまく使って公開してゆく取組のメモです。 まずは接続し、環境確認 $ psql -h 172.18.0...
docker

Twitter,RSSなど巡回して、タスク自動化ツールHuginnを使ってみる!(1)

Twitter,RSSなど巡回して、スクレイピングして色々通知など、Pythonでできる♬ とかあるけど、このGUIでサラサラと書けたらうれしい。 参考 Dockerの動作する環境をで以下を実行する (イメージを落として、コンテナを作成する...