niigata

shell

CSVファイルの整形処理(1) – 1カラムの中に、改行を含む –

改行のあるセルを含んだExcelファイルをそのまま、CSVで保存すると 1カラムの中に、改行を含んだCSVファイルになります。 これを修正します。
データ分析

オープンデータを使ったデータ分析結果 -その1(議員名簿)-

新潟市のオープンデータを利用して、データ分析の実証実験を行います。 目指すことは、唯のデータを価値ある情報に加工し、利用者の知識を深め、知恵として生かす。 最終的には、この反響をAWS-Conperhendにかけて、インサイトや関係性を検出を行う。
Redash

オープンデータを使ったデータ分析結果 -その2(会派交付)-

新潟市のオープンデータを利用して、データ分析の実証実験を行います。 目指すことは、唯のデータを価値ある情報に加工し、利用者の知識を深め、知恵として生かす。 最終的には、この反響をAWS-Conperhendにかけて、インサイトや関係性を検出を行う。
Postgres

Postgresデータベースへの道(その1)

基本は、Postgresデータベースを使って、テーブル作成し、CSVファイルをインポートするまで、 端的に言うと、新潟市Opendataをうまく使って公開してゆく取組のメモです。 まずは接続し、環境確認 $ psql -h 172.18.0...