GCPローカルサーバレス開発環境準備（gcloudインストール）

-
今のところAWSでAPIGateway＋Lambda＋DynamoDBでサーバレス開発というパターンが多いけど、DynamoDBだとキーをたくさん持てないという制約があってどうしてもフラグをたくさん持たせてあいまいに検索させたいという要件に弱かったりする。一応、こういうのもAWSにあるんだけど料金が24時間連続イメージで一番小さな規模でも最低25,000円超えてしまいそうなので他に何かないか探していたら、GCPの方でDATASTOREとかいうのがあるらしいと知った。けれどFirestoreに切り替わっているじゃないですか。やれることは同等でかつ、料金面でもDynamoDBの料金体系に近いのでアクセス数とか少ないWebサイトのバックエンドにちょうどいい感じだったりする。組み合わせとしてはAPPEngineとCloudFunctionsの2つで使えるみたい。少し勉強してみようといろいろ調べがてらローカル開発環境はどうやって作るんだと思い、まずはgcloudコマンド入れてみることにした。AWSのSAM-CLIを入れるときに作ったHyper-Vのイメージが残ってるのでそいつを使いまわして環境構築です。

■参考サイト
情報が少なかったです。ただ単に自分の探し方が悪いだけかも
https://cloud.google.com/sdk/downloads?hl=JA#linux
https://qiita.com/kentarosasaki/items/2232113b44b016a56adc
https://cloud.google.com/sdk/docs/quickstart-linux?hl=ja
https://cloud.google.com/sdk/docs/managing-components?hl=ja

■手順（あらかじめ3までは既存イメージで作ってある状態）
#1.初期設定
#日本語化
$ sudo sed -i.bak -e "s%http://us.archive.ubuntu.com/ubuntu/%http://ftp.jaist.ac.jp/pub/Linux/ubuntu/%g" /etc/apt/sources.list
$ sudo apt-get -y install language-pack-ja-base language-pack-ja ibus-mozc
$ sudo localectl set-locale LANG=ja_JP.UTF-8 LANGUAGE="ja_JP:ja" 
$ source /etc/default/locale
$ echo $LANG
ja_JP.UTF-8
#タイムロケール変更
$ sudo timedatectl set-timezone Asia/Tokyo
$ timedatectl 
#ソフトウェアアップデート
$ sudo apt-get -y update
$ sudo apt-get -y upgrade
#ディストリビューションアップデート
$ sudo apt-get -y update
$ sudo apt-get dist-upgrade
#treeコマンドインストール
$ sudo apt-get -y install tree
#TeraTermでKey作成後にWinSCPでpubファイルアップロード後に以下のコマンド実行
$ mkdir .ssh
$ chmod 700 .ssh
$ mv id_rsa.pub .ssh/authorized_keys
$ reboot
#sshd_config編集
$ sudo sed -i -e "s/#PubkeyAuthentication/PubkeyAuthentication/g" /etc/ssh/sshd_config
$ sudo sed -i -e "s/#PasswordAuthentication yes/PasswordAuthentication no/g" /etc/ssh/sshd_config
$ sudo service sshd restart

#2.Docker周り
#パッケージ更新
$ sudo apt-get -y update
#https経由のaptリポジトリ許可
$ sudo apt-get install \
    apt-transport-https \
    ca-certificates \
    curl \
    gnupg-agent \
    software-properties-common
#PGP-KEY取得
$ sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 
$ curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -

#DockerCEインストール
$ sudo add-apt-repository \
   "deb [arch=amd64] https://download.docker.com/linux/ubuntu \
   $(lsb_release -cs) \
   stable"
$ sudo apt-get update
$ sudo apt-get -y install docker-ce
#sudoなしDockerコマンド実行可能設定
$ docker -v
Docker version 18.09.1, build 4c52b90
$ sudo usermod -aG docker $(whoami)
$ sudo service docker restart
$ docker info

#Docker-composeインストール
$ export compose='1.24.0'
$ sudo curl -L https://github.com/docker/compose/releases/download/${compose}/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose
$ sudo chmod 0755 /usr/local/bin/docker-compose
$ docker-compose -v
docker-compose version 1.23.2, build 1110ad01

#3.pythonインストール
#pyenvインストール
$ sudo apt install python-dev python-pip
$ sudo apt install python3-dev python3-pip
$ sudo apt -y install make build-essential libssl-dev zlib1g-dev libbz2-dev \
libreadline-dev libsqlite3-dev wget curl llvm libncurses5-dev libncursesw5-dev \
xz-utils tk-dev libffi-dev liblzma-dev
$ git clone https://github.com/pyenv/pyenv.git ~/.pyenv
$ echo 'export PYENV_ROOT="$HOME/.pyenv"' >> ~/.bashrc
$ echo 'export PATH="$PYENV_ROOT/bin:$PATH"' >> ~/.bashrc
$ echo 'eval "$(pyenv init -)"' >> ~/.bashrc
$ source ~/.bashrc

#python複数バージョンインストール
$ pyenv install 3.7.3
$ pyenv install 2.7.16
$ sudo apt -y install jq

#4.GCP開発環境構築
#python切替
$ pyenv local 2.7.16
$ python --version
Python 2.7.16
#CloudSDK導入
curl https://sdk.cloud.google.com | bash
～中略～
#以下の質問はEnter
Installation directory (this will create a google-cloud-sdk subdirectory) (/home/matarain):
～中略～
#以下の質問はYで
Do you want to help improve the Google Cloud SDK (Y/n)?Y
#以下の質問はYで
～中略～
Modify profile to update your $PATH and enable shell command
completion?

Do you want to continue (Y/n)?Y
～中略～
#以下が表示されたらEnter
Enter a path to an rc file to update, or leave blank to use
[/home/matarain/.bashrc]:

～中略～
For more information on how to get started, please visit:
  https://cloud.google.com/sdk/docs/quickstarts
  
#パスの確認
$ exec -l $SHELL
$ which gcloud

#設定
$ gcloud init
Welcome! This command will take you through the configuration of gcloud.

Your current configuration has been set to: [default]
～中略～
Network diagnostic passed (1/1 checks passed).

#Yを入力
You must log in to continue. Would you like to log in (Y/n)?Y

#URLが表示されるのでブラウザで確認
Go to the following link in your browser:

#ブラウザに表示されたキーを貼り付け
Enter verification code: ブラウザに表示されたキー

#プロジェクト選択
Pick cloud project to use:
 [1] smp-project-123456
 [2] key-pj-232222
Please enter numeric choice or text value (must exactly match list
item):  1

Your current project has been set to: [smp-project-123456].

#Yを入力
Do you want to configure a default Compute Region and Zone? (Y/n)?  Y

#リージョン選択
Which Google Compute Engine zone would you like to use as project
default?
If you do not specify a zone via a command line flag while working
with Compute Engine resources, the default is assumed.
 [1] us-east1-b
 [2] us-east1-c
～中略～
 [49] asia-northeast2-c
 [50] europe-north1-a
Did not print [12] options.
Too many options [62]. Enter "list" at prompt to print choices fully.
Please enter numeric choice or text value (must exactly match list
item):34

Your project default Compute Engine zone has been set to [asia-northeast1-a].
You can change it by running [gcloud config set compute/zone NAME].

Your project default Compute Engine region has been set to [asia-northeast2].
You can change it by running [gcloud config set compute/region NAME].

～中略～

* Run `gcloud --help` to see the Cloud Platform services you can interact with. And run `gcloud help COMMAND` to get help on any gcloud command.
* Run `gcloud topic --help` to learn about advanced features of the SDK like arg files and output formatting

#バージョン確認コマンド
$ gcloud version
#config設定確認コマンド
$ gcloud config list
#情報表示コマンド
$ gcloud info
#インストールコンポーネント一覧コマンド
matarain@gcp-dev:~$gcloud components list

GCPのローカル開発ってどうするんだ？情報が少ないだけにどうやって行くかは今後の課題ですなぁ、、、、。AWSはむちゃむちゃ情報ヒットするけどGCPはあまりないなぁ。
とりあえずGCPのチュートリアルやりつつググってやってくしかないですねぇ。
というか25,000円/月出してくれれば仕様変更が柔軟なデータベース基盤できるんだから安いと思うけど経営者という人種は見えない利益にお金は出しやがらないからなぁ。とりあえずGCP調べて行ってみます。

コメント

コメントを投稿

このブログの人気の投稿

証券外務員1種勉強(計算式暗記用メモ)

-
何を血迷ったのか 証券外務員 1種を受けてみようかと 思って 問題集 を回していたけれども、いまいち数式部分に 弱いところがあるので暗記してやろうと 重要そうな数式を集めてみました。まぁ正確性は低いかもしんないけど ひとまずは個人用でメモしています。 1.株式業務 (1) 権利落ち相場 　　権利落ち相場= 権利付相場 ÷ 分割比率 　(2)採算株価 　　採算株価=希望利回り÷1株当たり配当年額 　(3)1株当たりキャッシュフロー(PCFR) 　　 PCFR = 発行済株式総数 ÷( 税引後純利益 + 減価償却費 ) 　(4) イールドスプレッド 　　イールドスプレッド=長期債利回りー 株式益回り 　(5) EVITDA (金利・税金・償却前利益) 　　EVITDA=税引前利益+支払利息+減価償却費 　(6) EV (企業価値) 　　EV= 時価総額 + 有利子負債 ー 現金預金 ー 短期有価証券 　(7) EV/EVITDA倍率 (倍) 　　EV/EVITDA倍率=EV÷EVITDA 　◆株価成立参照 　　 https://www.rakuten-sec.co.jp/web/domestic/stock/rule/agreed.html 　　 http://money-magazine.org/%E6%A0%AA%E4%BE%A1%E3%81%AE%E6%B1%BA%E3%81%BE%E3%82%8A%E6%96%B9%E3%81%AE%E5%9F%BA%E7%A4%8E%E7%9F%A5%E8%AD%98/ 　　 https://kabusyo.com/keiken/q_baibai.html 　　 https://ja.wikipedia.org/wiki/%E6%A0%AA%E4%BE%A1 　　 http://kabukiso.com/basics/buy/ita.html 2.債券業務 (1) パリティ価格 (転換社債株式価値) 　　パリティ価格=(株価÷ 転換価格 )×100 　(2) 乖離率 (%) 　　乖離率={(転換社債の時価ーパリティ価格)÷パリティ価格}×100 　(3) 最終利回り (%) 　　最終利回り={利率+(償還価格ー購入価格)÷ 残存期間 ＜年＞)}÷購入価格×
続きを読む

GASでGoogleDriveのサブフォルダとファイル一覧を出力する

-
 タイトルのまんまです。 以前、EXCELで似たようなこと をしていたのでGASではどうするのかなぁと思ってやってみました。まぁほとんど丸パクリです。とりあえず、また使うかもしれないので自分用にメモです。しかしGASでGoogleDriveのファイル一覧嘗め回そうとすると3分かかってしまう。数が多いと6分制限に引っかかるのでこれでは使えない。せいぜい100ファイルとか数が少ないところで使う分にはいいけどダイナミックな場合は何回かに分割してやらないと少し厳しいかもしれない。 ◆GAS //設定値取得 const SHEET_URL = SpreadsheetApp.getActiveSpreadsheet().getUrl(); const ss = SpreadsheetApp.openByUrl(SHEET_URL); const SETTING_SHEET = ss.getSheetByName('設定') const TARGET_FOLDER_ID = SETTING_SHEET.getRange('B2').getValue(); const SAVE_FOLDER_ID = SETTING_SHEET.getRange('B3').getValue(); const SAVE_FILE_NAME = SETTING_SHEET.getRange('B4').getValue(); const SAVE_SHEET_NAME = SETTING_SHEET.getRange('B5').getValue(); function writeSheet(values, labels, sheetUrl, sheetname, width) { /* スプレッドシートに書き出し */ try { if (values.length > 0) { // シートを追加する let spreadSheet = SpreadsheetApp.openByUrl(sheetUrl); let sheet = set_sheet(sheetUrl,sheetname); // 1行目だけヘッダ追加 let he
続きを読む

マクロ経済学(IS-LM分析)

-
イメージ
危うく3日坊主になりそうでした。とりあえず今日は 「IS-LM分析」 です。 テキストでは 簡便4象限法 とかいうのの説明が多いです。なのでさっぱり わけわからん状態ですが、それなりに頑張ってみます。 1: IS曲線 の導出 財市場の均衡を表す。Iは投資を表し、Sは貯蓄を表す。 ・IS曲線導出の材料 I→利子率の関数、S→所得の関数で「I=S」で財市場を表す。 ・ 投資関数 利子率の減少関数、I (投資関数)=I(r)　※rは利子率 ・政府活動の導入 裁量的な拡張的な財政政策はIS曲線をシフトさせる。 IS曲線の右シフト=政府支出の増大や減税等の有効需要を増加させる要因による 2: LM曲線 の導出 利子率の低下が国民所得の増大につながる因果関係を明らかにする目的 ・LM曲線導出の材料 貨幣需要(MD)=L、L=取引的動機+予備的動機(L1)+投機的動機(L2) MD=L1+L2 貨幣供給(Ms)=名目貨幣供給/物価(P) ・LM曲線のシフト 金融緩和策・物価下落：実質貨幣供給(MS)が増大→右(下)へシフト 金融引締策・物価上昇：実質貨幣供給(MS)が減少→左(上)へシフト 独立投資拡大→IS曲線が右にシフト 利子率がr1→r2に下落する。 IS曲線、LM曲線の均衡点がE→Fに移動する。 国民所得がY1→Yfとなって増大する。 3:特殊なLM曲線 ・ 流動性の罠 のLM曲線 金融政策は無効→LM曲線をシフトさせても均衡点Eは変わらない IS曲線を右にシフトさせる拡張的な財政政策を実施すると均衡点が E→E´となり国民所得がY1→Y2に増加するので財政政策は有効となる。　　　 ・ 投資の利子率に対する弾力性ゼロ 金融政策は無効→LM曲線を右にシフトさせても国民所得が増えない。 流動性の罠と同じくIS曲線を右にシフトさせる拡張的な財政政策を実施すると 均衡点がE→E´となり国民所得がY1→Y2に増加するので財政政策は有効となる。　　　　　　 4: クラウディング・アウト 政府が市場に介入して公共投資を行うと民間の投資が締出しを受ける ・古典派による財政政策の無効論 政府支出を拡大すると利子率が上昇してしまい。投資が減少する。 政府の支出がクラウディングアウトを引き起こして支
続きを読む