hadacchi blog

AWSの転送量が高かった

hadacchi — Sat, 03 Nov 2018 23:58:04 +0000

先月 2018年10月はなぜかAWSの転送量が今までの倍に増えてしまった．分析私のアカウントでは，以下の2つのパターンで転送が生じる． cloudfrontを通じたS3からのweb hosting goofysを利用したS3のリモートマウント (owncloudに利用) 先々月と比較してcloudfrontの利用料金は変化ないが，転送量が増えていることから，まぁowncloudのせいだと思うんだけど，一応調べることにした．準備 cost explorer まずやったのが，cost explorerの有効化． 24hかかるらしいので，今日はenableにしただけ． server access logging S3ではバケット単位でアクセスログを取れる．バケットを選択し，Propertiesから有効化する．保存先バケットは，ログを残すバケットと同じregion内にないといけないらしい．あと，ログが配信され始めるまで数時間かかるので，こっちも今日はenableにしただけ．まとめ突然，AWSの利用料金が増えたので，料金のモニタリングとアクセスのモニタリングを有効化してみた．原因やフィルタリング条件が明らかになれば，アラートの設定やアクセス制限をしたいと思う．

wordpressをS3 webhostingで公開した時の費用

hadacchi — Sun, 19 Aug 2018 01:40:17 +0000

AWSって費用感が分かりにくい．なので実際に公開した費用が分かり易いかも知れない． S3で公開する方法はこちら．WordPressの管理に疲れたので静的ページに落としてS3で公開した話 - hadacchi blog 7月半ばから運用をしていて，8/1～8/19までの19日間ではこんな感じ．ただし，S3とデータ転送にはowncloud（約800MB）が含まれるので，website運用分は実質，CloudFrontがほとんど．（owncloudはCloudFrontを経由していない）ざっくり60%強がCloudFront．全てwebsite hosting． 30%弱がデータ転送．ほとんどがownCloudだと思われる．残り10%弱がS3ホスティング．ほとんどがownCloudだと思われる． 1ヶ月分の予測は単純に1.5倍．金額にして200円にはならない見込み． ownCloudを除けば100円くらいと思われる．うーん，安い．

WordPressの管理に疲れたので静的ページに落としてS3で公開した話

hadacchi — Wed, 11 Jul 2018 13:03:02 +0000

(追記 7/11) qiitaの記事を転機し，動作テストとする． (追記 7/10) cloudfrontの設定を追記した．意外と手間がかかっていて，wordpressを普通に運営した方がいいんじゃねーのってツッコミもありうる．注意ドメイン名を晒していますが，403 Forbiddenが返ってしまった方がいるかも知れません．過去にアタック性のあるURLへのアクセスが検出されたアクセス元IPアドレスは，全て機械的に拒否設定しているため，そのリストに加えられている可能性があります．遊び半分で「w00tw00t」なんて文字列の入ったパスにアクセスしちゃダメ，絶対！疲れた… 私の運営するwebsiteは，wordpressがメインコンテンツになっている．運用するのは結構大変で，数ヶ月に1回のアップデート要請（WordPress バージョン一覧 - WordPress Codex 日本語版）への対応テーマ更新の度に適用しているカスタムテーマの再適用，管理ページハッキングを狙った大量のアタック対策もう疲れたよ！この記事の概略 S3 webhostingの設定 S3で静的コンテンツ（htmlや画像）をweb配信するよ wordpressの静的コンテンツ化 wordpress+nginx を静的コンテンツに落としてS3にアップロードして，webサイトを再現するよ CloudFrontでSSL化と独自ドメインからの参照の設定 Cloudfrontを使って，独自ドメイン＋SSL でアクセスできるようにするよ手順化してみて気付いたけど，ここの設定が鬼門 https://wp.hadacchi.com がサンプル（なぜか wp_blog/index.html だけ，index.htmlまで指定しないと読んでくれない） ※スクリーンショットを何回にも分けて取ったので，ドメイン名がコロコロかわっている点はご留意いただきたい．対策→構成変更ということで，手間を少なくblogを運営する方法を模索することにした．構成っぽく書くが，AWS構成はフルマネージドのサービスを使っているので，実際の構成とはきっと違うし雰囲気だけ掴めれば良いことにする．構成（イメージ）要は，従来のクラウド上の機能をローカルの非公開NWに落として，静的コンテンツに変換したものをS3にアップロードする．で，CloudFront経由で公開する．しかも，今のクラウド料金はVMとオブジェクトストレージを合わせて400円/月くらいだが，この構成なら200円/月くらいになるはず．あーなんで，この方法に気付かなかったんだろ．実は，この記事[1]で行けるんだけど，ハマりどころがあるのでもう少し細かく書いたものが，本記事である．基本的には，素晴らしき先達のノウハウを活用されたい． S3 webhostingの設定 S3でindex.htmlを公開する簡単には，この記事の通りである→[2] ただ，いくつか端折られてたりするので，もちょっとだけ詳しく書く．なおAWSアカウントは，もうあるものとする．（既に持ってるので再現できない） awscli導入 awscliを，まず導入してしまおう． pipが使えるものとし，awscliをインストールする．すると，こんな感じの結果が返ってくる．文献[2]の通りバケットを作成する仮ドメインをtmp.hadacchi.comとすると，バケット名もtmp.hadacchi.comとする． ※他の設定を正しくしても，この名前が合ってないとs3 webhostingでは404が返るので注意． ※cloudfrontを設定した後はこの限りでない indexesを.htmにしたい場合は，index.htmと書けば良い．ただし，後述のstaticpressというwordpressをhtml化するプラグインはindex.htmlとして吐くので，あえてhtmにするメリットはない．バケットポリシーは，Resourceのところを，「バケットポリシーエディター ARN: arn:aws:s3:::tmp.hadacchi.com」と編集画面で書かれているところからコピペして修正すること．書くならこんな感じ． Versionの値の"2012-10-17"は，このJSONの従うフォーマットのバージョンなので，この値で良いことに注意． IAMの作成（権限作成） wordpressが動作しているAWS外のホストから，awscliで接続できるよう設定したい． AWSのアクセス管理は，ユーザ（IAM）への権限付与で行なうので，まずIAMユーザを作る． AWSコンソールの左上の「サービス」をクリックし「IAM」を選ぶ．先にポリシーを作成する．ビジュアルエディタでポチポチ選べば作成できる．設定はS3を選んで，権限を選んで，対象リソースや対象オブジェクトを指定する．具体的には，以下の通り．（ListAllMyBucketsにobjectの指定は不要なので，設定後にListAllMyBucketsだけ別グループに自動で切り出される）最後にReview policyを選んでからポリシーセットに名前をつけてcreate policyで作成できる． IAMの作成（ユーザ作成）今作ったポリシーを付与するユーザを作る．とりあえずCLIからアクセスするキーさえあれば良い．上で作成したポリシーをアタッチする．で，スクロールして右下の確認→作成で完成．次の画面のアクセスキーとシークレットアクセスキー（要はID/PW）はこの画面でしか確認できないので，ダウンロードしておく．（もし確認を忘れたら，新しいキーを発行すれば良い．それは割愛する）得たアクセスキーとシークレットキーにawscliに設定 ~/.local/bin/awsへ設定を付与する． Tokyo regionはap-northeast-1．設定がうまくできていれば，バケット一覧（aws s3 ls）が見れるし，バケット内（aws s3 ls s3://BUCKETNAME）も見れる．下の例はindex.htmlを置いてみた後の実行結果．コンテンツアップロードサイト内コンテンツへのリンクを相対パスで書いていれば，今のpublic_html以下をそのまんまputすれば静的コンテンツだけは動く．下のコマンドの例では，public_htmlというディレクトリは作成されない．（public_html/index.htmlはs3://tmp.hadacchi.com/index.htmlになる） ※注意：以下のコマンドラインでアップロードしたところで，phpは動作しないので，当然ながらwordpressも動作しない． web公開設定の確認文献[2]に記載の通りs3 website hostingのエンドポイントに書かれたURLへアクセスすれば，静的コンテンツであれば表示されるはず． …

Continue reading "WordPressの管理に疲れたので静的ページに落としてS3で公開した話"

確定申告メモ

hadacchi — Tue, 08 May 2018 05:55:35 +0000

書いた気になって忘れてたからここに書いておく配当金の申告年度支払確定日の年の申告に含める配当金の確定申告の種別確定申告しない（源泉徴収済の場合） 20.315% 確定申告する総合課税所得税率＋住民税率配当控除が適用される申告分離課税損益通算の対象となる

UbuntuでCitrix Receiverを使ってVPN越しにRDPする時のtips

hadacchi — Tue, 05 Dec 2017 01:10:11 +0000

firefoxにCA証明書を登録してるのに，証明書がtrustedじゃないよって怒られる時のtips 前提 VPNを受けてRDPを受け付けるサーバ側は用意されているものとする．勤務先とか勤務先とか勤務先とか必要な証明書はcrtとかcerとかのファイルがあるものとする手順 firefoxをインストール．ubuntuのdesktopを入れてたら最初から入ってるかも Citrix Receiverをインストール． Citrix Receiver - Citrix から，今回はLinuxを選択 Receiver 13.7 for Linux - Citrix から，今回はDebian PackagesのWeb Receiverを選択証明書をインストール個人証明書サーバ証明書指定されたURLにアクセスして認証を通すここで，Citrix Receiverに怒られる場合，firefoxのcertをCitrixが読めるようリンクを貼るそれでもダメな場合，firefoxに取り込めてない可能性があるので直接コピっちゃう 1．証明書がちゃんと入っていたら，ブラウザのセッションは維持したまま，icaを落とし直してreceiverを起こし直せば動く

updatedbのエラー回避

hadacchi — Tue, 31 Oct 2017 23:06:39 +0000

crontabで定期実行しているupdatedbが吐く/run/user/*/gvfsへのパーミッションエラーを避けたい updatedbはlocateでファイル検索する時のDB更新コマンド．用途から考えて/run/user配下は検索する必要がないので，crontabで呼び出す時に検索パスから外すオプションをつければ良い． updatedb --prunepaths=/run/user これはubuntuの場合．ディストリによっては=でつながないらしいので注意．複数パスを外す場合は updatedb --prunepaths='/run/user/110 /run/user/1000' みたいにする．

threading.Threadの使い方

hadacchi — Wed, 25 Oct 2017 16:07:05 +0000

よく忘れるので． docoptは入れて使ってくらはい．他のはanaconda3-4.4.0で入ったと思う．この記事は次の記事を参考にしている．実行中のスレッドに対し外から操作をする - Qiita ただし，私はスクリプトの外から操作をしたかったので，イベントハンドラから呼んでみた．あと終了処理を入れたかったので無駄に関数を作って呼び出し順などを確認できるようにしてみた． withは使ってないからenterとexitはいらんかった． __file__ を test.pid で一括置換した名残が何か残ってるけど気にせんとってください．（abspathとかdirnameとかbasenameとかんとこ）

fontconfigのエラー

hadacchi — Thu, 19 Oct 2017 04:54:03 +0000

ubuntuで突然，GUIプログラムを起動すると Fontconfig warning: "/etc/fonts/conf.d/30-metric-aliases.conf", line 84: Having multiple in isn't supported and may not work as expected みたいなエラーと Unable to update the static FcBlanks: 0x0601 みたいなエラーが大量に出るようになって困った．前者は該当ファイルを一つ一つ開いて，<alias>ディレクティブ内で複数の<family>をまとめて1つの<family>にエイリアスしているところを，別<alias>に展開することで解消．具体的にはこんな感じ Fixing Warning Messages About Font Configuration 後者はエラーの出てるコードだけ消せばいいのかもしんないけど，メンドクセーので/etc/fonts/fonts.confの<brank>ディレクティブを全消しで解消．

findでまとめてパーミッション変更

hadacchi — Thu, 19 Oct 2017 02:10:53 +0000

追記ここ（ファイルやディレクトリのパーミッションを一括で置換したい - Qiita）のコメント欄の内容が神すぎたので自分でも忘れないよう転記．この「X」しらんかった． sambaでファイルサーバを運用している時に，別ユーザでのアクセスが問題になることがまれによくあるなのでディレクトリは755に，ファイルは644にしたい基本 xargsとの組合せ

オブジェクトストレージでownCloud

hadacchi — Mon, 16 Oct 2017 15:31:13 +0000

バケットを作成する .s3cfg がある場合，そこに記載のAPIユーザでバケットを作成してしまう． ownCloudのユーザを分けたい場合，まずAPIユーザの作成から行なう． APIユーザを作成したら，APIユーザのAccess KeyとSecret Keyが発行されているはずなので，コピーする． .s3cfgの他に設定ファイルを作成して-cオプションで読み込ませても良いし，s3cmdのコマンドラインオプションに与えても良い．で，APIユーザのアクセスキーをもってmb (バケット作成）すればバケットの準備完了． ownCloudに外部ストレージを使用させる ownCloudのアプリ追加から External Storage Supportを有効化する．続いて管理画面の外部ストレージからS3を選択し，オブジェクトストレージの設定を入れる．バケットに作成したバケット名を入れる．ホストには，s3cfgで言うところのhost_baseを入れる．アクセスキーとシークレットキーも指定する．ポートは不要（？）以上をうまく設定できれば，外部ストレージの一覧の画面で名前の左の赤い四角が緑の丸になるはず．その状態で接続成功しているのでownCloudのホームに戻ると，ルートに設定したオブジェクトストレージ名のディレクトリが作成されているはず．あとはファイルを移して気長に待つ．