貝塚 2015.11.03
天候 ：曇
釣行時間：15:00 - 17:00
釣果 ：エソ 3匹
そろそろアジのシーズンも終わりかと思い、久しぶりにサビキ釣りの準備をして昼過ぎに出かけました。思ったより人が多く駐車場はほぼ一杯で釣り場所もあまりありませんでした。アジやイワシが釣れている様子は全くありませんでした。
しばらくサビキをしていましたが、全く釣れないので、結局、サビキを片手間にジグでキャスト開始。30分くらいするとフォールでヒット！やっぱりこの時期のこの時間帯なのでいつものエソでした。釣れないよりはマシというくらいですね。その後も立て続けにエソを2匹追加して納竿となりました。
夕日が凄く綺麗でした。
最後に青物釣りたいですねー
boto3(AWS SDK for Python)でCloudWatchからメトリクスを取得する【cloudpack 大阪 BLOG】
boto3を使ってCloudWatchからメトリクスを取得する必要が出てきたので勉強がてら簡単なサンプルを作ってみました。
環境
サーバ：CentOS6.6
Python：2.6.6
boto3：1.2.1
EC2インスタンスのメトリクスを取得のサンプル
まずはEC2のCPU使用率を取得してみたいと思います。
下記のコードを記載して適当なファイル名で保存してください。
import boto3 from boto3.session import Session import datetime import dateutil.tz import pprint pp = pprint.PrettyPrinter(indent=4) accesskey = "YOUR_ACCESSKEY" secretkey = "YOUR_SECRETKEY" region = "YOUR_REGION" session = Session( aws_access_key_id=accesskey, aws_secret_access_key=secretkey, region_name=region) client = session.client('cloudwatch') # Get EC2 CPUUtilization response = client.get_metric_statistics( Namespace='AWS/EC2', MetricName='CPUUtilization', Dimensions=[ { 'Name': 'InstanceId', 'Value': 'i-12345678' }, ], StartTime=datetime.datetime.utcnow() - datetime.timedelta(seconds=600), EndTime=datetime.datetime.utcnow(), Period=300, Statistics=['Average'] ) pp.pprint(response)
CloudWatchコンソール
リファレンスをななめ読みしただけですが、サイドメニューのMetricsがNamespaceとなりMetricNameが画面右側のMetricNameを指定します。Namespaceは「AWS/」をMetricsに付加すればよさそうです。（ここは後ほど書いてますが誤りでした）Dimensionsについては、取得したいサービスによって名称が異なるため、NameとValueを指定するようになっています。CPU使用率の場合はNameにInstanceIdをValueに実際のIDを指定します。
実行結果
python get_ec2_cpu.py
{ u'Datapoints': [ { u'Average': 0.20000000000000001,
u'Timestamp': datetime.datetime(2015, 10, 31, 8, 16, tzinfo=tzutc()),
u'Unit': 'Percent'}],
u'Label': 'CPUUtilization',
'ResponseMetadata': { 'HTTPStatusCode': 200,
'RequestId': '1dfba5e6-7fa9-11e5-bc7c-1f8b347fd072'}}
EMRのメトリクスを取得
実際に取得したいMetricsは、EC2ではなくEMRのメトリクスを取得したかったのでEC2と同様にコードを書いてみましたが何故か取得できず。エラーは発生せず返却されるDatapointsの値に何もセットされていませんでした。スペルミスか時間指定が間違っているのかと思い見直すも問題はなさそうでした。そもそもNamespaceに問題があるのか？と疑いを抱き、list_metrics関数で取得してみると何も取得できませんでした。どうやら名前空間の指定に問題があるようで、調べてみると名前空間はAWS の名前空間 - Amazon CloudWatchで定義されていました。CloudWatchのMetricsと紐付くと思い込んでいましたがそうではないようです。今回は「AWS/ElasticMapReduce」と指定して正しく値を取得することができました。
response = client.get_metric_statistics(
#Namespace='AWS/EMR', ←間違い
Namespace='AWS/ElasticMapReduce', ←正
MetricName='IsIdle',
Dimensions=[
{
'Name': 'JobFlowId',
'Value': 'j-1PNEZHM6MFON8'
},
],
StartTime=datetime.datetime.utcnow() - datetime.timedelta(seconds=300),
EndTime=datetime.datetime.utcnow(),
Period=300,
Statistics=['Average']
)
実行結果
python boto_sample.py
{ u'Datapoints': [ { u'Average': 1.0,
u'Timestamp': datetime.datetime(2015, 10, 22, 9, 20, tzinfo=tzutc()),
u'Unit': 'None'}],
u'Label': 'IsIdle',
'ResponseMetadata': { 'HTTPStatusCode': 200,
'RequestId': '7c3a6076-8044-11e5-82dd-9bacba3e4791'}}
Laravel5でphp-imapからgmailにアクセス【cloudpack 大阪 BLOG】
PHPからgmailを取得したいと思い、方法を調査していたところphp-imapを使って取得できることがわかりました。が、結構ハマってしまいました。
今回はLaravel5を使ってgmailから固定条件で検索したメールの件名を一覧で表示させるサンプルアプリを作成してみました。
環境
以下の構成でサンプルアプリを作成しました。
Apache、PHPのインストール等、Laravel5が動作する環境を構築をしておいてください。
サーバー : Amazon Linux
Webサーバー ： Apache 2.4
PHP : php 5.6
php framework : Laravel5
Controllerの作成
[project_root]/app/Http/Controller/GmailController.phpを作成する
namespace App\Http\Controllers; use Illuminate\Http\Request; use App\Http\Requests; use App\Http\Controllers\Controller; class GmailController extends Controller { public function getIndex() { $server = "imap.gmail.com"; $port = 993; // ポート番号 $account = "test@gmail.com"; // Gmailアカウント $password = "password"; // パスワード $mailbox = "{".$server.":".$port."/novalidate-cert/imap/ssl}INBOX"; // メールサーバ接続 $mbox=null; $mbox = imap_open($mailbox, $account, $password) or die('Cannot connect to Gmail: ' . imap_last_error()); // メール検索（検索条件：件名にTEST MAILが含んでおり、受信日時が2015/08/08以降） $result = imap_search($mbox,'SUBJECT "TEST MAIL" SINCE "8 August 2015" ', SE_UID); $mail=null; for($i = 0;$i<count($result);$i++){ // ヘッダ情報の概要を取得 $overview = imap_fetch_overview($mbox, $result[$i], FT_UID); // 件名、送信元アドレス、送信日を取得 $subject = mb_convert_encoding(mb_decode_mimeheader($overview[0]->subject), 'utf-8'); $from = mb_convert_encoding(mb_decode_mimeheader($overview[0]->from), 'utf-8'); $date = date("Y-m-d H:i:s", strtotime($overview[0]->date)); $mail['subject'] =$subject; $mail['date'] = $date; $mail['from'] =$from; array_push($mail_data,$mail); } // メールボックスのクローズ imap_close($mbox); return view('gmail.index')->with('mail_data',$mail_data); } }
Viewの作成
resources/views/app.blade.phpを以下のように修正
共通レイアウトファイルでjqueryとbootstrapを読み込んでおきます。（好みで修正してください）
<!DOCTYPE html> <html lang="ja"> <head> <meta charset="UTF-8"> <title>Gmail Test</title> <link href="https://maxcdn.bootstrapcdn.com/bootstrap/3.3.5/css/bootstrap.min.css" rel="stylesheet"> <script src="https://ajax.googleapis.com/ajax/libs/jquery/2.1.4/jquery.min.js"></script> </head> <body> <script src="https://maxcdn.bootstrapcdn.com/bootstrap/3.3.5/js/bootstrap.min.js"></script> <div class="container"> <div class="row"> <div class="col-md-12"> @yield('content') </div> </div> </div> </body> </html>
[project_root]/resources/views/gmail/index.blade.php
@extends('app')
@section('content')
<h1>Gmail</h1>
<div class="container">
<table class="table table-striped table-bordered">
<tr>
<th>#</th>
<th>date</th>
<th>subject</th>
<th>from</th>
</tr>
@foreach ($mail_data as $index => $recorde)
<tr>
<td>{{$index+1 }}</td>
<td> {{ $recorde['date'] }}</td>
<td> {{ $recorde['subject'] }}</td>
<td> {{ $recorde['from'] }}</td>
</tr>
@endforeach
</table>
</div>
@endsection
Routingの設定
Route::controller('gmail', 'GmailController');
実行確認
「url/gmail」にアクセスしてみましょう。Gmailにアクセスしているため表示まで少し時間がかかります。
正しく表示されない場合は、Gmailでブロックされている可能性が高いので、以下のハマったところを参考にしてみてください。
ハマったところ
imap_openでCouldn't Open Stream エラー
以下のエラー画面が表示されました。
まずは接続先、ポート番号、アカウント、パスワードに誤りがないか確認しましたが問題なさそうです。ググッてみましたが、設定を見直すというところで良く分かりませんでした。
そこで、以前にメールボックスにtelnetでアクセスしたことを思い出し、コマンドで直接アクセスできるか試してみました。
openssl s_client -connect imap.gmail.com:993 -crlf ? login test@gmail.com password
参考：telnet(openssl)でIMAPプロトコルを喋ってGmailに命令を出す。 - それマグで！
このコマンドで直接アクセスしても接続出来ませんでした。ということでもしかするとGmail側でブロックされているのかも？という可能性を疑ったところ、「ログイン試行をブロックしました」というメールが届いていました。（早くきづいておけば・・・）
ひとまず接続確認をしたかったので、セキュリティ的にオススメではありませんが「安全性の低いアプリがアカウントにアクセスするのを許可する」（下記参照）設定を行ったところ、コマンドでのアクセス確認ができアプリからも正常にアクセスできました。
参考：安全性の低いアプリがアカウントにアクセスするのを許可する - Google アカウント ヘルプ
このままではセキュリティ的によろしくないので他に方法がないか調べたところ、アプリ用のパスワードを設定する方法がありました。（下記参照）2段階認証を有効にしてアプリ用パスワードを発行し、プログラム内のパスワードをアプリ用パスワードに変更して再度実行して表示されることが確認できました。
検索したメールが正しく表示されない
次に固定文言で検索したメールを表示させたところ、タイトルにその文言が含まれていないメールが表示される問題がありました。
これは、imapの仕組みを良く分かっていなかったことと、imap_searchのリファレンスをしっかり読んでいなかったことが原因でした。コードをコピペして修正するだけではダメですね。
imapではメールにメッセージ番号とUIDの2種類の番号が割り当てられているようで、↑のコードではimap_searchの引数にSE_UIDを指定したためUIDが返されていました。当初、件名を取得するのにimap_headerinfo関数を使用していましたが、これはメッセージ番号をキーに取得する関数なので検索条件に該当しないメールが取得されていました。なので、ヘッダー情報をUIDでも取得できるimap_fetch_overview関数を使うことで解決しました。これでメールを取得できるようになったので、色々と効率化できそうです。
.ssh/configの便利な設定【cloudpack 大阪 BLOG】
管理するサーバ台数が増えてくるとSSHでの接続が手間になりconfigに設定を書くことも多くなると思います。
また、扱うサーバ台数が増えてくるとそもそもconfigに記載したかどうかすらも分からなくなってきます。そこで今回は、「.ssh/config」を利用するときにちょっと便利になる設定を紹介します。
Host名の補完機能
これはHost名を補完してくれる機能です。地味に便利な機能です。
インストール方法
以下のコマンドを実行し補完機能をインストールしてください。
この機能はsshだけでなくserviceコマンドなど他のコマンド実行時においても補完してくれます。
# Mac brew install bash-completion # CentOs yum --enablerepo=epel install -y bash-completion
Host名の一覧表示
Host名の一覧を表示するコマンドを自作しました。補完機能でほぼまかなえますが、Host名の先頭のを覚えていない時に。
以下のコマンドを「.bash_profile」なりに設定してください。
設定方法
alias sshlist="cat ~/.ssh/config |grep ^Host\ |sed -e 's/^Host\ //g'"
使い方
使い方は「sshlist」とするだけでHostの一覧が表示されます。
下記のようなconfig設定があったとして
Host abc_web_01 HostName 111.111.111.001 IdentityFile ~/.ssh/abc_id_rsa1 User ec2-user Host def_web_01 HostName 111.111.111.002 IdentityFile ~/.ssh/def_id_rsa1 User ec2-user
これに対して実行すると
$ sshlist abc_web_01 def_web_01
Host名に「def」を含む一覧を表示
$ sshlist |grep def def_web_01
タイムアウト防止
一定時間操作しなかった場合にタイムアウトすることがありますが、以下の設定をすると
指定時間時間ごとに通信をしてタイムアウトを防いでくれます。
ServerAliveInterval 15
サーバのタイムアウト設定は基本的にはセキュリティを考慮したもののため、
この設定をして回避するのは微妙な気がします。
おまけ
scpコマンドからでも.ssh/configが利用できます。
ファイル受信
scp abc_web_01:/home/user/remotefile.txt /tmp/
ファイル送信
scp localfile.txt abc_web_01:/home/user/
貝塚 2015.09.20
天候 ：曇
釣行時間：04:00 - 07:00
釣果 ：サゴシ １匹、エソ １匹
朝の４時過ぎに釣座を確保し釣り開始。タチウオシーズンなのでこの時間でもかなり人が多いですね。かなり肌寒い状況です。まずはワインドでタチウオ狙い。今年はどうでしょうか？若干、風と波があり少しあたりが取り辛い状況でした。ワインドの色を変え、ジグに変えと色々試行して５時半過ぎまで粘りましたが、時合も特になく周りでは隣のえさ釣り師が１匹釣っていたくらいでした。 もちろん自分もヒットなし。本命の青物に期待することにします。
タチウオに見切りを付けて青物タックルに持ち替えて、ジグでキャスト開始。風もおさまってきました。１時間位キャストを続けていましたが、ベイトも見当たらずナブラもないので、今日もボウズかと諦めかけていました。が！６時半前に底付近でフォールでヒット！ヒットの仕方と引きからエソっぽいと思いつつ期待して寄せてみましたが、やっぱりエソでした。残念！せっかくですが、海にお帰りいただきました。引きだけは楽しませてもらいました。ともあれ、活性が上がってきたかと期待してキャストし続けると、中層付近でひったくるような感じでヒット！これは青物確実と思い寄せてみると今季初サゴシ！ヒットパターンは少しテンポの早いワンピッチジャークでした。サゴシを〆てすぐにキャストを開始しましたが、群れはもう去っていったのかこれ単発でした。
今回はリーダーにワイヤーを使ってなかったのですが、針が１つサゴシに切られていました。サゴシの歯は鋭いですね。針を外すときはくれぐれも気をつけてください。もう一つも噛まれてボロボロになっていたので、抜き上げずにネットでランディングして良かったです。
Cloud9でLaravel5の環境構築【cloudpack 大阪 BLOG】
前回はCloud9の初期設定までしたもののPHPについては、Ruby on Railsのようにワンボタンでの環境構築が準備されていなかったので、CakePHPかLaravelのどちらにするか迷った末に軽量FWと言われているLaravel5を導入することにしました。
プロジェクト作成
Workspace名とテンプレートにPHPを選択します。Hosted workspaceはPrivateでもPublicでもどちらも構いませんがPublicの場合はすべての人に公開されてしまいます。またフリー版ではPrivateのWorkspaceは１つだけとなっています。
Laravel5のプロジェクト作成
新しいタブでターミナルを開いてください。
以下のコマンドを実行してプロジェクトを作成してください。
rm README.md php.ini hello-world.php
sudo composer self-update
composer create-project laravel/laravel ./laravel --prefer-dist
shopt -s dotglob
mv laravel/* ./
rm -rf laravel
完了まで数分かかかります。
Apacheのconf設定
以下のファイルをviで開いて、DocumentRootを以下に変更してください。
sudo vim /etc/apache2/sites-enabled/001-cloud9.conf
編集箇所
DocumentRoot /home/ubuntu/workspace/public
アップデート
composer update
DB設定
プロジェクトを作成した際にMySQLのDBが同時に作成されています。
まずは下記コマンドを実行して接続先のホスト名を確認しましょう。
mysql-ctl cli use c9; select @@hostname; ←ホスト名が表示される exit
LaravelのDB接続設定
ワークスペースの直下に「.env」ファイルがありますが、エディタのエクスプローラーからは見えないです。（設定で表示可能かもしれませんが分かりませんでした。）ターミナルからファイルをvimで開いて編集してください。
DB_HOST=HOSTNAME ←上で確認したホスト名をセット DB_DATABASE=c9 ←初期値 DB_USERNAME=USERNAME ←cloud9のユーザー名 DB_PASSWORD= ←初期値は空でOK
起動確認
ひと通り設定は完了したので、Apacheを起動して確認してみましょう。
Runボタンをクリックして画面下部に表示されたurlをクリックすると初期画面が表示されます。下記のように表示されていれば完了です。（Laravel5の場合）
手軽に環境を作成したいと思いましたが、テンプレートが用意されていないとまだまだ手間がかかります。ここはもう少し改善を期待したいです。
また、Laravelのプロジェクトとしてアプリを利用するためには、権限の変更などまだいくつか設定が 必要になりますが、そこは下記リンクや他で色々と紹介されていますので参照してみてください。
参考
大磯サーフ 2015.09.16
天候 ：小雨
釣行時間：16:00 - 18:00
釣果 ：なし
今年は雨が多いですね。天気予報の曇を信じて出発したものの大磯駅に到着してすぐに雨が降り出しました。家を出る時に降ってくれてれば諦めめもつきましたが。せっかくなので釣具店で簡易カッパを購入し、最近の釣果とポイントを聞きつつ海岸へ。今朝はワカシとサバがあがっていたそうです。
波は結構穏やかでしたが、満ち潮なので少しずつ波がせり上がってきているため荷物を適当な場所に置いて釣り開始。30-40gのジグをローテーションし、途中弓角も試しました。無反応。ベイトも見当たらず穏やかな海でした。ちょくちょくポイント移動しましたが反応なし。ジグの着底が早いので全体的に水深は浅そうです。数回あたりらしきものもあったものの本日も撃沈。やっぱり早朝に行くべきか。車が必要だ
今回、中古品で状態の良さそうなコルトスナイパーS1000Mを手に入れたので、早速使用してみることにしました。普段はクロスライド1002LSJを使用しているのでそれと同程度の性能を見込んでいましたが、思った以上に先端が柔らかくジグを投げるのもアクションさせるのも結構疲れました。今の自分には合わないようです。3年前くらいなら丁度よかったかもしれません。やっぱりロッドは使ってみるまで分からないですね。
大磯海岸釣り日記
