前回の続きです。今回はSQSを操作するぞ。 "Getting Started with AWS and Python"をboto3で試す その１ - goodbyegangsterのブログ fifoのqueueを作成するため、NorthVirginaリージョンで作業します。 > import boto3 > sqs = boto3.resource('sqs', region…

AWS SDKを触ったことがなかったので、Python向けのSDKであるbotoをAWSのサイトにあるtutorialを参考に試してみます。botoはバージョンアップされており、現行の最新バージョンはboto3となっているので、その点を考慮しつつ勉強。 tutorialのページはこちら。…

ユーザ定義されたインデックスを調べて再編成してくれるTrasact-SQL。断片率が10%超の時に再編する。 DECLARE @INDEX_NAME sysname DECLARE @TABLE_NAME sysname DECLARE @SQL nvarchar(max) DECLARE @TEMPLATE_SQL nvarchar(max) SET @TEMPLATE_SQL = 'ALTE…

ユーザ定義されたインデックスを調べて再構築してくれるTrasact-SQL。 DECLARE @INDEX_NAME sysname DECLARE @TABLE_NAME sysname DECLARE @SQL nvarchar(max) DECLARE @TEMPLATE_SQL nvarchar(max) SET @TEMPLATE_SQL = 'ALTER INDEX @1 On @2 REBUILD with…

SQLServerで、しきい値を決めてdatabaseを圧縮するTrasact-SQL。 DECLARE @UsedPerc int SET @UsedPerc = (SELECT ROUND(FILEPROPERTY(name, 'SpaceUsed')/convert(float, size)*100, 0) as UsedPerc FROM sys.database_files where type_desc = 'ROWS') IF …

Splunkサーバを作成した場合、基本Indexerが対象ですが、システムリソース(ulimit)の設定を変更しておく必要があります。そのメモ。参考は公式ドキュメント。 System requirements for use of Splunk Enterprise on-premises - Splunk Documentation Open fi…

AWSのRDSインスタンスを停止できるようになりましたね。使っていないならお金の無駄だし、ちまちま停止処理をしていました。（ちなみにRDSインスタンスを停止していても、１週間経過すると自動的に起動してきてしまうので、この点は注意です。） ある日、暫…

題名の通り、AWSのEC2コンソールから、WindowsインスタンスのAuto Recoveryを設定しようとしたところ、Auto Recoveryの選択肢がグレイアウトしており、選択できないという事がありました。こんな感じです。 原因調べるのに苦労したのですが、以下のknowledge…

Windows系のEC2インスタンスはSSM AgnetがPublic AMIに同梱されるようなったため、WindowsイベントログのCloudwatchLogsへの転送設定をSSMから実施できるようなりましたが、Linux系はawslogsのモジュールが必要となり、現在のところ追加でモジュールをインス…

参加ドメイン > (Get-WMIObject -class Win32_ComputerSystem).Domain IPアドレス > (Get-WmiObject -class Win32_NetworkAdapterConfiguration | Where-Object {$_.IPEnabled -eq "TRUE"}).IPAddress IPアドレス：DHCP設定 > (Get-WmiObject -class Win32_N…

stdoutという名前のファイルが対象。 > foreach($i in Get-ChildItem ./ -Recurse -Name | ?{ $_ -like "*stdout*" }){more $i} PowerShell 2.0 or later

AWS利用していてamiは日常的に作成しますが、作成しっぱなしになること多いですよね。結果として、削除可否不明のamiやsnapshotが出来てしまったり。。。結構あるあるだと思っています。AWS CLIのdescribe-imagesコマンドであれば、対象のamiと紐づくsnapsho…

RDS for Oracleでは"alter system"や"alter database"コマンドの利用が制限されています。そのため、OracleでREDOログを追加するような"alter database add logfile member"といったコマンドが利用できません。その代わりにRDS用プロシージャが提供されてお…

これもいつも忘れてるのでメモ。 参考はこちら。 Amazon EC2 Linux Static Hostname RHEL7 Centos7 CentOS7からは、ファイルをいじらず「hostnamectl」というコマンドを利用しろとのこと。 $ sudo hostnamectl set-hostname --static zunda このままだと、AW…

RHEL7になっていろいろ変わって大変ですな。 いっつも忘れるのでメモ。 AWS標準では、OS再起動時にDHCPオプションセットに設定された値で上書きされてしまいます。 resolv.confを書き換えていても、上書きされちゃいます。そのための対応方法。 公式でtipsを…

前回のアップグレード時、elasticsearch-headを利用する方法を記載しなかったので、記載しておきます。 Elasticsearchのバージョンアップ - goodbyegangsterのブログ Elasticsearch 5.X よりsite plugin は利用不可になりました。詳しくは過去の公式ページに…

ElasticSearchがいつの間にやらメジャーバージョンアップしているので、僕の環境のもバージョンアップしてみます。(２から５にバージョンアップしていますが、３と４はどこへ。。。） (→ 2017/04/10追記：コメントで教えてくれた方がいました！！Kibanaとバ…

ElasticSearchではインデックスのバックアップ方法として、snapshotの機能を提供しています。今回その機能を利用したので、備忘録しておきます。 環境です。尚、ざっと確認した限り、バージョン５のElasticSearchでも手順は同じっぽいです。 CentOS 7.2 Elas…

株価のローソク足チャートを描いてみます。これを描いてみたかったので、D3.js触ってみたんですよね。D3.jsには「TechanJS」というファイナンス用のライブラリが存在しており、これを利用することで簡単にチャートを作成できます。 TechanJSのギャラリー。い…

D3.jsはいろんなグラフを描けるJavaScriptのライブラリですね。柔軟性は高いけど、その分学習コストも高いとの噂。描画できるグラフサンプルはこちら。 Gallery · d3/d3 Wiki · GitHub これをRails環境で利用してみます。環境です。 Rails 5.0.1 D3.js 4.4.1…

PHPで作成していたシステムをRailsに置き換えようと色々調べているのですが、移行にあたって最大の問題は「既存のデータベースをRailsでどのように利用するか」ですね。RailsではCoC(Convention over Configuration：設定より規約)の精神が貫かれており、そ…

RailsでSQLite以外のDBを利用する方法です。今更の内容ですが、備忘録として。Railsのバージョンは「5.0.1」です。 デフォルトではSQLiteを利用する設定になっているので、まずGemfileを更新します。sqlliteの部分をコメントアウトして、MySQL(MariaDB)のラ…

以下の環境間で、DBを移行したときのメモです。MariaDBデビューです。 [移行元] Windows7 Pro MySQL 5.6(InnoDB) [移行先] CentOS 7.2 MariaDB 10.1 MySQLからMariaDBへのアップグレードは、公式で手順が公開されていますが、異なるプラットフォーム間でとい…

MariaDB新規インストール時にはまったので、そのメモです。 環境です。 CentOS 7.2 MariaDB 10.1 以下の条件時に発生するようです。 SELinux有効時 データファイルのパスをデフォルトから変更している OS上のファイルアクセスのパーミッションは正しく与えて…

リモートサーバ上のMySQLからデータを引っ張ってきて、pandasで処理したかったのです。環境は以下です。 python 3.5.2 pandas 0.19.2 rdbからデータ取得するための関数が、pandasには用意されています。「pandas.read_sql_query」は、実行したSQL結果をデー…

CentOS7になり、ネットワークまわりの設定がかなり変わりましたね。地味に困りますねえ。。。設定の都度ググっては忘れてを繰り返しているので、備忘録としてまとめておきます。 以下のサイトを参考にしていますので、詳しくはこちらを見たほうが良いと思い…