mk-mode.com

mk-mode.com

Linux, Debian, IT, Server, PG, Ruby, Rails, Python, C++, Fortran, PC, MariaDB, math, GIS, etc...

MySQL

2022年 - ツイート集計！  (2023-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2022年の Twitter でのツイート（私用で主として使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベース(MariaDB)に保存しています。（実際には ...

2021年 - ツイート集計！  (2022-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2021年の Twitter でのツイート（私用で主として使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベース(MariaDB)に保存しています。（実際には ...

2020年 - ツイート集計！  (2021-01-02)

改めまして、旧年中はお世話になりました。 本年もどうぞよろしくお願いします。 2020年の Twitter でのツイート（私用で主として使用しているアカウントのみ）を Ruby で集計してみました。（前回から投稿元別のツイート数も集計しております） 当方は、ツイートは全て自宅サーバ(Debian GNU/Li...

2019年 - ツイート集計！  (2020-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2019年の Twitter でのツイート（私用で主として使用しているアカウントのみ）を Ruby で集計してみました。（今回から投稿元別のツイート数も集計しております） 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベー...

気象庁防災情報 XML - 大雨危険度通知！  (2019-07-11)

7月10日から気象庁防災情報 XML で運用が開始された「大雨危険度通知」の配信内容を一覧で確認するためのページを作成しました。（既に公開済みの他の情報と同様に） （ちなみに、当方、気象庁防災情報 XML のデータは Ruby + Rails + MariaDB(MySQL) 等で自作したシステムで受信＆管理し...

気象庁防災情報 XML - 早期天候情報！  (2019-07-08)

6月27日から気象庁防災情報 XML でも運用が開始された「早期天候情報」（「異常天候早期警戒情報」の後継）の配信内容を一覧で確認するためのページを作成しました。（既に公開済みの他の情報と同様に） （ちなみに、当方、気象庁防災情報 XML のデータは Ruby + Rails + MariaDB(MySQL) ...

気象庁防災情報 XML - ２週間気温予報！  (2019-07-05)

6月27日から気象庁防災情報 XML でも運用が開始された「全般季節予報（２週間気温予報）」、「地方季節予報（２週間気温予報）」の配信内容を一覧で確認するためのページを作成しました。（既に公開済みの他の情報と同様に） （ちなみに、当方、気象庁防災情報 XML のデータは Ruby + Rails + Maria...

2018年 - ツイート集計！  (2019-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2018年の Twitter でのツイート（メインで使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベース(MariaDB)に保存しています。（実際には Rub...

MariaDB(MySQL) - 国土交通省・位置参照情報をデータベース化（その２）！  (2018-09-17)

こんにちは。 国土交通省が公開している「位置参照情報」についてです。 「位置参照情報」には「街区レベル」と「大字・町丁目レベル」の２種類あります。要約すると、「街区レベル」は街区とその代表点座標を、「大字・町丁目レベル」は大字・町丁目とその代表点座標を対応付けた情報のことです。 以下は、「位置参照情報」を ...

2017年 - ツイート集計！  (2018-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2017年の Twitter でのツイート（メインで使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベース(MariaDB)に保存しています。（実際には Rub...

気象庁防災情報 XML - 気象警報・注意報（Ｈ２７）、警報級の可能性！  (2017-05-26)

5月17日から運用が開始された気象庁防災情報 XML の「気象警報・注意報（Ｈ２７）」、「警報級の可能性（明日まで）」、「警報級の可能性（明後日まで）」の配信内容を一覧で確認するためのページを作成しました。（既に公開済みの他の情報と同様に） （ちなみに、当方、気象庁防災情報 XML のデータは Ruby + R...

MariaDB, MySQL - 複合プライマリキーを持つテーブル一覧！  (2017-01-18)

MariaDB や MySQL 等の RDB で、プライマリキー（主キー）を複数のカラムに設定することはよくあります。 しかし、複合プライマリキーをサポートしていないアプリもあったりします。（自分の知る限りでは、 Rails の ActiveRecord がそう） 以下、複合プライマリキーが設定されているテ...

2016年 - ツイート集計！  (2017-01-02)

改めまして、旧年明けまして、新年おめでとうございます。 2016年の Twitter でのツイート（メインで使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(Debian GNU/Linux)上のデータベース(MariaDB)に保存しています。（実際には Rub...

MySQL - Mroonga でメモリマッピングエラー！  (2016-10-02)

Mroonga は、全文検索エンジン Groonga をベースとした MySQL のストレージエンジンです。 Mroonga を利用した自作ツールを実行した際に、メモリマッピングに関するエラーが発生するようになったので、その対処方法について記録しておきます。

2015年 - ツイート集計！  (2016-01-02)

2015年の Twitter でのツイート（メインで使用しているアカウントのみ）を Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(CentOS)上のデータベース(MySQL)に保存しています。 （実際には Ruby + Twitter API で本家からデータを取得して保存） ほとんど S...

MariaDB(MySQL) - ロールフォワード（ポイント・イン・タイム）リカバリ！  (2015-12-03)

MariaDB(MySQL) で障害発生時に、定期的に取得していたダンプファイルでリストアするだけでは、当然タイミングによっては古い状態になってしまいます。 以下は、定期的に取得していたダンプファイルとそれより後のログファイルで障害発生直前の状態までリカバリする方法についての記録です。

MariaDB(MySQL) - シャットダウン時間の短縮！  (2015-11-10)

MariaDB や MySQL をシャットダウン（or 再起動）する際に時間がかかりすぎることがあります。 バッファの内容をディスクに書き込むのに時間がかかっているからです。 今回は、そのイライラを軽減するための対処についての記録です。

MariaDB(MySQL) - XML ダンプ出力から HTML テーブル定義書生成！  (2015-09-12)

MariaDB(MySQL) のテーブル定義書を HTML で生成する方法についての記録です。 実際には、スキーマ（テーブル定義）を XML 出力し、それに XSL テンプレートを適用します。 （テーブル定義を行なってからテーブルを作成するのが本来の手順でしょうが）

MariaDB(MySQL) - インデックス名一覧取得！  (2015-09-03)

MariaDB(MySQL) で作成済みのインデックスの名称を確認したい場合、 SHOW INDEX FROM table_name を使用することが多いと思います。 しかし、一度に多数のテーブルについて確認したい場合に、テーブル単位で SHOW INDEX FROM table_name を実行するのは大変面...

MariaDB(MySQL) - ログローテート時のエラー！  (2015-04-27)

こんにちは。 Linux サーバでのログローテート時に MariaDB(MySQL) ログ部分でエラーが発生することがあります。 以下、当方が以前体験した事案についての現象・原因・対策の記録です。

MySQL(MariaDB) - 国土交通省・位置参照情報をデータベース化！  (2015-03-27)

こんにちは。 国土交通省が公開している「位置参照情報」についてです。 「位置参照情報」には「街区レベル」と「大字・町丁目レベル」の２種類あります。要約すると、「街区レベル」は街区とその代表点座標を、「大字・町丁目レベル」は大字・町丁目とその代表点座標を対応付けた情報のことです。 以下は、「位置参照情報」を ...

MariaDB(MySQL) - シェル(Bash)スクリプトで複数 SQL 実行！  (2015-03-24)

こんにちは。 シェルスクリプト（今回は Bash）内で MariaDB(MySQL) の SQL を実行する際、 -e or --execute オプションを使用することが多いと思います。 しかし、複数の SQL（特にトランザクション処理）を実行する際、このオプションではワンライナーにするしかありません。 ...

MariaDB(MySQL) - ibd ファイルの移行！  (2015-03-09)

こんにちは。 MariaDB(MySQL) でテーブルデータを別のサーバへ移行する際に、大抵の場合は移行元でダンプエクスポートしてから移行先でダンプインポートすると思います。（当然、高速化のためにログやキャッシュ等の設定を一時的に変更して） しかし、ダンプファイルが数GBもあったり、数千万レコード以上あったり...

MariaDB(MySQL) - innodb_table_stats not found!  (2015-02-26)

こんにちは。 MariaDB 10.0 系や MySQL 5.6 系サーバ起動時に innodb_table_stats が見当たらない旨のエラーが出力されることがあります。 以下、現象・原因・対策についてです。

MySQL(MariaDB) - MySQLTuner でチューニング診断！  (2015-02-23)

こんにちは。 MySQL や MariaDB のチューニングを診断する MySQLTuner の導入についてです。 当方よく使用するツールですが、記事にしたことがなかった（記録を取っていなかった）ので、今回記録しておいた次第です。

MySQL - datadir 変更時のエラー対策(on Debian)！  (2015-02-14)

Linux Mint などの Debian GNU/Linux 系のディストリビューション上に Apt で MySQL サーバをインストール後に datadir を変更すると、エラーで起動しなく状況に陥るようです。 （ちなみに、 Debian Wheezy 上の MariaDB では今回のような現象は発生しない（...

MySQL(MariaDB) - innotop コマンド導入(on Linux Mint)！  (2015-02-08)

こんにちは。 MySQL の各種状態を top コマンド風に表示して確認できるツール “innotop” コマンドをインストールします。 名称どおり対象のストレージエンジンは “InnoDB” ですが、当然 MariaDB にも対応しています。

2014年 - ツイート集計！  (2015-01-02)

2014年の Twitter でのツイート（メインで使用しているアカウントのみ）を Ruby で集計してみました。（今日気付きましたが、2013 年分の公開は失念していました） 当方は、ツイートは全て自宅サーバ(CentOS)上のデータベース(MariaDB(MySQL))に保存しています。 （実際には１時間に...

C++ - MariaDB(MySQL) への接続！  (2014-09-26)

C++ から MariaDB(MySQL) へ接続する方法についての記録です。 （C++ にそれほど精通している訳でもありません。ご承知おきください）

MariaDB(MySQL) - パーティショニング！  (2014-09-07)

MySQL 5.1 から導入されたテーブルのパーティショニング（１テーブルの分割管理）についての備忘録です。 パーティショニングすることにより主に以下のようなメリットがあると考えられます。 対象のパーティションのみ参照するようになるため、高速化が見込まれる。 パーティションごと削除が可能であるため、...

MySQL(MariaDB) - 連番の仮想表作成！  (2014-07-22)

MariaDB(MySQL) で自然数の連番だけのテーブル（表）が必要なことがあります。 以下、作成例と応用例についての備忘録です。

MySQL(MariaDB) - AUTO INCREMENT のリナンバリング！  (2014-07-07)

MySQL(MariaDB) で AUTO INCREMENT のカラムを設定している場合、レコードの削除を行なうと当然ながら番号が歯抜けになります。 それほど問題に感じることでもありませんが、気にならないこともないです。 以下、リナンバリング（再採番）する方法についての記録です。

気象庁防災情報 XML - 火山噴火警報・予報、火山噴火観測報集計！  (2014-07-03)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「火山噴火警報・予報」、「火山噴火観測報」の発表回数を集計したページを作成・公開しました。 （ちなみ...

気象庁防災情報 XML - 津波警報・注意報・予報集計！  (2014-06-30)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「津波警報・注意報・予報」の発表回数を（警報・注意報・予報別、津波予報区別に）集計したページを作成・...

気象庁防災情報 XML - 地震情報集計！  (2014-06-28)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「地震情報」の発表回数を（震央地別、震源深さ別、地震規模別、最大震度別に）集計したページを作成・公開...

気象庁防災情報 XML - 特殊気象報（各種現象、風、気圧）集計！  (2014-06-26)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「特殊気象報（各種現象）」「特殊気象報（風）」、「特殊気象報（気圧）」の発表回数を集計したページを作...

気象庁防災情報 XML - 地方海上警報集計！  (2014-06-25)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「地方海上警報」の発表回数を集計したページを作成・公開しました。 （興味がなければ、無視して下さい...

気象庁防災情報 XML - 高温注意情報、異常天候早期警戒情報集計！  (2014-06-21)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「高温注意情報」、「異常天候早期警戒情報」の発表回数を集計したページを作成・公開しました。 （興味...

気象庁防災情報 XML - 竜巻注意情報、土砂災害警戒情報、記録的短時間大雨情報集計！  (2014-06-19)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「竜巻注意情報」、「土砂災害警戒情報」、「記録的短時間大雨情報」の発表回数を集計したページを作成・公...

気象庁防災情報 XML - 気象警報・注意報集計！  (2014-06-17)

これまで「気象庁防災情報 XML」で発表された情報を（一覧や検索で）確認するためのページを当方サイト上で公開してきました。（以下のページ等） mk-mode SITE : 気象庁防災情報XML 今回は、「気象警報・注意報」の発表回数（2013年1月1日以降）を集計したページを作成・公開しました。 （...

気象庁防災情報 XML - 気象警報・注意報発表中の区市町村一覧、地方海上警報発表中の海域一覧！  (2014-06-13)

以前、「気象庁防災情報 XML」で発表されたデータのうち、「気象警報・注意報」や「地方海上警報」の最新のデータを一覧で確認できるようなページを紹介しました。 mk-mode SITE : 一覧 - 気象警報・注意報（気象庁防災情報XML） mk-mode SITE : 一覧 - 地方海上警報（気象庁防...

気象庁防災情報 XML - 紫外線観測一覧！  (2014-06-06)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 紫外線観測（気象庁防災情報XML） 今までは受信し...

気象庁防災情報 XML - 生物季節観測一覧！  (2014-06-04)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 生物季節観測（気象庁防災情報XML） 今までは受信...

気象庁防災情報 XML - 季節観測一覧！  (2014-06-03)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 季節観測（気象庁防災情報XML） 今までは受信した...

気象庁防災情報 XML - 地震情報一覧！  (2014-05-27)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 地震情報（気象庁防災情報XML） 今までは受信した...

気象庁防災情報 XML - 異常天候早期警戒情報一覧！  (2014-05-26)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 異常天候早期警戒情報（気象庁防災情報XML） 今ま...

気象庁防災情報 XML - 台風解析情報一覧！  (2014-05-25)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 台風解析・予報（気象庁防災情報XML） 今までは受...

気象庁防災情報 XML - 天候情報一覧、季節予報一覧！  (2014-05-24)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 天候情報（気象庁防災情報XML） mk-mode ...

気象庁防災情報 XML - 台風情報一覧！  (2014-05-23)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 台風情報（気象庁防災情報XML） 今までは受信した...

気象庁防災情報 XML - 潮位情報一覧、海氷予報一覧！  (2014-05-22)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 潮位情報（気象庁防災情報XML） mk-mode ...

気象庁防災情報 XML - 指定河川洪水予報一覧！  (2014-05-21)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 指定河川洪水予報（気象庁防災情報XML） 今までは...

気象庁防災情報 XML - 高温注意情報一覧！  (2014-05-19)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 高温注意情報（気象庁防災情報XML） 今までは受信...

気象庁防災情報 XML - 気象情報一覧！  (2014-05-17)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 気象情報（気象庁防災情報XML） 今までは受信した...

気象庁防災情報 XML - 天気概況一覧！  (2014-05-12)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 天気概況（気象庁防災情報XML） 今までは受信した...

気象庁防災情報 XML - 気象警報・注意報一覧！  (2014-05-10)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 気象警報・注意報（気象庁防災情報XML） 今までは...

気象庁防災情報 XML - 天気予報一覧、時系列予報一覧！  (2014-05-06)

当方、「気象庁防災情報 XML」のデータを受信後、データベース MySQL に保存し、さらにホームページ上で公開しています。 mk-mode SITE : XML Feed 受信履歴（気象庁防災情報XML） mk-mode SITE : DB - 天気予報（気象庁防災情報XML） 今までは受信した...

MySQL(MariaDB) - InnoDB レコード件数取得高速化！  (2014-05-02)

MySQL や MariaDB で件数を取得する際に COUNT(*) をよく使用すると思いますが、件数が多くなると取得にも時間がかかるようになります。 以下、高速化する方法についての備忘録です。（乱筆・乱文ご容赦ください）

MySQL - InnoDB 全テーブルのレコード数取得！  (2014-03-23)

よくある “information schema” からレコード数を取得する方法は、ストレージエンジン MyISAM では正確にレコード数が取得できるが、ストレージエンジン InnoDB では概算値となり正確に取得できない。 以下、コンソールから概算のレコード数を取得する方法と、正確なレコード数を取得するシェル...

MySQL(MariaDB) - 整数型の範囲！  (2014-02-04)

データベースサーバ MySQL(MariaDB) の整数型の範囲について、よく参照するのでメモとして残しておきます。

MySQL - ストアドプロシージャで FizzBuzz！  (2013-09-07)

MySQL のストアドプロシージャを使用して FizzBuzz を出力することを試行してみました。 ふと思い付いて試してみた次第です。 以下、２種類のストアドプロシージャを紹介します。

MySQL - InnoDB データファイル ibdata1 の最適化！  (2013-08-03)

MySQL のストレージエンジン InnoDB は、デフォルトでは ibdata1 というファイルにデータを保存・蓄積しています。 そして、この ibdata1 ファイルは、データ領域が不足すると自動で拡張されるようになっています。（設定により初期サイズと拡張サイズは異なる） ibdata1 ファイルのサイズは...

Git - 日本語ファイル名表示！  (2013-06-27)

例えば、「git日本語テスト」というファイル名を作成後に git status すると、日本語部分がエンコードされて表示されます。 これだと、ステージング（git add）ができません。 以下、対策方法についての備忘録です。

MySQL - データベースサイズ確認！  (2013-06-25)

MySQL でデータベースのサイズを確認したいことが時々あります。 MySQL では SHOW TABLE STATUS; でテーブルの各種状態を確認できますが、このコマンドではカラムを選択したり、SUM を取ったりすることができない。 以下、SQL でデータベースのサイズ確認する方法についての記録です。

MySQL - CSV データインポート！  (2013-06-08)

過去には、テーブルデータを CSV 出力する方法を記事にしていました。 * MySQL - SELECT結果をCSV出力！ 今回は、MySQL データベースのテーブルへ CSV ファイルからデータをインポートする方法についてです。 普段頻繁に利用しない方法なので、備忘録として残しておきます。

MySQL - 5.6 系で TIMESTAMP 型デフォルト値警告！  (2013-05-31)

MySQL サーバ 5.6 系でサービス起動時等に以下のような警告メッセージがログに出力されます。 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timesta...

MySQL - 5.6.11 ソースビルドでインストール(on Linux Mint)！  (2013-05-30)

以前、MySQL 5.5 系を CentOS(Redhat 系ディストリビューション) にソールビルドでインストールはしていました。 * Linux - MySQL 5.5.23 をソースからインストール！ 今回は、MySQL の最新安定版 5.6.11 （当記事執筆時点）を Linux Mint 1...

MySQL - InnoDB データファイルをテーブル単位に変更！  (2013-05-28)

MySQL でストレージエンジンに InnoDB を指定していると、データファイル・ログファイルが作成されます。 デフォルトでは、データファイル（ibdata1）はデータベースが複数あっても１つのファイルとして作成されます。 これだと、データベースが複数あったりサイズが膨大になったりすると、パフォーマンスが悪く...

MySQL - InnoDB チューニング！  (2013-05-27)

当方、今まで MySQL での膨大なデータ量のデータベース管理では、高速化重視でストレージエンジンを MyISAM に設定して運用していました。 しかし、更新処理が多いデータベースでしたので、考え方を安全・整合性重視の InnoDB に戻しました。 当然ながら、InnoDB は安全性重視のためデフォルトの設定で...

MySQL - テーブル定義/データのみダンプ出力！  (2013-05-25)

MySQL のダンプ出力に関しては、以前以下のような内容を記事にしました。 * MySQL - テーブル単位でダンプファイル出力！ * MySQL - 圧縮しながらダンプ出力！ 今回は、ダンプ出力時にテーブル定義のみを出力したり、テーブルデータのみを出力したりする方法についての記録です。

MariaDB - CentOS にインストール（yum 使用）！  (2013-02-27)

MySQL から派生したオープンソースな RDBMS（リレーショナルDB管理システム）の MariaDB を CentOS にインストールしてみました。 インストール方法は色々ありますが、今回は yum を使用する方法でインストールしてみました。

MariaDB - Linux Mint にインストール（apt 使用）！  (2013-02-25)

MySQL から派生したオープンソースな RDBMS（リレーショナルDB管理システム）の MariaDB を Linux Mint にインストールしてみました。 元々オープンソースだった MySQL も Sun や Oracle に次々と買収され、そう遠くない将来にはオープンではなくなりそう（クローズドになりそう...

Nginx - phpMyAdmin を使用する！  (2013-01-21)

軽量 Web サーバ Nginx で phpMyAdmin（MySQLサーバーをウェブブラウザで管理するためのデータベース接続クライアントツール）を使用する方法についてです。 既にインストールされている phpMyAdmin を Nginx で利用する方法についてです。PHP, phpMyAdmin, MySQ...

2012年 - ツイート集計！  (2013-01-02)

2012年の Twitter でのツイートを Ruby で集計してみました。 当方は、ツイートは全て自宅サーバ(CentOS)上のデータベース(MySQL)に保存しています。 （実際には１時間に１回 Ruby + Twitter API で本家からデータを取得して保存） ほとんど SQL で集計可能でした。 ...

WordPress(MySQL) - ‘TYPE=MyISAM’ エラー！  (2012-10-28)

久々に、WordPress のプラグインを調整していたら、有効化した際にブラウザに以下のようなエラーメッセージが表示されるようになりました。 You have an error in your SQL syntax; check the manual that corresponds to your MySQ...

Scientific Linux - MySQL Workbench インストール！  (2012-09-30)

Scientific Linux のデスクトップ環境 GNOME に MySQL GUI ツールの MySQL Workbench をインストールする方法についてです。 簡単な作業ですが、後学のために記録しておく。

Ruby - undefined method `connect’ for Mysql:Class！  (2012-08-11)

Ruby に Gem パッケージ mysql をインストール済みなのに、connect 時に以下のようなエラーが発生します。 undefined method `connect' for Mysql:Class 環境によって、発生したり発生しなかったりします。 以下、対策方法メモです。

MySQL - InnoDB エンジンが起動しない場合！  (2012-06-26)

MySQL はデフォルトでは InnoDB エンジンが有効化されます。 個人で使用するには InnoDB エンジンでも不便はありませんが、より高速に処理させたい場合などに MyISAM エンジンに変更したりします。 デフォルトで MyISAM エンジンが有効になるように設定ファイル(my.cnf or my.in...

MySQL - 圧縮しながらダンプ出力！  (2012-06-16)

MySQL ユーザならバックアップの際に誰でも使うであろう mysqldump コマンド。 通常、mysqldump コマンド実行後にできたダンプファイルのサイズが大きければ圧縮すると思います。 しかし、データベースの容量が大きくなると、ダンプを取ってその後圧縮する方法だと時間がかかりすぎます。 しかし、圧縮し...

MySQL - データディレクトリの移動！  (2012-05-25)

通常、MySQL を一旦インストールしたらデータディレクトリはそう変更しないと思います。 Linux の場合、インストール時に指定しなければ “/var” ディレクトリ配下にデータディレクトリが作成されます。 Webサイトやブログ等の運用で使用するくらいなら、デフォルトのデータディレクトリで全く（殆ど）問題あ...

MySQL - バイナリログ肥大化！  (2012-05-23)

DB サーバ MySQL を使用していて、突然ディスク容量不足になって MySQL に接続できなくなる事があります。（以下は実際は１行で出力されます） ERROR 20 (HY000) at line 989: Disk is full writing './mysql-bin.000022' (Errco...

MySQL - テーブル単位でダンプファイル出力！  (2012-05-12)

通常、データベース MySQL でダンプファイルを出力する場合、”mysqldump” コマンドを使ってデータベース単位に行うことが多いと思います。 当方のサーバでも普段はその方法を取り入れています。 ※実際には、ダンプ出力の他に “mysqlhotcopy” も併用していますが。。。 ただ、このダンプファイル...

株価 - バックテスト（ADXギャッパー）！  (2012-05-10)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（ADXギャッパー）！ 今回は、「ADXギャッパー」での計算で...

株価 - バックテスト（アンチ）！  (2012-05-09)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（アンチ）！ 今回は、「アンチ」での計算で発生した売買サインデ...

株価 - バックテスト（３本足の高値安値版）！  (2012-05-08)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（３本足の高値安値版）！ 今回は、「３本足の高値安値」での計算...

株価 - 売買サインチェック（ADXギャッパー）！  (2012-05-04)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 前回は「アンチ」という手法で売買サインの発生状況を検証してみましたが、今回は「ADXギャッパー」という手法で検証してみました。 ※個人的な記録ですので、興...

株価 - 売買サインチェック（アンチ）！  (2012-05-03)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 前回は「３本足の高値安値」という手法で売買サインの発生状況を検証してみましたが、今回は「アンチ」という手法で検証してみました。 ※個人的な記録ですので、興...

株価 - 売買サインチェック（３本足の高値安値版）！  (2012-05-02)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 最近の株価の検証ではバックテストを行っていましたが、今回はまた、少し前にも検証していた売買サインの発生チェックを行ってみました。 今回の手法は、「３本足の高...

Linux - MySQL 5.5.23 をソースからインストール！  (2012-04-26)

現在の Scientific Linux 6.2 や CentOS 6.2 ではリポジトリの関係上、パッケージでインストールできる MySQL は 5.1.52 とかです。（今回は RedHat(RPM) 系 Linux での話です。） MySQL では現在既に 5.5 系がリリースされていますので、今回は最新...

株価 - バックテスト（ボリンジャーバンド版）！  (2012-04-21)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（ボリンジャーバンド版）！ 今回は、「ボリンジャーバンド」での...

株価 - バックテスト（HLバンド版）！  (2012-04-20)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（HLバンド版）！ 今回は、「HLバンド（ハイローバンド）」で...

株価 - バックテスト（DMI/ADX版）！  (2012-04-19)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（DMI/ADX版）その１！ 株価 - 売買サインチェック（D...

株価 - バックテスト（ストキャスティクス版）！  (2012-04-18)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（ストキャスティクス版）！ 今回は、「MACD（移動平均・収束...

株価 - バックテスト（MACDシグナル版）！  (2012-04-17)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（MACDシグナル版）！ 今回は、「MACD（移動平均・収束・...

株価 - バックテスト（RCI・ゴールデン/デッドクロス版）！  (2012-04-16)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（RCI・ゴールデンクロス/デッドクロス版）！ 今回は、短期と...

株価 - バックテスト（RCI版）！  (2012-04-12)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（RCI版）！ 今回は、「RCI（順位相関指数）」での計算で発...

株価 - バックテスト（RSI版）！  (2012-04-11)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（RSI版）！ 今回は、「RSI（相対力指数）」での計算で発生...

株価 - バックテスト(指数移動平均・ゴールデン/デッドクロス版)！  (2012-04-05)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（指数移動平均・ゴールデンクロス/デッドクロス版）！ 今回は、...

株価 - バックテスト(単純移動平均・ゴールデン/デッドクロス版)！  (2012-04-04)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（単純移動平均・ゴールデンクロス/デッドクロス版）！ 今回は、...

株価 - バックテスト（指数移動平均版）！  (2012-04-02)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（指数移動平均版）！ 今回は、「指数移動平均」での計算で発生し...

株価 - バックテスト（単純移動平均版）！  (2012-03-31)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の1983年からの全取引データを取得しています。 以前は、売買サイン発生後の株価の挙動を集計しました。 株価 - 売買サインチェック（単純移動平均版）！ 今回は、「単純移動平均」での計算で発生し...

株価 - JASDAQ の始値に注意！  (2012-03-29)

【はじめに】 Yahoo!ファイナンス掲載情報の自動取得（スクレイピング）は禁止されています。（参照） 以下の記事を参考にすることもお勧めしません。 こんばんは。 JASDAQ とは大阪証券取引所の扱う日本発のベンチャー（新興）企業向けの市場のことです。 表題の「始値に注意！」とは、Yahoo!ファ...

日経平均株価の計算方法！  (2012-03-25)

日経平均株価とは、東京証券取引所一部上場の銘柄から選定された225銘柄の株価をダウ式計算ルールに則って算出した価格平均指数です。 そうです。単純に225銘柄の株価の平均を算出している訳ではないんです。

Ruby - Twitter ツイートを形態素解析！  (2012-03-23)

当方、自宅サーバにて、Ruby + MySQL + Twitter API で Twitter の自分のツイートをアカウント取得（2011年7月7日）以来全て保存しております。 形態素解析の勉強もかねて Ruby で解析してみました。 以下の過去記事もご参照ください。 Cygwin - 形態素解析 M...

株式分割情報を集計！  (2012-03-21)

【はじめに】 Yahoo!ファイナンス掲載情報の自動取得（スクレイピング）は禁止されています。（参照） 以下の記事を参考にすることもお勧めしません。 こんばんは。 Yahoo!ファイナンスから Ruby + MySQL で Web スクレイピングして取得している各種データの内、株式分割情報を集計してみ...

株価 - 売買サインチェック（ボリンジャーバンド版）！  (2012-03-17)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「ボリンジャーバンド」というものを利用して同様の検証を行いました。

株価 - 売買サインチェック（HLバンド版）！  (2012-03-13)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「HLバンド」というものを利用して同様の検証を行いました。

株価 - 売買サインチェック（RCI・ゴールデンクロス/デッドクロス版）！  (2012-03-09)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 前回は、「RCI」というものを利用して同様の検証を行いました。 株価 - 売買サインチェック（RCI版）！ 今回は、複数の異なる日数で計算した ...

株価 - 売買サインチェック（RCI版）！  (2012-03-08)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「RCI」というものを利用して同様の検証を行いました。 少し前に検証した「RSI」とは...

株価 - 売買サインチェック（DMI/ADX版）その２！  (2012-03-04)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 前回は、ＤＭＩ・ＡＤＸの概要、売買サインの判定基準について説明しました。 株価 - 売買サインチェック（ＤＭＩ・ＡＤＸ版）その１！ 今回は、定義...

株価 - 売買サインチェック（DMI/ADX版）その１！  (2012-03-03)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「DMI」と「ADX」というものを利用して同様の検証を行いました。 検証の前に、まず...

株価 - 売買サインチェック（ストキャスティクス版）！  (2012-02-29)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「ストキャスティクス」というものを利用して同様の検証を行いました。

株価 - 売買サインチェック（RSI版）！  (2012-02-27)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、色々な指数を利用して売買サインを検証してきました。 今回は、「RSI」というものを利用して同様の検証を行いました。

株価 - 売買サインチェック（MACDシグナル版）！  (2012-02-25)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 これまで、単純移動平均（= SMA）や指数移動平均線（= EMA）、またそれらのゴールデンクロス・デッドクロスを利用してを買いサイン・売りサインの動向を検証...

株価 - 売買サインチェック（指数移動平均・ゴールデンクロス/デッドクロス版）！  (2012-02-19)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 前回は単純移動平均（= SMA）でゴールデンクロス・デッドクロスを検証してみましたが、今回は指数移動平均線（= EMA）のゴールデンクロス・デッドクロスを買...

株価 - 売買サインチェック（単純移動平均・ゴールデンクロス/デッドクロス版）！  (2012-02-18)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 今回は、単純移動平均線（= SMA）のゴールデンクロス・デッドクロスを買いサイン・売りサインとした場合のその後の株価の変動を検証してみました。 ※全体的にど...

株価 - 売買サインチェック（指数移動平均版）！  (2012-02-14)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 前回は、単純移動平均値を上回った場合・下回った場合を買いサイン・売りサインと定義して検証してみました。 株価 - 売買サインチェック（単純移動平均版...

株価 - 売買サインチェック（単純移動平均版）！  (2012-02-13)

Ruby + MySQL で自作した株価取得のシステム。 全市場（東京・大阪・名古屋・札幌・福岡）の全銘柄の2000年からの全取引データを取得しています。 今日は、取得している株価データを利用して、買いサイン・売りサインが発生した場合のその後の株価の変動を検証してみました。 全体的にどんな傾向があるのかを把握す...

Cygwin - Windows の MySQL へ TCP 接続！  (2012-02-11)

以前、Cygwin から Windows ネイティブの MySQL へ接続することに関する話をしました。 Cygwin - MySQLクライアントインストール！ Cygwin - Ruby on Rails で MySQL ソケットエラー！ 今回も関連したメモ的な話です。 それは、Cygwin の...

MySQL - 一般ユーザにSUPER権限を付与！  (2012-02-10)

MySQL で ストアドやトリガを使用する際 root ユーザなら問題ないのですが、一般ユーザの場合、SUPER 権限が付与されていないため実行できません。 簡単なことですが、滅多に行わない作業なのでメモっておきます。 SQL 文を発行して行う方法です。

MySQL - UPDATE/DELETE 時の Error:1175！  (2012-02-04)

MySQL を GUI で管理・操作できるツール MySQL Workbench でのエラーについての対処メモです。 ※MySQL 自体の設定の問題なので、MySQL Workbench に限った話でもありませんが。 MySQL Workbench 上で UPDATE や DELETE の SQL 文を実行する...

MySQL - 5.5.20 アップデート時エラー！  (2012-02-02)

ローカルテスト用にと Windows マシンに MySQL をインストールしているのですが、ふとエラーログを見てみると ERROR が出力されていました。

Cygwin - Ruby on Rails で MySQL ソケットエラー！  (2012-01-12)

当方の Cygwin 環境に Ruby を導入したことだし、Linux サーバで運用中の Ruby on Rails アプリを Cygwin 上で動かしてみようと考えました。 Ruby、RubyGems、MySQL は導入済みなので、後は Gem で Rails をインストールしてソースを用意すればよいだけです...

Cygwin - MySQL2 Gemパッケージインストール！  (2011-12-31)

Ruby で MySQL を使用する際には MySQL アダプタの Gem パッケージが必要です。 そこで、当方の Cygwin 環境に MySQL アダプタの新しいバージョン MySQL2 の Gem パッケージをインストールしました。

Cygwin - MySQLクライアントインストール！  (2011-12-30)

今日は、Cygwin にインストールした Ruby で MySQL を操作する目的で、 MySQL のクライアントをインストールしました。 サーバは既に Windows 側にインストールされているのでそれを使用します。 ライブラリのみが必要だったためにクライアントのみのインストールとしました。 ※libmysq...

Ruby on Rails - 郵便番号検索システム修正！  (2011-12-06)

以前、日本郵便提供の郵便番号データ（CSVデータ）を使って以下の作業をしました。 Ruby + MySQL で郵便番号データ取り込み！ Ruby on Rails - 郵便番号検索システム作成！ しかし、日本郵便提供の郵便番号データ（CSVデータ）は仕様上非常に危険なデータとなっています。 日本郵...

Ruby - UNIX MBOX データをMySQLへ保存！  (2011-11-22)

最近、よく記事にしていた UNIX BOX メールデータの検証を一旦終了し、いよいよ UNIX MBOX データを MySQL へ登録する作業を試行しました。 ※データ登録作業には Ruby を使用していますが、スクリプトは掲載していません。 後述のとおり、２種類の方法を試行しました。 結局、第１の方法がしっく...

Ruby - UNIX MBOX 一意性検証！  (2011-11-18)

今日は、UNIX MBOX メールデータを DB（MySQL） へ登録しようと考えた場合、そのメールが登録済みかどうかをチェックしなければなりません。 そのチェックをどうするかを考えた場合、メールサーバで一意に付けられる Message-ID をチェックする方法が考えられます。 しかし、転送メール等の場合は M...

MySQL - Out of memory 対策！？  (2011-11-14)

WindowsXP + Ruby + MySQL で大量（あるテーブルでは数千万件）のデータを処理していると、以下のようなエラーが発生しました。 Out of memory (Needed 8164 bytes) MySQL 側の問題と思い、MySQL のログを確認してみると同じようなエラーを出力していまし...

UNIX MBOX メールデータ用 DB設計！  (2011-11-12)

UNIX MBOX (Thunderbird) メールデータを DB (MySQL) へ登録すべく、最近各種検証を行ってきました。 本文・添付ファイル抽出・デコード部分はとりあえず考えず、DB登録（保存）することだけを考えています。 ※使用する言語は Ruby を想定。 まずは、DB (MySQL) を設計しな...

Ruby - UNIX MBOX ヘッダ検証！  (2011-11-09)

（最近、ブログタイトルが似たようなものになっていますが、微妙に内容が異なっていますのであしからず） さて、今日は UNIX MBOX メールデータのヘッダの検証を行ってみました。 （検証には Ruby を使用していますが、ソースまでは公開していませんのであしからず） 今までも、何度かヘッダのフィールド毎に検証...

Ruby - UNIX MBOX メールヘッダ「Date」検証！  (2011-10-14)

先日は、Ruby でメールの UNIX MBOX データの読み込みを試してみました。 Ruby - UNIX MBOXデータ読み込み！ 今後、この読み込んだデータを MySQL に保存することを考えていますが、何万件とあるデータを一気に取り込もうとすると少なからず不正なデータ存在します。 そこで、少...

Ruby - UNIX MBOXデータ読み込み！  (2011-10-12)

Windows でメールを扱う場合、メールの保存形式は UNIX MBOX 形式にすることがあると思います。 当方も Thunderbird で UNIX MBOX 形式を使用しています。 この UNIX MBOX形式のデータを MySQL に保存してみたくて、まずは Rubyで 読み込んでみようと考えました。...

Ruby on Rails - Windowsイベントログ閲覧！  (2011-10-07)

先日は、RubyでWindowsイベントログの取得を試みました。 Ruby - Windowsイベントログ取得！ さらに、バッチファイルで毎日MySQLサーバへバックアップするようにしました。 そして、今回は Ruby on Rails で閲覧できるようにしました。

2011年9月 - OS・ブラウザ別アクセス状況！  (2011-10-01)

10月になったので、先月9月分の当ブログアクセス状況を公開します。 一発でMySQLを集計してHTMLタグを付けるRubyスクリプトを作成したので、今回からは簡単に記事にできるようになりました。 月が変わって20分後の10月1日0時20分（いつも投稿は0時20分に予約投稿してるので）の投稿に間に合いました。 （...

Ruby on Rails - 地方公共団体一覧作成！  (2011-09-06)

Ruby + MySQL で 「 財団法人地方自治情報センター 」 から全国の地方公共団体（都道府県・区市町村）のコード・住所等の一覧を取得し、当方の Ruby on Rails で構築している Webサイト に表示させてみました。

2011年8月 - OS・ブラウザ別アクセス状況！  (2011-09-02)

当WordPressブログではアクセス解析に「CounterizeiII」を一部カスタマイズして使用していますが、月ごとのOS（バージョン別）・ブラウザ（バージョン別）の集計ができません。 そこで、月ごとのOS（バージョン別）・ブラウザ（バージョン別）の集計を行うSQLを作成しました。

MySQL - SELECT結果をCSV出力！  (2011-08-31)

今日は、MySQLでSELECT文を発行した際の結果をCSVファイルに出力する方法についてです。 と言っても、SQL文を作成する際に、少しばかし記述を追加するだけです。

Ruby on Rails - 郵便番号検索システム作成！  (2011-08-29)

昨日は、Ruby + MySQL で日本郵便提供の郵便番号CSVデータを取り込む作業を行いました。（参照 → Ruby + MySQL で郵便番号データ取り込み！） 今回は、MySQL に取り込んだデータを Ruby on Rails で検索できるようにしてみました。

Ruby + MySQL で郵便番号データ取り込み！  (2011-08-28)

Ruby on Rails 上で郵便番号を検索できるシステムを作成することを思いつき、まずは日本郵便のサイトからダウンロードしたCSVファイルを Ruby + MySQL で取り込むことを考えてみました。 ※日本郵便のサイトによると、郵便番号データは「郵便事業株式会社は著作権を主張しません。自由に配布していただ...

Ruby - PrawnでTweetリストPDF作成！  (2011-08-15)

少し前に「Ruby - PrawnでPDF作成！」で公開したとおり、Rubyで「Pwarn」Gemパッケージを使用してPDFを作成する方法を紹介しました。 今回はPDF作成処理を実用化してみました。

MySQL - オーバーヘッドの最適化！  (2011-08-14)

WordPressをしばらく使用していると、時々MySQLが原因で動作が重くなることがあります。 その主な原因は、DBへのINSERTやDELETEが頻繁に行われることによるフラグメンテーションの増加です。 今日はその解決方法についてです。

Ruby - Twitter MentionsをOAuth認証で取得！  (2011-07-28)

少し前に、「Ruby – TwitterタイムラインをOAuth認証で取得！」のとおり、Ruby + TwitterAPI + OAuth認証+ MySQL で自分のTwitterタイムラインを取得してバックアップするようにしました。

旧暦カレンダー - CSV データ！  (2011-05-08)

先日 Ruby + MySQL で作成した旧暦カレンダーを公開しましたが、CSV データも用意しております。 ぜひご活用ください。 こちら → mk-mode SITE : カレンダーCSVデータダウンロード 以上。

カレンダー作成！  (2011-04-15)

六曜ってご存知ですか？ 「先勝、友引、先負、仏滅、大安、赤口」というやつです。 これらを表示できるカレンダーを自分で作成してみました。 単に数字を並べるだけのカレンダーは簡単に作成できるのですが、六曜が絡むと非常に面倒です。 なぜなら、旧暦（日本なら、天保暦という暦）を計算しないとからです。 調査してみる...

MySQL － オーバーヘッドの削除！  (2011-02-23)

また、ＭｙＳＱＬの話です。 「ｐｈｐＭｙＡｄｍｉｎ」でＭｙＳＱＬのＤＢを眺めていたら、あるテーブルだけ「オーバーヘッド」の欄に数字が表示されていて気になったので調べてみました。

MySQL － 「Can’t connect to MySQL server on ‘localhost’ (10048)」エラー！  (2011-02-19)

最近、ＷｉｎｄｏｗｓＸＰマシンで「Ｒｕｂｙ ｏｎ Ｒａｉｌｓ」＋「ＭｙＳＱＬ」のアプリを作成していると以下のようなエラーが発生するようになりました。 Can’t connect to MySQL server on 'localhost' (10048) 調べてみると、どうやらＷｉｎｄｏｗｓだけの問題らし...

phpMyAdmin － リンクテーブルを処理するための追加機能が無効になっています。。。  (2011-02-08)

今回も前回に引き続き、「 ｐｈｐＭｙＡｄｍｉｎ 」についてです。 「 ｐｈｐＭｙＡｄｍｉｎ 」にログインした際にページの下部の方に以下のような警告が表示されることがあると思います。 リンクテーブルを処理するための追加機能が無効になっています。 理由についてはこちらをご覧ください これは、追加機能についての...

phpMyAdmin － タイムアウト時間の変更！  (2011-02-05)

最近、Ｗｉｎｄｏｗｓマシンでもデータベースに「 ＳＱＬＳｅｒｖｅｒ 」ではなく「 ＭｙＳＱＬ 」を使用することが多くなったため、ＧＵＩツールの「 ｐｈｐＭｙＡｄｍｉｎ 」をよく使用します。 しかし、コーディングを３０分くらいして、ＤＢの内容を「 ｐｈｐＭｙＡｄｍｉｎ 」で確認しようとすると、セッションが切れてて...

MySQL － クラッシュしたテーブルの修復！  (2011-01-25)

今日自分のブログ（ＣｅｎｔＯＳ＋ＭｙＳＱＬ＋ＷｏｒｄＰｒｅｓｓ）を見ていたら、アクセスカウンターがおかしい（ゼロになっている）ことに気づきました。 いろいろログを見てみると、 「 /var/log/mysqld.log 」に以下のような記述がありました。

ＭｙＳＱＬ - クエリ結果のキャッシュで高速化！  (2010-10-20)

ＷｏｒｄＰｒｅｓｓなどで使用しているデータベース「ＭｙＳＱＬ」はデフォルトではクエリ結果のキャッシュを行っていません。 クエリ結果をキャッシュしてやることで高速化が期待できます。

ホームページで自分のブログ記事一覧表示！  (2010-09-30)

少し前の「ホームページにブログ更新履歴を表示！」でも報告したとおり、当方のホームページのトップページにこのブログの更新情報を表示させるようにしています。

ＷｉｎｄｏｗｓでのＭｙＳＱＬの大文字・小文字区別！  (2010-09-25)

当方のサーバはＣｅｎｔＯＳで稼動させているのですが、 何かとテストを行うのはＷｉｎｄｏｗｓマシンを使用しています。 そこで、データベースＭｙＳＱＬをいじっている時に気付いたのですが、 Ｗｉｎｄｏｗｓ版のＭｙＳＱＬは、デフォルトでテーブル名等が強制的に小文字にされてしまいます。 たとえば「abCDef」としたいの...

ホームページにブログ更新履歴を表示！  (2010-09-20)

今日は、このブログとは別に公開しているＷｅｂサイト「ｍｋ−ｍｏｄｅ ＳＩＴＥ」のトップページにブログの更新履歴を表示させてみました。 少しググってみると、 ＲＳＳフィードをJavaScriptを使用して取得する方法 ＲＳＳフィードを取得するブログパーツを使用する方法 などを見かけました。 当方...

ＰＨＰ＋ＭｙＳＱＬでアクセスカウンタ！  (2009-02-24)

今日は、 この間自分の ホームページ にテキストファイルを使った簡単なアクセスカウンタをＰＨＰで作って稼働させてましたが、 やっぱりちゃんとしたもの、つまり、同じＩＰからのアクセスはある程度制限かけたり、データベースを使って動かしたり、ということがしてみたくなり、いろいろ調べながらやってみました。 導入にあたり...

WindowsXPにMySQL＋phpMyAdmin！  (2009-02-14)

昨夜ＭｙＳＱＬをＷｉｎｄｏｗｓマシンにインストールしたんだけど、 そういえば、 ＭｙＳＱＬ入れたらこれも入れておかないといけいない。 ってことを忘れてた。 そう、 ｐｈｐＭｙＡｄｍｉｎ というＭｙＳＱＬ管理用のツール。 ということで、入れてみました。 ※あくまでも、ＷｉｎｄｏｗｓＸＰ（ＳＰ３）にＷｅｂサーバ...

WindowsXPにMySQL！  (2009-02-13)

今夜は、ふと、Apache2＋PHPの導入ができたうちのメインマシン（WindowsXP）にデータベース MySQLを入れたくなったんで、入れてみました。 （実はいずれブログ WordPress を Windows でも使えるようにしたくて） 導入記録 １．アーカイブファイルのダウンロード MySQLサイト...