最近データが荒れています。

うちのサイトのデータベースの話です。

最近、メンテナンスに充てる時間があまりなく
ちょっと荒れ気味になっています。

新データベースの移行に合わせて
一気に整理しようと思っていますが…なかなか時間がありませぬ。

今週末は天皇賞もありますしあまり影響を出したくないので…
大幅メンテナンスは11月最初の土日かなぁと思っています。

[コメント読む(0)]

データベースの容量とWeb表示スピードの相関を考える。

昨日書こうと思って書かなかった話。
今夜はデータベースについてちょろっと。

---

当「The Sunday Breeze」のデータベース。

多少の重複やデータ異常はありながらも、データベースに登録されているのは
競走馬の数ではおよそ65万頭。

過去のレース結果は
1986年以降の平場の中央・地方全レースと1998年以降のばんえい競馬
合わせておよそ74万レース。

これだけのデータがあると
そりゃ蓄えているディスクも相当なものなんでしょう…
と思われがちではありますが。

現時点でのデータベースディスク容量は、およそ10ギガバイト。
管理人が3回競馬観戦に行って撮ってくる写真の容量と変わりません。

---

「どうだー、うちはデータいっぱいあるのに容量少ないんだぞー」
ってのが今日のブログで言いたいこと…

ではありません。

---

データの量が同じだった場合(管理人なりの某サイトとの比較)
おそらくデータベース容量とWebページの表示速度は反比例の関係にあります。

何のストレスもない某競馬データベースサイトは
データベースの容量だけでもテラ単位なんじゃないかと推測しています。

それはなぜか。

基本のデータベース。
競走馬の基本情報、レースの基本情報
ホントの基本情報のみ(いわゆる「生データ」)を登録してあるデータベース。

そして
その基本のデータベースを編集し
Webサイトでそのまま表示すればいいだけの編集済みデータベース。

「The Sunday Breeze」では
編集済みデータベースを現在はもっていません。

当然、編集済みデータベースを持つことによって
データベースの容量は格段に増えます。
ただ、データをそのまま表示すればいいだけなので
表示スピードは格段に上がります。

現在の「The Sunday Breeze」では
生データをWebページ側で編集し、皆さまのブラウザで表示しています。
(編集するのはサーバの処理ですが)

これつまり…
生データからバッチ処理かなんかで編集済みデータベースを作成することが
「The Sunday Breeze」の致命的な処理の遅さを改善する最善策なのではないかと。

---

現在進めていますのは、まずは生データの整理。

生データもある程度整理して、登録処理が簡単にできるような構造に変更。

そして、生データからWeb表示用の編集済みデータ用データベースの準備。
これは…今のところ構想だけで、まだ手を付けられていません。

逆に言うと
編集済みデータベースに合わせて、Webサイト自体を変えるべきだと思うんですが
卵が先か鶏が先かの話になりますので…。
(データベースに合わせてWebを直すか、Webに合わせてデータベースを直すか
普通ならデータベースが先だとは思いますが)

少しずつデータベースを直してはいますが
あまりにも影響が大きいデータ(競走馬データとかレースデータとか)は
大きく手を入れるタイミングを見計らっているところではあります。

少しサーバ自体を止めないとダメかな…。

---

っと
あんまりサーバを構っていないように見せかけつつ
実は内部的には少しずつ変化をしております。
今年の「The Sunday Breeze」の目標はそこにありますので。

出来れば今年中にはある程度の成果を上げたいと思います。

-----

さて。
明日はやっと金曜日。

明日は飲み会のため、千葉へ戻ります。
ただ土曜日に日帰り静岡のため、飲み会が終わったら自宅(南浦和)へ戻ってくる予定です。

明日のブログは…たぶん無理だな。
よっぽど何かあれば、酔った勢いで書いていこうと思います。

[コメント読む(0)]

変なウイルスが蔓延していますが

「The Sundau Breeze」はWindowsサーバではないので
とりあえず今のところは大丈夫です。

[コメント読む(0)]

サーバはすでに瀕死状態です。

おとといの夜に実家に帰りました。
昨日、実家近くの病院で人間ドックの予定が入っていたためです。

んで
久しぶり(約半月ぶり)にサーバの様子を確認したんですが…

サーバ(ノートPC)のディスプレイが完全に壊れました。
真っ黒でした。

とりあえず現在は
ネットワーク経由でデスクトップの様子などが確認できますが
ネットワークが遮断された場合に
サーバの状態を確認することができません。

無理やり再起動してもネットワーク次第では
もうサーバを起動させることができません。

ほぼ瀕死の状態になってしまいました。

新しいサーバ用PCの購入も検討していますが
想定外の引っ越しなどでお金がありません。

どうしましょうね。

-----

さて。
明日あたりから有馬記念の検討でも始めましょうかね。

[コメント読む(0)]

データベースの再構築作業を再開しました。

夏の時期、サーバが非常に高い負荷となっていまして
まともにアクセスできない状態が続いていました。

10月に入りまして気温もだいぶ落ち着いてきて
サーバの動作状況もここ数週間でかなり改善されました。
(根本的な解決にはなってませんが)

とりあえずいろいろと中断していた作業を再開し始めています。

昨日は1日
データベースの再構築作業をまた最初からやり直し。
新しいデータベースへの移行のためにプログラムを直したり
一部Webページをいじったりしています。
(見た目は何も変わっていません)

今年中をめどに
データベースを一新する予定でいます。
サーバを騙し騙しにはなりますが。

---

10月初めより皆様にお願いしております
サーバ運営のための寄付の募集ですが
11月いっぱいまでの受付とさせていただきます。

なお現時点では
目標金額どころか、まだお一人の方からしかいただけておりません。

目標金額は7万円、
11月いっぱいまでに集まらなければ
いただいた皆様へ返金するつもりでいます。

皆様のご協力をお願いいたします。

-----

明日は夜勤のため、ブログはお休みです。
明後日は夜勤明けで大井競馬場へ行きたいと思っていますが…今のところ未定です。

[コメント読む(0)]

月	火	水	木	金	土	日
		1	2	3	4	5
6	7	8	9	10	11	12
13	14	15	16	17	18	19
20	21	22	23	24	25	26
27	28	29	30	31

このページを共有

今月のカレンダー

カテゴリ一覧

先月までのネタ

最近よく読まれてるネタ

最近のコメント

ネタの検索

管理人の競馬観戦記録

管理人の競馬家計簿

管理人のつぶやき

「自宅サーバ」の「サーバもろもろ」ネタは、全部で150件あります。

最近データが荒れています。

データベースの容量とWeb表示スピードの相関を考える。

変なウイルスが蔓延していますが

サーバはすでに瀕死状態です。

データベースの再構築作業を再開しました。

月	火	水	木	金	土	日
		1	2	3	4	5
6	7	8	9	10	11	12
13	14	15	16	17	18	19
20	21	22	23	24	25	26
27	28	29	30	31

月	火	水	木	金	土	日
		1	2	3	4	5
6	7	8	9	10	11	12
13	14	15	16	17	18	19
20	21	22	23	24	25	26
27	28	29	30	31

月	火	水	木	金	土	日
		1	2	3	4	5
6	7	8	9	10	11	12
13	14	15	16	17	18	19
20	21	22	23	24	25	26
27	28	29	30	31