Data Archive of Solar Radiation and Weather Monitoring Page

★太陽光、気象データアーカイブのページ

データを圧縮したものをここからダウンロードできます。今月のデータは毎日更新されています。

圧縮データのダウンロード

データについてのメモ

2003年2月6日から3月26日まで、UV-Bのデータは観測されていません。
2003年6月24日20時以降のデータは新しいバージョンの計測アプリケーションで収録されています。
2003年12月17日14:00～2004年1月13日15:10まで屋上工事に伴う休止で欠測

装置の不調や保守点検のために一部欠測の日もありますので、ご了承ください。欠測記録

★ データファイルの変換のためのプログラム

観測データファイルを処理して，必要なデータを抽出してある期間のデータを統合するためのプログラムを用意しています。役割に応じて2つの系統のプログラム cvs2das2.rb と monthdata.rb/monthdata2.rb とがあります。これらはいずれも Ruby で書かれたスクリプトです。

cvs2das2.rb

仕様と機能

機能：　同じディレクトリ内のすべての csv ファイルを調べて、１日のデータを一括してひとつの das ファイルに変換する。詳細は以下の通り。
- 異なる日付のデータが混在していても、自動的に判別、分類して処理する。
- データは10分ごとの平均値である
- データが欠落している場合には、空白を出力する。

使い方

適当なディレクトリの中で圧縮ファイルを解凍する。異なる日付のファイルを混在させておいてもよい。そのほうが一気に片付くでしょう。
そのディレクトリの中で、
```
> csv2das2.rb
```
と打って、リターンキーを押す。ruby　と入力する必要はありません。 ⇒ das ファイルが生成する。
次のように rm コマンドを使って不要な csv ファイルを消去する。
```
> rm *.csv
```

● プログラムの本体 csv2das2.rb
ダウンロード先は、Cygwin の場合， c:\cygwin\usr\local\bin\ の下にしてください。

monthdata.rb/monthdata2.rb

仕様と機能

1か月分の観測データファイルを読み込んで 1 つの cvs 形式ファイルに書き込む。2つのプログラムは出力データの項目が異なる。
monthdata.rb(太陽光データと全気象データ) UV-B, UV-A, 305-2800,395-2800,590-2800,695-2800,風向，風速，気圧，湿度，温度，降雨量
monthdata2.rb(太陽光のみ) UV-B, UV-A, 全エネルギー(305-2800nm)
- 年ごとのディレクトリ(2001,2002,...) の下で実行すると，その下のすべての月日の下にあるディレクトリを調べて，データを抽出する。
- 出力されるファイル名は，'YYYYMM.csv'
- データは1分ごとの直接観測値である。ただし観測時刻は，整理上毎分0秒からの1分となっているが，59秒までの端数を切り捨てたものである。
- データが欠落している場合には，ハイフン'-' で埋める。

使い方

ある年のアーカイブファイル(200101.tar.gz,200102.tar.gz,... など)をひとつのディレクトリに置く。
これらをすべて解凍する。解凍の方法は次の通り。
```
tar xvfz 200110.tar.gz など。
```
シェルがbash の場合には次のようにすれば一気に解凍できる。
```
for x in *.tar.gz; do tar xvfz $x; done
```
あるいはシェルが csh, tcsh の場合には，次のようにすれば一気に解凍できる。
```
foreach x  (*.tar.gz);tar xvfz $x;end
```
その年のディレクトリの中，またはその下の月のディレクトリに移動する。
```
cd 2001　または
cd 2001/10
```
次のように入力する。
```
monthdata.rb
```
すると各月のデータファイルが生成する。ただし数分かかる。

● プログラムの本体
monthdata.rb
monthdata2.rb
ダウンロード先は、パスの通ったディレクトリ (Cygwin の場合， c:\cygwin\usr\local\bin\ の下)にしてください。

メンテナンス記録

以下は古い記録です。現在更新中の内容は下記を参照してください。
最近のメンテナンス記録

データ欠失の問題について： これまで何度か、データのディスクへの書き込みが行われなくなるという事故が起きていました。たとえば2002年9月にも起きています。これについて調べた結果、原因と推測される状況が見つかりました。すでにその対策をとりましたので、今後はたぶん安定したデータ取得ができるだろうと思います。2002年10月16日

上述の対策にもかかわらず、その後もデータの欠失が数回起こりました。お詫びいたします。そこで2月6日にデータロガーの交換を行って様子を見ています。現在のところ、順調に走っているようですが今後の推移を見たいと思いますのでよろしくお願いします。2003年2月21日

残念ながらその後もデータの欠失が起こりました。調査の結果、装置とコンピュータの間のデータ転送速度の不整合が起きている可能性が見つかりました。この点について調整を行いましたので、また様子を見ることにしたいと思います。 2003年5月30日

またまた残念なことに、6月14日にデータのファイル書き出しが行われなくなってデータが欠落してしまいました。怒り心頭です。 2003年6月16日

ソフトメーカーに直接苦情を言って、計測用アプリケーションの新バージョンのものを送ってもらい、インストールしてみました。これでデータ欠落がなくなればよいのですが、ソフト屋さんはこのトラブルを知らなかったようで、対策が取れているわけではありません。しかし瓢箪から駒が出ることがあるかも知れませんので、とりあえずよい結果を期待したいと思います。 2003年6月24日

6月26日01:34 以降、7月10日午後4時20分頃まで、風向風速計の計測が停止していました。（雷の影響？）。気が付いて自力で復旧しました。もう業者には任せられません。 2003年7月10日

またもデータ書き込みエラーが発生してしまいました。ソフトメーカーの開発者と直接協議した結果、当初からのメモリ設定のオプション選択に間違いがあるということが判明しました（ここまで2年間もソフトの設定をいじって見逃してきた設置業者は何をしとるんじゃあ！激怒）。設定を変更したので、たぶんこれから、本当に大丈夫でしょう。 2003年7月14日

上述の変更以降は，データの取得は問題なくできるようになりました。

UV-B データの復元： UV-B 領域のデータは、分光型測定器(MS-131WP)でも取り込まれています。したがって、そのデータを基にして UV-B 観測装置で測定できなかった部分を構成することが可能です。そのためには、MS-131WP の４つのチャンネルデータから着目する領域のデータを抽出して、通常の時期に得られているUV-B観測装置のデータとの相関を調べることが必要です。