新年あけましておめでとうございます。本年もよろしくお願いします。さて、年末年始は例年のごとく昨年と今年の技術トレンドを語るまとめ記事が流通しますが、どの記事でも取り上げているのが「IoT」ですね。昨年、私も僭越ながらSalesforce Developer User GroupのMeetupにてIoTについてスピーカさせていただきまして、その時に取り上げた内容はIoTの中でも「ビッグデータ処理」に絞ったものでした
Read More前回の記事で、総務省が試行運用しているオープンデータを紹介しましたが、今回は経済産業省がオープンデータを実践するために設置した試験サイトである「Open DATA METI」について紹介します。
http://datameti.go.jp/
Open DATA METIのサイトからファイルのダウンロードも可能ですが、CKAN（オープンソースのデータポータルプラットホーム）が採用されておりAPI経由のアクセスが可能です。
また総務省の「次世代統計利用システム」とは同じようにアカウント登録が用意されていますが、データアクセスのみ行う場合では不要です。
各ファイルまでのAPIが公開されております。ですが実際の数値などはAPI化されておらず、XLSやPDFとなっており利用するにはアナログな操作が必要となってしまいます。
また各データセットはCCライセンスとなっており利用するには注意が必要です。
現時点ではTim Berners-Leeが提唱する5STAR OPEN DATAでは★1,2といった段階です。
これらが★5となりエンジニアが柔軟にデータ活用できる将来に期待したいです。
Salesforce導入時に既存システムや旧システムからデータを移行することはよくあります。世の中には色々なツールが出回っていると思いますが、オープンソースで結構優れているOpenRefine（旧GoogleRefine）をご紹介します。ローカルで動くWebアプリケーションなので、どれだけ多くのデータ量をさばけるかはマシンスペックやマシンの状態次第ですが、数万件であれば問題なく動きます
Read More昨日、2013年6月10日10:00より総務省が統計データにおけるAPI機能の試行運用を開始しました。これで日本のオープンデータ施策も大きな1歩を踏み出しました（先週金曜日にテレビ東京のワールドビジネスサテライトでも特集されてましたね）
Read More