ボートレース競走結果 収集クローラ作成⑤ ~webページ作成~

概要 Webserver構築 ソースコード説明 localhostと127.0.0.1 概要 web上からデータベースのデータにアクセスするための簡単な動的webページを作成した。 言語は、php webserverには、apache を使用した。 クローラの全体像については、こちらを参照 全体の概…

ボートレース競走結果 収集クローラ作成④ ~データベースアクセス~

概要 なぜMySQLを選んだか データベース定義 データベースアクセス 手間取ったところ 概要 このブログでは、スクレイピングでとってきたデータをデータベースに登録する部分について説明する。 今回は、MySQLとRubyのmysqlライブラリを用いてアクセスした。 …

ボートレース競走結果 収集クローラ作成③ ~スクレイピング~

概要 Nokogiriのインストール スクレイピングで得るデータ ソースコード説明 Rubyコーディング規約について 概要 ここでは、RubyのNokogiriを用いたボートレース競走結果のスクレイピングについて説明する。 クローラの全体、開発環境について: Nokogiriのイ…

ボートレース競走結果 収集クローラ作成② ~webページ巡回~

概要 実際のコード解説 ソースコード 概要 このページでは、Anemoneを用いたwebページ巡回について説明する。 クローラの全体像については、こちらを参照 実際のコード解説 Anemone.crawlにクロールの起点となるURLを指定、dateはクロールする日付を入れるよ…

ボートレース競走結果 収集クローラ作成①

概要 はじめに 完成した物の概要 robots.txt 完成したやつの適当な画像 開発環境一覧 Ruby Rubyのいろんなライブラリ MySQL Apache php zsh 参考図書 概要 はじめに 前のブログで言った、 ボートレースの競走データを蓄積する仕組み がおよそ完成した。 ここ…

Nokogiriのインストールと練習

目次 Nokogiriのインストール 動作環境 消す作業 さあはじめよう Libxml2,Libxsltインストール Nokogiriインストール 確認 使ってみよう 0xC2A0の消えないスペース Nokogiriのインストール とりあえず入れてみないことにははじまらないということで、インス…

はじめてのものづくり

この夏作ろうと思ってる物 作ろうと思った理由 問題点 さてどうしよう 読んでくれてる人にお願い この夏作ろうと思ってる物 この夏 ボートレースの競走データを蓄積する仕組み を作ろうと思っている。 作ろうと思った理由 なぜこれを作ろうかと思ったかを簡…

自己紹介

自己紹介 このブログでかくこと 編入 技術的なことについて 自己紹介 まずはじめに自己紹介をしたいと思います。 1996年5月21日生まれ 山口県出身 小学校→中学校→高専→大学 好きな食べ物は、握り寿司、ヨーグルト、ラーメン、ういろう まあ、そんな感じです…

Markdown練習

自己紹介 経歴 経歴 11 33 22 33 あいうえお aa bb aa aa あ <p>こんにちは</p> 注釈1 http://nasust.hatenablog.com/entry/markdown-format#fn:1embed Left Center Right aaaaaaaaaaaaa bbaab ccc 注射↩