本ネタ

本を書きたいと願っているが、なかなか難しいもので遅々として進まない。今のネタはネットワークプログラミングと、スクレーピングである。スクレーピングというのはネットから情報をかき集めるものである。

ネットワークプログラミング

Javaのネットワークプログラミング本ってありそうでないなーと思っていたら、あった。2007年出版だからかなり長いこと見逃していたことになる。内容もnioについて触れているし、まあいい本だと思う。ただし応用がないので差別化は図れるかな。

スクレーピング

こっちが本題。細かい技術の下書きは別のブログに書くことにして、ざっくり説明することにする。

最終的な目標は自動的に株取引をしていて寝ているだけで大金持ちになれるというものである。それはあまりに遠大な計画なので手近な話から。まず株価のデータを刻々と取らないといけない。以前は携帯サイトにアクセスするのが簡単かと思ったが、頻繁にリロードしていると証券会社から叱られるらしい。マウス連打程度の間隔（1秒に1回とか）に押さえないといけない。そうすると1分間に取得できるのは60銘柄だけになり、逆に言うと60銘柄を取得すると1銘柄の更新間隔は1分おきになってしまう。これはリアルタイムにはほど遠い。

そういうわけで、いくつかの証券会社を見て回ったが、どうもSBI証券がよさそうな感じがする。

このようなリストを簡単に作れる点でメリットがある。どうも50銘柄まで一覧にできるようだ。これを30秒ごとにリロード（このくらいなら迷惑にならんでしょう、マウス連打する人よりはよほど転送量は少ないし、また画像とか余分なものを読まない）してゴリゴリ切り出す。

今のところロジックとプレゼンテーションが分離されていないとかごちゃごちゃになっているけど、とりあえずこういうことができる。そこで、本番では得たデータをデータベースにどんどん放り込むプログラムにしたい。あとはRという統計処理のソフト（実に検索しにくい名前だと思う）で時系列分析をして、またデータベースに放り込み、プレゼンテーション部分を作る。

評価関数の自動生成

ところで、将棋ソフトのBonanzaというのがある。突如現れて非常に強かったことで話題になった。プロがブログで「プロが平手で餌食になった」とか「奨励会有段者クラスがコロコロ負けているらしい」とか「奨励会の三段くらい」だそうだ。女流は２級からなので、女流ではBonanzaには勝てないかも知れない（女流は奨励会で４段になった人はいないそうだ）。

Bonanzaの画期的なところはボナンザメソッドという棋譜から評価関数を自動生成するところにあるそうだ。逆に言うと今までのソフトはプログラマの棋力が評価関数に影響して、将棋が強くプログラミングもできる人が勝っていたらしい。

で、このテーマはいま結構流行っているらしく、是非盛り込みたいと思っている点の一つである。つづく。

Leave a Reply

Name (required)

Mail (will not be published) (required)

Website

新しいコメントをメールで通知

新しい投稿をメールで受け取る

最近の投稿

• クレジットカード会社に感心した話
• サポーターを探しています
• コメントお返事 5/15
• ニューヨーク入り
• 『君が衛生兵（ナース）で歩兵が俺で』

最近のコメント

• サポーターを探しています に onaneetX.Q より
• サポーターを探しています に yaorozuonline より
• 謹賀新年 〜今年の抱負〜 に onaneetX.Q より
• 謹賀新年 〜今年の抱負〜 に Oswald より
• 有給休暇は当然の権利です に まるちゃん より

アーカイブ

• 2012年5月
• 2012年4月
• 2012年3月
• 2012年2月
• 2012年1月
• 2011年12月
• 2011年11月
• 2011年10月
• 2011年9月
• 2011年8月
• 2011年7月
• 2011年6月
• 2011年5月
• 2011年4月
• 2011年3月
• 2011年2月
• 2011年1月
• 2010年12月
• 2010年11月
• 2010年10月
• 2010年9月
• 2010年8月
• 2010年7月
• 2010年6月
• 2010年5月
• 2010年4月
• 2010年3月
• 2010年2月
• 2010年1月
• 2009年12月
• 2009年11月
• 2009年10月
• 2009年9月
• 2009年8月
• 2009年7月
• 2009年6月
• 2009年5月
• 2009年4月
• 2009年3月
• 2009年2月
• 2009年1月
• 2008年12月
• 2008年11月
• 2008年10月
• 2008年9月

カテゴリー

• Gallery
• Google Code Jam
• iPhone
• Onaneet & Company
• Silverlight
• Winny
• お洒落
• お買い物
• ばいお
• イスタンブール
• エリーゼレンタカー
• クレジットカード
• ゲーム
• コメント
• シリコンバレー就職
• シンガポール
• タイ
• ニュース
• ニート
• ニート脱出
• パリ
• フランス
• ブランド
• プログラミング
• リア充至上主義
• ワーキングプア問題
• 中国語
• 企業
• 写真
• 労働
• 勉強
• 台湾
• 喪
• 国1
• 執筆・出版
• 大学
• 女優
• 宇宙
• 就職活動
• 恋愛
• 恋愛家庭教師
• 情報技術
• 旅行
• 映画
• 未分類
• 楽器ファンド
• 水耕栽培
• 海外
• 煩悩
• 画像処理
• 留学
• 社畜
• 科学
• 競取り
• 経済
• 言語
• 読書日記
• 起業
• 趣味
• 輸入代行
• 雑記

メタ情報

• ログイン
• 投稿の RSS
• コメントの RSS
• WordPress.org

Tumblr

• bbsmaster: 安藤遥 2012年4月27日
  bbsmaster: 安藤遥 […]
• NVR500 PPTP設定 2012年4月8日
  PPTPでVPNを張ってDNSの通知をする。とりあえず ip route default gateway pp 1 pp select 1 pp always-on on pp enable 1 pp select anonymous pp bind tunnel1-tunnel2 pp auth username ID pass pp auth username ID2 PASS2 ppp ipcp ipaddress on ppp ipcp msext on pp enable anonymous tunnel select 1 tunnel encapsulation pptp pptp tunnel disconnect time off tunnel enable 1 tunnel select 2 […]
• " 285 : 216  : 2011/02/17(木) 22:55:06 ID:tvQNovvz [7/7回発言] ..." 2012年4月6日
  “ 285 : 216  : 2011/02/17(木) 22:55:06 ID:tvQNovvz [7/7回発言] 相談に乗ってくれた方々本当にありがとうございます。 結論から言いますとリモートデスクトップで接続成功しました。 全部自分がアホなだけでした。 同じような人がいないとは思いますが経緯を報告します。 自分の環境はWin7x64だった為、Boncaslinkの64bit版を入れていたのが 原因でした。 最初TVTestの64bit版で再設定を行って設定したところ、Bancasproxyが 赤色に変わり使用中のアプリのリストにTVTestが表示されました。 もしやと思い、32bit版で全てのアプリ(TVTest、関係とBonCaslink)を統一 して、設定したところ正常に作動しました。 テストとして他 […]
• 大学生に勉強させる？大学の時間とは何か 2012年3月20日
  大学生に勉強させる？大学の時間とは何か: 「勉強をしない」学生に勉強をさせるべく、国が重い腰を上げたのだという。繰り返すが、けっこうなことだ。ならば、国には、「シュウカツ」という名目のもとに大学生の時間を大幅に奪う企業に対して根本的な対策も取ってもらいたい。 人々は故意に目をそむけている。いわゆる有力大学の学生よりも、そうでない大学の学生のほうが、「三流大学」の学生のほうが、「シュウカツ」においてより多くの時間を取られ、より多くのエネルギーを費やしながら、より多く落とされ続け、より多く踏みつけられ続けているという事実に。 日本の問題の何割かは《醜活》に起因あるいは関係しているとすら思う。《醜活》があるから採用の混乱が起こるし、それゆえ企業の活力が落ちるし、その結果納税額は下がるわ、企業の業績が悪いから不景気にな […]
• ウホッ！良い情報！！ 2012年3月20日
  ウホッ！良い情報！！: 米・英・加についてですが、（これは個人的なバイアスがかかりますが　汗）その３カ国のなかでもしbeyond_NEETさんの目的がその国への移民・永住ということでしたら、一番達成しやすいのは加であると思います。 移民法が整備されており、公立（もしくは政府公認）の大学・専門学校で２年以上の課程を修了した留学生は、就職先が決まっていようと無かろうと最長で３年の就労ビザを取得でき、カナダ国内で自由に働けます。（公務員や役所仕事はさすがにカナダ永住者か国籍保持者を優先するとは思いますが） その後、カナダ政府が指定する職種内容で最低一年間就労すると永住権申請の資格が与えられます。 他にも有益な情報多数。 […]
• 雇用推計：若者ミスマッチ鮮明　「即戦力」重視、構造的に 2012年3月20日
  雇用推計：若者ミスマッチ鮮明　「即戦力」重視、構造的に: 若者が即戦力なわけないじゃん。若者で即戦力になり得るとすれば、若さを活用するしかない。美人を雇用して営業させるとか（枕営業）、そこまでいかないにせよどぶ板営業に耐えられるようなノリのいいリア充でも雇うしかない。若さは魅力だから、くたびれたおっさんよりもかわいい子から買いたいと考える可能性がある。 一流企業の営業は比較的楽である。なぜならほっといても商品やサービスは売れるからだ。だから、二流以下の会社に入ると営業力で会社を維持しているようなところが結構ある。インターンした某ソフト会社も外に出て率直に意見を求めたら、社員が言うほどその会社の製品は優れていないことがわかった。つまり、あの会社の業績は技術力ではなく営業力で成り立っていた。 ほとんどの会社は製品や […]
• 羽田→台北松山→台北桃園→ニューヨークのOPEN航空券。 2012年3月19日
  羽田→台北松山→台北桃園→ニューヨークのOPEN航空券。 […]
• "　多分こういう食事がセブの一般の人の食事なんだと思う。味はまあまあ美味しい。食堂自体は不衛生ってわけではないけれど、建物はボロくてそんなに綺麗じゃないし、椅子や机も安っぽいプラスチック製でガタガタする。..." 2012年3月19日
  “　多分こういう食事がセブの一般の人の食事なんだと思う。味はまあまあ美味しい。食堂自体は不衛生ってわけではないけれど、建物はボロくてそんなに綺麗じゃないし、椅子や机も安っぽいプラスチック製でガタガタする。でもそういうアジアの安食堂の雰囲気が僕は好きなので落ち着く。 　対比して思うのは日本のことだ。日本でお金のあんまりない人が食べる安食堂といえば、松屋とか吉野家とかの牛丼屋チェーンが一般的になっていて、280円ぐらいの安い値段でそこそこの味のものが腹いっぱい食べられるのだけど、あの店舗の小綺麗さはなんなんだろう。貧乏人向けなのにピカピカでシステマチックにできている。よく考えてみると、日本では小汚いけれどその代わりに安く食べられる店というのがあんまりない（全くなくはないけどチェーン店の牛丼のほうが安い）。” - 確 […]
• "突然ですが、問題です。 自己紹介の言葉として、適切なのはどちらでしょう？ ○○大学経済学部に在籍（ア：させていただいております／イ：しております）。 上記の問題は、数日前の読売新聞の朝刊に掲載され..." 2012年3月19日
  “突然ですが、問題です。 自己紹介の言葉として、適切なのはどちらでしょう？ ○○大学経済学部に在籍（ア：させていただいております／イ：しております）。 上記の問題は、数日前の読売新聞の朝刊に掲載されていた、就職活動をしている学生向けの「日本語教室」という記事より（日本語検定委員会協力）抜粋しました。敬語として正しいのは、ア、イのどちらでしょうか？　正解は以下から。 正解は「イ：しております」。この記事によると、「させていただく」という言葉を使うためには、以下の3点を満たしている必要があるそうです。 自分のことであること 相手の許可を得て行われていること それに対して感謝するという事実や気持ちがあること” - 敬語は誰に対して使っているかを意識すればOKでそう難しいものではない。「○○大学経済学部に在籍させていた […]
• 世界の生活費 2012年3月19日
  元記事は比較的「だそうです」が多くてあまり役には立たない印象。 とりあえず海外の生活費について。台湾は家賃数千元からある。食費は一食60元〜100元くらい。1台湾元=2.6円くらいだった。贅沢をすれば青天井だけど。台湾の新卒者の給料が月給で2万元〜6万元くらいだから月2万元あれば生きていけるのだろう。自分の感覚だと2万元はちょっときつい。家賃6000元くらいの部屋で食費が1万元くらいで少し余裕がある程度か。携帯代とか交通費も必要なのでカツカツである。台湾の安い部屋は台所がついていないところが多く自炊は難しい。 中国は一食10元前後で拉面とか牛肉烩饭がある。ちょっと洒落たところだと30元くらいか。南京のアパートだと家賃数百元くらい。たしか上海の平均賃金が台北を超えたそうだ。たぶん今だと平均賃金が日本円で7万円くら […]

Facebook