オフラインで見るオートパイロットソフトを作りたいの
ですが、何をしていいのやら、手がかりすら分かりません。
オンラインソフト使えば？といわれるでしょうか、後学の為
どうしても、どうしても、ど～しても自作で作りたいのです。
よきアドバイスを宜しくお願いします。
ちなみに言語はCがいいです。
というよりコンパイラはそれしかないです。
レベルは文法が少しわかる程度。
この程度でも、いっぱしのプログラムが出来るようになる事を
証明したいのです。
ほんとにほんとにアドバイスお願いします。
自動巡回ソフトがあった記憶があります。
どなたかよい情報をお待ちしています。
私も現在探しています。
WWWC Ver 1.0.1 (2001/11/28)
http://www.nakka.com/wwwc/
有難う御座います。
本当に超ドシロウトなんて、早速ダウンしてみます。
禿同。度素人ならwgetの周りをサポートする
スクリプトでも書いたほうがいいんじゃないのか？
ソースあげてあげれば？
wgetってこれでしょうか？でもUNIXですが・・・
WIN版ってあるんでしょうか？
やっぱりアプリ開発はUNIXのほうがやりやすい
んでしょうか？でもUNIXを走らせるパソコンがないんですよ。
http://www.vector.co.jp/soft/solaris/sources/se045585.html
ほい。
http://space.tin.it/computer/hherold/
あるいは Cygwin という Windowds 上で UNIX 環境を構築するソフトウェアもある。
http://sources.redhat.com/cygwin/
wget と Perl を組み合わせれば半日くらいで作れると思うよ。
有難うございます。
ちょっと忙しくなったので、少しだけ家を空けます。
＞wget と Perl を組み合わせれば半日くらいで作れると思うよ。
私の場合、一年はかかると思います。
ほんと大昔にCの本を1冊読んだ程度のレベルです。
Windows だとライブラリ少ないし。
お勧めは、
C++ 覚えて BCC32 で IE コンポーネント使うか、
Delphi 覚えて Indy 使うか。
＞というよりコンパイラはそれしかないです。
で、LSI-C試食版という罠。
適当に選んで読んでくれ。
これからはどの言語？
http://pc.2ch.net/test/read.cgi?bbs=tech&key=980326138
現在ある言語の中でどれが最高？
http://pc.2ch.net/test/read.cgi?bbs=tech&key=989508360
趣味でプログラムをするにはどの言語がいいかな？
http://pc.2ch.net/test/read.cgi?bbs=tech&key=994089166
実務に役立つプログラミング言語は？
http://pc.2ch.net/test/read.cgi?bbs=tech&key=997301916
固ハンかトリップを使ってくれ（藁
うむ。法則に反するからな(藁
プログラム自体は参考にならんかもしれんが、スレの育て方として、
参考になるかも。
貴様ら！ブロック崩し作るので見てください
http://pc.2ch.net/test/read.cgi/tech/1004855513/l50
とほほ・・・
GNU wget は、小規模なダウンロードなら問題ありませんが、
大規模ダウンロード (検索エンジン用ファイル収集)で使うと、
誤動作しまくりです。
とりあえず、プログラム作成することが目的であれば、
Active Perl をインストールして、
(1) LWP::UserAgent クラスで、HTMLファイルを取り寄せて、
(2) HTML::TreeBuilder クラスで、HTMLファイルをパース処理して
リンクを抽出
(3) 各リンクについて、(1)へループ処理
というのを書いては、いかがでしょうーか？
俺のIＰアドレスだ、おめーらの技量じゃハックデきね～だろうけどｗ
やめろ、ケブ厨。
どうでもいいが、自動巡回とどう関係が？
スレ立てたものの、まだ何もやってない（泣
必ずやるんで見捨てないでください。
といいつつ、やらなきゃいけないことが帰ってからも
沢山あるんで、一時間後ぐらいに戻ります。
それ改造して使ってる。有名になって露骨に制限されるの
嫌だから所在教えないけど。
やっぱこういうのはスクリプト系が便利だよ。
あと、ページによって各ツールには向き不向きがあるから、
おれは２，３種類組み合わせて使ってる。
一時間でも勉強するつもりでしたが、雑用を済ませたら
こんな時間になってしまいました。
明日こそ必ず始めたいです。。。
もう寝ます。
Λ＿Λ！ ／￣￣￣￣￣￣￣
＿＿（ ；´Д｀)＿＿＜ ゆ、夢かっ…！
| 〃( つ つ | ＼＿＿＿＿＿＿＿
|＼ ⌒⌒⌒⌒⌒⌒＼
| ＼ ＼
＼ ｜⌒⌒⌒⌒⌒⌒｜
＼ |＿＿＿＿＿＿|
HTMLを解析して再帰的にファイルを拾うところとか、
ローカルで閲覧できるようにファイルのパスを相対パスに書きかえるとか。
これを作れるようになったらかなりのスキルの持ち主になれるよ！
ただし、途中で投げると>>29になるがな。
| ageときますね |
|＿＿＿＿＿＿＿＿＿＿＿＿|
||
||_ ＿＿＿
し＼／´∀｀;:::＼
＼ /::::::::::::|
| /.:::::|:::::::|
｜／::::::::|::::::::|
（ ´Д｀）
/⌒ ヽ
/ / ﾉヽ ＿ー￣＿￣）', ・ ∴.' ， ．. ∧＿∧ ∴.'.' ， ．
( /ヽ | ） --＿- ― ＝￣ ￣`:, .∴ ' ((( #)ﾟДﾟ) .∴ '
＼ / _, -''￣ ＝ ＿＿――＝', ・,' .ｒ⌒> _／ ／ ・,' , ・,‘
（ _~"" -- ＿-― ￣＝＿ )":" .' | ｙ'⌒ >>1⌒i .' . ’
| /,,, ＿― ￣＿＝＿ ` )),∴. ). | ／ ノ ｜ ∴.'∴.'
| / / ―＝ ＿ )￣＝＿) ＿), ー' ／´ヾ_ﾉ
( ) ) ＿ ＿ )＝ ＿) ,.／ , ノ '
| | / ＝ ＿) ／ ／ ／ , ・,‘
| | |. ／ ／ ,' , ・,‘
/ |＼ ＼ ／ ／| |
∠／ ￣ !､＿／ / ）
|_／
なんてぇナニだ･･･。
∧＿∧ | | ／￣￣￣￣￣￣￣￣￣￣
（ ´,,,,,,｀）／/ ＜ 裸一貫から再建を目指す!!!
／ / ＼＿＿＿＿＿＿＿＿＿＿
/ /~| ﾟ ﾟ /
| | l |
＼￣∪￣|￣￣ |￣ ＼
||＼ | ㊚ | ＼
||＼||￣|￣|~|￣|￣￣||
|| ||￣|￣|~|￣|￣￣||
.|| （＿| |＿）. ||
1が作らないようなので、
勝手にPerlで始めてみました。
よかったらコメントください。
http://ice.prohosting.com/runway
perl知らない。CかC++でかけないの？
http://www.mars.dti.ne.jp/~torao/program/socket/http-example.html
「かなりのスキル」って事は無いな。
Cでもいいですけれど、HTTPとかHTMLむけの手ごろな
ライブラリがあればやってみます。厳密な文法の
ない（あっても従っていない）テキストのパーサーを
作るのことにあまり興味がないので、このへんは
自分で書くのは面倒くさいです。タグがへんなHTMLでも
ブラウザーがちゃんと表示できるのはチェックをすごく
甘くしているか、適当にタグを補っているからだと思います。
これ自体はなんの変哲も無いもんだけど、自動巡回プログラムとやらになると
「かなりのスキル」になるのかねぇ・・・？
libghttp libxml2
ム技板になんか書いたっけなあ？どっちにしても空気固定には間違いないよ。
>>47 >>50
いまの>>1からの状態からすればそれなりにスキルがつくよ、ってことでした。
おおげさすぎてすんません。
通信部分よりもパーサー部分はちょっと面倒なんじゃないかな。
thanks、googleで見てみます。
>>52
よく考えたらHTML内には<>は出てこないので、<とか>とかになって
いるので、<>をトークンにサーチするだけで簡単にできますね。
それも<a>と<img>だけしか見ないので、構文解析と言えるほどの
物もないですし。
Perlの勉強も兼ねているので、まずはPerl版を
完成させてみたいです。
まともに見えるようにするだけでも A#HREF や IMG#SRC だけじゃ足りなくて
BODY#BACKGROUND, FRAME#SRC, BASE#HREF, LINK#HREF,
OBJECT#DATA, OBJECT#CODEBASE, EMBED#SRC, APPLET#CODEBASE,
APPLET#ARCHIVE, SCRIPT#SRC, META#(HTTP-EQUIV="Refresh" の時の CONENT の url 値)
なんかが必要だし、クリックで動かそうと思ったら AREA#HREF, FORM#ACTION なんかも
必要。JavaScript やスタイルシート中の URL はいじれないし、Cookie 実装しないと
取れないページがあったり、HTTP/0.9 で返してくる阿保 CGI があったり、https や
gopher とか抜かすページがあったり、URL の一部を全角で書いているパR屋が
あったりとそりゃぁもう (以下略)
まぁそこまでページの完全性にこだわらなければ良いのかもしれない。IE にページ保存
機能があるから、もしかしたら VC++ でもそれを呼び出せるかもしれない。Proxy とか
考えなくても良くなるし。
baseタグって知ってる?
mhtmlアーカイブって知ってる？
<BASE> タグ使ってもネットに繋がってなければフレームや画像、抜けるじゃん。
何のために自動巡回すんのよ。
age
結局、自動巡回ってリンクを辿る方向しかないのでしょうか？
Irvi○eでは構造的に取得してませんでしたっけ？
そこから抜き取るとリンクを辿る事は一切しなくても良いような気が・・・
上記ソフトは実際どのようにされてるのでしょうか？
誰かご存知ないでしょうか？
そのソフトの事は知らんが、普通に考えて、
リンクをたどらなければ、どういうソースがあるか分からないのでは？
ある決まったページの構造の規格があってと言うのなら、
リンクをたどらなくても分かるけど、そんな規格なんて聞いたこと無いし。
と言う事はIrvi○e（Ir○aの後継版）もリンクを辿ってるのか・・・
FTPで「List」って命令があるからてっきりそれかと思ってたYo
やっぱりそうか。FF○TPでも参考にしようか・・・
プログラム板で、かちゅ～用閲覧時間規制ソフトを作ってもらうってのが
いいと思う。例えば、1日の閲覧時間30分以内に出来たりするソフト。
マジで誰か作って暮れ、頼む。
そうすれば、転送量が減るから運営側も助かると思うし。
kage に組み込めばいいんでないの。
単に他の2chブラウザに流れるか、
普通のブラウザに戻るかするだけだろうけど。
// | |
// | |
| | //
| | ∧ ∧ // ／￣￣
| |( ﾟДﾟ)// ＜ AGE!!
＼ | ＼＿＿
| |
| /
/ /
| /
∫| | |
| || |
| / | |
// | |
// | |
// | |
U U
｜も.｜
｜う |
│来│
│ね│
│え .|
│よ .|
ﾊﾞｶ ｺﾞﾙｧ │ !!.│
└─┤ ﾌﾟﾝﾌﾟﾝ
ヽ(`Д´)ﾉ ヽ(`Д´)ﾉ (`Д´)ﾉ （ `Д）
|￣￣￣|─|￣￣￣|─|￣￣￣|─□（ ヽ┐U
～ ～ ￣◎￣ .￣◎￣ ￣◎￣ ◎－>┘◎
ヽ(`Д´)ﾉ ﾓｳｺﾈｴﾖ!!
（ ） ｳﾜｧｧﾝ!!
/ ヽ
く ￣i
〉 |
/ |
／＼ / ノ
／_,,ィ、.＼ | |
＼ ｀ヽ,, -‐､ ,ノ |
＼／ ／⌒'' ｰ-' |
ﾟ 。 / /ー ､,,_ ﾉ
゜ ,f l∧＿∧フ . /
／ ,,（ ＿＿ ） >>1 /
,, - 、 / ヽ,,＿__,, 、＿＿ノ
,-､/'l, ＼ノ ／ ＼,,_＿,,ノ ヒィー
ヽ,_,/ ＼ ／ ∨ ∨
ヽ,, ,ノ 。ﾟ ・
,,''￣ﾉ
_／ ／
ヽ ノ
::::::::::::::::::::::::::::::::::::
::::::::::::::::::::::::::::::::::::::::::::::::::::::::::
（ ⌒/
∪ / / ヽ>>33
/ ﾉ
∪∪
∧ ∧,～
( （⌒￣ `ヽ ＿
＼ ＼ `ー'"´, -'⌒ヽ
/∠＿,ノ _/_
/（ ノ ヽ､＿/´ ＼
､（ 'ﾉ（ く `ヽ､
／` ＼＿＿＿_>＼＿＿_ノ
／ /＿_〉 `､＿_>
／ ￣￣￣￣￣￣￣￣￣
なんてことを言うのだ貴様！！
今日もネタもないのにageてやるからな！
￣￣∨￣￣￣￣￣￣￣￣￣￣￣￣￣￣￣
∧＿∧ ∧＿∧ age
（・∀・∩）（∩・∀・） age
（つ 丿 （ ⊂） age
（ ヽノ ヽ/ ） age
し（＿） （＿）Ｊ
俺はVBしか使えん房なのであんま口出しできないんですけど。
自動巡回っていうか、前VBでメールアドレス収集ソフト作ったんですよ（ｗ
それだとめちゃくちゃ簡単だったです。（当たり前だけど）
あるページのソース見てまずはﾒｱﾄﾞを検出。
さらにリンク先のアドレスを全てどっかに代入
そのリンク先のページを順に開いて、、、
とあとは階層分同じ作業しました。
| >>77通報しますた！
＼
￣∨￣￣￣￣￣￣
∧＿∧ ／￣￣￣￣￣￣￣￣￣￣￣￣
∧＿∧ （ ´Д｀） ＜ 通報しますた！
（ ´Д｀ ） ／⌒ ⌒ヽ ＼＿＿＿＿＿＿＿＿＿＿＿＿
／, / ／_／| へ ＼
(ぃ９ | （ぃ９ ./ / ＼ ＼.∧＿∧ ／￣￣￣￣￣￣￣
/ /、 / ./ ヽ （ ´Д｀ ）＜ 通報しますた！
/ ∧_二つ （ / ∪ , / ＼＿＿＿＿＿＿＿
/ / ＼ .＼＼ (ぃ９ |
/ ＼ ＼ .＼＼ / / ,、
/ /~＼ ＼ > ） ） ./ ∧_二∃
/ / > ） / ／／ ./ ￣￣ ヽ
／ ノ / ／ / / / .＿/ /~￣￣/ ／
/ ／ . / ./. / / / )⌒ ＿ ノ / ./ (ﾟдﾟ) < ﾂｳﾎｳｼﾏｽﾀ!
/ ./ （ ヽ､ （ ヽ ヽ | / （ ヽ､ ﾟ( )－
（ _) ＼__つ ＼__つ).し ＼__つ ./ >
ところでどうやって作ったんだい？
全ｺｰﾄﾞ公開してほしいのだが。
| | | |
｜ー ｜ l ー- l
/⌒ヽ | | l l
l l | ｜ | 0 |
| l | ｰ- | l⌒) - l
| -‐| | | | 丿 | /⌒ヽ
| | | | |ノ l | ヽ
l _! | !__,! ‐ 一 | l ヽ、
/⌒ヽ l ‐ ＼ |, ﾉ⌒) () l 〉-‐ l
l〉 ）ヽ、 ヽノ (ノＯ (ﾉ (つ ヽ、 | ﾉ） |
/ 人 ヽ、 ＿＿ (⌒) __ ヽノ （ノ |
l ヽ、＼, - '"-ゞ'-' ）丿'"ゞ'-'ノ/ o l
ヽ ノ ＼,/ / (ノ （) ヽ l
＼ / ( ,-､ ,:‐､ (⌒ヽ |
ヽ、 ／ ／ l しノ |
ヽ、 ／ __,-'ﾆニニヽ l
ヽ、 ヾニ二ン" /
ヽ、 | /
ヽ l /
1は既にこのスレから逃亡したと見抜ける人でないと
（こすっていた手で発射された液体を受け止めるのは）難しい。
／´ ￣｀ヽ,
/ 〃 _,ｧ---‐一ﾍヽ
i ／´ ﾘ}
| 〉. -‐ '''ｰ {!
| | ‐ｰ くー |
ﾔヽﾘ ´ﾟ ,ｒ "_,,>､ ﾟ'｝
ヽ_｣ ト‐＝‐ｧ' !
ゝ i、 ` ｀二´' 丿
ｒ|､｀ '' ー--‐ｆ´
_／ | ＼ ／|＼_
/￣/ | ／｀又´＼| | ￣＼
皇太子様がこのスレに興味を持ったようです。
「￣￣了
l h「￢丨
／￣￣＼＿_,ト、Д/＿＿＿＿ ハイハイどいてどいて！
／ /￣Yi. / jﾃ、 f￣ヨ
/ .／:::' / / /.i l iー――‐u'￣
./ ／ー'' / / / / l l
i' ／ ｌ ヽ../ ﾚ' l l
. / _/ ＼ !、 lヽ＿＿＿_」 l
. !、/ ＼. ＼ ＼l ト./
ﾄ、＿_＼/ﾄ、/ﾄ、 y l
l ￣( ）y ） /l i
l l Y''/ー' / .l l
!、 l l./ / l l
/ / l/ ,/ i' l
/_ ./l l｀ー‐〈 ﾄ.＿_」
L_｀`^yﾄ.＿」、ー" `ヽ＿」
`ー' `ヽ＿」
sageてても見逃さない。
かおにみえる
あなた危険よ。
通信関係（とHTML解析）のライブラリがそれなりに揃ったC言語です。
「オフラインで見る」部分は用意されているので、巡回部分だけ書けばおっけー。
| 笑う所ですよ！！ |
|＿＿＿＿＿＿＿＿＿|
∧＿∧ ||
（ ´∀｀）||
/ つ つ||
>> 75が一番の近道だよ。
TOP カテ一覧 スレ一覧 2ch元 削除依頼 ▲
【SL4】Windows Phone 7 ｱﾌﾟﾘ開発ｽﾚ Part3【XNA】 (415)
アプリケーションの国際化対応の話題スレ (234)
【コメント】doxygen【コンソメ】 (489)
【RAD統合環境】 Qt 総合スレ 13 【Win/Mac/Linux】 (199)
おまいら最強の麻雀プログラムしてみろよ Part5 (524)
ネットワークプログラミング相談室 Port27 (846)
--log9.info------------------
【三菱】FTO vol.41 (345)
【日産】JUKE／ジューク 30台目【カザーナ】 (271)
【HONDA】ホンダ初代(GD)フィット Part118【Fit】 (439)
【日産】DUALIS part46【デュアリス】 (181)
【TOYOTA】カローラフィールダーPart52【FIELDER】 (854)
■■■レクサス LEXUS RX350/450h 38■■■ (547)
【NISSAN】日産GT-R part163【CBA・DBA-R35】 (967)
【TOYOTA】20系ウィッシュ Part14【WISH】 (920)
【VW】ゴルフ２専用 10万キロオーバー６【GOLF】 (494)
【VW】【キチガイ隔離】フォルクスワーゲン・ポロ (399)
【E83】 BMW X3 part7 【F25】 (202)
【LOTUS】ヒストリックロータス Part2【Historic】 (310)
【日産】NV200バネット Part8【三菱デリカD:3】 (114)
【F10/F11】BMW 5 Series Part14【現行】 (642)
【ベンツ】Gクラスゲレンデヴァーゲン Part3【AMG】 (729)
メルセデス・ベンツSLKクラス Part14 (153)
--log55.com------------------
みんなのドメインってどうよ?
鯖の疑問はワシに質問せい！
■■ 国内クラウド/VPSスレ 12 ■■
【兄】西院ネットワークス part11【妹】
もの凄い勢いで誰かが有料ﾚﾝﾀﾙｻｰﾊﾞｰを探すスレ 15
Netowlってどうよ？
一生払いでクラウド生活CloudAtCost Final
k1.bz(志賀慶一氏)を語るスレ3
