neozerocool

14もっと見る

90pt

インターネットウェブ制作

javascriptで質問です。以下のようなことが出来るのであれば手順を教えてください。できればサンプルをお願いします。関連したURLでもOKです。

1. Windowsのコマンドラインからファイルに記録されたjavascriptを実行する。
2. そのscriptでパラメータで渡されたURLにアクセスし、HTMLを取得する。
3. 取得したHTML内の要素に対してjquery(#IDなどをつかって）を使ってアクセスし文字列処理を行う。
4. 結果をサーバ側にデータをPOST
　（無理だと思うのですがローカルのファイルに直接出力できるとなおよろし）

端的にいうとjavascriptとjqueryライブラリ（または似たようなもの）をつかって
HTMLの要素にアクセスし、整形するようなスクレーピング？プログラムを
作成したいということです。
(DOMアクセスできるものがあるのですがjqueryのような扱いやすさがないので)
*windowsコマンドラインで動くものであればmshta.exeでなくともかまいません

回答の条件

1人5回まで

登録：2009/12/03 13:25:48
終了：2009/12/03 16:35:36

No.3

mattn103222009/12/03 15:50:02

50pt

id:hasegawayosukeの変態スクリプトを使うと出来ます。

hasegawayosuke-daisuki.js

// ユーティリティ関数
var _util = { cat : function(f){return (new ActiveXObject("Scripting.FileSystemObject")).OpenTextFile(f,1,false).ReadAll();} };
// 偽 window、偽document、グローバルオブジェクトの準備
(function(){
    if( typeof( document ) == "undefined" ){
        document = new ActiveXObject( "htmlfile" );
        document.write("<html></html>");
    }
    if( typeof( window     ) == "undefined" ) window = document.parentWindow;
    if( typeof( alert      ) == "undefined" ) //alert = window.alert; 
        alert = function(s){ return window.alert( s )};
    if( typeof( confirm       ) == "undefined" ) confirm = function(s){ return window.confirm(s) };
    if( typeof( location      ) == "undefined" ) location = window.location;
    if( typeof( navigator     ) == "undefined" ) navigator = window.navigator;
    if( typeof( clearInterval ) == "undefined" ) clearInterval = function(id){
        return window.clearInterval( id );
    };
    if( typeof( clearTimeout  ) == "undefined" ) clearTimeout = function(id){
        return window.clearTimeout(id);
    };
    if( typeof( setInterval   ) == "undefined" ) setInterval = function(code, interval){
        return window.setInterval(code, interval);
    }
    if( typeof( setTimeout    ) == "undefined" ) setTimeout = function(code, delay){
        return window.setTimeout(code, delay);
    }
})();

// jQueryの読み込み
eval( _util.cat( "jquery-1.3.2.js" ) );

var complete = 0;
$.ajax( {
	url : "http://q.hatena.ne.jp/1259814347",
    dataType : "text",
    type : "get",
    async : true, 
    success : function( text ){
		alert($('h1.question-header', $(text)).text());
        complete = 1;
    }
} );

for( var i = 0; i < 100; i++ ){
    WScript.Sleep( 30 );
    if( complete == 2 ) break;
}

コマンドプロンプトから

C:\>cscript hasegawayosuke-daisuki.js

とすると、このページの質問文がスクレイピングされメッセージボックスで表示されます。

※スクリプト名は気にしないで下さい。

仮想htmlファイルを作成してそこにjQueryを流し込んでいるということですよね。

これだとjQuery以外にも流し込めそうなんでいろいろと幅が広がりそうです。

んー　目からうろこでした。

ありがとうございました。まさしくドンピシャです。

2009/12/03 16:28:50

No.1

HALSPECIAL407862009/12/03 13:53:52

10pt

WSH(Windows Scripting Host)で実現できます。

言語は、VBScriptまたはJScriptです。

前者は拡張子がvbs、後者はjs

１．

コマンドラインからたたくには、

http://d.hatena.ne.jp/seiunsky/20081130/1228066957

cscript test.js 1 aiueo "引数"

のようにします。

２．

ＨＴＭＬを取得するには、

XMLHttpRequest オブジェクトを使用します。

http://webos-goodies.jp/archives/50548720.html

３．jquery の使用は難しいでしょう。

できないとは言い切れないので明言は避けます。

それと、HTMLのDOMをパースできるかどうか不明です。XMLなら可ですが。

４．

XMLHttpRequest オブジェクトでPOSTすればいいです。

また、WSHなので、ローカルのリソースにアクセスできるので、ファイルに保存も可能です。

ご回答ありがとうございます。

はやり　3.のHTML部分のDOMのパースが苦労する部分だと思っていたので

この部分をjqueryにこだわっているわけではないのですが、なんか直感的

にアクセスできるようなライブラリがあればいいのですが・・・

引き続き情報お待ちしております。

2009/12/03 14:06:37

No.2

HALSPECIAL407862009/12/03 14:12:39

15pt

Pure JavaScript HTML Parser

http://ejohn.org/blog/pure-javascript-html-parser/

こういうのでパースできそうです。

jqueryにこだわってないといいながらなんなんですが　上記感じだと使用する言語がjavascriptである必要がなくなってきてしまいますかね。

PHPや他の言語でもhtmlparserがあったりするのですが、どれもいまいちすっきりしなくて

あとのっかりですが

1.で呼び出すjsファイル内からprototypeやjqueryなど呼び出すことはできますでしょうか？

2009/12/03 15:21:32

No.4

はせがわよすけ402009/12/03 16:05:26

15pt

↑のid:mattnの回答のコードは http://d.hatena.ne.jp/hasegawayosuke/20090930/p1 にあります。

あと、jQuery や DOM の操作をせずに、HTML文字列をパースしたいというのであれば、jQueryの作者である John Resig 氏による Pure JavaScript HTML Parser もあります。

ありがとうございます。参考にします。

2009/12/03 16:31:27

コメントはまだありません

Twitterでのつぶやきはまだありません

人力検索はてな javascriptで質問です。以下のようなことが.. 2009-12-03 16:29:02
hogehoge - xpcshellでHTMLを取得してjQueryを使う 2009-12-07 20:35:39

xpcshellでHTMLを取得してjQueryを使う -javascriptで質問です。以下のようなことが出来るのであれば手順を教えてください。できればサンプルをお願いします。関連したURLでもOKです。 1. Windowsの