- 似たような話だけど別サイトにpostして値を取得する場合ってこれまたサーバー立てる必要ないん？
教えておまいら！ - サーバーが何か勉強してからこいや
- 場合による
- 頭蟻レベルだな
- >>4
猿以下だったの…やりたいこと:
phpを使ってwebapiにpostでデータ送る以上です！
- >>6
普通にphpローカルにインストールすりゃいいじゃん
それがわからなければxamppでも使ってろ - >>9
phpをローカルにインストールするってどゆこと？
こいつコンパイラいらないんじゃないのん…？ - >>14
インストールしなかったら誰がphp実行すんのよ - >>18
えじゃあサーバー立てる場合もphp用のコンパイラをサーバーに入れとかないといけないってことなん？ - serverlessで行けるだろ
- ローカルでphp動かすってこと？
- >>7
うん………
だめ…？ってかtomcatも入ってるからとりあえずサーバー立ててみたんだけどphpのコードがそのまま出力されちゃってワケワカメだったんだよね
- >>13
別にいいんじゃね？ - あとこの場合ってphp一枚で足りるよね？
jsでやろうかなって最初思ったんだけどjsって単体で発火させる方法あるんでしょうか - >>8
Nodeで簡単にできる - >>11
逆説的に言うと普通のjsでは単体で発火出来ないってこと？ - >>17
ほんとにJS単体なら無理
Puppeteerとか使えばちょっとセレクタわかるレベルでも扱えるしたぶんスクレイピング要素だと一番楽じゃないかな - >>25
マジか…！くそじゃん…
やっぱjsってクソだわ - >>17
今の時代単にJavaScriptと言ってもバージョン多過ぎて話にならないからな - aws lambdaでも使ってcronで発火すればいいよ
- 職場に行くのに定期券って買う必要があるかなって言ってるように聞こえる
別に毎回きっぷ買ってもいいですよ - それぐらいならgoogle apps scriptで出来るよ。
- >>16
gas全くわかんないからphpでやりたいなって思ってます！ - 態々PHPである必要もないけどな
node.jsなら、JavaScriptで出来るし、C++とかならライブラリやframeworkによるけど個人的にQtとかなら、レスポンスのdomをパース出来るからおすすめプログラムとしてスクレイピングを必要とするなら、サーバーは必要だけど、
スクレイピングした結果を様々なプログラムに反映させたいならサーバーが必要だったり、必要じゃなかったり
- スクレイピングを実地でやってないのにサーバーを立てるかどうか検討してるの？
それは順序が間違ってるよ - 頭いいのか悪いのかわからん
- なんでローカルで十分なのにお前らクラウド使わせようとさせてくるん
- PHPのがクソだぞ
- 言語とインタプリタ混同するレベルならスクレイピングする前にやることあるよ
- >>29
そういう初歩のことなんも知らないのん…
どうやって勉強すりゃいいのか分からんし勉強したところで次の日には全部抜けとる… - まずローカルでプログラムを動かしローカルサーバーを立てて見てからAWSなりなんなりが必要か検討しろ
- え結局結論としてサーバーは立てる必要ないってことだよね？
phpの場合は別途コンパイラをローカルに入れとく必要があって、jsの場合は自然発火できないからnode.jsかイベント作れってことね？
んでvipperとしてはgasとかその他簡単な言語でやれと！ - >>31
お前PHPしかまともに使えない奴だろ他の言語扱える者としてはサーバー(プログラム)を動かして態々サーバー上でPHPを実行させようとしてて無駄に感じるんだよ
node.jsなら、単体でフロントエンド・バックエンド・サーバーのプログラムを実装出来る
Java,C++,C#とかもライブラリやframework使えば単体でcurlなり扱って、domパース出来る
- curlで良いのでは？とも思った。
- >>32
curlってhtmlからデータ抽出できるの？
それはクローラでは - >>33
curlだってリクエストを投げてレスポンスを得るんだから、まぁ何だっていいと思うよ - >>36
スクレイピングというのはhtmlレスポンスからxpath的に要素を抽出してデータを集計するまでの過程を指すと思ったのでアスペツッコミを入れたのだ - ってかさそしたらけっきょくサーバーが必要になるシチュってなんなの？
ローカルサーバーってなんだよ - >>35
外部にサイト公開したいときとか - >>37
それってローカルってよぶん？ - >>40
ローカルは手元で開発するときに使うとか - >>35
名前のまんま、同じネットワーク上のリクエストを受けてレスポンスを返すDLANとかもローカルネットワーク上で、同じネットワークに繋いだ機器同士の通信出来る
- 何をしたいかちゃんと書けばちゃんと答えてやるよって人が多いから
ちゃんと書けば？ - >>38
17時ぐらいに天才エンジニアvipperが来ててさ
その人がプログラミングで5chに書き込む方法教えてくれたんだよ
是非実行したいなって思ったんだけど上手くいかなくて…やりたいことは5chに書き込む、ただそんだけ！
レスポンスはいらね！
ステータスだけ返ってくりゃいいよ！ - >>47
そのプログラムを自分のpcなりで実行すれば書き込みができる - >>47
実行したときのエラーを見て対処すれば良いだけなのでは…？どうせクッキーとかuser agentとかその周りだろ
専ブラ模倣するときはなんかあれをアレしなきゃ行けなかった気がするから分からんけど。 - >>51
httpかhttpsとかでもハマってそう - やべぇ自分がポンコツ過ぎてクソイライラしてきたわ
あとさjavaのサーブレット！
これも単体では動かせられないの？
httpRequestとhttpResponseって引数が必要なんだけどどっから持ってくればいいのか全くわかんね
一ミリもわかんね… - てかphperなのにweb分からんてどゆことだよ笑
- ああwordpress的なphperか(´･ω･`)
- 本業だがなにしたいのかさっぱりわからん
個人でやるならローカルでプログラム実行すればええんやないの？ - ちなみに第一言語はjavaだったよ
phpは半年前に一週間だけ使ったっきり
だからコピペしかできん！ってか画像貼りたいんだけど連投ですゆのせいで貼れん……
- pythonでいいだろ
ライブラリでスクレイピングは10行以内でできる
post処理もライブラリで三行出かける - (てか書き込みは最早スクレイピングじゃないやん)
- >>54
最近はcsrf対策とかされてるからスクレイピング的なのしなきゃな気がする - 順序立ててちゃんとやるならYahoo天気とか無難なところを取得するなど楽チンコースからやろうぜ
- ああ！連投ですゆうぜぇ！！！
4ね！！！！
クソカス4ね！！！
お前ら5分待ってくださいお願いしますなんでもします！ - クソ…！書き込めなかった…
- 手始めに気象庁から情報取得するプログラムでも作っとけ
まぁスクレイピングと言うか一定のルールに従ってURLパラメータ変えるだけなんだけど
Webスクレイピングって技術あるじゃん？あれってサーバー立てる必要ないよね？
VIP
コメント