scrapyを使っていたけど なーかなかなかなか、これが難しいのなんの。 そして、フレームワークなのに ドキュメントが全部英語！！！（；ω；） ※英語読めない、隊長が悪いけど どうしても処理の中で、scrapyが取得したURLリンクを使って 別ページを同時処理に…

またハマった。。。 そろそろハマったシリーズ作ろうかな？ 今度は正規表現です。 正規表現で、置換や文字列削除などで オススメの言語はPerlです。 なんて言ったって、書きやすいこの上無し。 他の言語はコンパイルだったり、手続きが多いのでちっと面倒く…

AM 08:00 さーて、頼まれてたクローラー、サクサクつーくろ （ ・ω・）ノ オー PM 01:00 ふーむ、あらかたscrapyで用意することできたわ 単純なクローラーだったらサクッて作れるね （ ＾ω＾）おっおっおつ PM 01:15 でも、ちっと連続でクローリングするbot…

前回の記事からの続き。セレクターを指定の仕方はチュートリアルに乗っています。

急遽クローラーが必要なことに 何でする！何でする！とキャッキャッヾ(*´∀｀*)ﾉ ウフフしていたところ 久々にPythonを打ちたくなったので、Pythonを選定。 んで、便利なライブラリないかなーって探索していたら 「scrapy」という、フレームワークに出会った…

最近ブログサボリ気味でした。。。反省。 たまにはITから離れたことも書いてみます。 隊長はまだこの世に産み落とされてから、２０年ちょっとしか経っていません。 そんな私は高校卒業後、２年程ニート？フリーター？を経験し とある企業へ就職して、もう３…

Djangoを使い始めました。 Webサイトの完成はまだまだなんだけど デプロイどうしようか？となりました。 gitでやってもいいんだけど gitはサーバ自体に.git/が残っていしまう。 ※そうならないように階層下げて作ってもいいけど また、gitの下に、gitを作ると…

めっちゃ落ちる！ めちゃめちゃ重い！！ めちゃめちゃめちゃ使いづらい！！！ 初回からブチ切れそうな隊長です。 最近、Office2013をインストールしましたが その中で、Excelが恐ろしいほどに使えない。 頻繁に利用するExcelが使えなくて Microsoftさんオワ…

某サイトのモノマネもしてみたい！ という、思いつきと勢いで、月毎に実施しようと思います。ちなみに、このブログは私のメモ書きの為のブログです。 アクセスを増やそうとはあまり意識していませんが どの記事に多くアクセスがあるのか。 どの記事が多く読…