ハナモゲラボ / 試行錯誤の実験人生

日々、PCや各種デバイス、楽器等に翻弄されながら電脳の森をさまよう男の日常と様々な実験をさらりと記しております。

日曜日 ― botとの戦いはまだまだ続く

March 18 2018

本日は日曜日。
しかし、子供達はそれぞれお友達とアポイントがある様子で朝からみんな出かけっぱなし。
というわけで、自宅でゆっくりと休養・・・ではなくて対策を。

そう、2日前に発覚した「クローラーbotとの戦い」である。

対策 ― BUbiNGというBotからのアクセス急上昇中

サーバログを見るとまあまあ効果があったようで負荷率ナンバー1の不名誉は脱していたけども、以前ベスト5以内には入っておるんですなこれが。
転送量とかなにも制限ないとこに引っ越せばいいじゃない、ってのも対策でしょうけどもそれじゃあ何も身につかないわけです。

というわけで、どいつが不必要なのかを洗い出す作業に。
ここの記事がとても参考になりました。

アクセスログに出力されているbot系ユーザーエージェントのまとめ
https://st40.xyz/one-run/article/155/

大手サイトのrobots.txtでわかる「検索でヒットされたくないページ」の特徴

このページもとても参考になりました。
robots.txtは今まであまり気にしたことなかったんですが、サーバ含めて考えるとやっぱり大事ですね。

と、こんな事をしつつ気付いたらあっという間に夕方でした。

晩ご飯は久々に生春巻きを作ってみたものの、巻き方忘れてまして不出来な感じに・・

今日は中にそうめん入れてみたけどこれがアタリ。
スイートチリソース、そしてパクチーの風味は子供らにはどうかな?と思いましたが普通に食べてました(笑)
二人ともこういうのも食べれる様になったんやね。

| Posted in Web関連 | Comments (0)

Post a Comment

※メールアドレス、URLは任意入力です。メールアドレスは入力しても公開されません。

« Mar 2018 April 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30