bingbot – 馬修 IT https://blog.ocam.live 生活中所接觸各種電腦及網路問題與懷舊模擬器的專業問題解決與新資訊介紹的網站 Fri, 26 Dec 2025 07:56:02 +0000 zh-TW hourly 1 https://wordpress.org/?v=7.0 https://blog.ocam.live/wp-content/uploads/2025/03/cropped-logo-1-300x300.png bingbot – 馬修 IT https://blog.ocam.live 32 32 為什麼 Bingbot 一直用隨機搜尋字詞來灌爆 WordPress 網站 https://blog.ocam.live/archives/4729 Fri, 26 Dec 2025 07:20:08 +0000 https://blog.ocam.live/?p=4729 近幾個月來如果有定時分析網頁記錄的或有時發生 CPU 飆高。你可能正面臨 BingBot 用隨機字串搜尋爬你的網站資料。一般 wordpress 的專家都知道 wordpress 只有在使用靜態頁快取時才會反應較快且吃的 CPU 資源也較低。但如果發生隨機字串搜尋時就會直接吃 PHP + MYSQL 資源，此時就是網站發生反應慢及 CPU 飆高。較慘狀況是網站直接當機或被雲端廠商直接鎖網站。如附圖重覆網址一直搜尋。

bing bot spam

解決方式

一般會以 robots.txt 來解備，但這緩不濟急，你得讓 Bingbot 重新讀取後才有可能生效。但問題是現在正面臨該問題。且也不知道新的 robots.txt 何時會生效。這邊我建議的是用 .htaccess 解決。直接擋 User Agent 是 bingbot 且搜尋字串有特定字出現。如附圖

40.77.167.17 - - [26/Dec/2025:15:14:15 +0800] "GET /search?source=keyword HTTP/1.1" 301 4246 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"
40.77.167.1 - - [26/Dec/2025:15:14:20 +0800] "GET /search?source=keyword HTTP/1.1" 301 4246 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"
40.77.167.17 - - [26/Dec/2025:15:14:38 +0800] "GET /search?source=keyword HTTP/1.1" 301 4246 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"
40.77.167.17 - - [26/Dec/2025:15:14:39 +0800] "GET /search?source=keyword HTTP/1.1" 301 4246 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"
40.77.167.17 - - [26/Dec/2025:15:14:40 +0800] "GET /search?source=keyword HTTP/1.1" 301 584 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"
40.77.167.17 - - [26/Dec/2025:15:14:41 +0800] "GET /search?source=keyword HTTP/1.1" 301 584 "-" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/116.0.1938.76 Safari/537.36"

在 .htaccess 加上如下程式碼，

<IfModule mod_rewrite.c>
RewriteEngine On
RewriteCond %{QUERY_STRING} (^|&)source=keyword(&|$) [NC]
RewriteCond %{HTTP_USER_AGENT} bingbot [NC]
RewriteRule ^ /? [R=301,L]
</IfModule>

注意事項

每個 URL 擋的規則都不一樣，得分析網頁記錄上的規則性。看不沒有同樣的規則，再利用同樣的規則寫 .htaccess 的條件。有用 chatgtp 或 gemini 的也可請 AI 寫，方便很多。

其它網上討論的相關問題 我自已的網站是發生明明我的是資訊網站但 BingBot 會搜健康或營養的關鍵字

]]> 2025 微軟 Microsoft bingbot 的異常行為 https://blog.ocam.live/archives/3676 Wed, 23 Apr 2025 03:41:26 +0000 https://blog.ocam.live/?p=3676 bingbot 一直抓重覆的網頁

這幾天一直查到 bingbot 一直抓重覆的網頁 『GET /search』。從行為為來理解，個人就會覺得很奇怪，是微軟的程式沒寫好還是怎樣，同一頁一直抓一直抓有義意嗎？如果說是隔陣子或隔天就算了，它是同時間一直抓取。任務排程壞了嗎？

bingbot abnormal behavior

問題是針對這種必要的爬蟲好像也不能隨意擋。只能期望它自已趕快好吧。不過它昨天跑了 22192 次。前天跑了 24780 次。算次數的指令如下。有需要的自已可參考一下

cd /var/log/apache2
cat log檔案 | grep "GET /search" | wc -l
bingbot url count

延伸閱讀

Claude AI for Google GSC
快速利用 Claude AI 來即時分析 Google Search Console 的資料
 build_a_function_by_using_chatgpt
用 ChatGPT 寫 WordPress 程式
 Batocera 存檔備份
Batocera V4.x 存檔的備份方式
]]>