作者seft584f8 (seft584f8)
看板CodeJob
標題[發案] 資料庫優化
時間Fri Jun 2 16:18:59 2023
發案人：林先生
聯絡方式1：BBS信件給我你的LINE ID 我會請窗口聯繫你LINE
所在地區 ：高雄為佳
有效時間：
專案說明：
網站運作穩定已經幾年, 但從5/25開始會有crash現象發生
1. crash時間:
- 固定早上10:00左右到下午16:00
- 周一到周五
- 一天會發生約5~6次crash
2. error log線索提供:
- server reached MaxRequestWorkers setting
- 我從預設的150拉到200,400, 1000,2000 還是一樣
- 不過CPU一直都維持50%以下, 所以資源很充足
- free -m查詢memory都非常有餘裕
3.
針對特別於10:00~16:00容易使用的訂單查詢頁面URI去設定限制流速
<Location "/URI">
SetEnvIf Request_URI "^URI$" is_orders
Order deny,allow
Deny from all
Allow from env=is_orders
<IfModule mod_ratelimit.c>
SetOutputFilter RATE_LIMIT
SetEnv rate-limit 2
</IfModule>
</Location>
==> 失敗沒有效果
5. 唯獨能夠知道的線索是當機之前的inbound traffic會拉高
6. 系統已經穩定運作好幾年, 5/24號之前也沒有改過什麼code,
唯獨可能訂單增加或者商品增加而已
想請熟悉網站資源配置 (ubuntu, apache, mysql, php)的人可以幫忙釐清問題
並且修改
希望可以在我旁邊一起處理
我好開權限以及了解解決的邏輯
也方便我告知該注意之處
時間希望是周一到周五白天(因為主要是周一到周五才容易出現crash)
預算五千起, 如果看過需要更多可以討論
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 220.142.23.149 (臺灣)
※ 文章網址: https://webptt.com/m.aspx?n=bbs/CodeJob/M.1685693941.A.AE5.html
※ 編輯: seft584f8 (220.142.23.149 臺灣), 06/02/2023 16:40:27
1F：推 J002: 當機前有爬蟲在爬？ 06/02 21:09
2F：→ nuclex: 可能頂到DB連線數的物理極限 你有做連接池之類緩衝嗎？ 06/02 21:32
3F：推 tofuflower: 什麼語言？ 06/04 01:37
4F：推 tofuflower: 看到了，寫在最後 06/04 01:42
5F：推 ek0519: php每個request都是連線…get有做redis 嗎 06/04 19:45
6F：推 s0920151048: apache mpm mode? 06/04 19:52
謝謝上面各位大師的參與討論
後來我突然想到會不會跟DB回應大小有關(資源不夠可能也會造成inbould traffic增加)
我想到mysql還是apache可能會相關的參數指定最大的大小
後來在/etc/mysql/my.cnf
在 [mysqld] 部分中添加或修改以下行：
max_allowed_packet = <value>
把數值從16M提高到32M 就運作正常了
(我還有順手作了加上防火牆的設定, 看能否降低一些惡外request)
(不過我看主要問題應該還是這個查詢程式前人沒寫好 & 訂單累積越來越多
在某個時間爆掉)
※ 編輯: seft584f8 (220.142.23.149 臺灣), 06/06/2023 18:01:43
※ 編輯: seft584f8 (220.142.23.149 臺灣), 06/06/2023 18:34:13
7F：推 wyyoung: 索引index 有加嗎？ 06/09 08:30