最近読んだもの

CircleCI Status - DB performance issue

先週火曜の CircleCI の障害報告。

• GitHub からの Webhook が止まる→再開、で一気に来てビルドキューが溜まりすぎて DB ロックが多発したのが原因
• 動作中のアプリケーションコードを変更→ライブコンパイルしてパッチ当てとかいろいろ手を尽くしたがダメで、結局 DB を強いハードウェアに載せ替えた。データのシンクに時間がかかった