#jemalloc

[gslin]

MyRocks/MariaDB 的 tuning 過程

MyRocks/MariaDB 的 tuning 過程

看起來應該是找 Percona 的人幫忙轉移到 MyRocks 上，然後整理出來的成功案例：「The Road Story of a MyRocks/MariaDB Migration」。

看起來是跑在獨立機器上，而不是雲端的虛擬機上，所以不是想 scale up 就可以把硬體規格拉上去 (說不定記憶體插槽已經滿了之類的…)：

Replicas run on bare metal servers, usually Dual Xeon E5 v3 or v4, with 192 GB to 384 GB of RAM.

這次遇到的主要的問題是發現效能跟不上。另外在文章裡面沒寫到，但可以猜到的是，他們目前不打算改架構，而是想要藉由改善資料庫的效能來解決問題：

The servers were close to their limits and were slow to catch up…

View On WordPress

[gslin]

為線上環境而最佳化的 Ruby：Fullstaq Ruby

最近看到的「Fullstaq Ruby」，專為線上環境最佳化的 Ruby：

Fullstaq Ruby is an MRI-based Ruby distribution that’s optimized for server production use cases.

目前主要是使用 jemalloc (超萬用) 以及 malloc_trim patch：

It is compiled with the Jemalloc and malloc_trim patches, allowing lower memory usage and higher performance.

其中看了一下 malloc_trim patch 的介紹還蠻有趣的：「What causes Ruby memory bloat?」，這篇主要是在討論記憶體用量的問題，以及目前常見的 workaround。

這個…

View On WordPress

[gslin]

Microsoft 釋出一個效能極佳的 Malloc Library

Microsoft 釋出一個效能極佳的 Malloc Library

在 Hacker News 上看到的：「Mimalloc – A compact general purpose allocator with excellent performance (github.com)」，專案網站在 GitHub 上：「mimalloc is a compact general purpose allocator with excellent performance.」。

現代伺服器軟體比較常用的應該是 jemalloc，許多軟體也直接把 jemalloc 包進去 (像是 Firefox)，所以各種測試主要就是看與 jemalloc 的差異。

測試的機器有點怪，既然都是在 AWS 上測試，卻不是選目前主流的 Intel，而且就算是 AMD 也不是選最大台的 r5a.24xlarge (都是在去年 2018 年十一月發表的)：

Testing on a big…

View On WordPress

[magwolic]

[jamiely]

Tech Talk: Jemalloc - Jan 11, 2011 7PM

Tech Talk: Jemalloc - Jan 11, 2011 7PMon Facebook Education on Livestream

jemalloc is a general purpose malloc(3) implementation that emphasizes fragmentation avoidance and scalable concurrency support.

Talks about some of the techniques that makes jemalloc fast.

[kazmii]