Skip to content

使えるバッファ数から演算子が取るバッファ数を決める BufferNeeds を入れる - #37

Merged
JunNishimura merged 3 commits into
mainfrom
feat/buffer-needs
Nov 4, 2026
Merged

JunNishimura merged 3 commits into
mainfrom
feat/buffer-needs

Conversation

@JunNishimura

Copy link
Copy Markdown
Owner

概要

14 章 Effective Buffer Utilization の最初の段として、空いているバッファの数を聞く手段と、その数から演算子が何バッファ取るかを決める計算を追加した。SimpleDB の BufferMgr.available / Transaction.availableBuffs と、BufferNeeds.bestRoot / bestFactor に相当する。

この後のマルチバッファ積(チャンクの大きさに BestFactor を使う)と、マルチバッファソート(run の大きさとマージの本数に BestRoot を使う)の土台になる。この PR ではまだどの演算子からも使わない。

  • buffer_manager
    • BufferManager.Available:ピンされていないバッファの数を返す
  • transaction
    • Transaction.AvailableBuffers:Available に委譲する。演算子はトランザクションしか持たないため
  • multibuffer(新しいパッケージ)
    • BestRoot:size、その平方根、立方根…(切り上げ)のうち、空きに収まる最初のもの
    • BestFactor:size、size/2、size/3…(切り上げ)のうち、空きに収まる最初のもの

設計上の判断

  • BestRoot は、size がそのまま空きに収まるなら size を返す。 SimpleDB の bestRoot はループの初回で必ず平方根に進むので、たとえば空き 10・size 4 でも 2 を返す。本文の「空きに収まる最大の根」に合わせ、1 乗根から試すようにした。ソートでは、入力全体を 1 本の run としてメモリ上で扱えることになる。
  • 根は整数で求める。 math.Pow(size, 1/i) の切り上げは、浮動小数の誤差で 1 多くなることがある(math.Pow(125, 1/3.0) は 5.000000000000001 なので 6 になる)。math.Pow は最初の見当にだけ使い、「k^i ≥ size を満たす最小の k」に整数で寄せる。k^i は size に届いた時点で掛け算を打ち切るので、桁あふれしない。
  • 空きから 2 つを予約し、残りが 1 以下なら 1 を返す。 SimpleDB と同じ。同じプランの他のスキャン(演算子の入力を読むものなど)がピンする分を残すため。
  • size が 0 なら 1 を返す。 SimpleDB は 0 を返すが、どの演算子もバッファ 1 つは要るので、下限を 1 にした。

既知の制限

  • Available の値は聞いた時点のもの。プールは全トランザクションで共有しているので、聞いた後に他のトランザクションが取ることがある。その場合ピンは待たされ、最悪 ErrBufferAbort になる。SimpleDB も同じ。

テスト

  • BufferManager.Available:何もピンしていない、異なる 2 ブロックをピン、同じブロックを 2 回ピン(1 バッファしか使わない)、ピンを 1 つ外す
  • Transaction.AvailableBuffers:自分がピンした分、別のトランザクションがピンした分(プールが共有であること)
  • BestRoot:予約を引くと 1 以下、size がそのまま収まる、平方根の切り上げ、ちょうど収まる境界(64 → 8)、立方根(1000 → 10)、立方根の切り上げが収まらず 4 乗根へ(1001 → 6)、浮動小数だと 1 多くなる(125 → 5)、size 0
  • BestFactor:予約を引くと 1 以下、size がそのまま収まる、半分、ちょうど収まる境界(20 → 5)、切り上げが収まらず次へ(21 → 4)、size 0
  • golangci-lint は手元に入っていないため、ローカルでは実行していない

🤖 Generated with Claude Code

JunNishimura and others added 3 commits November 4, 2026 01:09
マルチバッファのソートや積が、使えるバッファ数から何バッファ使うかを決めるため。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
…inned

マルチバッファの演算子はトランザクションしか持たないため、そこから空き数を聞けるようにする。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
… many are free

マルチバッファのソートは根、積は約数でチャンクの大きさを決めるため、その計算を共通にしておく。
根は浮動小数の誤差で 1 多くなることがあるので、整数で求める。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
@JunNishimura
JunNishimura merged commit dd3fab9 into main Nov 4, 2026
2 checks passed
@JunNishimura
JunNishimura deleted the feat/buffer-needs branch November 4, 2026 15:05
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant