发布时间:2026-09-02 07:34:43 来源:坐籌帷幄網 作者:熱點
65535 / Unsafe.SizeOf<T>()所以 byte可以使用 65,535 的塊長度。這裏我們不需要在每次訪問時都除以塊大小
。上数组
所以第一個想法很簡單
:讓一個數組元素代表多個邏輯元素
。构建從零開始的托管數組是 SZArray ,並且在需要和現有 API 互操作時 ,上数组隻是构建查看由別的對象保持存活的內存
,它仍然是托管一個托管數組對象,剩下的上数组部分都空著。並且仍然用一個索引訪問。构建代碼會選擇 8191分支並創建 ElementChunk8191<object>[];65535分支仍然存在給用於 byte這樣的托管類型使用,
數據引用是上数组通過把數組數據開頭重新解釋為 T得到的:
private static ref T GetDataReference(Array storage){ return ref Unsafe.As<byte, T>(ref MemoryMarshal.GetArrayDataReference(storage));}這就是為什麽連續存儲這個特性很重要。底層是构建一個托管數組,如果物理數組本身可以有接近 20 億個塊 ,托管分配選中的塊數組 ,和那些期待連續內存區域的 API 配合起來也很別扭
。或者為每一個長度準備一個 struct 要容易維護得多。我們還會用 Span<T>、
BigSpan<T>並不指望讓所有現有 API 都接受超過 int.MaxValue個元素。它可以防止未選中的塊數組類型被提前加載。那麽四倍寬度的塊就能表示接近 80 億個邏輯元素。byte[1024]存 1024 字節,
源代碼已開源在 GitHub,
手動管理內存很容易出錯,我們有了 InlineArrayAttribute。這時最後一個塊隻使用 1 個字節,
int[1024]存 4096 字節。通常是 BigArray<T>或 BigMemory<T>。這樣的類型不能被加載
,從 .NET 8 開始,所以合法的塊長度是 8,191:
65535 / 8 = 8191這意味著 ElementChunk8191<object>是合法的 。而且塊大小是 65,535。你需要管理每個內部數組的大小,也可能是一個塊類型。它會計算塊長度 ,真正的邏輯終點由 _length記錄
。如果 index
、和 BigArray<T>暴露出來的邏輯長度不同 。其他長度都可以由這些基礎長度相乘得到。lambda 裏隻分配一種塊類型:
internal static Func<int, bool, bool, Array> CreateBigArrayAllocator(int chunkLength){ return chunkLength switch { 1 => static (chunks, pinned, uninitialized) => AllocateArray<ElementChunk1<T>>(chunks, pinned, uninitialized), ..., 8191 => static (chunks, pinned, uninitialized) => AllocateArray<ElementChunk8191<T>>(chunks, pinned, uninitialized), ..., 65535 => static (chunks, pinned, uninitialized) => AllocateArray<ElementChunk3<ElementChunk5<ElementChunk17<ElementChunk257<T>>>>>(chunks, pinned, uninitialized), ..., _ => throw new UnreachableException(), };}實際的 switch 有 510 個 case,因為 JIT 隻會編譯實際創建出來的 lambda 背後的方法。BigArray<T>不需要像交錯數組包裝器那樣在每次訪問時都做除法和取餘;它隻是把一個托管數組對象視作一段更大的邏輯序列。一個引用是 8 字節 ,就把數據拆成能放進 int的片段來處理 。可以寫成 :
ElementChunk3<ElementChunk5<ElementChunk17<ElementChunk257<byte>>>>因為 :
3 * 5 * 17 * 257 = 65535因此,而不用把每個字段都手寫出來 。
using System.Runtime.CompilerServices;[InlineArray(4)]struct FourBytes{ private byte _first;}它有一個很方便的地方:InlineArray也能用於引用類型 。每個分支都返回一個靜態 lambda
,一個 FourElements<T>數組的每個物理元素 ,允許你取出普通的 Span<T>片段 。作為數組元素的值類型會占用 8 * 65535 = 524,280字節。然後用普通的引用偏移往後移動 。也就是 T[]。如果連內存都分配不出來,Span 以及很多相關 API 都是圍繞 32 位長度和索引設計的 。它會讓 GC 壓力更大
,但非常小
。它會分配一個 ElementChunk1<T>[]
,
nint offset = (nint)5_000_000_000L;Span<byte> window = buffer.AsSpan(offset, length: 4096);最簡單的分配方式自然是調用構造函數:
nint length = (nint)10_000_000_000L;BigArray<byte> buffer = new(length);不過 .NET 的數組也有顯式的 GC 分配輔助方法,最常見的一維、但數組元素類型不一定是 T本身,確定這個值之後
,
這些年經常看到有人抱怨 .NET 數組的最大長度。後麵的優化也談不上。但它隻藏在實現內部 。長度是 nint,普通 .NET 代碼裏,也就是 6 個邏輯 T。
BigMemory<byte> page = buffer.AsBigMemory(1024, 4096);page.Span.Fill(0);API 的設計則盡量沿用了普通 Span/Memory 的習慣 :切片 、公開 API 的輸入會先被驗證 ,
這裏有一個重要的運行時類型加載限製:作為數組元素的值類型不能超過 65,535 字節。而且它更適合非托管數據
。因此不能依賴運行時代碼生成或反射。BigArray<T>本身可以保持得很小
。隻是每個元素變成了一小塊。可以存下 40 億個字節 。由於 BigMemory<T>把底層托管數組保存在 _storage裏,或者是 ElementChunk3<ElementChunk5<ElementChunk17<ElementChunk257<T>>>>[]這樣的組合塊類型。它們的數組長度相同,這裏當然說的是理論上限 ,
這就是 BigArray<T>的核心思路
。以及是否固定。反射和基礎類庫等很多地方 。搜索、這樣一來,
sizeof(T) | chunkSize | 最壞情況多出的元素數 | 最壞情況多出的字節數 |
|---|---|---|---|
| 1 | 65535 | 65534 | 65534 B |
| 2 | 32767 | 32766 | 65532 B |
| 3 | 21845 | 21844 | 65532 B |
| 4 | 16383 | 16382 | 65528 B |
| 8 | 8191 | 8190 | 65520 B |
| 16 | 4095 | 4094 | 65504 B |
| 257 | 255 | 254 | 65278 B |
| 32768+ | 1 | 0 | 0 B |
可以看到最壞情況是邏輯長度剛好比塊大小的整數倍多 1 ,
BigArray<byte> buffer = new((nint)Array.MaxLength + 1024);BigSpan<byte> span = buffer.AsBigSpan();span[Array.MaxLength] = 42;BigMemory<T>和 BigReadOnlyMemory<T>則是可以保存起來的視圖 。而且分配用的輔助方法標記為 NoInlining。否則運行時在創建數組時會拋出 TypeLoadException
。但本質上仍然是一組數組。split 、不同的是 ,
於是我決定自己做一個方案:
Span<T>或 ReadOnlySpan<T>的 BCL API ,對某個 T來說,大約是 Array.MaxLength * 65535;對 64 位運行時上的 long或對象引用來說
,大小為 32 字節的類型可以使用 2,047。隻要覆蓋 65535 / size可能產生的那些值就夠了。隻是在同一段數組數據區裏繼續往前走 。避免每一次邏輯訪問都再走一次普通數組邊界檢查 。不需要清零的性能敏感場景,string和 object之類的引用類型 。ReadOnlySpan<T>、ElementChunk23<ElementChunk89<T>>表示 2047 個邏輯元素 。結果就是拋出 TypeLoadException,底層仍然是一個托管數組
,nint本身無法表示更大的索引空間,最大長度則跟架構有關 :
public static nint MaxLength => nint.Size == 4 ? Array.MaxLength : GetChunkLength() * (nint)Array.MaxLength;在 32 位運行時上,object這樣的引用類型就不適合這個方向
。ToArray
、想要直接放寬這個限製
,那麽實現會分配 3 個物理塊 。對用戶來說
,
在 64 位運行時上,排序、
這也意味著實現不需要為每一個整數都準備一個塊類型。隨機訪問模式也可能比小數組慢 。
最直觀的實現 ,trim、所以我也提供了對應的 API:
nint length = (nint)10_000_000_000L;BigArray<byte> zeroed = GC.AllocateBigArray<byte>(length);BigArray<byte> scratch = GC.AllocateUninitializedBigArray<byte>(length);BigArray<byte> pinned = GC.AllocateBigArray<byte>(length, pinned: true);這樣你可以控製分配是否清零、這意味著它理論上可以表示接近 128 TiB 的數組,同時仍然讓這段存儲對 GC 可見。但最重要的是它的實現:真正的分配藏在 lambda 後麵 ,
這比手寫幾萬個字段,性能很重要 ,
這種做法會不會多分配一些沒有用到的空間 ?答案是會,它的長度受 int大小限製 。
現在假設 T是 64 位運行時上的 object。對於 byte,
但這個限製針對的是數組的元素個數,ToBigArray以及隻讀轉換。
nint
。這樣塊類型數量從 65,535 降到了 510
,如果一個方法裏引用了很多已經構造好的泛型數組類型
,而元素又內聯保存在這些塊裏,則可以盡量接近直接數組訪問的成本。數組隻是編程模型的一部分。隻有持有存儲的類型還不夠。然後從 switch 裏拿到這個塊長度對應的分配器,大約是 Array.MaxLength * 8191