Span<T>, Memory<T> - slog(완료)

[dimohy]

조금 더 다른 접근을 해봤습니다. 만약, MemoryMappedFile을 이용해 Span<byte>을 획득할 수 만 있다면, 좀 더 효율적인 대량 데이터를 빠르게 처리할 수 있을꺼라 생각했습니다.

MemoryMappedFile 관련 Span<T>

.NET은 MemoryMappedFile을 이용해 메모리 매핑 파일을 이용할 수 있습니다. 다만, C언어에서 매핑된 주소를 메모리 주소처럼 접근할 수 있는데 반해 C#은 메모리를 직접 다루는 언어가 아니니만큼 두가지 방식을 통해 접근을 할 수 있게 합니다. MemoryMappedViewAccessor CreateViewAccessor()메소드를 이용해 메모리 매핑 파일에 접근할 수 있게 합니다. 인자를 주지 않으면 메모리 매핑 파일 전체를 접근할 수 있으며, position과 length로 부분 접근 Accessor를 생성할 수도 있습니다… 이후, Accessor를 통해 position위치의 값을 읽거나 쓸 수 있게 됩니다. 관리메모리를 사용하는 C# 언어에서는 이런식의 방법이 최선일수밖에 없지만, 아쉽군요. 파일영역을 OS의 힘을 빌려 메모리처럼 접근할 수만 있다면 대량 데이터를 처리하는데 이점이 있을텐데요. MemoryMappedViewStream 클래스 (Sys…

확인한 결과, 어쩔 수 없이 unsafe영역을 사용해야 했고, decimal이 고정 배열이 안된다는 사실도 알게 되었지만, 어쨌든 상당히 빠른 속도로 목록(Span<실시간시세2>)을 생성할 수 있었습니다.

void 임의시세목록_읽기2()
{
    var filename = "실시간시세.dat";
    var fileLength = new FileInfo(filename).Length;

    using var mmf = MemoryMappedFile.CreateFromFile(filename, FileMode.Open);
    using var accessor = mmf.CreateViewAccessor();

    Span<byte> memory;
    unsafe
    {
        byte* ptr = null;
        accessor.SafeMemoryMappedViewHandle.AcquirePointer(ref ptr);
        ptr += accessor.PointerOffset;

        //memory = new Span<byte>(ptr, (int)accessor.SafeMemoryMappedViewHandle.ByteLength);
        memory = new Span<byte>(ptr, (int)fileLength);
    }


    var 실시간시세목록 = MemoryMarshal.Cast<byte, 실시간시세2>(memory);
    foreach (var item in 실시간시세목록)
    {
        ;
    }

    accessor.SafeMemoryMappedViewHandle.ReleasePointer();
}

[StructLayout(LayoutKind.Sequential, Pack = 1)]
unsafe struct 실시간시세2
{
    public long 체결시각;
    public decimal 체결가;
    public decimal 체결수량;
    public fixed int _매수호가잔량[4 * 5];
    public fixed int _매도호가잔량[4 * 5];
}