F #에 큰 시계열을 저장하는 간결하고 유용하며 효율적인 방법은 무엇입니까?

Question

저는 현재 F #을 배우고 있으며 금융 시계열을 분석하기 위해이 도구를 사용하고 있습니다. 누구든지 시계열 데이터를 저장할 좋은 데이터 구조를 추천 할 수 있습니까?

F #은 다양한 유형의 네이티브 유형을 제공하며 우아하고 간결하며 효율적인 솔루션을 제공하는 몇 가지 간단한 조합을 찾고 있습니다.

타임 스탬프가있는 수백만 개의 레코드와 누락 된 값이있는 숫자 및 텍스트 데이터의 여러 (~ 5-20) 필드로 구성된 매장 진드기 데이터를 찾고 있습니다.

첫 번째 생각은 아마도 일련의 튜플 또는 레코드 일 것입니다. 그러나 누군가가 현실 세계에서 잘 작동하는 것을 친절하게 제안 할 수 있는지 궁금합니다.

편집 : 명확한 설명을 위해

몇 가지 추가 포인트 :

내가 필요로 할 가능성이있어 일반적인 작업은 다음과 같습니다

• 시간 기반 검색 - 즉, 가장 최근의 데이터 포인트를 찾을 수 주어진 시간에
• 시간 기반 조인
• 추가 (업데이트 및 삭제는 거의 발생하지 않습니다.)

필자는 주로 F #을 연구용 대화식 도구로 사용하여 (실제로 큰) 추가 보너스로 컴파일 할 수있는 기능을 탐색하고 있습니다.

ANOTHER 편집 : 나는 또한 언급해야

, 내 역할/F 번호의 사용이 데이터를 연구하지 개발에서 순전히이다. 일단 데이터를 이해하고 나면이를 더 잘 이해하고 나중에 개발자가 작성할 도구를 지정할 수 있습니다.

우리 모델은 계산 집약적이며 많은 메모리를 사용하며 항상 재귀 적으로 코딩 할 수는 없다는 점에 우려합니다. . 그래서 많은 사람들이 어쨌든 큰 덩어리를 질의해야합니다.

필자는 이러한 종류의 작업을 위해 항상 Matlab 또는 R을 사용해 왔지만 지금은 F #에 관심이 있습니다. 연구용 인터랙티브하고 높은 수준의 유연성을 제공하지만 동일한 코드를 사용할 수 있습니다. 생산.

처음에이 컨텍스트 정보를 제공하지 않아서 사과드립니다. (이것이 내 첫 번째 질문입니다.) 사람들이 대답을 할 수있게되었습니다.

저에게 도움이 된 모든 사람들에게 다시 한 번 감사드립니다.

Answer 1

데이터 구조의 최선의 선택은 사용자가 원하는 작업에 따라 다릅니다.

가장 간단한 것은 구조체의 배열입니다. 이것은 빠른 무작위 검색, 압축되지 않은 표현을위한 좋은 공간 효율성 및 좋은 지역성의 장점이 있습니다. 하위 구조 (문자열과 같은) 사이에 공유가있는 경우 공유하여 공유하도록하십시오.

대안은 디스크에서 필요할 때로드되는 seq 일 수 있습니다. 요소를 빠르게 추가 할 수있는 단일 연결 목록 또는 임의 위치에 효율적으로 삽입하는 등의 작업을 효율적으로 수행 할 수있는 균형 이진 이진 트리가 있습니다.

Answer 2

데이터를 저장하고 관계형 데이터베이스에서 쿼리해야합니다 (현재 저장되어있는 위치는 어디입니까?) : 여러 필드가있는 수백만 개의 레코드를 메모리에로드하는 것은 값 비싼 작업이어야하며 오래된 데이터로 남을 수 있습니다. 어려움을 유지하는 어려움). 그리고 F # LINQ to SQL 구현 (Power Pack에서 찾을 수 있다고 생각합니다)을 사용하여 F # 표현식을 SQL 표현식으로 변환 할 수 있습니다. ... 나는 매우 확실하지 않다 http://blogs.msdn.com/b/dsyme/archive/2009/10/23/a-quick-refresh-on-query-support-in-the-f-power-pack.aspx