대용량 DB 질문

하이욧 2020.06.22 00:37 Views : 767

주식프로그램을 위해서 DB를 설계할 예정입니다.


여러가지 데이터를 저장하는데, 그 중에 가장 큰 비중을 차지하는게 체결 데이터 입니다.


체결데이터는 하루에 200~400만개 정도의 데이터가 생성됩니다. (컬럼은 int정도 되는 데이터 13개(?)정도 예상됩니다. 줄여야된다면 5개 정도도 가능합니다.) 이게 1년정도 쌓였다고 가정하면 5억 ~ 10억개의 row가 쌓이는거죠.


하루에 한번 insert(200~400만개), select(대략 1000만개, 많으면 1억개) 한번 씩 합니다.

그리고 테스트도 진행하는데, 테스트는 전체 데이터는 select하게 됩니다. 아마 데이터가 너무 많기때문에 분할해서 받아올것 같습니다. 이 테스트는 시간나는대로 가끔씩 하게 됩니다.


종합해보면 데이터에 수정되고 내용에 접근하는게 live로 진행되진 않다는겁니다.


이 상황에서 어떤 DB를 사용하는게 좋을지 조언 부탁드립니다.

흑은 DB가 아니라 그냥 파일로 저장하는게 좋다면 어떤 형식으로 저장하는게 좋을지 조언 부탁드립니다. 최근에 검색했던 것 중에서는 hdf5라는 것이 그냥 단순 파일로 저장하는 것 같았는데, 나름 괜찮은 방식같아보였습니다.



No. Subject Author Date Views
Notice SQL강좌: 챗GPT와 함께 배우는 SQL Server 무료 강좌 목차와 소개 (2023년 9월 업데이트) 코난(김대우) 2023.08.18 20254
Notice Python 무료 강좌 - 기초, 중급, 머신러닝(2023년 6월 업데이트) 코난(김대우) 2021.01.01 12147
10618 테이블상 동일한 여러개의 로우에 조건을 검색하여 데이터를 찾을수있을까요? [1] 뽀구 2020.07.15 405
10617 중복시간을 제외한 시간의 합을 구할수있을까요? [7] 톰슨 2020.07.14 861
10616 SQL 서버 연결 [1] 망태기군 2020.07.13 1173
10615 SQL 특정 시간 날짜 Sum 문의 입니다. [1] 핸젤루 2020.07.07 723
10614 쿼리 질문합니다... 병든토끼 2020.07.07 367
10613 db 백업? 이중화? 질문 [2] 하이욧 2020.07.06 506
10612 인덱스를 위한 교재 추천 부탁 드립니다. [2] 대두개발자 2020.06.29 632
10611 2개의 테이블을 union all 로 조회 후 합치고 싶습니다. [2] 초보SQL러 2020.06.25 486
10610 사용자 이(가) 로그인하지 못했습니다. 원인: 명시적으로 지정된 데이터베이스를 열지 못했습니다. 마징고 2020.06.24 525
10609 SP 내부의 트랜젝션 처리 코코 2020.06.22 545
10608 상위 레벨 코드 가져오는 방법 [1] sql바보 2020.06.22 542
10607 mssql 프로지져 관련 문의 드립니다. hoon 2020.06.22 417
» 대용량 DB 질문 [2] 하이욧 2020.06.22 767
10605 대용량 데이터 삭제 문의 입니다. [1] 인버터 2020.06.20 459
10604 서브쿼리를 이용해서 다수의 매개변수를 받아 update를 진행하고 있습니다... [4] 남중남고군대공대 2020.06.15 604
10603 쿼리 질문입니다. [1] 희망나라 2020.06.12 510
10602 조건에 따라 Sum값을 - 로 표시하고 싶습니다. [1] hsp-user 2020.06.10 440
10601 데이터베이스 컬럼에 관한 질문입니다 [2] 병든토끼 2020.06.04 473
10600 스토어드 프로시저 내에서 동적쿼리, 동적쿼리 내에서 스토어드 프로시저? [4] 남중남고군대공대 2020.06.03 559
10599 DataBase 병합 방법 안돼요 2020.06.02 434





XE Login