파이썬 & 오픈소스 개발 질문과 답변 게시판

파이썬과 여러 오픈소스 기반 프레임워크 관련 질문 답변 게시판 입니다. 궁금하신 사항을 올려 주시면 빠른 시일내에 답변 드리도록 하겠습니다. 아울러, 개발 과정의 경우 간소화 시킨 문제 재현 코드나 운영일 경우 최근의 특이사항을 올려 주시면 답변 드리는 프런티어 분들이 더욱 상세한 답변을 드릴 수 있으니 많은 도움 되시길 바랍니다.

C#에서 MSSQL에 많은 데이터를 빠르게 넣을 수 있는 방법

코코라니 2018.03.17 15:01 Views : 5265


 

C#에서 최초 MS-SQL에 있는 데이터를 로딩해서 빠르게 연산을 합니다. 

데이터가 여러테이블에 조금조금씩 분산되어 있는 데이터를 연산한 후 결과를 다시 

데이터베이스에 반영을 해줘야 되는데 , 


연산은 정말 빠르게 되는데 연산된 결과로 나온 많은 데이터를 

부분 흩어져 있는 여러 테이블에 다 입력하고 나면 시간이 너무 오래 걸리네요. 


SqlBulkCopy를 이용해서 Insert를 하고 있는데 , SqlCommend를 썻을 때보다는 확실히 속도가 

빨라지긴 했습니다. 


그런데 한테이블이 아니라 여러 테이블에 자잘하게 흩어져 있어서 그런지 큰 효과는 없네요. 


그리고 데이터가 너무 많아서 그런지 데이터베이스에 데이터를 입력할 때 디스크 읽기 쓰기가 100%가 되면서 

너무 느려집니다. 


마치 주식 그래프나 , 비트코인 시세가 빠르게 변하는 것처럼 실시간으로 많은 분산되어 있는 데이터를 빠르게 

데이터베이스에 입력하고 싶습니다. 


이럴 땐 어떤 식으로 C# 과 MSSQL을 구성해야 될 지 조언을 좀 부탁드리겠습니다. 


I want to
cmd_document_vote_user Update Log List
No. Subject Author Date Views
98 포스 바코드 리더기 질문 [1] 파이썬초보 2022.03.22 55
97 파이썬 그래프 관련 질문 드립니다. [1] file 바른세상 2022.03.15 57
96 request.cookies.get이 안됩니다.. file 권기원 2022.02.22 68
95 파이썬 정렬 기능 과 시각화 문의 드립니다. [1] 바른세상 2022.02.18 73
94 파이썬 슬라이싱 [2] 반말 2021.03.27 276
93 c# 프로젝트 hhe3522 2018.12.04 2610
92 다음 API 지도 데이터 추출 관련 문의 이대우1234567 2018.11.07 2500
91 SQL 서버와 연결 후, 클라이언트 포트 클리어 방법 암무거나 2018.03.27 3609
» C#에서 MSSQL에 많은 데이터를 빠르게 넣을 수 있는 방법 코코라니 2018.03.17 5265
89 데이터 싱크 프로그램 제작 질문드립니다. 베로 2017.11.09 4113
88 VS Code 로 C# 개발할때.... 1231234 2017.08.31 4847
87 C++ 오류 베르사유 2017.08.10 4459
86 EntityFramework 트랜잭션 어떻게 되는건지 궁금합니다 능능능 2017.08.09 4974
85 라이브러리 구동 샘플 프로그램 기타치는퐝동 2017.05.26 4213
84 깜빡임 효과 주는 방법 문의 [1] 방자 2017.02.08 5849
83 인터넷 실행 후알유? 2016.12.12 5738
82 for문 사용방법 문의 [2] 방자 2016.10.27 6689
81 FileStream 사용 시 오류사항 문의 Lauren 2016.09.01 6252
80 웹응용프로그램 프로젝트 열기 문의 hoonsik.kong 2016.06.13 7458
79 MySql과 LINQ to SQL 클래스를 사용하는 중입니다. 문제가 있어서 질문드립니다. [3] 적신 2016.04.26 24868
Write Tag


XE Login