파이썬 & 오픈소스 개발 질문과 답변 게시판

파이썬과 여러 오픈소스 기반 프레임워크 관련 질문 답변 게시판 입니다. 궁금하신 사항을 올려 주시면 빠른 시일내에 답변 드리도록 하겠습니다. 아울러, 개발 과정의 경우 간소화 시킨 문제 재현 코드나 운영일 경우 최근의 특이사항을 올려 주시면 답변 드리는 프런티어 분들이 더욱 상세한 답변을 드릴 수 있으니 많은 도움 되시길 바랍니다.


 

C#에서 최초 MS-SQL에 있는 데이터를 로딩해서 빠르게 연산을 합니다. 

데이터가 여러테이블에 조금조금씩 분산되어 있는 데이터를 연산한 후 결과를 다시 

데이터베이스에 반영을 해줘야 되는데 , 


연산은 정말 빠르게 되는데 연산된 결과로 나온 많은 데이터를 

부분 흩어져 있는 여러 테이블에 다 입력하고 나면 시간이 너무 오래 걸리네요. 


SqlBulkCopy를 이용해서 Insert를 하고 있는데 , SqlCommend를 썻을 때보다는 확실히 속도가 

빨라지긴 했습니다. 


그런데 한테이블이 아니라 여러 테이블에 자잘하게 흩어져 있어서 그런지 큰 효과는 없네요. 


그리고 데이터가 너무 많아서 그런지 데이터베이스에 데이터를 입력할 때 디스크 읽기 쓰기가 100%가 되면서 

너무 느려집니다. 


마치 주식 그래프나 , 비트코인 시세가 빠르게 변하는 것처럼 실시간으로 많은 분산되어 있는 데이터를 빠르게 

데이터베이스에 입력하고 싶습니다. 


이럴 땐 어떤 식으로 C# 과 MSSQL을 구성해야 될 지 조언을 좀 부탁드리겠습니다. 


No. Subject Author Date Views
94 파이썬 슬라이싱 [2] 반말 2021.03.27 27
93 c# 프로젝트 hhe3522 2018.12.04 2532
92 다음 API 지도 데이터 추출 관련 문의 이대우1234567 2018.11.07 2443
91 SQL 서버와 연결 후, 클라이언트 포트 클리어 방법 암무거나 2018.03.27 3574
» C#에서 MSSQL에 많은 데이터를 빠르게 넣을 수 있는 방법 코코라니 2018.03.17 4141
89 데이터 싱크 프로그램 제작 질문드립니다. 베로 2017.11.09 4080
88 VS Code 로 C# 개발할때.... 1231234 2017.08.31 4801
87 C++ 오류 베르사유 2017.08.10 4424
86 EntityFramework 트랜잭션 어떻게 되는건지 궁금합니다 능능능 2017.08.09 3883
85 라이브러리 구동 샘플 프로그램 기타치는퐝동 2017.05.26 4185
84 깜빡임 효과 주는 방법 문의 [1] 방자 2017.02.08 5723
83 인터넷 실행 후알유? 2016.12.12 5687
82 for문 사용방법 문의 [2] 방자 2016.10.27 6641
81 FileStream 사용 시 오류사항 문의 Lauren 2016.09.01 6220
80 웹응용프로그램 프로젝트 열기 문의 hoonsik.kong 2016.06.13 7431
79 MySql과 LINQ to SQL 클래스를 사용하는 중입니다. 문제가 있어서 질문드립니다. [3] 적신 2016.04.26 24823
78 웹으로 데이터 전송 관련 질문드립니다. [1] 란다 2016.03.25 8931
77 C# vs2005 컴파일 시 자꾸 오류팝업창이뜹니다..도와주세요.. [1] 아배고파젠장 2016.03.22 8474
76 asp.net mvc에서 액션 메소드에 권한 할당 관련 비타민c 2016.02.24 6650
75 xml Deserialization 이유진_301818 2015.12.06 7884





XE Login