웹스크래핑의 용도 조사

1. C# 및 .Net 개발, ASP .Net 개발

- 윈도우 어플리케이션으로 작업이 매우 쉬우며, C#과 .NET은 컴파일 언어이며 높은 성능을 제공함. 또한 유연성으로 다양한 라이브러리와 프레임워크를 통해 웹 스크래핑을 유연하게 구성할 수 있음. 통합 가능성으로 .NET은 다양한 서비스와 쉽게 통합될 수 있어, 스크래핑 후의 데이터 처리나 저장이 편리함. 유지보수로 C#은 강한 타입 체크를 제공하므로, 코드가 안정적이고 유지보수가 쉬움. 특히 C# 은 윈도우에서 개발한 언어이기 때문에 더더욱이 쉬움.

 

2. javascript, typescript, node.js 등... 

 

주로 html 에서 js 를 구동해서 html 스크래핑이 필요함 -> 이를 통한 엑셀로 변환시 굉장히 깔끔하게 텍스트와 표를 가져올 수 있음. 

 

3. python - excel

데이터 프레임으로 분석용으론 적합하나.. 현재 데이터 추출중에서는 빅데이터 급은 아닌지라.. 사용하기가 애매모호함.

 

현재 기술 스택으론, python 으론 가져가나, 엑셀 작업 및 윈도우 어플리케이션 개발 등이 포함된다면 C#이 추가로 필요함.