본문 바로가기
반응형

크롤링16

[파이썬] 스마트스토어 상세페이지 태그키워드 검색어 텍스트 추출 크롤링 상위 스마트 스토어 내부적으로 상세 페이지 해시태그라는 게 있습니다. 관련 태그라고 그게 적어두는 게 있어요. 그러니까 흔히 말하면 블로그로 보면 태그키워드라고 하는 거죠. 이런 태그키워드를 사용했었을 때 어떤 키워드를 사용을 하느냐 어떤 검색어 이런 것을 확인을 할까 이런 것이 궁금할 때 유용하게 볼 수 있는 것을 파이썬 코딩으로 만들어 봤습니다. 파이썬 스마트스토어 상세페이지 태그키워드 검색어 텍스트 추출 크롤링 해서 만들어 놨었었는데 여기 한 가지 더 코딩을 만들어야겠지만 브랜드 카탈로그라는 게 있죠. 이 브랜드 카탈로그 묶은 것은 보기가 힘들겁니다. 그냥 일반 스마트 스토어인데 등급이 파워냐 빅 파워냐 프리미엄이냐 이런 정도면 상세 페이지 안에 태그를 바로 볼 수가 있어요. 바로 볼 수가 있습니다.. 2022. 7. 28.
[파이썬] 네이버 실시간 인기 쇼핑 키워드 크롤링 추출 파이썬 네이버 실시간 인기 쇼핑 키워드 크롤링 추출 오늘은 뭐냐 하면 이게 보니까 네이버 이거 안에 보시면 네이버 카테고리 베스트라는 곳이 있습니다. 네이버 쇼핑 안에서 트렌드 키워드라는 게 있어요. 그래서 카테고리 베스트라는 것이 뭐냐하면 네이버 쇼핑에서 입점돼 있던 상품 대해서 많이 본 상품 이런 거를 혹은 많이 구매했었던 것을 트렌드 키워드 이런 걸로 제공을 해준다고 합니다. 그래서 특히나 트렌드 키워드라는 거는 네이버 쇼핑에서 검색을 많이 한 키워드 혹은 급상승한 키워드를 뽑아서 보여준다고 나와 있거든요. 근데 이게 아까 좋은 점이 이미 보셔서 아시겠지만 연령대별 성별 연령대별로도 이렇게 쪼개서 확인이 가능합니다. 그래서 그게 아래 이미지와 같이 이렇게 한 상위 한 20개 정도의 키워드를 노출을 .. 2022. 7. 28.
[파이썬] 스타크래프트 저그, 테란, 프로토스 맵별 승률 추출 크롤링 이는 심심하게 와이고수에서 각 맵별 승률이 어느정도 되는지를 보고자 해서 따왔다. 한 10년 이상치의 데이터 승률이 보관돼 있는 게시판에서 해당 데이터를 가져오기가 쉽지는 않았는데.. 여윽시나 파이썬으로 긁었더니 금방 된다. 다만 와이고수에서 가져온 것이니 무단으로 계속 크롤링으로 긁어서 가져오긴 말자. 파이썬 스타크래프트 저그, 테란, 프로토스 맵별 승률 추출 크롤링 아래의 파이썬 코딩을 보면 맵, 리그, 승자, 승자종족, 패자, 패자종족, 그리고 상세, 날짜 등이 있다. 이에 raw데이터 형식으로 가져와서 csv 파일로 넣어주는 방식으로 진행했다. 이에 해당 데이터를 가지고 DB에 넣어 sql로 쿼리 조회를 해보던지 아니면 pandas 로 해당 데이터의 흐름을 살펴보는것도 좋을 것 같다는 생각이 든다.. 2022. 7. 28.
[파이썬] 네이버 데이터랩 상품 인기 키워드 Top 500 크롤링 자동화 오늘은 저만 그걸 사용했었는지도 모르겠어요. 오늘은 네이버 데이터 랩이라고 있습니다. 네이버 데이터 랩이라는 거를 여러 스마트 스토어 하시는 분들과 다른 분들이 많이 사용하시는 그런 것 중에 하나예요. 근데 이런 인기 트렌드 같은 것들을 보는 것도 좋죠. 근데 시간이 너무 오래 걸려요. 우리가 봐야 될 키워드만 하더라도 한 수백 가지가 되죠. 이러한 수백 가지를 빠르게 뭔가 볼 수 있는 이런 것을 저장도 하면 편하지 않습니까 그래서 이런 걸 저장도 해서 보면 어떨까 싶어서 오늘은 이러한 정보 크롤링 해놔서 검색량을 보고 그거에다 해서 데이터베이스에 집어넣어서 그거를 일간별로 자동으로 실행을 하게끔 하는 그런 작업을 만들어봤어요. 해서 목차는 다음과 같습니다. 목차 1. 파이썬 네이버 상품 인기 키워드 T.. 2022. 7. 17.
반응형