인터넷 쇼핑몰 G마켓을 크롤링 하려고 하는데요,

 

쇼핑몰 메뉴에서

 

'브랜드 남성의류' 이라는 문구 밑에 정장, 드레스셔츠... 등의 하위 카테고리들이 있는데요

 

저는 코드에서 (파이썬에서 selenium 사용 예정 입니다) 저 해당하는 최상위 카테고리들을 입력하면 그 하위 카테고리들이 뜨도록 만들고 싶은데

 

(ex. '브랜드 남성의류' 를 입력하면, 정장, 드레스셔츠.. 등의 하위 카테고리들이 뜨는 방식)

 

요소 검사로 각각 카테고리를 살펴보니 (예로 브랜드 남성의류에 대해서만 HTML 소스를 봤습니다)

 

딱 제가 지정한 부분에 대해서만 추출이 될 것 같아서

 

다른 카테고리들 (브랜드 여성의류..등등)에 대한 경우도 크롤링을 하고 싶은데

 

각각의 카테고리를 싹다 집어넣는 이런 수작업이 필요한건가요?

 

혹시 코드 상에서

 

브랜드 남성의류 창에서 뒤로가기 -> 브랜드 여성의류 들어가서 다시 크롤링.. 이런식의 접근은 불가한가요?