동적 웹페이지 크롤링 채택완료

보통 동적페이지는 json이나 기타형태로 따로 호출을 하여 가져옵니다.

http분석시 해당 데이타를 가져오는 url을 확인 후 작업하시면 될 듯합니다.

확인해보니 json으로 되어 있네요

http://www.wemakeprice.com/c/deal_option/get_option_info/3731661?_=1528970257126

result_set{

    options_info{

        list:[

            {key:xxxx,  value: vvvvvv},

            {key:xxxx,  value: vvvvvv},

            {key:xxxx,  value: vvvvvv},

            ....

        ]

    }

}

위와 같은 구조로 되어 있습니다.

$.ajax({

    url: 해당옵션주소,

    type: 'get',

    dataType: 'json'

}).done(function(result){

    for(var idx in result_set.options_info.list){

        var item = result_set.options_info.list[idx];

        console.log(item.value);    //<=== 요기에 옵션값이 들어 있습니다.

    }

});

위와같이 브라우저상에서 javascript 로 가져 올수도 있고요

만약 서버에서 php로 가져오려면 해당 url을 php curl로 가져와서

$result = 긁어온데이타;

$data = json_decode($result);

print_r($data);

이렇게 해서 접근하실 수 있겠네요.

페이지를 알려주시면 답변에 도움이 될것 같네요.

동적이라고 얘기하신 부분이 실제 동적 페이지가 아니라 ajax일수도 있습니다.

php로는 어려울거 같고요.

nodejs + phamtomjs 면 가능하지 않을까 합니다.