싸이월드 미니홈피 크롤링 과정에서 swf 파일 다운로드와 관련하여 질문 드립니다 ㅠㅠ

count = 0
while True:
    try:
        driver.execute_script("viewDetail(" + str(count) + ",'Y');") # 게시글로 이동합니다.
        time.sleep(waiting_time)
        frame = driver.find_element_by_xpath('/html/body/div[1]/article[2]/iframe')
        driver.switch_to.frame(frame) # 게시글의 프레임으로 이동합니다.
        time.sleep(1)
        html = driver.page_source
        soup = BeautifulSoup(html, 'html.parser')
        date = soup.select_one('div.view1 p') # 태그에 작성일이 들어있습니다.
        unwanted = date.find('strong')
        unwanted.extract() # p 태그 내부의 strong 태그(글 작성자)를 제거합니다.

        image = soup.select_one('div.webPage object param')
        extension = '.' + image['value'].split('.')[-1] # 확장자를 추출합니다.
        print(image['value'])
        filename = date.text.replace('\n', '').split()[0].replace('.', '-')
        # 게시글을 작성한 날짜를 추출하여 파일명으로 지정합니다.
        full_filename = filename + extension
        add_number = 1
        while os.path.isfile(full_filename) == True: # 파일명이 중복되는 경우를 처리합니다.
            full_filename = filename + '-' + str(add_number) + extension
            add_number += 1
        driver.switch_to.default_content() # 원래의 프레임으로 돌아갑니다.
        driver.get(image['value'])
        time.sleep(1)
        count += 1
    except:
        break

급히 작성해서 두서가 없는데 문제가 되는 부분은 위와 같습니다 ^^;

driver.get()으로 swf 파일에 접근할 수가 없고, 로그인하라는 페이지로 연결되네요.

selenium이 아닌 일반 크롬과 IE에서는 swf 파일에 접근할 수 있는데 말이죠 ㅠㅠ

제가 테스트한 바로는 적어도 user agent의 문제는 아닌 것 같네요.

그럼 굿밤 되세요!

어젠 너무 졸려서 못 올렸는데 보시기 편하게 전체 스크립트 중에 질문의 요지가 되는 스크립트만 정리해서 올리면 다음과 같습니다.

from bs4 import BeautifulSoup
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
import time, os

options = webdriver.ChromeOptions()
options.add_argument('--no-sandbox')
options.add_argument('--disable-dev-shm-usage')
options.add_argument("user-agent=Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; rv:11.0) like Gecko")
preferences = {"safebrowsing.enabled": True }
options.add_experimental_option("prefs", preferences)

driver = webdriver.Chrome(executable_path='chromedriver', chrome_options=options)
driver.implicitly_wait(15)
waiting_time = 3 # time.sleep()의 대기시간을 지정합니다.

url = 'http://cy.cyworld.com/home/23452603'
driver.get(url)
time.sleep(waiting_time)

count = 0
while True:
    driver.execute_script("viewDetail(" + str(count) + ",'Y');") # 게시글로 이동합니다.
    time.sleep(waiting_time)
    frame = driver.find_element_by_xpath('/html/body/div[1]/article[2]/iframe')
    driver.switch_to.frame(frame) # 게시글의 프레임으로 이동합니다.
    time.sleep(1)
    html = driver.page_source
    soup = BeautifulSoup(html, 'html.parser')
    date = soup.select_one('div.view1 p') # 태그에 작성일이 들어있습니다.
    unwanted = date.find('strong')
    unwanted.extract() # p 태그 내부의 strong 태그(글 작성자)를 제거합니다.
    image = soup.select_one('div.webPage object param')
    extension = '.' + image['value'].split('.')[-1] # 확장자를 추출합니다.
    print(image['value'])
    filename = date.text.replace('\n', '').split()[0].replace('.', '-')
    # 게시글을 작성한 날짜를 추출하여 파일명으로 지정합니다.
    full_filename = filename + extension
    add_number = 1
    while os.path.isfile(full_filename) == True: # 파일명이 중복되는 경우를 처리합니다.
        full_filename = filename + '-' + str(add_number) + extension
        add_number += 1
    driver.switch_to.default_content() # 원래의 프레임으로 돌아갑니다.
    driver.get(image['value'])
    #driver.execute_script("window.open('" + image["value"] + "');") # 이 방식도 안 되네요.
    time.sleep(1)
    count += 1
driver.quit()

결과적으로 이런 창이 뜨네요 ㅠㅠ

header에 Referer로 https://cy.cyworld.com/home/23452603 와 같이 줘서 요청을 해보시기 바랍니다.

기대하겠습니다.