[python] Requests-HTML를 사용하여 웹 페이지의 프리뷰 생성하기

01 Dec 2023

python

이번 포스트에서는 파이썬의 Requests-HTML 라이브러리를 사용하여 웹 페이지의 프리뷰를 생성하는 방법에 대해 알아보겠습니다.

1. Requests-HTML 소개

Requests-HTML은 파이썬의 HTTP 요청 라이브러리인 Requests를 기반으로 한 HTML 웹 스크래핑 라이브러리입니다. 웹 페이지를 가져오고 HTML 내에서 필요한 정보를 추출하는 데에 사용할 수 있습니다.

2. 설치

먼저 Requests-HTML 라이브러리를 설치해야 합니다. 아래의 명령어를 사용하여 설치할 수 있습니다.

pip install requests-html

3. 코드 작성

from requests_html import HTMLSession

# 웹 페이지의 URL 설정
url = "https://example.com"

# HTMLSession 객체 생성
session = HTMLSession()

# 웹 페이지 가져오기
response = session.get(url)

# 프리뷰 생성을 위한 필요한 정보 추출
title = response.html.xpath('//title/text()')[0]
description = response.html.xpath('//meta[@name="description"]/@content')[0]
image_url = response.html.xpath('//meta[@property="og:image"]/@content')[0]

# 결과 출력
print("Title:", title)
print("Description:", description)
print("Image URL:", image_url)

위의 코드는 Requests-HTML을 사용하여 지정한 URL의 웹 페이지를 가져와서, 페이지의 프리뷰를 생성하기 위한 필요한 정보를 추출하는 예시입니다.

4. 실행 결과

실행 결과는 다음과 같이 나타날 수 있습니다.

Title: Example Domain
Description: This is an example domain used for illustrative examples in documents.
Image URL: https://example.com/images/logo.png

이와 같이 프리뷰 생성에 필요한 정보를 추출할 수 있습니다.

5. 추가 정보

위의 링크를 참고하여 더 자세한 내용을 확인할 수 있습니다.

이번 포스트에서는 Requests-HTML를 사용하여 웹 페이지의 프리뷰를 생성하는 방법에 대해 알아보았습니다. Requests-HTML은 웹 스크래핑에 매우 유용한 라이브러리이므로, 웹 페이지 데이터를 활용하는 프로젝트를 진행할 때 참고해보시기 바랍니다.