atomicdev 님의 블로그

강의 9: 프로그램 테스트 및 배포 - Jupyter Notebook에서 실행하기이번 강의에서는 Jupyter Notebook 환경에서 티스토리 블로그 자동화 프로그램을 테스트하고 배포하는 방법을 학습합니다. 전반적인 프로그램 기능은 8장까지 완료가 되었기 때문에 9장의 내용은 개념 이해 정도로 진행해도 좋을거 같습니다.1. 프로그램 테스트 방법프로그램을 배포하기 전에 다양한 시나리오에서 제대로 작동하는지 테스트하는 것이 중요합니다. 아래는 이를 위한 테스트 방법입니다.테스트 시나리오공감 및 댓글 기능 테스트: 특정 날짜 이후의 다양한 글에 대해 공감 클릭과 댓글 작성 기능을 테스트합니다.엣지 케이스 테스트: 글이 하나도 없는 경우나, 이미 공감 및 댓글이 작성된 글에 대해 재실행하는 경우를 테스트합니다..

강의 8: 자동화 프로그램 설계 및 구현목표:이 강의의 목표는 앞에서 학습한 내용을 종합하여, 티스토리 블로그 자동화 프로그램을 설계하고 구현하는 것입니다. 이 프로그램은 블로그의 글 목록을 가져와 특정 조건에 맞게 필터링하고, 공감을 클릭하고, ChatGPT API를 이용하여 댓글을 작성하는 기능을 포함합니다. 또한, 크롤링 진행 시간을 SQLite 데이터베이스에 저장하여, 다음 크롤링 시 효율적으로 데이터를 처리할 수 있게 합니다.내용프로그램의 전체 구조 설계블로그 글 목록 크롤링글 필터링공감 클릭ChatGPT API를 이용한 댓글 작성크롤링 진행 시간 데이터베이스에 저장데이터베이스에서 마지막 처리일자 이후의 글만 처리글 목록을 가져와 조건에 맞는 글 필터링하기글의 작성 날짜를 기준으로 필터링하여, ..

강의 7: 티스토리 글에 ChatGPT 댓글 크롤링으로 작성하기목표:이 강의에서는 크롤링을 활용하여 티스토리 블로그의 특정 글에 자동으로 댓글을 작성하는 방법을 학습합니다. 수강자는 웹 페이지 구조를 이해하고, ChatGPT API와 크롤링을 결합하여 자동으로 댓글을 생성하고 게시할 수 있게 됩니다.1. 티스토리 페이지 구조 이해하기우선 티스토리 블로그의 댓글 작성 폼과 필요한 요소들(예: 입력 필드, 제출 버튼 등)의 HTML 구조를 파악해야 합니다. 크롬 개발자 도구(또는 다른 브라우저의 개발자 도구)를 사용하여 페이지의 HTML을 분석할 수 있습니다.주요 요소:댓글 작성 폼: 댓글을 작성하는 텍스트 영역(textarea)의 name 또는 id 속성을 확인합니다.제출 버튼: 댓글을 제출하는 버튼의 n..

강의 6: ChatGPT API 이해 및 설정목표:이 강의에서는 ChatGPT API의 개요와 사용 방법을 이해하고, Python에서 ChatGPT API를 호출하여 댓글을 작성하는 방법을 학습합니다. 수강자는 OpenAI API 키를 발급받고, Python에서 ChatGPT API를 호출하여 간단한 질문에 대한 응답을 받아올 수 있게 됩니다.1. ChatGPT API 개요 및 사용 방법ChatGPT API란?ChatGPT API는 OpenAI에서 제공하는 언어 모델인 GPT-3.5를 기반으로 한 API로, 텍스트 생성, 요약, 번역, 질문 응답 등의 작업을 자동화할 수 있습니다. 개발자는 이 API를 통해 자연어 처리(NLP) 기능을 애플리케이션에 통합할 수 있습니다.주요 기능:텍스트 생성: 주어진 프..

강의 5: 티스토리 글에 공감 클릭하기 (웹 자동화)목표이 강의의 목표는 Selenium을 사용하여 티스토리 블로그의 글에 공감을 자동으로 클릭하는 방법을 학습하는 것입니다. 웹 크롤링 대신 Selenium을 사용해 브라우저를 자동으로 제어하고, 크롤링한 글 목록에서 공감 버튼을 클릭하는 과정을 구현합니다. 필요시 로그인 처리도 다루게 됩니다.내용Selenium 소개웹 브라우저 자동화를 위한 도구: Selenium은 웹 브라우저를 자동화하는 도구로, 사람의 행동을 모방하여 웹 페이지를 제어할 수 있습니다.Selenium 설치 및 기본 사용법: Selenium을 설치하고 기본적인 사용법을 배웁니다. Python에서 Selenium을 사용하여 웹 페이지를 탐색하고, 버튼을 클릭하는 등의 작업을 수행할 수 있..

강의 4: 티스토리 글 목록 필터링 및 처리목표이 강의의 목표는 크롤링한 티스토리 블로그의 글 목록에서 특정 조건에 맞는 글을 필터링하고, 원하는 데이터를 추출하는 방법을 학습하는 것입니다. 이 과정에서 Python의 BeautifulSoup와 datetime 모듈을 사용하여 웹 페이지에서 데이터를 크롤링하고, 특정 날짜 이후에 작성된 글을 필터링하는 방법을 배웁니다.내용BeautifulSoup로 파싱한 데이터의 처리HTML 파싱: 먼저, 웹 페이지의 HTML 구조를 이해하고 BeautifulSoup을 사용해 HTML을 파싱합니다. 이를 통해 블로그 글 목록을 가져오는 방법을 익힙니다.데이터 추출: 파싱한 HTML에서 필요한 정보를 추출합니다. 예를 들어, 글의 제목, URL, 작성 날짜 등을 추출합니다..

강의 3: 티스토리 블로그 크롤링 이해 및 사용 준비목표: 이 강의의 목표는 Python을 사용하여 티스토리 블로그에서 웹 크롤링을 통해 데이터를 수집하는 방법을 학습하는 것입니다.1. 웹 크롤링 기본 개념1.1 웹 크롤링이란 무엇인가?웹 크롤링은 웹 페이지의 데이터를 자동으로 수집하는 과정입니다. 크롤러라고 불리는 프로그램이 웹사이트를 탐색하고, 페이지에서 데이터를 가져옵니다.웹 스크래핑은 웹 페이지의 구조화된 데이터를 추출하는 기술입니다. 스크래핑은 보통 크롤링의 한 부분으로, HTML 문서에서 특정 데이터를 추출하는 과정입니다.1.2 크롤링과 스크래핑의 차이크롤링은 웹사이트를 자동으로 탐색하며 여러 페이지를 방문하고 데이터를 수집하는 과정입니다.스크래핑은 방문한 웹 페이지에서 필요한 정보를 추출하는..

강의 2: HTTP와 API 기초목표:이 강의에서는 HTTP 프로토콜과 API의 기본 개념을 이해하고, Python에서 API를 호출하는 방법을 학습합니다. 수강자는 HTTP의 주요 메서드를 이해하고, Python의 requests 라이브러리를 사용하여 API를 호출할 수 있게 됩니다.1. HTTP의 기본 개념HTTP 메서드HTTP(하이퍼텍스트 전송 프로토콜)는 웹에서 데이터를 전송하기 위한 규약입니다. HTTP 메서드는 클라이언트(사용자)와 서버 간에 통신할 때 사용됩니다. 주요 HTTP 메서드에는 다음이 포함됩니다:GET: 서버에서 데이터를 요청할 때 사용됩니다. 웹 브라우저에서 URL을 입력하고 페이지를 로드하는 것이 대표적인 GET 요청입니다.예시: 브라우저에서 https://www.google...

강의 1: Python 기초 및 개발 환경 설정목표:Python의 기본 문법과 개발 환경 설정 방법을 학습하여 간단한 프로그램을 작성할 수 있도록 합니다.내용1. Anaconda 설치 및 Jupyter Notebook 소개1.1 Anaconda 설치Anaconda 소개:Anaconda는 Python과 R을 위한 데이터 과학 플랫폼으로, 다양한 데이터 과학, 머신러닝, AI 관련 라이브러리를 포함하고 있으며, Python 개발 환경을 쉽게 구축할 수 있도록 도와줍니다.Anaconda에는 Python 인터프리터, Jupyter Notebook, Spyder 등 여러 개발 도구가 포함되어 있습니다.Anaconda 설치 방법:Anaconda 다운로드:Anaconda 공식 웹사이트에서 운영 체제에 맞는 Anaco..

강의 시리즈: Python과 ChatGPT API를 이용한 블로그 자동화 프로그램 개발강의 1: Python 기초 및 개발 환경 설정목표: Python의 기본 문법과 로컬 환경에서 Jupyter Notebook을 사용한 개발 환경 설정 방법을 학습합니다.내용:Python 설치 및 Jupyter Notebook 소개Python 기본 문법: 변수, 자료형, 연산자조건문과 반복문 이해하기함수 정의 및 호출실습: 간단한 Python 프로그램 작성하기 (예: 덧셈 계산기)특별 주의사항: 웹 크롤링 및 Selenium을 사용한 자동화 작업은 로컬에서 진행해야 하며, 이를 위해 Jupyter Notebook을 로컬에 설치하여 진행합니다.강의 2: HTTP와 API 기초목표: HTTP 프로토콜과 API의 기본 개념을 ..