블로그 자동화 프로젝트 진행

개요

요즘 최신 신기술 ai 를 이용한 자동화가 많이 이루어지고 있다. 나도 이런 신기술을 통하여 블로그 자동화를 진행하려고 했지만 여러가지 난관에 부딪혔다. 그 난관을 핑계? 삼아 시작도 못하고 있었는데 머릿속에 생각이 너무 많아 쉽게 시작하기가 어려웠던 것 같다.

하지만, 난 이미 비 개발 직군으로 주식 퀀트 매매 자동화도 해봤고 여러가지 조그마한 자동화를 했던 경험이 있다. 이런 경험을 비추어 보면 일단 시작을 해야 뭔가가 이루어진다. 그럼 아래에서 어떤 난관이 있었는지 정리를 해보고 필요한 것이 무엇인지 알아보자

난관

chat gpt open ai 를 이용하여 api 블로그 자동화를 진행하려 했지만 일단 비용이 꾸준히 발생한다는 문제점이 있다. 블로그가 하나라면 상관없겠지만 방치된 여러개의 블로그를 모두 자동화 하기에는 비용이 너무 많이 들 수 있다.

단순히 자동화 공장처럼 양으로 승부를 볼 생각이었기 때문에 여러개의 블로그에 자동화를 이용하여 여러 정보들을 독자에게 줄 수 있도록 하고 싶었다. 그러면서 부수익을 얻고 싶었지만 위처럼 비용문제로 시도를 하지 않았다.

이런 open api 비용 때문에 자동화가 어려워서 비용을 들이지 않고 할 수 있는 방법이 무엇이 있을지 생각해봤다. 검색해보니 llm을 돈들이지 않고 로컬피씨에서 사용할 수 있는 방법이 있었다. 랭체인을 활용하여 로컬피씨에서 올라마같은 sw를 설치하고 그 위에 무료로 오픈된 여러 ai 서비스들을 올려 사용할 수 있다.

난 관심이 많았기 때문에 이 올라마를 로컬에 설치하고 ai를 올려서 로컬피씨에 돌려봤지만 성능으로 인해 매우 느린것을 보고 어렵겠다고 생각했고 이 생각은 로컬피씨가 아닌 구글 코랩을 이용하면 되지 않을까? 마침 관련 내용이 유튜브에 있었고 시도해봤다. 하지만 역시나 처음엔 잘 되었지만 이것도 비용이 발생할 것이고 원인을 알 수 없는 오류들 때문에 트러블 슈팅이 힘들 뿐더러 자동화 관리가 어려울 것이란 생각이 들었다. 그럼 앞으로 어떻게 해야할까?

해결책

일단 파이썬을 이용해서 진행할 것이다. 블로그 자동화에 필요한 것들을 아래 리스트에 넣어 놓고 하나씩 진행될 때마다 포스팅을 하도록 하자

필요 목록

1. 어떤 글을 쓸 것인가? 어떤 카테고리로 구분할 것인가를 정리할 스프레드시트가 필요하다. csv 파일로 필요한 내용을 저장해 놓고 워드프레스 api를 이용하여 관련 글을 chat gpt 같은 llm 서비스를 이용하여 받을 수 있도록 해야한다.
2. api는 비용이 필요하고 로컬 llm 구성은 느리고 한국어에 대한 학습이 아직 부족하기 때문에 어쩔 수없이 셀레니움을 이용해서 시도해보기로 한다.

위 2번이 잘 되지 않을것이라 생각했기 때문에 시도를 안했는데 오늘부터 1번에 대한 내용 2번에 대한 내용을 진행하며 포스팅하며 진도를 나가기로 한다.