브라우저 자동화 툴 Playwright과 루비 웹 스크랩핑
이 글에서는 마이크로소프트에서 개발한 강력한 브라우저 자동화 프레임워크인 Playwright를 소개하고, 이를 활용한 웹 스크래핑 기법을 자세히 살펴보겠습니다.
글 읽기AI와 웹 기술의 원리부터 구현 과정, 적용할 때의 고려사항까지. 직접 실험하고 정리한 기술 노트입니다.
이 글에서는 마이크로소프트에서 개발한 강력한 브라우저 자동화 프레임워크인 Playwright를 소개하고, 이를 활용한 웹 스크래핑 기법을 자세히 살펴보겠습니다.
글 읽기이 글에서는 워드프레스를 GPT 액션 기능과 연동하여 GPT를 통해 워드프레스 내의 글 목록이나 페이지 내용을 검색할 수 있는 GPT 서비스를 만들어 봅니다.
글 읽기최근에 LLM을 이용하여 로컬 데이터를 검색하는 서비스를 만드는 프로젝트를 하나 진행했습니다. LLM 액세스 도구는 직접 구축하기 보단 LlamaIndex를 사용했습니다. 그 내용을 간략하게 소개합…
글 읽기미디어위키를 사용하려면 우선 미디어위키를 설치해야 하는데요. 하지만 미디어위키를 설치하는 방법이 그렇게 만만하지 않죠. 호스팅 환경을 세팅하고 그 위에 MySQL이나 MariaDB 같은 데이터베이스…
글 읽기최근 워드프레스가 버전 6.0으로 업그레이드되었죠. 그러면서 워드프레스의 기본 테마로 “Twenty Twenty-Two” 테마가 적용되었습니다.
글 읽기지난 번엔 트러플(Truffle)을 이용해서 이더리움 네트워크에 NFT를 발행하는 방법을 소개했는데요. 이번엔 이더리움 대신 클레이튼(Klaytn) 네트워크에 NFT를 발행하는 방법을 다뤄 보겠습니…
글 읽기Gatsby는 정적 웹사이트 생성기(SSG; Static Site Generator)이기 때문에 모든 라우팅은 기본적으로 빌드 시점에 이루어지게 됩니다. 즉 빌드 시점에 이미 웹사이트의 모든 페이지…
글 읽기종종 워드프레스를 Headless CMS로 사용하는 경우가 생깁니다. 이럴 땐 워드프레스에서 제공하는 REST API를 사용해도 되지만 최근 들어서는 REST 보단 GraphQL을 사용해서 워드프레…
글 읽기개츠비(Gatsby)로 웹사이트를 만들 경우, ‘데이터 소스를 어떻게 관리하면 좋을까?’ 하는 문제가 종종 생깁니다. 아주 간단한 사이트라면 주로 마크다운(markdown) 파일을 데이터 소스로 해…
글 읽기