728x90 Programming229 Instant Data Scraper 자동 데이터 스크래핑 프로그램 안녕하세요. 오늘은 자동으로 웹사이트의 데이터를 스크래핑해주는 구글 확장 프로그램 Instant Data Scraper에 대하여 사용법 중심으로 알아보겠습니다. 인스턴트 데이터 스크래퍼(Instant Data Scraper) ▣ Instant Data Scraper 웹 페이지에서 데이터를 추출하는 간단하고 효과적인 도구 - AI를 사용하여 HTML 페이지에서 가장 관련성이 높은 데이터를 예측하고 이를 Excel 또는 CSV 파일(XLS, XLSX, CSV)로 저장할 수 있음 ▣ 사용법 : Chrome에 추가하기 - 먼저, 위의 사이트에서 Google Chrome 확장 프로그램을 설치해야함 - 웹페이지에 접속한 후, Chrome 브라우저 상단에 있는 Instant Data Scraper 아이콘(포켓볼 닮음.. 2024. 4. 5. Colab 패키지 확인 및 업그레이드하기 안녕하세요. 오늘은 Colab에서 패키지 리스트를 확인하고 버전을 업그레이드하는 간단한 방법에 대해 알아보겠습니다. Google Colab 패키지 리스트 확인 & 버전 업그레이드 ▣ Colab 내장 패키지 - 구글 Colab은 tensorflow, tqdm, pandas, nltk 등 400개 이상의 패키지를 제공하고 있으며, 아래 명령어를 통해 그 리스트와 버전을 확인할 수 있음 # 패키지 리스트 확인 !pip list ▣ Colab 패키지 버전 확인/업그레이드 - 리스트에 있는 패키지를 사용시 버전이 맞지 않아 사용할 수 없는 경우, 해당 패키지의 버전을 확인하고 업그레이드하는 것이 하나의 해결방법이 될 수 있음 # keras 버전 확인 !pip list | grep keras # keras 2.15.. 2024. 3. 26. 클로드(Claude) AI 챗봇 사용하기 안녕하세요. 오늘은 오픈 AI의 챗GPT보다 뛰어나다는 평가를 받고 있는 Anthropic의 클로드(Claude)에 대해 알아보겠습니다. 클로드(Claude) AI 모델 및 사용법 ▣ 클로드(Claude)란? 美 스타트업 Anthropic의 LLM 모델인 Claude 3 AI 챗봇 - Anthropic은 '21년에 OpenAI의 GPT 모델을 개발한 전 직원들에 의해 설립되었으며, '23년 3월 Claude부터 최근 '24년 3월에 Claude 3 모델이 출시됨 - GPT와 마찬가지로 일정 수준까지는 무료로 사용할 수 있으며, Pro 모델은 월 $20의 요금을 내야 사용 가능함 ▣ 클로드(Claude) 사용법 - 먼저, Anthropic Claude 웹사이트에 방문하여 계정 설정 후 사용 가능함 (전화번.. 2024. 3. 25. Colab 패키지 설치하기 안녕하세요. 오늘은 구글 Colab에서 패키지를 영구적으로 설치하는 방법에 대해서 알아보겠습니다. 구글 Colab 패키지 영구 설치방법 - 구글 Colab에서 기본적으로 제공되는 패키지 외를 사용하기 위해서는 pip install 명령어 등으로 직접 설치해야함 - 새로운 세션이나 런타임 초기화시 이를 반복적으로 설치해줘야 한다는 번거로움이 있기에 이를 덜고자 심볼링 링크를 활용하여 Colab에 영구적으로 설치할 수 있음 ※ 구글 Colab 관련하여 포스팅한 글이 있으니, 관심 있으신 분들은 참고하시기 바랍니다. 2022.03.18 - [Programming/Python] - 파이썬 브라우저 구글 코랩 소개 및 사용법 ▣ 심볼릭 링크 링크를 연결하여 원본 파일을 직접 사용하는 것과 같은 효과를 내는 링크 .. 2024. 3. 12. [Python] Groq API 챗봇 구현하기 안녕하세요. 오늘은 Grop의 API를 발급 받아 파이썬으로 챗봇을 구현하는 방법에 대해 알아보겠습니다. 파이썬에서 Groq API 활용하기 ▣ Groq LPU Groq이 대형 언어모델(LLM)의 처리 가속화를 통해 추론 성능 및 정밀도를 높이기 위해 개발한 장치 - 자연어, 기계 학습, 컴퓨터 비전 등 다양한 AI 관련 분야에 응용될 수 있도록 설계됨 ※ Groq 관련하여 포스팅한 글이 있으니 관심 있으신 분들은 참고하시기 바랍니다. 2024.02.27 - [Programming/AI] - groq AI 반도체 LPU 사용해보기 ▣ Groq API 사용하기 - Groq API 사용을 위해서는 GroqCloud에 접속하여 로그인 후, API Keys > Create API key 버튼을 클릭하여 API .. 2024. 3. 11. [Python] pydataset 테스트 데이터 라이브러리 안녕하세요. 파이썬에서 다양한 종류의 데이터셋에 접근할 수 있는 라이브러리 pydataset에 대해 알아보겠습니다. Python Library pydataset ▣ pydataset 다양한 종류의 테스트 데이터를 불러올 수 있는 파이썬 라이브러리 - 데이터 전처리 및 머신러닝 등 데이터 분석시 유용하게 사용할 수 있음 ㅇ 데이터셋 불러오기 pip install pydataset - 현재 기준으로 총 757개의 데이터프레임이 존재함 # 데이터 종류 확인하기 from pydataset import data pyds = data() print(pyds) - 위의 dataset_id를 data() 함수에 넣어 설명과 함께 불러올 수 있음 # 데이터셋 설명과 함께 불러오기 data('titanic', show_d.. 2024. 3. 7. 이전 1 2 3 4 5 6 ··· 39 다음 728x90
