AWS 환경에서 Requests 활용하여 크롤링 수행 에러 Enable Javascript and Cookies to Continue 해결 방안헤더에 User_agent 설정해주기 header = {"User-Agent": "MY User-Agent"} response = requests.get(url, headers=header)https://www.whatismybrowser.com/detect/what-is-my-user-agent/ What is my user agent?Every request your web browser makes includes your User Agent; find out what your browser is sending and what this identifies yo..
TIL
📍Shell 이란? 셸(Shell)은 컴퓨터 운영 체제와 사용자 간의 상호 작용을 담당하는 프로그램이다. 사용자는 셸을 통해 운영 체제에 명령을 내리고, 파일을 관리하며, 다양한 프로그램을 실행할 수 있다. 쉽게 말해서 파일 조작, 프로그램 실행, 변수 및 환경 설정, 권한 설정 등 컴퓨터 운영 체제를 Shell을 통해 조작할 수 있다. 다양한 모델 코드를 공부하다보면, 파이썬 py 파일로 구성되어 있는 경우도 있지만 .sh (Shell Script 파일)로 되어있는 경우도 많이 볼 수 있다. 이처럼 Shell Script 파일을 활용하여 다양한 자동화 작업, 프로그램 실행 등을 수행할 수 있다. 📍Shell 종류 : Bash / Zsh 선호하는 셸을 선택하여 개인적인 작업 환경 설정 가능하다. 터미널 ..
ssh user@서버 번호 -p 포트번호 해당 명령어로 터미널에서 서버에 접속하려고 하니 에러가 발생했다 @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED! @ @@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ IT IS POSSIBLE THAT SOMEONE IS DOING SOMETHING NASTY! Someone could be eavesdropping on you right now (man-in-the-middle attack)! It is also possible that a host key h..
파이썬 시각화 TOOL 종류를 보기 쉽게 정리한 이미지를 봐서 공유하고자 한다. 실습 과정은 시간 날때 추가해봐야징
까먹지 않으려고 기록해두는 anaconda 명령어 정리 (계속 추가할 것!) 1. 가상 환경 생성 conda create -n [가상 환경 이름] python=[버전] ex) conda create --name faceNext python=3.6.7 2. 가상 환경 활성화 conda activate [가상 환경 이름] 3. 가상 환경 목록 확인 conda env list 4. 생성한 가상 환경 내보내기 가상 환경 활성화된 상태로 실시 conda env export > environmnet.yml 5. 내보낸 가상 환경 활용하여 가상 환경 생성 conda env create --file environment.yml
주피터 노트북 (Jupyter notebook) 파이썬 코드를 IDLE 창이 아닌 좀 더 편리하게 이용할 수 있는 방법에는 Jupyter notebook, colab 등을 이용하는 방법이 있다. https://alpine-fender-f1b.notion.site/0-Jupyter-notebook-colab-251ccf2c3ca040bab6a5f5be32319fe6 0. Jupyter notebook 과 colab 활용하기 여러분은 모두 파이썬에 대한 기초 지식을 갖추고 있으실거라 생각되는데요, 어떤 환경에서 파이썬 코드를 작성하시나요? 기본 파이썬 IDLE에서 작성할 수도 있지만 프로젝트 등의 긴 작업을 수 alpine-fender-f1b.notion.site 멘토링 자료로 만들었던 Jupyternote..
#동시출력 가능코드 from IPython.core.interactiveshell import InteractiveShell InteractiveShell.ast_node_interactivity="all" 주피터 노트북, 코랩을 이용하여 파이썬 코드를 작성하다보면 여러개의 결과를 동시에 보고 싶은 경우가 있다. 하지만 코드 2개를 동시에 작성할 경우 가장 뒤에 있는 코드로 결과가 출력되고, 동시에 보기 위해서는 print를 활용하여 결과를 출력해주어야 한다. 하지만 InteractiveShell을 활용한 동시 출력 가능 코드를 실행해주면 print 없이도 결과를 동시에 볼 수 있다. print를 일일히 치기 귀찮은 나같은 사람들에게 추천하는 코드이다.
1. 구글 AI 블로그 AI 산업 자체를 선도하고 있는 기업의 기술 블로그인만큼 최신 모델들을 팔로우하기에 유용한 사이트이다. 요즘 읽고 있는 PaLM 모델도 해당 사이트에서 자세한 설명을 확인할 수 있었다. https://ai.googleblog.com/ Google AI Blog The latest from Google Research ai.googleblog.com 2. arxiv-sanity 논문에 대한 요약과 PDF 파일을 한번에 확인할 수 있는 사이트이다. 원하는 논문의 파일을 찾고 싶을 때 이용한다. https://arxiv-sanity-lite.com/ arxiv-sanity arxiv-sanity-lite.com 3. paer with code 최근 나온 논문이 뭐가 있는지 살펴보기 좋다..
