Tool & Setting17 [Setting] [VScode] AWS EC2 (Linux) SSH 접속하기 원래 IDE 툴로 ATOM을 썼는데 최근에 코파일럿때문에 자동완성이 편해보여서 VS 코드로 갈아탔다! 그리고 뭔가 기분탓인진 모르겠지만 ATOM보다 VS코드가 가벼운 느낌이 든다! 2021.07.02 - 🌱깃허브 코파일럿(Github Copilot), AI가 코드 대신 짜준다!?@ 🌱깃허브 코파일럿(Github Copilot), AI가 코드 대신 짜준다!?@ 코드제안서비스, 깃허브 코파일럿 깃허브가 AI를 기반으로 작성 중인 코드를 분석해 적절한 코드를 제안하는 서비스를 공개했다. 소스코드 편집기에서 작성 중인 코드, 주석, 함수 등을 분석해 pearlluck.tistory.com 그만큼 vs코드에서 지원해주는게 많은데 이번엔 VS코드에서 원격접속으로 AWS의 Linux에 접속하는 법을 메모해두려고 한다.. 2021. 9. 8. [Setting][Intellj] 파이썬 가상환경 venv 설정 사실 아나콘다로 해도 되지만, 나는 아나콘다를 별도로 깔고 싶지 않아서 python자체에서 제공해주는 가상환경 라이브러리(venv)를 이용한다. 근데 이걸 맨날 까먹고, 검색하길래 다시한번 정리해본다! 가상환경 생성 원하는 폴더에서 python -m venv 가상환경이름 그러면 해당경로에서 가상환경이름으로 하위폴더가 하나 생성된다. 가상환경 활성화 해당경로에서 가상환경이름/Script/activate.bat 그러면 이제 가상환경이 활성화 되서 명령어 앞에 (가상환경이름) 이 될 것이다. (독립환 환경이 만들어졌다!) 그리고 실제로 파이썬 인터프리터가 이 폴더 안에 있는걸로 인식되었는지 확인해보려면 where python을 쳐보면 된다. 그러면 이렇게 추가적으로 원래 로컬의 python경로뿐만 아니라 가상.. 2021. 8. 25. [Setting] [Intellj] pyspark 환경구성 하기 주피터를 안쓰고, 그냥 intellj에서 바로 spark를 쓸 수 있지 않을까 해서 찾아봤다. 일단 로컬에 spark가 설치되어 있어야한다. intellj에서 경로추가(Project Structure) Add Content Root로 스파크를 설치했을때 지정했던 경로를 추가한다. 참고로, 스파크 실행과 실행경로 설정은 아래에서 확인할 수 있다. 2021.04.22 - Apache Spark 실행하기 | Spark설치와 pyspark사용 (궁금증미해결) Apache Spark 실행하기 | Spark설치와 pyspark사용 (궁금증미해결) 와 이제 본격적으로 spark를 설치해서 해볼 준비가 되었다. 오늘의 목표는 Spark설치하고, RDD 자료구조 파악하기 * pyspark와 spark차이점은? * pys.. 2021. 7. 26. [Spark] Docker로 jupyter에서 spark 환경 만들기 도커확인 docker --version 참고로, 윈도우에서 docker Desktop을 이용했습니다. 주피터 이미지 가져오기 주피터의 이미지는 라이브러리에 따라서 여러개 있다. >> 도커이미지 라인업 확인 jupyter/base-notebook jupyter/minimal-notebook jupyter/r-notebook jupyter/scipy-notebook jupyter/tensorflow-notebook jupyter/datascience-notebook jupyter/pyspark-notebook jupyter/all-spark-notebook 나는 혹시 몰라서 all-spark-notebook 이미지를 사용하기로 했다 docker run -p 8888:8888 -e JUPYTER_ENABLE_.. 2021. 7. 26. 주피터 노트북 (Jupyter Notebook) 아나콘다 없이 설치 주피터란? python기반의 데이터분석에 필요한 오픈소스를 모아둔 플랫폼을 웹에서 사용할 수 있는 웹서비스 사실 오픈소스를 모아둔 개발플랫폼을 사용하려면 아나콘다를 설치한다. 아나콘다가 가상환경관리자와 패키지관리자까지 제공해주는 가상 환경을 만들어서 사용할 수 있지만, 나는 혹오옥시나 모를 경로충돌 때문에 아나콘다 없이 그냥 주피터 라이브러리를 설치했다. 주피터를 사용하는 목적이 dataframe, numpy 등 라이브러리를 쉽게 사용하고, 그 결과를 라인별로 확인하는 것이기 때문이다. 설치방법 설치방법은 그냥 pip으로 패키지를 설치하는 것과 같다. 파이썬실행경로에 들어가서 pip3 install jupyter를 하면 된다. 실행방법 실행방법도 cmd에서 진행할 수 있다. 파이썬실행경로에 들어가서 ju.. 2021. 7. 7. [Setting] [VScode] git 터미널 연결하기 (기본 터미널 변경) 1. 터미널에서 Select Default Profile 선택 2. 기본터미널을 GIT bash로 변경 (원래 기존 디폴트는 powershell) 3. 터미널 변경 확인 2021. 6. 24. [Tool] Typora: 마크다운(markdown)편집기 typora(타이포라) 무료 마크다운 편집기 프로그램 마크다운 문법에 맞춰 작성하면 바로 서식이 적용되서 표시할 수 있음 설치 https://typora.io/ Typora — a markdown editor, markdown reader. Readable & Writable Typora gives you a seamless experience as both a reader and a writer. It removes the preview window, mode switcher, syntax symbols of markdown source code, and all other unnecessary distractions. Instead, it provides a real live preview typora.. 2021. 6. 24. 이전 1 2 다음
