Tool

작성일자 : 2023-11-05 Ver 0.1.1 0. 가상환경이 필요한 이유 아나콘다에서는 가상환경을 설정해서 작업을 진행할 수 있다. 그렇다면 가상환경이 필요한 이유는 무엇일까? 그 이유는 "독립적인 작업환경에서 작업할 수 있기 때문이다. 프로젝트를 진행하다보면 여러 라이브러리, 패키지를 다운로드하여서 사용하게 되는 경우가 많다. 그러다 보면 각 라이브러리들끼리 충돌을 일으키는 문제를 발생시키는 경우가 발생하거나, 특정 버전과 호환하는 경우가 생겨서 최신 버전과 이전 버전 중 선택해야 하는 상황이 발생한다. 이러한 문제가 발생된 경우, 최악의 경우 전부 삭제하고 다시 설치해야 하는 경우도 발생한다. 위 같은 일을 예방하기 위해 프로젝트 단위로 가상환경을 구성해서 필요한 라이브러리를 설치해서 작업을 진..

작성일자 : 2023-10-09 ver 0.1.1 노트북이 아닌 아이패드에서 Python을 할 수 있을까?! 질문에 대한 답은 그렇다!! 나 역시 노트북이 아닌 아이패드로 Python을 하고자 하는 필요가 있었다. 프로젝트 사이트에는 반입승인을 받은 PC만 가지고 갈 수 있고, 다행히 태블릿 PC는 보안스티커만 붙이면 되기에 아이패드는 가지고 다닐 수 있었다. 요즘 Python 공부를 비교적 열심히 하고 있고, 더군다나 빅분기 실기 시험을 앞두고 있는 상황에서 더욱 더 Python을 할 일이 많아졌다. 그렇게 방법을 찾아보던 중 'Cartnets'이라는 어플을 알게 되었다. 위 어플을 설치하여 열어보니 PC에서의 Jupyter notebook과 거의 동일한 UI로 구성이 되어 있었고, 작동 방식도 거의 ..

작성일자 : 2023-10-03 수정일자 : 2023-10-21 ver 0.1.2 vs code에서 jupyter notebook으로 공부를 하고 티스토리 블로그에 게시하기 위해서는 마크다운 또는 html로 변환이 필요하다. 이중에서 vs code에서 .ipynb(jupyter notebook)을 .html 파일로 변경하는 방법은 아래와 같다. 변경 방법 (Terminal 에서 아래 명령어 실행) jupyter nbconvert --to html /path.ipynb Error 명령어 실행시 ModuleNotFoundError : No module named 'markupsafe' 에러 발생(23-10-21) 현상 - 라이브러리 삭제를 별달리 한적이 없었던거 같은데 markupsafe라는 모듈이 없다는 ..

1. 소개 오늘 소개할 데이터 분석 툴은 Apache Flink 입니다. 이전에 Apache의 Hadoop, Kafka, Spark에 대해서 소개를 했었는데, 또하나의 Apache의 툴입니다. 빅 데이터 시대에 조직은 실시간으로 방대한 양의 데이터를 처리하고 분석할 수 있는 강력하고 확장 가능한 데이터 분석 툴을 끊임없이 찾고 있습니다. 오픈 소스 스트림 처리 및 배치 처리 프레임워크인 Apache Flink는 데이터 분석 커뮤니티에서 상당한 관심을 받았습니다. 이 블로그 게시물에서는 데이터 분석 도구로서의 Apache Flink의 기능과 이점을 살펴보고 데이터 처리 및 분석 워크플로우를 혁신하는 방법에 대해 설명합니다. 2.특징 2-1. 스트림 처리 및 실시간 분석 Apache Flink는 스트림 처리..