본문 바로가기

전체 글223

[Python] 파이썬 간단한 워드클라우드 생성 :: 마이자몽 네이버 뉴스 워드클라우드 이전글에서 작성했던 네이버 뉴스 제목크롤링한 내용을 이용해서 형태소분석을 하여 간단한 워드 클라우드를 만들려고한다. 주요 모듈 -BeautifulSoup : 크롤링 -requests : url get request -Twitter : 형태소 분석 -Counter : 형태소 count -WordCloud : 워드클라우드 생성 -matplotlib : 워드클라우드 출력 from bs4 import BeautifulSoup import requests from konlpy.tag import Twitter from collections import Counter from wordcloud import WordCloud import matplotlib.pyplot as plt searc.. 2019. 1. 3.

[Python] 파이썬 윈도우 PyCharm 설치 :: 마이자몽 윈도우 PyCharm 설치PyCharm을 사용하려는 이유는 딱 2가지다.1. 초보자들에게도 사용이 편하다.2. 라이브러리 install이 쉽다. PyCharm 홈페이지를 통해 커뮤니티 버전을 받아준다.https://www.jetbrains.com/pycharm/ 다운받은 인스톨러를 실행해준다. 경로 지정 재부팅 후 PyCharm을 실행해준다. 동의 테마 선택 사용할 플러그인이 없으니 그냥 진행 새로운 프로젝트 생성 프로젝트를 생성할때 어떤 인터프리터를 사용할지 지정해준다.프로젝트 생성 후 설정을 변경해줘도 상관없으나 처음에 만들때 해주자.Existing interpreter를 체크하고,이전 글에서 설치한 아나콘다 파이썬 경로를 지정해준다. 인터프리터가 제대로 적용되었는지 아나콘다 설치시 같이 설치된 모듈.. 2019. 1. 3.

[Python] 파이썬 윈도우 Anaconda 설치 :: 마이자몽 Anaconda 설치이전 글에서 MacOS에서 아나콘다설치하는 글을 썻다.이번에는 윈도우에서 설치 및 개발환경 설정해볼거다. 아나콘다 홈페이지https://www.anaconda.com/download/ 파이썬 언어는 2.X 버전과 3.X버전 호환이 불가능하다.문법자체도 조금씩 달라서 2.X버전을 사용해야할 이유가 없다면 3.X이상 버전 사용을 권장한다. 다운받은 인스톨러로 설치를 진행한다.NExt 동의 전체 유저가 사용하도록 설정 적당한 위치를 지정 따로 환경설정을 하지 않기 위해서 Add Anaconda to the system PATH environment variable 체크 VSCode 설치는 선택에디터를 다루는데 익숙하지 않으면 그냥 PyCharm쓰는것을 권장한다. 설치가 완료되고 환경변수 세.. 2019. 1. 3.

[Python] 파이썬 PyCharm Interpreter 선택 및 모듈 추가 :: 마이자몽 Pycharm Interpreter 선택 Pycharm을 이용하여 설치된 여러 버전의 파이썬을 선택해서 Interpreter로 사용이 가능하다.맥 기준 PyCharm - Preferences... Project - Project Interpreter 선택Project Interpreter 설렉트박스를 이용해서 설치된 파이썬을 선택해준다.선택하면 설치되어 사용가능한 모듈이 나열된다. PyCharm 모듈 설치모듈 설치를 위해 Interpreter선택 후 좌측 하단에 '+'표시 되어있는 버튼을 클릭한다.검색을 통해 원하는 모듈을 선택해주고 좌측 하단 Install Package버튼을 클릭하여 설치해준다. import 자동완성에 install한 모듈이 뜨는것을 확인하여 정상적으로 설치가 되었는지 확인한다. 2019. 1. 1.

[Python] 파이썬 맥OS Pycharm 설치 :: 마이자몽 매OS Pycharm 설치기존에 가벼운 VSCode를 상용해서 Python개발을 진행했다.하지만, pip를 이용해서 모듈을 설치하거나 원하는 버전의 파이썬 인터프리터를 정하는데 번거로움과 문제가 있어 Pycharm을 사용할려고한다.Pycharm설치 전에 Python을 미리 설치해준다. Pycharm 홈페이지를 통해 커뮤니티 버전을 받아준다.https://www.jetbrains.com/pycharm/ Download Now 클릭 Communitiy버전으로 설치 다운받은 설치파일을 통해 설치 진행한다.세팅 임포트 없이 진행 약관 동의 후 진행 default로 진행 테마 선택 후 진행 터미널에서 커맨드를 사용할수도 있으니 체크후 진행 default 진행 설치가 끝났으니 Pycharm을 실행시켜준다.새로운 프.. 2019. 1. 1.

[Python] 파이썬 BeautifulSoup multiprocessing 속도개선 :: 마이자몽 네이버 뉴스 크롤링 페이징 이전글에서 네이버뉴스 한페이지의 제목 크롤링을 진행했다. http://myjamong.tistory.com/42 하지만, 실제로 데이터를 분석할때 필요한 수집데이터는 한페이지가 아니라 여러페이지의 내용을 수집해야한다. 방법은 간단하다. url request요청을 반복문을 통해서 받아와야 한다. 현재 네이버의 url 형식을 보면 page가 아닌 게시글의 시작 지점을 start라는 파라미터로 받아오고 있다. 네이버 뉴스 크롤링 multiprocessing(X) 1번째 게시물부터 300번째까지 총 30번에 걸쳐서 데이터를 받아온다. time모듈을 사용해서 받아오는 시간까지 확인한다. from bs4 import BeautifulSoup import requests import tim.. 2018. 12. 31.

[Python] 파이썬 VSCode Python Run Task 설정 :: 마이자몽 VSCode Python Run Task 설정이전 아나콘다 설치글에서 파이썬 파일 실행하기 위해 python3 파일명 형식으로 쉘스크립트에서 진행하도록 설명을 했다.이번 글에서는 VSCode에서 task.json파일을 만들어 단축키로 해당 명령을 실행할수 있도록 Run Task기능을 사용할거다. Run Task 설정Ctrl + Shift + B 클릭실행할 작업이 없습니다. 작업구성... 클릭 템플렛에서 task.json파일 만들기 클릭 Others 클릭 그러면 task.json파일이 생성된다. task.json파일을 아래와 같이 수정해준다.command가 실행 하는 명령이고 args가 붙는 인자이다.즉, test.py라는 파일을 만들어서 run task를 진행하면 'python3 파일명' 명령어를 터미널.. 2018. 12. 27.

[nginx] url 서버 이미지 불러오기 :: 마이자몽 프로젝트를 진행하다보면 이미지서버를 사용할때가 많다.파일을 이미지서버에서 다운받아서 보여주는 것보다는 이미지 서버에 있는 그자체를 url을 통해서 불러오는게 효율적이다.예제의 이미지서버는 centOs를 사용했다. nginx를 사용해서 configure에 location을 추가해주면 쉽게 해결할 수 있다.nginx 설치(http://myjamong.tistory.com/9) nginx conf 디렉토리의 nginx.conf파일을 열어서 아래 코드를 추가해준다. nginx.conf12345678910111213141516server { ... ... ... location /images { alias /home/jamong/images; } ... ... ... } cs 위의 경로(/home/jamong/i.. 2018. 10. 18.

[Spring] 스프링 AJAX 여러유형 사용 예시 :: 마이자몽 AJAX(Asynchronous JavaScript and XML)은 여러 상황에서 사용되는데... 매번 사용할때마다 어떻게하는지 검색하고 애먹는경우가 많다. 그래서, 이 글만 보고 완벽하게 다시 사용할수 있도록 정리해볼려고 한다. AJAX는 단순히 텍스트값만 넘길수도 있고, form을 넘길수도 있고, 파일 업로드와 같이 웹개발에서 중요한 역할을 해주기때문에.... AJAX만 잘 알아도 개발하는데 시간단축이 된다. AJAX는 비동기식 방법으로 데이터에 접근하는 거라고한다. 쉽게 말하면 그냥 브라우저에서 새로고침하지 않고도 데이터값을 변경할수 있는 것이다. 대표적으로 AJAX가 사용된 사례는 각종 포털사이트의 인기검색어 혹은 연관검색어이다. 그럼 유형별로 하나씩 써보자. AJAX데이터를 담을 Jamong .. 2018. 9. 6.

[Lombok] 롬복 설치 및 사용법 :: 마이자몽 Lombok을 사용해볼거다.작은 프로젝트에서는 굳이... Lombok을 왜 사용하나 싶다.하지만, 프로젝트 규모가 커지면 Lombok이 정말 유용해진다. Lombok 라이브러리를 사용하면, VO, DTO와 같은 클래스에서 Getter 와 Setter를 자동으로 생성해준다.즉, 굳이 Getter와 Setter를 만들어 주지 않아도 알아서 생성해준다. 이클립스에 Lombok적용을 위해 jar 파일을 받아준고, 터미널 혹은 콘솔창으로 파일을 실행해준다.https://projectlombok.org/download 123 Jamong@macui-MacBook-Pro  ~  cd Downloads Jamong@macui-MacBook-Pro  ~/Downloads  wget https://projectlo.. 2018. 9. 4.

[CentOS 7] MySQL 5.7.20 컴파일 설치 :: 마이자몽 이전에 MySQL 패키지 설치하는 것을 했다.이번에는 MySQL 소스 컴파일 설치하는 것을 할거다. 둘중 어느 방법으로 설치해서 사용해도 상관 없지만... 설치한 프로그램들을 계정내에 한 폴더에서 관리하기 위해 컴파일 설치를 할것이다.https://downloads.mysql.com/archives/ MySQL Communitiy Server 클릭 필자는 5.7.20버전을 설치한다.다운로드 링크 주소를 복사한다. wget으로 설치파일을 받고 풀어준다.12345[jamong@localhost ~]$ cd dev_util[jamong@localhost dev_util]$ mkdir mysql[jamong@localhost dev_util]$ cd mysql/[jamong@localhost mysql]$ wg.. 2018. 9. 1.

Eclipse SVN 연결하기 :: 마이자몽 이전에 CentOS 서버에 SVN을 설치하는 것을 했다.이제는 외부에서 SVN과 연결하여 사용하는 방법을 알아본다. 진행을 하기 전에 Eclipse와 SVN이 설치된 서버가 있으면 된다. Eclipse를 실행하고 Eclipse Marketplace로 들어간다. svn을 검색해주고 Subversion 설치를 진행해 준다. 설치가 완료되면Winows - Show View - Others.. SVN Repositories 선택해준다. Eclipse에 창이 하나 생겨난다.우측 상단에 "+"표시가 있는 버튼을 눌러준다. 아래 사진의 형태로 URL과 사전에 설정해준 User와 Password를 입력하고 Finish.URL 형태 : svn://주소/저장소 이름 저장소가 화면에 표시된 것을 확인할 수 있다.SVN 저장.. 2018. 9. 1.

[CentOS 7] Subversion 설치 :: 마이자몽 Subversion은 줄여서 SVN이라고도 한다.여러 사람들과 프로젝트를 진행할때 버전 혹은 소스를 공유할 수 있는 형상관리 프로그램이다. 형상관리 프로그램으로 SVN보다는 Git을 많이 사용하지만, SVN도 아직 많이 사용한다.전자정부 프레임워크에서 개발환경 소스관리 프로그램으로 SVN을 사용하도록 되어있다. 필자는 1.7.14버전으로 컴파일 설치를 할것이다.http://subversion.apache.org/ archive download site 필요한 버전의 링크주소를 복사한다. wget 방식으로 받아주고 풀어준다.12345[jamong@localhost ~]$ cd dev_util/[jamong@localhost dev_util]$ mkdir svn[jamong@localhost ~]$ cd s.. 2018. 9. 1.

[CentOS 7] Jenkins 설치 :: 마이자몽 jenkins 설치할거다.필자는 jenkins를 사용해본적이 없다.사용자들의 말에 의하면 매우 편하다고 한다.배포하는데 있어서 자동으로 반복적인 작업을 많이해준다고 한다.자세한 설명은 이해가 어느정도된 상태에서 수정하겠다. jenkins 설치를 위해 홈페이지로 들어간다.https://jenkins.io/download/ 원하는 버전 경로로 들어간다. jenkins.war파일을 받는다. wget으로 war파일을 설치하고자바 폴더를 하나 만들어준다. 자바 8이상을 사용한다면 만들어줄 필요 없다.12345[jamong@localhost ~]$ cd dev_util/[jamong@localhost dev_util]$ mkdir jenkins[jamong@localhost dev_util]$ cd jenkins/.. 2018. 8. 30.

[CentOS 7] Maven 설치 :: 마이자몽 Maven 이란?라이브러리를 관리해주는 도구이다. 메이븐 설치를 위해 아파치재단 메이븐 프로젝트로 들어가 download로 들어간다.최신 버전을 원하면 바로 보이는 링크를 사용하여 설치를 해주고, 이전 버전을 원한다면 아래 내용을 참고한다.http://maven.apache.org/ 스크롤을 내려 archives 클릭 버전 트리가 나온다.원하는 버전을 경로로 들어가준다.필자는 3.3.9버전을 설치할 예정이다. 버전 선택 후 binaries로 입장한다. tar 파일을 wget으로 받아줄거니 링크주소를 복사한다. 파일을 받아주고 풀어준다.123[jamong@localhost ~]$ cd dev_util/[jamong@localhost dev_util]$ wget https://archive.apache.or.. 2018. 8. 29.

[CentOS 7] Nginx 컴파일 설치 및 Tomcat 연동 :: 마이자몽 Nginx란?Nginx(엔진 x라 읽는다)는 웹 서버 소프트웨어로, 가벼움과 높은 성능을 목표로 한다. 웹 서버, 리버스 프록시 및 메일 프록시 기능을 가진다. 2017년 10월 기준으로 실질적으로 작동하는 웹 사이트(active site)들에서 쓰이는 웹 서버 소프트웨어 순위는 아파치(44.89%), 엔진엑스(20.65%), 구글 웹 서버(7.86%), 마이크로소프트 IIS(7.32%)순이다. 이 조사에서 생성은 되어있으나 정상적으로 작동하지 않는 웹 사이트들은 배제되었으며 특히 MS의 인터넷 정보 서비스(IIS)를 설치한 웹 사이트들의 상당수가 비활성 사이트였다. 그런 사이트들도 포함하면 MS IIS가 1위이다. 2017년 6월 현재 Nginx는 한국 전체 등록 도메인 중 24.73%가 사용하고 있다.. 2018. 8. 26.

[CentOS 7] Apache Tomcat 8.5.24 설치 :: 마이자몽 아파치 톰캣 서버를 사용하면서 막상 아파치 톰캣이 무엇인지... 아직도 확실하게 알지는 못하는 것같다.조금 더 쉽게, 이해하기 편하게 간단하게 설명을 해볼려고 한다.apache : 재단 이름이고, get, post 와 같은 요청들을 처리하는 http 웹서버이다.tomcat : WAS(Web Application Server)이고 웹서버에다 요청을 받아서 데이터를 처리하는 로직이 들어있는 웹 컨테이너로 다시 클라이언트한테 데이터를 뿌려주는? 역할을 같이한다. 이미지와 같은 리소스 파일들은 apache웹서버로, 비즈니스 로직과 같은 동적 데이터 처리는 tomcat으로 처리한다고 생각하면 되는것 같다. 이제 아파치 톰캣을 설치할 것이다.이번 글에서도 사이트에서 대표로 보여주는 가장 최신버전이 아닌, 이전버전을.. 2018. 8. 26.

[CentOS 7] MySQL 원격접속 허용하기 :: 마이자몽 MySQL 설치는 끝났다. 하지만 외부에서 DB로 접근이 아직 안된다. 방화벽 포트를 열어주고, MySQL에서 권한을 부여해야한다. 1. 방화벽 포트 개방 ssh를 위한 22번과 MySQL 3306포트가 열린것을 확인할 수 있다. [jamong@localhost ~]$ sudo firewall-cmd --zone=public --add-port=3306/tcp --permanent success [jamong@localhost ~]$ sudo firewall-cmd --reload success [jamong@localhost ~]$ sudo firewall-cmd --list-ports 22/tcp 3306/tcp 포트 변경을 하고싶다면 /etc/my.cnf 설정파일에 port=원하는 포트로 수정 혹은.. 2018. 8. 25.

[CentOS 7] MySQL 5.7.20 설치 :: 마이자몽 MySQL 5.7.20버전을 설치하려고 한다.하지만 MySQL 사이트에서 원하는 특정 버전을 설치하는게 생각보다 어렵다.글을 쓰는 날짜 기준으로 MySQL사이트에서 5.7버전을 설치하려고하면 5.7.23버전으로 바로 연결해준다.5.7.23이나 5.7.20이나 큰차이는 없을거다.하지만 특정버전이 필요한 상황이 있다.그리고 특정버전 설치를 할줄 안다면 서버환경을 잡는데 크게 시간 절약을 할 수 있다. 설치할 버전을 찾기 위해MySQL홈페이지 - DOWNLOADS - Community - MySQL Yum Repository아래A Quick Guide to Using the MySQL Yum Repository 링크를 클릭한다. 스크롤을 내리다보면 Witten the MySQL Yum repository ht.. 2018. 8. 25.

[CentOS 7] 자바 설치 :: 마이자몽 서버환경 구축을 시작하면서 가장 먼저 자바를 설치할 것이다.CentOS 설치 할때 인프라 서버로 설치를 해서 이미 자바 1.8이 설치되어있을 것이다.프로젝트를 진행하면서 간혹 이전버전의 자바를 사용 해야하는 경우가 있다.현재 설치 되어있는 자바 패키지를 삭제하고 자바 1.7.0_80으로 설치를 할 예정이다. 기존 자바 삭제12345678910[jamong@localhost ~]$ sudo yum remove java*............ [jamong@localhost ~]$ java -version-bash: /usr/bin/java: 그런 파일이나 디렉터리가 없습니다cs 보통 자바나 다른 패키지들을 설치할 때 /usr/local/ 경로에 설치를 해주는 경우가 많은데설치한 패키지들을 관리하기 쉽게 j.. 2018. 8. 25.

이전 1 ··· 8 9 10 11 12 다음

티스토리툴바