일단 spark을 다루는 나의 미숙함에 정말 좌절의 쓴 맛을 많이 맛보았다. 내가 과연 할 수 있을까? 이런 생각도 많이 했었고, 정말 데이터 처리를 잘 해보고싶은 마음이 컸다. 잘 알지 못하지만.. 그래도 spark로 기능 구현을 해보며 알아가고 싶었다. 그래서 삽질도 많이 하고.. 그랬나보다. 먼저 내가 구현하려고 계획 중인 기능은 추천동영상...

spring boot 3.X.X버전에서 Apache spark를 사용하기는 하늘의 별따기라는 것을 느끼고 있다. 일단 3.X.X버전이하로 간신히 연결했는데, 여기서 부터 알 수 있다. 나는 spark를 사용하려면 자바 17버전은 사용하지 못한다. 여기저기 블로그와 서치를 한 결과 Spring Boot 3.x에서 Apache Spark를 사용하는 ...

이번에 진행할 프로젝트는 개인 사이드 프로젝트를 진행하려고 한다. 주제는 유투버가 되고 싶은 사람들을 위한 유투브 통계분석 웹서비스이다. 프론트단을 구성하기 위한 와이어프레임은 다음과 같다. 이전에 타임리프를 사용해봐서 그런지 JSP를 사용하는게 크게 어렵다고 느껴지진 않았는데.. 아직 백엔드와 DB, Youtube Data API를 연결해보...

주로 ERD 설계할 때는 ERD클라우드를 사용했었는데, 이번 기회에 다른 툴을 조금 더 알아보고 사용해보면 좋을 것 같다는 생각을 했다. 사실 ERD클라우드를 사용하는 데 큰 불편함도 없었지만 좋은 툴을 많이 알고 있으면 좋으니까! 📌 DB diagram dbdiagram SQL문을 직접 작성해야 한다. 개인적으로 불편한 부분? 1) 템플...

html+css+javascript로 간단하게 가위바위보게임을 만들었다. 디자인 참고는 가위바위보게임 기초설계라고 하면 조금 우습지만.. 유저가 가위/바위/보 중에 해당하는 이미지를 클릭하면 컴퓨터와 비교 이기면 테이블에서 1점이 올라가는 형식, 그리고 유저와 컴퓨터가 어떤 것을 선택했는지 나오게 하는 것이 목표였다. // html body &...

다음 spark 를 활용한 빅데이터 처리 관련 프로젝트를 진행하기 위해 spark 설치가 필요했는데, 블로그를 참고하여 설치했다. 크게 어려운 부분은 없었다. 하라는 대로 따라만 잘하면 설치는 간편했는데, 이제 spark를 어떻게 활용하냐는 점에서 .. 달라지겠지…😂 📌 Apache Spark의 등장배경? Spark는 MapReduce 형태의...

vue.js의 컴포넌트 기본 구조 vbase or vueinit (자동완성) <template> <div> </div> </template> <script setup> </script> <style lang="scss" scoped> </style&...

📌 네트워크 (Network) 네트워크는 여러 장치나 시스템을 연결하여 정보와 자원을 공유할 수 있게 하는 통신 시스템이다. 💡 네트워크의 종류 1) LAN (Local Area Network) : 좁은 지역(학교,가정 등)내에서 연결된 네트워크 2) MAN (Metropolitan Area Network) : 도시 규모의 네트워크 3) WA...

아래를 참고해서 DB서버에 mariaDB를 설치했다. [Linux] Ubuntu Mariadb 설치 설치 이후에 연결하려고 하면 unable to connect to localhost 데이터베이스 서버가 로컬이 아니기 때문에 연결할 때 5가지 상황을 확인해야한다. 1) DB 서버 주소 확인: 로컬호스트(localhost) 대신 DB 서버의 ...

들어가기전 한 번씩 들어보기만 했던 언어들에 대해서 알게 되었는데, 서버 사이드 스크립트 언어! 서버 사이드 스크립트 언어는 자바스크립트와는 다르게 서버에서 실행되며 데이터베이스 상호작용 및 비지니스 로직 구현, 클라이언트간의 통신을 관리한다. JSP 같은 경우는 자바 기반의 언어이기 때문에 한 번 사용해서 프로젝트를 해보고 싶은 생각을 가지고 있...