보노남편의 지식창고

Next.js 소개 (2. Next.js 에서 제공하는 기술들)

보노남편 — Thu, 7 Jul 2022 21:43:02 +0900

Next.js는 React의 SSR(Server Side Rendering)을 지원하는 Framework이며 개발 방법은 기존 React와 거의 같다.

Next.js를 사용해 페이지를 개발할 경우 메인화면은의 응답 포맷은 아래와 같다.

Next.js 사이트의 Response

상단은 기존 React 처럼 모든 개발 내용을 가지고 있는 javscript가 import 되어있고

일반 웹페이지 처럼 Tag도 같이 제공되고 있다..

이렇게 페이지를 제공할 때 2가지의 장점이 있다.

1. 이전 글에서 언급한 검색봇의 문제를 해결할 수 있다.

- 검색 봇이 크롤링을 수행할 때 이제는 페이지 안의 많은 내용을 취득할 수 있게 된다.

2. 브라우저의 렌더링 속도가 빨라진다

- React의 경우 모든 소스코드가 Javascript로 이루어져 있고 Javascript의 실행이 끝나기 전까지는 화면에 아무것도 출력되지 않는다. 하지만 Next.js로 구성된 페이지는 렌더링이 완료된 첫 화면의 데이터가 있기때문에 완벽하진 않더라도 Javscript의 실행이 끝나기 전에도 페이지를 어느정도 이용할 수 있다.

- 또한 이것은 브라우저에서 수행되는 렌더링 작업을 서버에서 실행했다는것을 의미한다. 브라우저는 렌더링이 완료된 파일을 제공 받기 때문에 추가 렌더링 없이 읽어서 출력만 하면 된다. 당연히 페이지 출력 속도가 빨라진다.

Next.js에서는 추가적으로 브라우저에서 URL 포워딩 등 Front-End Level에서의 페이지, URL등의 접근과 개발이 가능해진다.

Next.js 소개 (1. React에서 지원하지 못하는 것)

보노남편 — Thu, 7 Jul 2022 21:21:55 +0900

일반 적으로 웹 페이지는 HTML, CSS, Javascript 3가지의 언어로 구성되어 있다.

이 3가지의 언어로 구성된 페이지를 서버에서 다운받고 클라이언트인 브라우저에서 로드하여 렌더링 하면..

현재의 페이지가 출력된다.

브라우저의 렌더링 과정

실제 네이버 홈페이지에 접속해 응답받은 파일을 보면 HTML, CSS, Javscript로 구성되어 있다.

네이버의 Response 데이터

요즘 많이 사용하는 React와 Angular 등의 홈페이지에서는 파일이 어떻게 구성되어 있을까?

React 사이트의 Response 데이터

내용이 하나도 없다. 아까 예시의 네이버에서는 홈페이지에서 보이는 글, 그림 등이 모두 HTML에서 Tag로 구성되어 있는것을 확인할 수 있었는데 React로 개발한 페이지는 아무 내용을 확인 할 수 없다. 하지만 브라우저에서는 렌더랑 완료된 화면이 동작한다. 어떻게 된 것일까?

React의 모든 소스코드는 Javascript로 구성되어있다. 브라우저에서는 Javascript의 내용대로 페이지를 만들고 우리는 브라우저에서 React로 만든 페이지를 사용하는 방식이다.

React 개발환경

React는 개발자에게 훌륭한 개발 환경을 제공한다.

예시의 네이버의 페이지를 개발하려면 HTML, Javascript, CSS 3개의 문법을 모두 사용해야 하지만

React는 Javascript 만으로 모든것을 개발할 수 있다.

하지만 모든 것에는 Trade-Off. 장점과 단점이 있는데 React의 단점은 크롤링이다.

검색엔진은 웹페이지를 크롤링하고 해당 정보를 기반하여 검색정보를 구성한다.

네이버의 경우 크롤링 엔진이 네이버 페이지를 다운받으면 메인화면의 모든 내용이 포함되어 있어서 검색 정보를 구성하기 쉽지만

React로 구성된 홈페이지의 경우 검색봇이 크롤링을 수행해도 <title>, <meta> Tag에 기입된 텍스트 외에는 정보를 얻을 수 없다.

Next.js의 기술중 하나는 이 부분을 해결하여 지원해 준다.

JDK 종류 총 정리 Oracle JDK, OpenJDK, Adpot, Corretto, Zulu

보노남편 — Thu, 7 Apr 2022 22:19:35 +0900

여러 가지의 JDK가 있는 이유

가장 큰 이유는 라이센스이다.

최신 버전의 Oracle JDK 17, 18의 경우 "Oracle No-Fee Terms and Conditions (NFTC)" 라이센스가 적용된다.

사용 가능한 목적과 대상은 다음과 같으며 회사에서 상용목적으로는 사용이 불가하다.

"internally use the unmodified Programs for the purposes of developing, testing, prototyping and demonstrating your applications, and running the Program for Your own personal use or internal business operations"

Java 소스코드 자체는 오픈소스이다. 오픈소스인 Java 소스코드를 빌드하여 사용하는 것에는 거의 제약이 없지만

Oracle에서 제공하는 설치버전의 JDK에는 위의 NFTC 라이센스가 적용되어 회사에서는 사용할 수 없다.
이것이 다양한 버전의 JDK가 있는 이유이다.

주요 JDK

Oracle JDK

- Oracle에서 제공하는 JDK. 구독을 통해 유료 라이센스를 구매할 수 있다.

OpenJDK

- 유명한 무료 JDK. 하지만 OpenJDK를 직접 사용하는것 보다는, OpenJDK 기반으로 빌드된 JDK 사용을 추천한다.

Azul Zulu

- 아줄 줄루. 재미있게 읽을 수 있다.

인지도가 높은 JDK 중 하나이며, Mac 등에서 사용할 수 있는 바이너리를 제공하는 것이 특징이다.

- 또한 Azul에서는 Zing이라는 고성능 유료 JDK를 판매하고 있다.

https://www.azul.com/downloads/?package=jdk#download-openjdk

Downloads

Free for evaluation and development

www.azul.com

Amazon Corretto

- AWS에서 제공하는 JDK. AWS에서 쉽게 사용 가능하며, AWS 환경이 아니더라도 사용할 수 있다.

- Amazon에서 업데이트를 지원해 주는 것이 특징이다.

https://aws.amazon.com/ko/corretto

Amazon Corretto 프로덕션용 OpenJDK 배포

Amazon Corretto를 사용하여 클라우드, 온프레미스 및 로컬 시스템에서 동일한 환경을 실행할 수 있습니다. Corretto 8는 Linux, Windows, macOS, 및 Docker를 지원하며, Corretto 11는 Linux, Windows 및 macOS를 지원합

aws.amazon.com

Temurin (AdoptOpenJDK)

- Eclipse에서 제공하는 JDK. Eclipse를 사용한다면 Temurin 설치를 추천한다.

https://adoptium.net/

Home

Eclipse Adoptium provides prebuilt OpenJDK binaries from a fully open source set of build scripts and infrastructure. Supported platforms include Linux, macOS, Windows, ARM, Solaris, and AIX.

adoptium.net

JDK 선택 방법

1. 라이센스 확인

- 사용 목적에 따라서 라이센스 확인이 가장 중요하다. Oracle JDK를 제외하고,
위에 소개된 JDK는 모두 무료로 사용할 수 있다.

2. 업데이트 지원

- 보안 패치 등을 포함하여 업데이트 지원은 중요하다. 각 JDK 제공 업체의 업데이트 플랜을 확인할 수 있다.

예로 Zulu의 경우 Java 17 LTS 버전은 2029년 까지의 업데이트를 보장한다.

https://www.azul.com/products/azul-support-roadmap/

Azul Support Roadmap

Azul Product Support Lifecycle Azul product releases align with Oracle’s and OpenJDK’s general availability for releases of Java SE. Azul customers have access to bug fixes, enhancements, and quarterly and emergency security updates. Azul’s commercia

www.azul.com

3. TCK 인증 확인

TCK는 JDK의 완성도를 검증하는 인증으로, JDK의 TCK 인증 유무 확인도 중요하다.

소개한 Corretto, Zulu, Temurin은 모두 TCK를 통과한 JDK 이다.

Java 버전 관리 도구 "SDKMAN"

보노남편 — Thu, 7 Apr 2022 21:09:41 +0900

여러 개발 도구의 버전 관리 방법

보통 개발을 시작할 때, UI Framework 등 사용이 필요한 라이브러리를 선정하고

사용할 라이브러리가 실행되는 개발 환경 구축하는 순서로 진행한다.

문제는 여러 개발 과제가 여러 개인 경우 Python, Node.js, Java 등의 버전을

각각의 과제에서 달리하여 사용이 필요할 때가 있다.

Python의 경우 pyenv가 유명하며 Anaconda를 설치하여 해결할 수도 있다.

https://github.com/pyenv/pyenv

GitHub - pyenv/pyenv: Simple Python version management

Simple Python version management. Contribute to pyenv/pyenv development by creating an account on GitHub.

github.com

https://www.anaconda.com/products/distribution

Anaconda | Anaconda Distribution

Anaconda's open-source Distribution is the easiest way to perform Python/R data science and machine learning on a single machine.

www.anaconda.com

Node.js의 경우 NVM을 사용하여 버전 전환이 가능하다.

https://github.com/nvm-sh/nvm

GitHub - nvm-sh/nvm: Node Version Manager - POSIX-compliant bash script to manage multiple active node.js versions

Node Version Manager - POSIX-compliant bash script to manage multiple active node.js versions - GitHub - nvm-sh/nvm: Node Version Manager - POSIX-compliant bash script to manage multiple active nod...

github.com

Java는 SDKMAN을 사용하여 다양한 버전을 설치하고 전환/관리 할 수 있다.

Java의 버전 관리 방법

1. SDKMAN 설치

$ curl -s "https://get.sdkman.io" | bash

2. SDKMAN 적용

새로운 터미널을 열거나 아래 명령어를 실행한다.

version이 출력되면 설치 완료.

$ source "$HOME/.sdkman/bin/sdkman-init.sh"
$ sdk version

3. SDKMAN을 통해 설치 가능한 Java 조회

$ sdk list java

4. SDKMAN을 통해 Java 설치

- 어떤 버전을 설치해야 할지 잘 모른다면 아래 명령어를 통해 기본버전(최신버전) 설치가 가능하다.

$ sdk install java

- 특정 버전 설치가 필요하면, 뒤에 이름을 명시해 준다.

$ sdk install java 17.0.2-zulu

- 선택한 버전이 잘 설치되었다.

5. Java 버전 변경

- 위 방법으로 여러 개의 Java를 설치하고 사용할 Java를 선택할 수 있다.17.0.2-tem 버전을 선택하는 방법이다.

$ sdk use java 17.0.2-tem

- 선택한 버전으로 잘 변경되었다.

6. Java 주요 버전 및 추천

현재 사용 가능한 LTS 버전은 Java 8, Java 11, Java 17이다. 이 3 버전 중에서 사용하는 것을 추천한다.

PS. sdkman은 Java를 포함하여 gradle, Kotlin, Maven 등 다양한 SDK의 설치를 지원한다.

출처 : https://sdkman.io/

여러가지 Java 종류에 대해 궁금하다면?

2022.04.07 - [분류 전체보기] - JDK 종류 총 정리 Oracle JDK, OpenJDK, Adpot, Corretto, Zulu

Elasticsearch Build 방법

보노남편 — Wed, 6 Apr 2022 23:24:07 +0900

Prerequisite

Elasticsearch 빌드를 위해서는 Java가 필요하다.

8.x 버전 빌드에는 Java 17 버전이 필요하며

7.x 버전 빌드에는 Java 11 버전이 필요하다.

Ubuntu 환경에서 Elasticsearch 8.1.2 버전 기준 빌드 방법은 다음과 같다.

Build From Source

1. Java 17 다운로드

- Java 설치에는 여러 가지 방법이 있는데, 필자는 Azul Zulu를 통한 설치를 추천한다.

- 테스트해 봤을 때 설치가 가장 쉽고 성공적으로 적용된다. 더불어 장점도 많다.

- 아래 사이트에서 .deb 버전으로 다운로드한다.

https://www.azul.com/downloads/?version=java-17-lts&os=ubuntu&architecture=x86-64-bit&package=jdk

Downloads

Free for evaluation and development

www.azul.com

2. Java 17 설치

$ sudo apt install ./zulu17.32.13-ca-jdk17.0.2-linux_amd64.deb

3. Elasticsearch 소스 다운로드

$ git clone https://github.com/elastic/elasticsearch.git

4. Elasticsearch 버전 선택

- 사용 가능한 버전은 릴리즈 페이지에서 확인할 수 있다.
https://github.com/elastic/elasticsearch/releases

Releases · elastic/elasticsearch

Free and Open, Distributed, RESTful Search Engine. Contribute to elastic/elasticsearch development by creating an account on GitHub.

github.com

- v8.1.2 버전을 선택한다.

$ cd elasticsearch
$ git checkout tags/v8.1.2

- 아래와 같이 "Note: switching to 'tags/v8.1.2'가 출력되면 성공

5. Build Elasticsearch

- Build를 실행하는 OS에서 사용할 수 있는 ES 버전으로 빌드를 수행한다.
(필자의 PC 환경으로 5분 소요)

$ ./gradlew localDistro

6. Build 결과 확인

- 빌드가 완료되면 build 폴더가 생성되어 있고 build/distribution/local/elasticsearch-8.1.2-SNAPSHOT 위치에서 결과물을 확인할 수 있다.

$ cd build/distribution/local/elasticsearch-8.1.2-SNAPSHOT

7. Elasticsearch 실행

- bin 폴더로 이동하여 elasticsearch 파일을 실행한다.

$ cd bin
$ ./elasticsearch

8. Elasticsearch 테스트

- 8.x 버전부터는 접속에 인증서가 필요하다. config/certs/http_ca.crt 를 사용하면 된다.

- http_ca.crt를 적절한 위치에 복사하고 아래 명령어 실행. 초기 비밀번호는 실행된 Elasticsearch 콘솔에 출력되어 있으니 사용한다.

$ curl --cacert http_ca.crt -u elastic https://localhost:9200

- 빌드한 ES가 성공적으로 실행되고 있다.

출처 : https://github.com/elastic/elasticsearch

Ubuntu Docker 설치 방법

보노남편 — Mon, 4 Apr 2022 22:35:09 +0900

권장 OS

Ubuntu Impish 21.10
Ubuntu Hirsute 21.04
Ubuntu Focal 20.04 (LTS)
Ubuntu Bionic 18.04 (LTS)

설치 방법

1. 필요 패키지 설치

$ sudo apt-get update

$ sudo apt-get install \
    ca-certificates \
    curl \
    gnupg \
    lsb-release

2. Docker GPG Key 추가

 $ curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /usr/share/keyrings/docker-archive-keyring.gpg

3. Docker Repository 추가

$ echo \
  "deb [arch=$(dpkg --print-architecture) signed-by=/usr/share/keyrings/docker-archive-keyring.gpg] https://download.docker.com/linux/ubuntu \
  $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null

4. Docker 설치

$ sudo apt-get update
$ sudo apt-get install docker-ce docker-ce-cli containerd.io

5. 설치된 Docker 버전 확인

$ sudo docker -v

2022-04-04 기준 최신버전인 20.10.14 (2022-03-23) 버전이 잘 설치 되었다.

Way to check docker version

https://docs.docker.com/engine/release-notes/

Docker Engine release notes

docs.docker.com

6. 테스트

$ sudo docker run hello-world

아래와 같이 메세지가 출력되면 성공

Run hello-world from docker

출처 : https://docs.docker.com/engine/install/ubuntu/

Elasticsearch License

보노남편 — Mon, 4 Apr 2022 19:30:49 +0900

2022-04-04 기준 Elasticsearch와 Kibana는 ELv2와 SSPL 두 개의 License를 제공하고 있다.

7.11 이전 버전까지 포함하면 Apache 2.0 까지 총 3가지의 License를 사용할 수 있다.

Elastic License 2.0 (ELv2)

주요 내용

Elastic License 2.0은 Elasticsearch와 Kibana의 모든 무료 및 유료 기능의 소스 코드와 Elastic의 배포에 적용됩니다. ELv2를 이용하는 우리의 목표는 어뷰징으로부터 보호하면서 가능한 한 많은 것을 허용하는 것입니다. 이 라이선스는 다음의 세 가지 간단한 제한 사항과 함께 사용, 수정, 파생 작품 생성 및 재배포를 할 수 있는 자유로운 권리를 허용합니다.

제품을 다른 사람에게 관리형 서비스(Managed Service)로 제공할 수 없습니다.
라이선스 키 기능을 우회하거나 라이선스 키로 보호되는 기능을 제거하거나 숨길 수 없습니다.

Elastic은 우리의 제품과 브랜드가 남용되는 것으로부터 보호하는 것에만 제한을 최소화하려고 노력했습니다.

주의 사항

ES와 Kibana는 소스코드가 공개되어있다.

https://github.com/elastic/elasticsearch

GitHub - elastic/elasticsearch: Free and Open, Distributed, RESTful Search Engine

Free and Open, Distributed, RESTful Search Engine. Contribute to elastic/elasticsearch development by creating an account on GitHub.

github.com

https://github.com/elastic/kibana

GitHub - elastic/kibana: Your window into the Elastic Stack

Your window into the Elastic Stack. Contribute to elastic/kibana development by creating an account on GitHub.

github.com

소스코드 수정 금지에 대한 내용을 포함하고 있으며

개인이 설치하여 사용하는 데에는 이슈가 없다.

다만 "제품을 다른 사람에게 관리형 서비스(Managed Service)로 제공할 수 없습니다." 항목을 조심해야 한다.

서비스를 구성하고 고객이 ES API를 직접 사용하거나 Kibana에 직접 접속 후 기능 사용을 제공하고 있다면 라이센스에 위배된다.

이 경우 골드 이상의 유료버전을 구독해야 한다.

(ES 담당자와 컨설팅 필요!!)

https://www.elastic.co/kr/subscriptions

구독 | Elastic Stack 제품 및 지원 | Elastic

구독 수준, 요금제, Elastic Stack(Elasticsearch Kibana, Beats, Logstash)의 온-프레미스 배포에 대한 계층화된 기능, Elastic Cloud, Elastic Cloud Enterprise에 대해 알아보세요.

www.elastic.co

또한 소스코드를 직접 빌드하여 사용하는 것이 아닌, Elasticsearch와 Kibana 배포판(설치형)을 사용하는 경우 ELv2 라이센스가 자동 적용된다 (선택지가 없다).

필자의 경우 Docker로 배포되는 Elasticsearch와 Kibana를 사용하는데, 이 경우도 ELv2가 적용되어 있었다.

Server Side Public License (SSPL)

SSPL은 MongoDB에서 사용하는 것으로 유명한 라이센스이다.

AWS 등 클라우드 서비스에서 오픈소스 서비스를 무분별하게(?) 상용화하여 서비스하는 것을 방지하는 것이 주목적이다.

(MongoDB를 통한 수익의 환원이 제대로 이루어지지 않아서 발의되었다고 한다)

SSPL은 GPLv3에 기반을 두고 있으며 소스코드 수정 시 공개를 원칙으로 한다.

ES와 Kibana를 빌드할 때 SSPL 라이센스를 선택할 수 있다.

Apache 2.0

7.10 버전까지 소스코드에 대해서 제공했던 라이센스이다.

https://github.com/elastic/elasticsearch/blob/7.10/LICENSE.txt

GitHub - elastic/elasticsearch: Free and Open, Distributed, RESTful Search Engine

Free and Open, Distributed, RESTful Search Engine. Contribute to elastic/elasticsearch development by creating an account on GitHub.

github.com

7.11 버전부터는 Apache 2.0 라이센스를 제공하지 않고 ELv2와 SSPL 라이센스만 제공한다.

https://github.com/elastic/elasticsearch/blob/7.11/LICENSE.txt

GitHub - elastic/elasticsearch: Free and Open, Distributed, RESTful Search Engine

Free and Open, Distributed, RESTful Search Engine. Contribute to elastic/elasticsearch development by creating an account on GitHub.

github.com

출처 : https://www.elastic.co/kr/pricing/faq/licensing

[AI & ML] 정확도, 정밀도, 재현율, F1 점수

보노남편 — Thu, 22 Oct 2020 20:22:54 +0900

정확도

TP / 전체 데이터
TP(Ture Positive) : 올바르게 예측한 값

정밀도

TP / (TP + FP)
FP(False Positive) : 맞다고 예측한 값이 틀렸을 경우
정밀도는 결국.. 예를 들어서 비가오는날을 예측하는 경우
비가온다고 예측한 날에 비가 온 경우 / (비가온다고 예측한 날에 비가 온 경우 + 비가 온다고 예측했지만 비가 안온 경우) 이다.
정확도 보다 정밀도를 따라 우산을 챙긴다면 우산을 챙겼을때 비가 오지 않는날이 있다고해도 실제 비가 왔을때 대비 할 수 있을 경우가 높아진다

재현율

TP / (TP + FN)
암환자를 예로 들때 암환자자라고 진단한 전체 환자 중 실제 암 환자 비율
재현율이 높을수록 모델을 사용할 수록 암환자를 조기에 정확히 발견할 수 있다

F1 점수

정밀도와 재현율 값을 조화평균 하여 사용하는 값
조화평균 = 2 * a * b / ( a + b )
조화평균의 사용예로는 서울에서 부산을 왕복했을때 내려갔던 속도, 올라왔던 속도가 다를 경우 전체 왕복속도의 평균값을 찾기 등이다.

모델을 평가하는데 기준이 되는 값 선정

데이터가 균등하게 분포되어 있다면 정확도를 사용한다
데이터가 균등하지 않다면 F1 점수를 사용하는것이 좋다. 예를 들어 A/B/C/D 를 예측하는 모델1과 모델2가 있을경우

모델1: A의 예측능력은 높으나 B/C/D는 잘 예측하지 못함
모델2: A/B/C/D 전체적으로 예측을 잘 하나 모델1보다 A예측 능력은 떨어짐
이런 경우에 정답이 A인 데이터만 아주 많다면 모델1의 정확도 수치가 높을수 밖에 없고 이 경우 정확도로 모델을 선정하는것이 무조건 좋은 선택이라고 볼 수 없다. 이경우 F1 점수는 모델2가 높고, 모델2의 선정도 고려할 수 있다

[AI & ML] 분류와 회귀

보노남편 — Thu, 22 Oct 2020 20:21:27 +0900

분류

이진분류, 다중분류 등이 있으며 레이블이 예/아니오, 남자/여자, 동그라미/세모/네모 등과 같이 정해진 값측하는 학습이다

회귀

연속된 값을 예측
사람의 키, 현재 온도 등 연속되는 수치를 예측하는 학습

[AI & ML] 지도학습, 비지도 학습

보노남편 — Thu, 22 Oct 2020 20:20:22 +0900

지도학습

정답을 알려주면시 진행하는 학습
데이터와 함께 레이블(정답)이 항상 제공되어야함
실제값, 레이블, 타깃, 클래스, y값은 모두 같은 의미
학습이 완료된 다음에는 레이블이 없는 데이터를 대상으로 하여 레이블을 예측할 수 있다.
이때 예측된 값을 예측값, 분류값, y hat으로 표현
지도 학습의 예로는 분류와 회귀가 대표적이다.

비지도학습

레이블(정답)이 없는 데이터를 대상으로 진행하는 학습
보통 데이터들의 유사점을 찾아서 그룹핑하는데 많이 사용
비지도학습의 대표적인 예로는 군집화와 차원축소가 있음