"분류 전체보기" 관련 글 230

Apache Spark Cluster 구성
Tips 2021. 10. 10. 21:48
아래의 블로그가 매우 유용하였다. https://velog.io/@somnode/spark-cluster-install [spark] Spark 3 클러스터 설치 두 개의 컴퓨터를 사용하여 hadoop 클러스터 위에서 돌아가는 spark 클러스터를 설치한다.각각 master, worker1라고 한다.이미 hadoop cluster가 구축되어있다는 가정 하에 진행한다.\[hadoop] Cluster 설치 참고 velog.io Hadoop Cluster 위에서 동작하는 Spark를 설치하는 것이므로 먼저 Hadoop Cluster를 설치해야 한다. 이 글을 참고하여 먼저 Hadoop Cluster를 구성해주자. Spark를 설치한 환경은 1개의 Master, 2개의 Slave의 총 3개의 서버로 구성하였다...
Spark 메모
카테고리 없음 2021. 10. 8. 23:05
그렇지.. 하다보면 궁금한 게 계속 나오는거지 standalone vs. yarn? https://www.facebook.com/groups/sparkkoreauser/posts/1526118027450095/ 로그인 또는 가입하여 보기 Facebook에서 게시물, 사진 등을 확인하세요. www.facebook.com
Hadoop의 standalone 설치 방법
Tips 2021. 10. 8. 17:36
Hadoop을 Docker 기반의 Cluster로 구성하려다 실패함 그래서 하나씩 차근차근 밟아가기로 함 standalone 설치는 아래 링크를 확인할 수 있지만, 그래도 정리가 좀 필요해 보임 https://eyeballs.tistory.com/420 [Hadoop] Standalone 설치 방법 간단한 기능 테스트를 위한 Hadoop Standalone 설치 방법을 설명한다. localhost 에 설치할 것이고, 각종 옵션 등의 설명은 없다. 오로지 기능 테스트를 위해 간단하게만 설치한다. docker 를 이용하면 쉽 eyeballs.tistory.com 먼저 ssh 연결 $ ssh-keygen -t rsa $ cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys $ serv..
안드로이드 관련 온갖 메모
카테고리 없음 2021. 10. 3. 01:24
1. 빌드를 빠르게 하기 https://engineering.linecorp.com/ko/blog/how-to-make-android-app-build-faster/ Android 앱 빌드 속도를 높이는 10가지 방법 - LINE ENGINEERING 이번 글에서는 Android 앱 빌드 속도를 높일 수 있는 10가지 방법에 대해 알아보려고 합니다. 빌드 속도는 생산성 향상을 위해 매우 중요한 요소입니다. 저는 APK 하나를 생성하는 데에 8분 넘게 걸 engineering.linecorp.com
Python의 가독성과 OOP에 대한 개인적인 견해
Tips 2021. 9. 29. 12:53
Python과 Java의 가독성을 비교해보면 어떨까? 개인적으로는 Python에 비해 가독성의 측면에서는 Java가 더 우수하다고 생각한다. 물론 이것도 어떻게 코딩을 하느냐에 따라 달라지기 때문에 정답은 아니다. Python에 비해 Java는 OOP가 거의 강제되다 시피 코딩을 하게 된다. 그래서 Java를 이용하여 애플리케이션을 구현할 때는 거의 반강제로 OOP 방식으로 설계를 하게 된다. OOP가 꼭 가독성을 높이는 것은 아니지만, 효과적인 구조를 설계하는 과정에서 의식적 혹은 무의식적으로 코드를 읽기 쉽게 짜려고 한다. 물론 Python도 OOP를 지향한다. 하지만 Python은 OOP가 강제되지 않는다. 물론 Django같은 웹 앱 구현을 위한 프레임워크에서는 OOP로 개발해야 하지만, 그 외 ..
admin

티스토리툴바