본문 바로가기

2024/07

우분투에 빅데이터 모듈을 설치하는 순서 우분투에 빅데이터 모듈을 설치하는 순서 내용 정리 출처 문서 https://stackoverflow.com/questions/72582293/order-of-installing-big-data-modules-on-ubuntu이것으로 시작하세요 https://www.digitalocean.com/community/tutorials/how-to-install-hadoop-in-stand-alone-mode-on-ubuntu-20-04 또는 https://phoenixnap.com/kb/install-hadoop-ubuntu PIG, Flume은 더 이상 관련이 없습니다. Hadoop 클러스터를 실행하는 경우 Zookeeper, 그 다음에는 Spark, 그 다음에는 Kafka. Mysql. 그러나 이 줄의 주..
라즈베리파이 클러스터를 구축하는 방법 물리적 클러스터를 구축하는 이유는 무엇인가요? 주의: 라즈베리파이 OS는 Bookworm 으로 업데이트되었습니다. 오늘날에는 Amazon이나 Digital Ocean 또는 다른 클라우드 제공업체에 가서 몇 초 만에 가상 머신을 가동할 수 있습니다. 하지만 클라우드는 다른 사람의 컴퓨터일 뿐입니다. 라즈베리파이 클러스터는 모든 종류의 클러스터 컴퓨팅 관련 기술에 사용할 수 있는 저비용의 다목적 시스템이며, 클러스터를 구성하는 머신을 완전히 제어할 수 있습니다. 처음부터 무언가를 직접 만들어 보면 다른 곳에서는 배울 수 없는 교훈을 얻을 수 있습니다. 참고 문서는 이 링크를 따라가세요.   우리가 구축할 것   단일 관리형 스위치에 연결된 8개의 노드 클러스터를 구성하겠습니다. 노드 중 하나는 소위 "헤드"..
라즈베리 파이 4 우분투 클러스터에 Hadoop HDFS 데이터 레이크 설치하기 소개몇 주 전에 저는 아파치 스파크에 기반한 실험적인 가정용 '빅 데이터' 시스템을 만들기로 했습니다. 이를 위한 첫 번째 단계는 아파치 스파크가 모든 것을 읽고 쓸 수 있는 분산 파일 시스템을 만드는 것입니다. 본 자료의 원문 기사는 이 링크를 따라가세요.HDFS는 오류 감지 및 복구, 대용량 데이터 세트, 데이터 하드웨어 등과 같은 기능을 제공하는 Hadoop 분산 파일 시스템으로, Hadoop 에코시스템의 일부이지만 Apache Spark의 데이터 분산 파일 시스템으로 훌륭하게 작동합니다. HDFS 파일시스템은 제 10개의 라즈베리파이 4 클러스터 중 8개의 RPI에 설치됩니다. 최소한의 스토리지 크기와 적절한 속도를 위해 SSD 8개 + USB3 어댑터 8개를 추가로 구입했습니다.    HDFS ..
삶을 위한 50가지 규칙 - 데일리 스토익 삶을 위한 50가지 규칙 - 데일리 스토익 삶을 위한 50가지 규칙 - Daily Stoic# 당신이 통제할 수 있는 것에 집중하라 - Epictitus일어나는 일에 어떻게 반응하는지는 당신이 통제할 수 있지만, 일어나는 일은 당신이 통제할 수 없다 - Epictitus스스로에게 물어보세요: 이것이 필수적인가? - 마커스 아릴리우스당신의 죽음에 대해 명상하십시오 - Marcus Areilius돈과 소유물보다 시간을 더 소중히 여기세요 - 세네쿠스당신은 습관의 산물이다 - 에픽티투스당신은 의견을 갖지 않을 힘이 있다 - 그것이 존재한다는 것을 몰랐다면 의견을 가질 필요가 없다 - 에픽티투스아침을 소유하라 - 좋은 하루 좋은 아침, 좋은 삶 좋은 하루를 보내라 - 마르쿠스 아우렐리우스하루를 검토하십시오 - ..
비즈니스 글쓰기를 '보통'에서 '훌륭함'으로 끌어올리는 방법 비즈니스 글쓰기를 '보통'에서 '훌륭함'으로 끌어올리는 방법by Elizabeth Danziger 요약. 이메일, 공식 문서, 소셜 게시물 또는 다른 형태의 서면 커뮤니케이션을 다루는 경우 간단한 세 가지 질문 프레임워크를 통해 글쓰기 프로세스를 빠르게 시작할 수 있습니다. 목적: 목적은 달성하고자 하는 결과, 즉 의도로 생각하세요. 간단한 이메일부터 방대한 양의 보고서에 이르기까지 비즈니스 문서의 가장 일반적인 목적은 정보 전달, 요청, 설득입니다. 목적을 미리 파악하면 전체 문서의 맥락이 만들어집니다. 사람: 독자가 메시지를 이해할 때까지는 문서가 어떤 결과물도 만들어지지 않습니다. 그들은 동의하거나 동의하지 않을 수도 있고, 좋아하거나 싫어할 수도 있지만, 그들이 이해하지 못하면 여러분의 노력은 헛..
라즈베리파이 5 레이어 혹은 클러스터 만들 때 전원 안녕하세요, 클러스터(5개 또는 6개) 라즈베리 PI 5를 만들고 싶습니다. 그들은 모두 함께 앉을 것입니다. 5 개 또는 6 개의 개별 전원 공급 장치를 구입하는 대신 좋은 솔루션 (다중 출력이있는 전원 허브 또는 기타)을 알고 있습니까? https://forums.raspberrypi.com/viewtopic.php?t=363900 고전류로 전기 DIY를 하고 싶으신가요? Pi5 6개에 대해 5V에서 최대 30A까지 이야기하고 있지만, 실제로는 (각각 SSD 이상의 주변 장치가 없다고 가정할 때) 15A면 충분할 수 있습니다. 그렇다면 모듈형 PC PSU의 용도를 변경해 보세요. 가능한 한 짧은 굵은 전선을 사용하고 각 Pi에 폴리퓨즈 또는 이와 유사한 보호 장치를 고려하세요. 30A 지원 전원 공급..
아두이노 0.96인치 OLED 디스플레이(SSD1306) 실습 0.96인치 OLED 디스플레이 사용하기​ 안녕하세요. 이번포스팅에서에는 아두이노로 0.96인치 OLED 디스플레이를 제어하는 방법에 대해서 알아보도록 하겠습니다.  OLED 디스플레이 모듈이번 포스팅에서 사용할 OLED 디스플레이 모듈은 아래 사진같이 크기가 0.96인치 입니다. 0.96인치 외에도 OLED 디스플레이 모듈은 다양한 사이즈와 색상으로 출시되고 있습니다. 아두이노를 사용한 프로젝트에 많이 사용되는 0.96인치 OLED는 128x64픽셀로 이루어져 있으며 이보다 작은 0.91인치 OLED는 128x32픽셀로 이루어져 있습니다. ​0.96인치​​0.91인치​흰색 OLED​​이 모듈은 SSD1306이라는 OLED 구동용 IC 칩에 의해 구동되는데 이 IC칩은 마이크로컨트롤러와 통신하기 위해 I..
9초를 위해 4년을 훈련하는 선수, 우사인 볼트 성공에는 대가가 따릅니다. 대가를 치르지 않고 결승선에 도달할 수 있는 사람은 아무도 없습니다. 자메이카 출신의 단거리 육상 선수 우사인 볼트는 역대 최고의 스프린터로 꼽힙니다. 그는 3번의 올림픽에서 9개의 금메달을 획득했으며, 트랙을 2분 이내에 주파했습니다. 그는 3번의 올림픽에서 1억 1,900만 달러를 벌었습니다. 이는 그가 달린 1초당 백만 달러가 넘는 금액입니다. 그 2분을 달리기 위해 그는 수년간 훈련했습니다. 성공은 실제로 과정이며, 많은 사람들이 과정을 무시한 채 이벤트에만 몰두하기 때문에 대부분의 사람들이 성공에 이르지 못합니다. 많은 사람들이 돈을 벌기만 하면 그 과정에서 자신이 어떤 사람이 되는지 신경 쓰지 않기 때문에 결국 잘못된 일을 하게 됩니다. 과정을 즐기고 계단 전체가 아..

티스토리툴바