saay, hi

저 에러 문구가 뜰 경우, 접속 방법1."psql"2.\l3.\c {data_base} 원인 : Pg_hba.conf (pg 접속 관리하는 conf 파일)에서 특정 db로 접속하게 제한함"psql"로 접속하면 os 계정의 초기 접속 설정으로 들어가서 명시 안해줘도 알아서 들어가기 때문에 큰 따옴표를 붙여줄 경우 접속 가능  Kafka user로 접속할 경우,"psql" -U {user} -d {data_base}접속 가능

1.kafka connect란kafka는 메시지를 발행하는 producer , 메시지를 소비하는 consumer, 중앙화된 전송 영역을 제공하는 broker로 구성됨하나 이상의 broker는 kafka cluster에 저장되며 각 broker는 여러개의 topic을 가지며 topic에 메세지가 저장됨실제 kafka 시스템을 분산 시스템에 적용할 때 개발자는 producer AP, consumer AP, broker를 구동해야하는데 여기서 직접 파이프라인을 구축해야함구축해야할 파이프라인이 여러개라면 매번 반복적으로 파이프라인을 구성해야하는 번거로움 발생또한, producer와 consumer가 코드를 작성할 수 없고 변경도 불가능한 시스템(ex. DB, storage service, Amazon S3, E..

프로파일(profile)Java EE 애플리케이션 서버(jboss/wildfly)에서 서로 다른 실행 환경 구성을 의미함프로파일은 서버가 어떻게 동작할지 결정하는 "설정 파일들의 모음"각 프로파일은 서버의 특정 기능, 성능 요구, 클러스터링 설정 등에 맞춰서 설계됨 1.프로파일이란, 서버가 동작할 때 사용하는 설정모드각 프로파일은 서로 다른 구성 요소나 서비스가 포함된 설정을 제공함이 설정 파일들은 서버의 각종 기능( ex, 데이터 소스, 트랜잭션 ,메일 세션, 클러스터링 등) 을 어떻게 활성화하거나 비활성화할지 정의함 2.standaloen-ha.xml파일과 HA 프로파일Standaloen-ha.xml은 고가용성(HA, High Availability)을 지원하는 서버 구성을 정의하는 프로파일HA 프로..

*db 절체와 관련하여 JDBC 드라이버 내 적용 가능한 옵션 여부는 DBNM 벤더측에 문의 환경 :waswildfly14dbpostgres  제 환경에서 테스트 가능한 wildfly14-postgres> 구조에 한하면,java:/jdbc/TestJNDI" pool-name="PostgreSQL" use-ccm="false" tracking="false" statistics-enabled="true">        jdbc:postgresql://10.217.69.58:5432/postgres?prepareThreshold=0>            pg             ...                            select 1                false             ..

[ TA 기술 관련 ]일단 가장 먼저 TA란 그룹을 의미하며, 각 영역별로 담당자가 존재하였음을 알았습니다. (이전까진 한 명의 TA가 인프라 영역 아키텍쳐를 다 관리하는 줄만 알았습니다.) TA가 현황 분석을 위해서 수행해야할 지표 및 목표에 대해 설명을 들었습니다. 사용량 분석 항목에서 분석 항목별로(하드웨어 구성 /미들웨어 성능의 적정성 / 미들웨어 운영의 적정성 / DB 구성 / 네트워크 환경분석 / 네트워크 운영 및 교육)세부 분석 항목, 점검항목, 점검 방법을 배웠습니다.  사용량 분석 항목 中 미들웨어 부분특히 미들웨어 관련하여 아래와 같이 어떤 점검 항목이 있으며 점검방법에 대해 말씀해 주신 것이 기억에 남습니다.분석항목세부 분석항목점검 항목점검방법미들웨어 성능의적정성파라미터 설정의적정성미..

Day1 -데이터 엔지니어 정의 / Azure Synapse Analytics 소개 / Azure Synapse Analytics의 작동 방식에 관하여데이터 엔지니어란, 일반적으로 여러 형식의 데이터를 사용하여 개별 조직에 적합한 많은 스크립팅 또는 코딩 언어를 통해 많은 작업을 수행함을 일컫음데이터 유실 및 처리시간때문에 10년 전부터 hadoop대신 apache spark를 많이 씀이번 교육은 위 사진과 같이 Azure Synapse Analytics 관련 설명 및 실습으로 진행여기서 언급된 Azure Synapse Analytics란, 데이터 파이프라인을 실행하고 데이터 레이크 또는 관계형 데이터 웨어하우스에서 분석 데이터를 관리하기 위한 기능을 제공하는 Azure 서비스를 뜻함강의 보충 자료)기술..

Day1클라우딩 컴퓨터, AWS architecture for  Big Data, 정형 데이터와 비정형 데이터, 아파치 스쿱, AWS 실습을 진행클라우딩 컴퓨터란 인터넷을 통해 IT 자원(물리적 서버, 네트워크)과 Application을 원하는 시점(on demand)에 사용한만큼만 활용(종량제)가능한 서비스 장점) 1) 인프라에 대한 전문적인 지식 없이도 쉽게 서버 및 어플리케이션 활용이 가능하며,2) 초기 선 투자가 불필요하고 , 3) 핵심 역량에만 집중 가능하며(생산성과 사용편의성),4) Auto-scal compute resources to demands,5) 사용한 비용만 지불 단점)1) 플랫폼 종속성 문제와2) 지속적인 운영 시에 비용 측면을 간과할 수 없음  AWS architecture f..

1일차에는 그 전에 들었던 AWS 정보 수집하는 내용을 복기2일차에는 빅데이터 분석/ 처리에 대해 이론을 배우며 직접 실습 후, 캡스톤 진행 필요한 주요개념과 사용되는 것들(ex. Security Groups, Elastinc IP Address)에 대한 개념을 학습 >AWS의 주요 서비스를 실습 진행일단 실습 전 S3 버킷구조를 학습 후. 정형, 비정형 데이터를 수집하고 저장하는 버킷과 데이터의 원본파일을 저장하는 버킷으로 실습 (AWS 빅데이터 저장/수집 참고)(한 아이디로 쓰는거라 버킷은 이미 만들어져있었고 그 안에 IAM user name이 지정돼, 지정된 user name으로 서비스를 이용) 0) 버킷 안에 계정 명을 만들고 그 안에 데이터 레벨(L0,L1,L2)을 만듦1) L0는 data la..

ch02시스템 지연 발생 주요 모니터링 방법 : 장비 별 서버 검정                                                                   db/ network / middleware session 정의  2. 시스템 지연 발생 주요 모니터링 고려사항   3. 쓰레드 덤프란  4. Jmeter를 활용한 기본 성능 테스트  5. lib 주의사항  6. 장애분석 실무 사례Jmeter를 활용한 기본 성능 테스트 : 부하량 관련 / 부하가 있을 경우 web was 현상누적된 처리량, 현재 처리량 (예상 시나리오를 가지고 부하를 던진 후 퍼포먼스 파악) 1. 시스템 지연 발생 주요 모니터링 방법       1) 장비를 나눠서 서버 검정  → 각각의 부하량에 대해서 얼..

ch011.apache  ·  tomcat 유연한 아키텍처 유연한 아키텍처 :   AP구성에 따라 (+ 필요한 instance에 따라 was 양을 조절하며) flexible 구성 및 설치/지원2. 연계 구성3tier ( client - 웹/애플리케이션 - db ): browser ↔ apache ↔ tomcat ↔ database 3.시스템 지연 발생 주요 모니터링(1) - 세부모니터링세부 모니터링 측면에서 봐야할 요소  : 1) access.log                                                                     2) error.log                                                                ..