최근들어 일본 관련 뉴스와 프로들을 자주 보게 되는데 그 이유는 말도 안되는 일본의 수치였기 때문이다. 일본인들은 아시아에서 가장 잘 산다는 자부심과 함께 국민성이 뛰어나기 때문에 코로나(COVID-19)에 걸리지 않는다고 자신하는데 도무지 이해가 안되는건... 전세계 최고 고령자의 나라가 일본이라는 것과 그 말도 안되게 미어터지는 지옥철, 그리고 직장에게 평생 희생하는 수직적인 근무를 보면 코로나를 안 걸린다는 것이 말이 안되기 때문이다. 일본 사람이 아시아 사람들처럼 마스크를 많이 쓴다하지만, 올림픽 때문에 중국을 계속 개방했었고(이때 대만이나 홍콩은 차단) 한국과 함께 동아시아에서 거의 유일하게 입국을 허락한 나라가 일본이었기에 안터지는게 말이 안됐다. 그리고 사망률... 물론 한국보다 높다하지만,..
1. KDD(Knowledge Discovery in Databases)의 개요 - KDD(Knowledge Discovery in Databases)는 1996년 Fayyad가 프로파일링 기술을 기반으로 통계적 패턴이나 지식을 찾기 위해 체계적으로 정리한 데이터 마이닝 프로세스 - 데이터마이닝, 기계학습, 인공지능, 패턴인식, 데이터 시각화 등에서 응용될 수 있는 구조 Fayyad 박사 - 데이터에서 패턴을 찾는 과정을 9개의 프로세스로 제시 9개의 프로세스 분석 대상 비즈니스 도메인의 이해 분석 대상 데이터셋 선택과 생성 데이터에 포함되어 있는 노이즈(Noise)와 이상값(Outlier) 등을 제거하는 정제작업이나 선처리 분석 목적에 맞는 변수를 찾고 필요시 데이터의 차원을 축소하는 데이터 변경 분석..
본 포스팅은 ADP와 ADsP의 공통 과정인 데이터 분석 기획의 2절 분석 방법론의 내용을 다룹니다. 분석 방법론이 한번에 포스팅하기에는 내용이 방대하고 어려울 수 있기 때문에 하나의 토픽마다 포스팅을 독립해서 작성하였습니다. 분석 방법론 분석방법론의 개요- 데이터 분석이 효과적으로 기업에 정착하기 위해 체계화한 절차와 방법이 정리된 데이터 분석 방법론 수립이 필수적- 방법론은 상세한 절차(Procedures), 방법(Methods), 도구와 기법(Tool & Techniques), 템플릿과 산출물(Templates & Output)로 구성 데이터 기반 의사결정의 필요성- 고정관념(Stereotype), 편향된 생각(Bias), 프레이밍 효과(framing effect, 동일한 사건이나 상황임에도 개인의..
EAI(Enterprise Application Integration)의 개요 EAI의 개념 EAI(Enterprise Application Integration)은 약어의 의미 그대로 전사 어플리케이션 통합을 위한 솔루션이다. 처음부터 모든 어플리케이션을 연결하기 위해서 설계되어지고 만들어졌다면 EAI가 필요하지 않겠지만, 그렇지 않은 기업들은 산재되어 각자 만들어진 수많은 어플리케이션이 있을 것인데 이것을 통합하기 위해서 솔루션이 필요했으며, 그 솔루션의 명칭을 EAI라고 한다. 표준화되거나 솔루션 기반의 통합을 사용하지 않고 직접 모든 어플리케이션을 연결할 경우 이와같이 스파게티 현상이 발생한다 참고로 가트너 그룹에서는 EAI를 아래와 같이 정의한다.- 엔터프라이즈 미들웨어를 인프라로 하여 다양한 ..
해당 포스팅은 데이터 분석 전문가(ADP)와 데이터 분석 준전문가(ADsP)의 범위가 모두 포함된, 2과목 1장 1절 '분석기획 방향성 도출'에 관련된 내용을 요약하고 설명한 내용입니다. 분석기획의 특징 분석기획 - 분석을 수행하기 전에 수행할 과제를 정의하고, 의도한 결과를 도출하기 위해 적절히 관리할 수 있는 방안을 사전에 계획하는 작업 분석기획 역할 (단기) 분석과제 발굴 -> 분석 과제의 목표를 달성하기 위한 요건 정의 (데이터 분석 모델, IT 솔루션 정의 등) (중장기) 마스터플랜 수립 -> 분석 과제 수행을 위한 분석 지원 거버넌스 체제 도출 데이터 사이언티스트의 역량 - 수학/통계학적 지식 및 IT기술 뿐만 아니라, 비즈니스에 대한 이해와 전문성을 가지고 있어야 하는 3가지 영역에 대한 고..
최근들어 구충제의 효과를 재평가하는 사례들이 속속 등장하고 있다. 특히 말기암 환자들이 개 구충제 '펜벤다졸'으로 많이 회복되었다는 사례들과 최근에는 말기암으로 치료중인 개그맨 겸 가수, 김철민이 펜벤다졸을 복용하고 그 효과를 공개하면서 설왕설래는 더욱 커지고 있는 실정이다. 우리나라에서는 국립암센터에서 펜벤다졸(Fenbendazole)이 정말 암에 대해 효과가 있는지 연구를 진행하려다 준비 단계에서 가치가 없다고 취소하는 사태가 벌어졌다. 세계적인 의과대학에서는 연구중인데 국내에서 저런 모습을 보며 많은 암환우들이 비판을 하였는데, 나중에 정말 효과가 어느정도 있다로 결론이 지어진다면 국립암센터는 욕을 먹어도 할 말이 없을 것이다. 한편 미국 존스 홉킨스 대학교에서는 펜벤다졸과 성분이 비슷한 메벤다졸(..
진짜 오랜기간 동안 기다렸던, 아이폰 SE2(혹은 아이폰9)이 4월 15일 발표될거라는 소문이 돌고 있다. 해당 소식은 애플 인사이더(appleinsider) 사이트에 올라온 소식으로 4월 15일날 발표하기 위해서 애플에서 내부 회의에 돌입했다고 전했다. iPhone 9 update Eyes Per an internal meeting yesterday, Apple is now preparing for an April release. Tentative dates: - Announcement on April 15- Shipments on April 22 Keep in mind: we’re in the middle of a pandemic, and things could change. 어제 열린 내부 회의에서..
데이터를 공부하거나 컴퓨터 자격증을 공부하면서 나오는 단어 중에 정형/비정형/반정형 데이터라는 것이 자주 등장하게 된다. 정형 데이터와 비정형 데이터의 차이점은 알겠지만 반정형이라는 말이 들어가면서 헷갈릴 수 있는데 반정형을 反으로 해석해버려서 반정형 = 비정형으로 인식하는 경우가 종종 있다. 정형 데이터(Structured data) 정형 데이터는 데이터베이스의 정해진 규칙(Rule)에 맞게 데이터를 들어간 데이터 중에 수치 만으로 의미 파악이 쉬운 데이터들을 보통 말한다. 예를 들어, Gender라는 컬럼이 있는데 여기서 male, female이라는 값이 들어간다면 누가 봐도 그 값은 남자, 여자라는 것을 쉽게 인식할 수 있고, Age에 25 혹은 40과 같은 숫자가 들어가도 사람들은 쉽게 그 값을 ..
이 포스팅을 보는 사람도 마찬가지겠지만 필자 역시 이 제품을 산 이유가 누구나 동일한 혹시나 모를 코로나 바이러스(COVID-19) 사멸이고, 세균이라는 것이 내 눈에 보이는 것이 아니기 때문에 후기라고 써봤자, 내가 코로나 바이러스가 사멸했다라는 것을 알 수 있는 것이 아니기에 무의미한 후기일 수 있다. 하지만, 대다수의 국민들이 아직도 마스크에 대한 스트레스가 심각하고, 또 다른 생각으로 내가 마스크를 덜 사야 더욱 필요한 다른 사람이 마스크를 구입할 수 있다는 점과 우리나라 마스크 보유분이 여유가 생겨서 해외에 코로나와 필사적으로 싸우고 있는 유럽 의료진등이 마스크를 구할 수 있는 환경이 마련되고 싶다는 생각도 있었다. 그래서 마스크가 여유분이 충분히 있지만, 앞으로 마스크를 더욱 오래 쓰는 방법을..
호주의 거대한 산불과 세계의 기후는 더욱이 위험하고, 미래의 모습이 아름답지 않을 것 같은 지금.. 생물이 살기 힘든 사막에서 벼농사를 짓는 일들이 이루어지고 있다. 우선, 이 일을 해낸 나라는 중국으로 칭다오(青岛) 해양 개발 연구팀이 바닷물에서 자라는 벼를 이용해 두바이 사막에서 벼농사 프로젝트를 성공적으로 끝내게 되었다. 그리고 2018년 5월 아랍에미리트(UAE)와 MOE를 체결하며 UAE는 한국에게 벼 재배기술 및 품종 전파를 요청하였고 2019년에 사막 벼농사 프로젝트를 진행하였다. 두바이가 UAE의 도시이기 때문에 왜 한국에게 또 요청했나 싶지만, 중국에서 진행한 벼농사 프로젝트가 비록 재배에 성공했다한들 바닷물을 희석하는 문제 등으로 인해서 완벽하게 성공했다 보장할 수 없고, 한국에서 진행..
일본이라는 나라는 참 알기 쉬운 민족인 것 같다. 한국이라는 나라와 가장 가까우면서 가장 먼...아니 한국의 특정 족속들과는 매우 가까운 나라이긴 하지...일본의 1인당 GDP가 몇십년동안 제자리인 이유, 물가상승률을 생각하면 오히려 역성장을 하고 있는 이유는 그들의 문화 때문이다. 전자, 제조가 발전했던 시기 일본은 정해진 매뉴얼대로 행동하면 그만이었다. 일본은 온 국민이 공무원과 유사하다 왜 이러냐면, 일본이라는 나라는 한 회사에 입사를 하면 정년 퇴임할때까지 그 회사를 계속 다니는 문화가 있다. 그러다보니 20~30대는 한국 청년들이 더 연봉을 많이 받는 신기한 현상이 있으며, 40대를 넘어서면서 나이가 차게되면 한국을 압도하는 연봉을 받게 된다. 일본보다 훨씬 많이 받는 한국의 대졸 초임 연봉(대..
순환관계, 자기참조관계의 개념가. 순환관계(Recursive Relationship)의 정의- 하나의 엔터티(Entity)가 다른 엔터티가 아닌 자기 자신과 관계를 맺는 타입으로 순환관계 혹은 자기참조관계라 불린다.- 동일 Entity 타입 내에서 자기가 자기의 인스턴스를 참조하는 구조, 대표적으로 조직을 표현할 때 자주 사용 동일한 Entity타입의 Entity들이 상호간에 계층적으로 데이터가 구성되는 관계 나. 자기 엔터티타입을 참조하는 구성방법에 따른 유형복합형(다중Entity) : 동일한 PK를 가진 테이블을 별도로 분리통합형(단일Entity) : Entity타입 내에서 자기자신을 참조 다. 복합형(다중Entity)로 구성 시 자기참조관계의 단점 - 추가적인 관계 발생이나 변경 시 새로운 엔터티 ..
