On the journey of

앞으로 매 요일마다 읽는 레터를 정해둘까 싶기도 하다! 구독을 하도 많이 해놨더니 뭔가 불규칙한 느낌 별루 .... 미국장 및 증시 미국 증권시장이 또다시 약(弱)세를 기록했다. 국제유가의 상승으로 인한 결과였는데, 이뿐 아니라 10년물/2년물 국채수익률 모두 급등하는 양상을 띠는 모습을 보였다. N년물 국채수익률이란 (미국 정부가 발행하는) 채권 중 N년 만기인 국채에 대한 이자율을 의미하는데, 시장은 종합적으로 상승 동력을 되찾지 못했다는 분석이다. AI 주가 & 주가낙관론 골드만삭스의 애널리스트들이 AI 주가가 '거품이 아니'라며 피터 오펜하이머의 경우 AI 주도 주식은 과거 IT버블과 비교했을 때 훨씬 낮은 수준에서 거래되고 있다고 명시했다. 반면 모건스탠리의 마이클 CIO는 경제 성장률을 부정적..

아파치 스파크의 스트림 처리 엔진의 진화 스트림 처리: 끝없이 들어오는 데이터 흐름을 연속적으로 처리하는 것 빅데이터의 등장: 단일 노드 처리 엔진 → 멀티 노드 분산 처리 엔진 레코드 단위 처리 모델: 전통적인 분산 스트림 처리 처리 파이프라인은 각 노드들의 지향성 그래프로 구성 각 노드는 지속적으로 한번에 하나씩 레코드를 받고 처리하여 생성된 레코드를 다음 노드로 전송 → 매우 짧은 응답시간 But, 특정 노드가 장애를 겪거나 다른 노드보다 느린 상황에서 회복하는 것에 효과x 많은 복구 자원을 써서 빨리 복구하는 것이 아니라면, 최소한의 복구 자원으로 느리게 복구됨 마이크로 배치 스트림 처리의 출현 스파크 스트리밍(or DStream) == 마이크로 배치 스트림 처리 스트리밍 처리를 아주 작은 맵리듀..

https://www.youtube.com/watch?v=-hWgqTB09DM&list=PLSAJwo7mw8jn8iaXwT4MqLbZnS-LJwnBd&index=4​ 기록에 앞서, 이 포스팅은 강의를 듣고 기록한 것일 뿐이고 코드의 경우 github에 있는 코드를 공부하고자 가져온 것입니다. 때문에 저작권이 제가 아닌 해당 강의 연사분과 github owner(Jaeyoung Jo) 님께 있음을 미리 밝혀둡니다. 먼저 지난 lecture 복습부터 하자. 한 마디로 머신러닝 problem들은 크게 1) Hypothesis & Cost 2) Cost를 줄이기 위해 Hypothesis의 parameter를 바꾸는 Optimization ​이렇게 두 가지로 나뉜다는 거였다. 수식과 함께 나타낸다면 아래 이미지와..

공대생인 만큼 오랜만에 Tech 기업 관련 뉴스레터인 테크스낵을 읽어보았다. 다만 내용이 많진 않다(간단함!) 1.인스타카트(instacart) : 상장을 위한 움직임 인스타카트(한국의 B마트 같은, 식품 배달 서비스 회사)가 상장을 위한 서류를 제출하면서 본격적인 IPO(기업 설립 후 처음으로 외부 투자자들한테 주식을 공개매도하는 일)를 위한 움직임이 보인다. 이미 스타트업의 수익성으로는 흑자를 기록한 바 있으며, 모든 사업이 성장 중이진 않지만 뚜렷하게 성장 중인 비즈니스가 눈에 들어오는 기업. 2. 아마존 커머스 AI가 산업 전반을 집어삼키고 있는 트렌드 속에서, 가장 대중적인 형태는 챗봇 인터페이스라고 할 수 있다. 아마존 또한 상품 검색 챗봇 도입을 검토하고 있다고 한다. 역시 대세는 NLP 3..