까까마까 #2 순서(개미와 베짱이)_스마트폰용 Kakamaka TV: sequence (The Ant and Grasshopper)

Ka Kaka Kakama Kakamaka Kakamaka TV Kakamaka #2 Sequence 덜컹 덜컹 휘이이잉(바람 소리) 덜컹 덜컹 개미의 집 Ah Ah Ah-!! Ah-!! Ah- Ah- 얌 얌 개미야! 무더운 여름이 오면 어떡하려고 그렇게 놀고만 있니? Ah- Ah- Ah- Ah- Ah- Ah- 쯧쯧

쨍 쨍 (뜨거운 햇볕) 끙 끙 헉- 헉- 끄응, 끙 헉- 헉- 저 새끼 저거, 겨울에 그렇게 놀더니, 내가 저럴 줄 알았어!! ?? 이이게 아닌 거 같은데 wolbut@naver

com By Wolbut 그림에서 6과 9의 두 개의 숫자가 숨어있습니다 찾아보셨습니까? 이번 편에는 과연 어디에 6과 9가 숨어있을까요? Kakamaka TV를 방문해 주셔서 감사합니다 앞으로 재미있는 만화를 많이 업로드 하겠습니다 '구독과 좋아요' 눌러주세요~♥

Big Data to win in sports betting: learn the basis in less than 10 minutes

안녕 내 이름은 "Big Data Betting"과 "Winning Betting Strategies"의 저자 인 Tom Whitaker입니다

Big Data를 통해 스포츠 베팅에 돈을 버는 방법을 설명한 2 권의 책 Betamineiccom이 만든 놀라운 무료 도구로 큰 데이터를 사용하여 자신의 도박 시스템을 조사하고 발견 할 수 있습니다 Betaminic은 2012 년 이래로 54 개 리그에서 10 만개 이상의 거대한 데이터베이스와 마권 확률을 가지고 있습니다 7 년이 넘는 데이터입니다

이 데이터베이스를 무료로 사용해 도박을 찾을 수 있습니다 전략은 과거에도 효과가있었습니다 북 메이커 확률은 자신의 모델을 기반으로하며 수익을 창출하기 위해 책을 균형있게 조정하고 시장 이동에 영향을받습니다 그것들은 각 게임의 진정한 확률에 대한 완벽한 반영이 아닙니다 때로는 확률이 잘못되어 Betaminic의 무료 데이터 분석 도구가 도움이됩니다

확률이 일관되게 틀리면 값을 찾을 수있는 패턴을 찾습니다 시스템이 작동하고 과거에 돈을 벌었다는 것을 안다면, 우리는 우리 자신의 시스템을 만들기위한 좋은 출발점을 가지고 있습니다 자신을 사용하고 스포츠 베팅에서 돈을 벌 수있는 베팅 전략을 얻었습니다 이 도구를 얼마나 쉽게 사용하는지 보여 드리겠습니다 이것은 메인 페이지입니다

여기에서 무료로 등록 할 수 있습니다 그런 다음 Betamin Builder 도구에 액세스하여 데이터베이스를 분석 할 수 있습니다 그것은 모두 무료입니다 "내 전략"영역에서 자신의 전략을 연구하거나 공개 전략을 사용하십시오 이러한 공개 전략은 Betaminic, 여기에는 Pro 심볼로 보거나 웹 사이트에서 전략을 공유 한 일반 사용자가 볼 수 있습니다

자신의 미래 시스템을 만들기위한 아이디어를 얻을 수 있기 때문에 공공 전략으로 시작하는 것이 좋습니다 또한 1 년 이상 운영되어 왔으며 여전히 수익을 창출하고있는 전략을 따를 수 있습니다 각 시스템은 0에서 100 사이의 베타 닉 랭킹을가집니다이 시스템은 Betaminic 스포츠 시장에서 패턴을 쉽게 찾을 수 있도록하고, 다른 곳에서는 찾을 수 없습니다 등급이 높을수록 더 높고 높은 등급은 기본적으로 이것이 베팅 확률의 실제 패턴 일 가능성이 더 높다는 것을 의미합니다 결과는 운이나 데이터 마이닝의 결과가 될 가능성이 적습니다

당신은 돈에 대한 좋은 수익을 얻기 위해 높은 등급과 높은 수익률을 가진 전략을 찾아야합니다 등급이 5 점 이상인 것은 이미 꽤 강한 패턴이지만, 10 이상이 실제로 강합니다 10 가지가 넘는 전략이 5 가지가 있으며 5 가지와 10 가지의 전략이 있습니다 현재 가장 높은 등급의 전략은 "거상 6 득점 오버 오버"라고하는 프로 전략입니다 저는 2018 년 2 월에 처음으로 "Winning Betting Strategies"라는 책을 만들었습니다

그것은 46의 등급과 약 10 %의 수율을 가지고 있습니다 전문직에 좋은 수익입니다 진짜 가장자리의 표시 인 것으로 수시로 5 %의 수확량을 보는 내기하는 사람 우리가 그 아래에있는 전략을 본다면 우리는 약 8 %의 수율과 45

이 전략은 다른 사용자가 만든 공유 전략입니다 보기 버튼을 클릭하여 전략의 세부 정보를 볼 수 있습니다 최고의 PRO를 살펴 보겠습니다 설명은 우리에게 전략 에 근거한다 모든 훌륭한 전략에는 왜 마술이 계속 잘못되었는지 가설이 있어야합니다

이 경우 데이터의 임의 패턴을 찾는 것이 아닙니다 이것은 홈 팀이 그들의 이전 게임에서 득점 한 25 점에 대한 확률은 마권업자 모델에 의해 밀어 올려 질 것입니다 또한 이전 경기에서 어웨이 팀이 득점 한 게임으로 필터링하여 멀리 떨어져 있다면 홈 팀이 골을 넣으면 홈 팀은 나와서 놀고 무승부 나 승리를 위해 더 많은 위험을 감수해야합니다 그렇다면 2

5 점 이상의 결과가 나올 확률이 더 높습니다 우리가 이런 종류의 조명기를 장기간 일관되게 지원했다면 전략은 약 7 년 만에 260 점을 기록했습니다 우리는이 실적 그래프에서이를 볼 수 있습니다 월간 결과, 손익도 볼 수 있습니다 그리고 최근에, 그래, 여전히 강하게 가고 있습니다

요점은 장기적인 것입니다 장기적인 전략을 따르면 시장의 불일치를 이용하여 이익을 얻길 바랍니다 적절한 자금 관리를 통해 이러한 종류의 베팅은 거의 일종의 투자로 간주 될 수 있습니다 왜냐하면 단기간 도박이 아닌 장기간 꾸준한 이득을 추구하기 때문입니다 어떤 투자와 마찬가지로 위험을 분산시키고 여러 전략을 따라야합니다

서로 균형을 이루는 도박 시스템 포트폴리오를 만들 수 있습니다 그래서 사람이 손해를 입으면 다른 사람들이 그것을지지합니다 Betaminic에는 결과를 볼 수있는 집계 기능이 있습니다 결합 된 그룹으로 사용한 경우 모든 전략을 함께 왼쪽에 사용할 전략을 선택할 수 있습니다 우리가 단을 함께 둘 때, 상위 5 개의 조합을 볼 수 있습니다

여기에서는 aggregator를 사용하여 5 대 평가 전략을 모두 정리하여 모두를 하나의 큰 것으로 사용한다면 어떤 일이 벌어 질지 알아 봅니다 체계 우리가 볼 수 있듯이 평균 수익률은 약 8 %에 가깝습니다 매월 약 15 점, 거의 16 점이됩니다 그것은 단지 200 점 이하가 될 것이고, 약 15 점이됩니다

1 년에 약 16 점이며 윤리에 가까운 투자 수익률을 보이며 이는 매우 좋은 수준입니다 또한 우리는 월별 결과를 볼 수 있으며 여러 시스템을 함께 사용하면 실제로 균형을 이루고 어떻게 만들어 지는지 확인할 수 있습니다 훨씬 더 부드럽습니다 이 시스템이 한 달 만에 마지막으로 잃어버린 시간은 2018 년 7 월 약 5 점을 잃은 후 매월 수익을 올리고 있습니다 몇 가지 전략을 함께 빗어 낼 수있는 능력에 대한 좋은 예입니다

내가 보여주고 싶은 또 다른 기능은 공개 전략 페이지에서는 공유 이후 전략을 정렬 할 수도 있습니다 그건 네가 볼 수 있다는 것을 의미한다 시스템이 생성 된 이후의 결과 이 방법으로 우리는 전략의 실제 결과를 볼 수 있습니다 또한 손익별로 정렬 할 수 있습니다

그리고 나서 어떤 것이 생성 된 이후에 가장 많은 이익을 창출했는지 봅니다 우리는 맨 위의 전략 인 Colossus 17 Dog Draw를 볼 수 있습니다 69 점은 2018 년 8 월 이후로 수익이 거의 7 %에 달합니다 꽤 괜찮아 이 전략을 따르는 것은 쉽습니다

Betaminic에 가입하고 팔로 잉을 클릭하십시오 단추 그런 다음 픽업 패키지를 구입해야하며 전자 메일로 선택을 받게됩니다 당신은 또한 수 웹 사이트에서 "Picks Picks"의 "My Picks"바 아래에서 확인하십시오 여기에서 다가오는 모든 예상 검색어를 볼 수 있으며 원하는 경우 날짜별로 또는 시간별로 정렬 할 수 있습니다

그리고 당신은 또한 당신의 역사적인 결과를 볼 수 있습니다 역사적인 선택도 추천은 보통 킥오프되기 전 약 36 ~ 48 시간 전에 발송됩니다 그래서 당신의 베팅을 할 충분한 시간이 있습니다 빅 데이터는 현재 일반 덤퍼에게 제공됩니다

확률 마켓에서 갭을 찾아 그들로부터 돈을 벌어 라 장기간에 초점을 맞추고 스포츠 도박이 투자의 한 형태라고 봅니다 내가 관심있어? 좋은 이제 그만둬 무료로 등록 할 수 있습니다

Betaminic 웹 사이트에서 링크는이 비디오의 설명에 있습니다 Betaminic에 대해 좀 더 알고 싶다면 wwwbetaminiccom을 방문하십시오

당신이 할 수있는 무료 책이 있어요 다운로드 및 또한 큰 데이터 베팅에 대한 많은 유용한 기사가있는 블로그가 있습니다 그러니 이제 그만둬 웹 사이트에 무료로 등록하십시오 Betaminic

Big Winners를위한 빅 데이터

The Amazing Ways Samsung Is Using Big Data

이것이 바로 SDS가 클라우드 기반 셀프 서비스 분석 플랫폼 인 Brightics Cloud Brightcove 클라우드의 사용자 중심 인터페이스는 전체 분석 프로세스를 표시합니다 데이터 전처리에서 시각화까지 단일보기로 Brightics Cloud는 큰 데이터 시각화 및 렌더링을 지원합니다

또한 Brightics 내장 함수를 사용하여 고급 모델링을 탐색 할 수 있습니다 예측 분석 및 규범 적 분석 기계 학습 및 심층 학습 기술 사용

Migrating a Big Data Environment to the Cloud, The Untold Story (Cloud Next '19)

[음악 재생] SASHA KIPERVARG : CP142에 오신 것을 환영합니다 빅 데이터 환경을 클라우드로 마이그레이션, 미지의 스토리

내 이름은 사샤 키퍼 바그입니다 저는 LiveRamp의 클라우드 운영 담당 책임자입니다 그리고 저는 우리의 수석 소프트웨어 중 하나 인 Ben Podgursky와 왔습니다 엔지니어, 패트릭 레이먼드 우리 수석 제품 매니저 그리고 그는 인프라 포트폴리오를 소유하고 있습니다

네가 도리를 모두 잘 알고 있다고 생각해 나는 그 일을 끝내지 않을 것이다 LiveRamp에 대해 조금 전에 프레 젠 테이션의 고기에 들어가십시오 기본적으로 오프라인 데이터를 사용합니다 주소, 다른 PII, 기본적으로 – 그런 다음 우리는 그것을 식별하지 못하고, 그것을 변형 시키며, 그런 다음 채널 파트너에게 채널을 제공합니다

모두 당신에게 광고 벤은 기술적 세부 사항을 우리 회사는 그의 주제 중 하나에서 않습니다 그래서 제가 제일 먼저 말하고 싶은 것은 벤 (Ben)과 저는, Patrick은 정말 작은 그룹의 사람들입니다 마이그레이션을 담당합니다 그것은 팀의 팀입니다

우리는 대규모 인프라 소대, 대규모 엔지니어링 팀, 보안 전문가, 재무 전문가, 준수 전문가 그리고 그들은 모두 우리를 이주시키는 책임이있었습니다 우리는 지금 비행 중입니다 우리는 곧해야합니다 나는 또한 Google 팀 구성원을 보유하게됩니다

여기이 슬라이드에 있습니다 그것들이 우리 팀의 일원이기 때문입니다 우리는 그들을 그렇게 취급합니다 그리고 그들은 우리를 도와줍니다 그리고 그들은 우리 팀 팀의 일부입니다

LiveRamp에 처음 가입했을 때 회사를 클라우드로 마이그레이션하도록 요청했습니다 그게 실제로 의미가 무엇인지 전혀 몰랐습니다 이것이 단지 뭔가이기 때문입니다 아마 20 년에 한 번 또는 일생에 한 번 일어날 수 있습니다 그 일을하기위한 플레이 북이 정말로 없습니다

그리고 나는 모험을해야한다고 생각했습니다 한 단계로 시작하십시오 그리고 그것이 제가 한 것입니다 방금 질문하기 시작했습니다 나는 임원이 일렬로 맞춰 졌는지 알아보기를 원했다

나는 예산이 있는지 알아 내고 싶었다 승인 절차가 무엇인지 알아야했습니다 그리고 꽤 자주, 그 질문은 더 많은 질문을 이끌어 냈습니다 그리고 그것이 제가 취한 접근법입니다 나는 관객 중 많은 사람이 생각한다

유사한 도전을 받고있다 어쩌면 그게 오늘 네가 여기있는 이유 일거야 내가 취할 접근법에 대해 생각하기 시작했을 때, 내가 가장 좋아하는 아티스트에 대해 생각했다 리처드 제임스라는 Aphex Twin이라고하는 사람입니다 그리고 이것은 그가 말하는 곳의 시원한 인용구입니다

그가 음악을 만드는 방법에 대해 근본적으로 그가 여기에서 말한 것 그게 플레이 북을 버리는 것입니다 그는 어둠을 헤쳐나 가면서 그가 배우고 자하는 것까지 이런 식으로 느낀다 그는 자신의 접근법에 적응합니다 그리고 많은 사람들이 내 정원을 가지고 있다고 생각합니다

그들은 독특합니다 당신은 자신의 문제가 있습니다 그리고 하나의 크기가 모든 플레이 북에 맞지 않습니다 모든 것을 다룹니다 내가 발견 한 첫 번째 사실은 우리가 팀을 올바르게 이끌어 낼 필요가 있습니다

그리고 그것은 올바른 스킬 세트를 갖는 것을 의미했습니다 그것은 올바른 문화를 갖는 것을 의미했습니다 그리고 나는 우리가 이전에했던 일이 엔지니어링 팀에 속한 팀 이들은 매우 숙련 된 시스템 개발자 그룹이었으며, 대부분은 미안하지만 시스템 개발자가 아닙니다 시스템 관리자

그리고 그들은 최선을 다하려고 애썼다 하지만 그들은 실제로 공학에 통합되지 않았습니다 내가 느꼈던 방식으로 필요했다 우리가 갈 필요가있는 곳으로 가야합니다 그래서 우리는 팀을 조정했습니다

우리는 먼저 스크럼을 채택했습니다 일부 시스템 관리자가 팀을 떠났습니다 팀의 시스템 관리자 중 일부는 새로운 기술을 익혔습니다 우리는 시스템 엔지니어를 고용했습니다 우리는 LiveRamp 엔지니어링 팀의 다른 팀원들로부터 파견되었습니다

게다가 그리고 우리는 근본적으로 개발 팀이되었습니다 인프라에 중점을 둡니다 도전의 다음 부분은 보안과 거버넌스를 찾아 내려고 노력했습니다 이제 클라우드에 도달하기 위해, 당신은 승인을 받아야합니다

당신은 보안에 가야합니다 규정을 준수해야합니다 합법적으로 가야합니다 놀랍게도 놀랍지 만 그 과정이 없습니다 물론, 아무도 이것을하지 않기 때문에 존재했다

일생에 한 번 그래서 우리는 그 과정을 만들어야했습니다 우리는 관계를 수립해야했습니다 우리는 보안 작업 방법을 고안해야했습니다 그들이 모든 것을 검토 할 수있는 곳 우리는 일주일 단위로 일을하고 있었는데, 그곳은 추적당했습니다

Jira 티켓처럼 그리고 나서 우리는 사인을 얻은 다음 진행할 것입니다 그것은하기가 상당히 어려웠습니다 약 12 개월이 걸렸습니다 나는 우리가 환상적이라고 말할 수있어서 자랑 스럽다

보안 및 기타 거버넌스 팀과의 관계 오늘, 그 중 일부는 청중에 있습니다 다음 과제는 어떻게 우리가 마이그레이션에 접근해야합니다 그리고 저는 그것을 제품처럼 취급해야한다고 강하게 느꼈습니다 그리고 그것이 의미하는 바는 제품 관리자 누가 인프라를 이해했는지, 누구에게 접근했는지 전체적으로 생각한 제품의 관점에서 우리가 어떻게해야하는지, 어떻게 그것에 대해 의사 소통을해야하는지에 관해서 패트릭, 누가 그럴거야? 이것에 대해 더 깊이 이야기하는 것이 시작되었습니다

그는 자신의 초점을 보안 관리에서 변경했습니다 제품 관리 부서에 알려 주었고 그는 그 대부분을 처리했습니다 가장 중요한 결정 중 하나 우리가 이민 과정에서 만든 실행을 시작하기 전에 어떤 구름을 사용해야하는지 알아 내려고 노력했습니다 AWS에 익숙한 사용자가 많을 것입니다 그들은 일종의 900 파운드 고릴라입니다

그리고 2 년 전 우리가 처음 시작했을 때, 우리 회사도 AWS 경로를 따라 가고있었습니다 그리고 아마 우리는 한 달 안에 있었을 것입니다 AWS와 계약서에 서명하십시오 그리고 우리는 전에 가벼운 방식으로 GCP를 보았습니다 우리는 동부 해안에서 GCP를 사용하는 일부 팀을 운영하기까지했습니다

그러나 모든 사람들은이 결정이 실제로 내려 졌다고 생각했습니다 또 다른 가능성은 없었고, 나 자신도 포함되었다 그리고 저는 CFO 인 Warren Jenson으로부터 이메일을 받았습니다 그가 말하길, 우리는 GCP를 보았습니까? 우리가 수백만 달러에 정말 가깝기 때문에 거래 그리고 나는 빨리 대답했다

그렇지만, 그렇다 그날 밤에 보낸 후, 나는 불편 함을 느꼈다 내 대답과 함께 내가 제대로 할 수 있다고 생각하지 않았다 왜 자세한 대화에서 그를 대표 하는가? AWS를 선택하고 GCP를 자세히 검토하지 않은 이유는 무엇입니까? 그리고 다음날 아침에, 나는 들어왔다

나는이 모든 수석 기술 팀을 모았다 인프라에 대해 질문하고 동일한 질문을했습니다 그리고 나는 같은 반응을 되찾았다 고 생각한다 나는 나 자신을 느꼈다 그것은 우리가하지 못했던 것이다

최근 데이터를 보았습니다 그리고 여러분 모두는 구름이 정말로 빨리 움직인다는 것을 압니다 신제품은 신속하게 개발되고 제공되며, 우리는 지난 6 개월 동안 그것을 보지 않았습니다 그래서 우리는 일주일 정도 시간을 들여서 새로운 기능 세트에서 그것이 우리 회사를 위해 원했던 것과 어떻게 연관되어 있는가 그리고 그 주 후에 우리가 돌아 왔을 때, 우리 모두는 거기에 뭔가 있다는 것을 깨달았습니다

그런 다음 더 많은 조사가 필요했습니다 그리고 나서 우리는 또 다른 3 ~ 4 주 동안 출발했습니다 Kubernetes에 깊이 잠수하려면 큰 데이터 스택, 비용, 모든 차원 그리고 우리는 그것에 집중했습니다 우리가 발견 한 것은 GCP 우리 회사를위한 훨씬 나은 솔루션이었습니다

모든 차원에서 비용이 포함됩니다 그래서 이것을 침몰 비용의 오류라고 부릅니다 AWS에 큰 투자를했다는 것입니다 그리고 우리는 그 정면을 정말로 오랫동안 진행했습니다 그리고 사실입니다, 우리는 많은 시간을 낭비했고, 많은 시간이 내려갔습니다

그 길 그러나 그것이 우리가 마음을 바꿀 수 없다는 것을 의미하지는 않습니다 그래서 우리가 GCP에 대한 결정을 내렸을 때, 우리에게는 또 다른 도전이있었습니다 소규모 엔지니어링 팀과 소규모 인프라가있는 팀, 상대적으로 말하기 우리 중 수천 명이 없습니다

누가 기존의 데이터 센터를 관리 할 것입니까? 샌프란시스코에 공동 거주하고 있습니다 우리는 약 3,000 대의 서버를 보유하고 있습니다 100 페타 바이트의 Hadoop VMware의 많은 것들 우리는 개발 팀이 미래에 집중하기를 원했습니다

우리의 과거 또는 현재 그래서 우리가하기로 결정한 것은 거기에 나가서 시도했습니다 우리를 위해 그렇게 할 수있는 회사를 찾으려면, 그 전체 작업량을 감당할 수있는 우리는 미래에 중점을 두었습니다 시리우스라는 회사를 발견했습니다 마이클 포터와 스캇 라이트

나는 그들이 청중 어딘가에있는 것 같아 그들은이 비전에 우리를 팔았습니다 사실 지난 한 달 동안, 그들은 데이터 센터의 모든 작업을 수행했습니다 우리 팀을 도와 주면서 우리 팀을 돕고 있습니다 GCP에 중점을 둡니다

일단 우리가 그 문제를 해결하면 거기 우리가 해결해야 할 두 가지 다른 것들이 있습니다 우리를 침몰시킬 수있는 두 가지 네 함선도 가라 하나는 비용 추적이었고 다른 하나는 비용 추적이었습니다 거버넌스 결정이었다 비용 추적 측면에서 우리는이 철학을 가지고 있습니다

각 개발 팀이 필요로하는 자아를 위해서 우리는 그들이 환경을 신속하게 돌리기를 원합니다 아무에게도 묻지 않고 혼자서 그러나 물론, 그것은 그들이 그 때 그들은 환경을 전적으로 회전시킬 수있었습니다 자신에

그리고 그들은 수백만과 수백만을 일으킬 수 있습니다 누구도 알지 못하는 자원 달러로 우리의 예산을 동기화합니다 그래서 우리는 초점을 맞추기 위해 다른 PM 팀을 구성하기로 결정했습니다 그 특별한 문제에 관해서 그리고 그 노력은 바로 지금 열매를 맺고 있습니다

우리는 개발자에게주는 균형이 적절하다고 느낍니다 자유는 있지만, 동시에 경고와 관계가 있습니다 해당 팀에서 직접 재정 지원을받으며, 그 도전들이 다루어지는 곳 거버넌스는 상당히 흥미 롭습니다 우리는 중요한 교훈을 배웠습니다

이전에 보안과 함께 12 개월간 당신이 클라우드에서 빨리 갈 수 있다고해도, 즉시 배포 할 수있는 경우에도, 귀하가 승인을 받았다는 의미는 아닙니다 제품을 실제로 빨리 꺼내십시오 따라서 신속한 거버넌스 결정없이, 정말로 중요하지 않습니다 그래서 우리는 엔지니어링 팀에서 다른 팀을 구성했습니다 우리는 수락 한 사람을 고용했습니다

그의 이름은 [INAUDIBLE]입니다 그리고 우리는 우리가 호출하는 프로세스를 만들었습니다 기본적으로 의사 결정을 묶는 케이크 이 Cake 프로세스를 통해 모든 거버넌스 팀으로부터 그리고 우리는 12 개월 무언가를 떠났습니다 제품을 허용하는 결정을 내리는 데 2 ​​주까지 생산에 들어가기 그래서 배운 주요 교훈의 측면에서, 내가 너와 나눌 수있는 것, 내가 너에게 생각해 주길 바라는 것 너 자신을 위해, 번호 하나, 마이 그 레이션 거대한 다차원 동물입니다

그것들은 문제들 중에서 가장 좋고 도전적인 것입니다 그게 네가하고 싶은 일이라면 너는 확실히 올바른 곳에서 나는 당신의 팀을 바로 시작하고 충분한 질문을 할 것이라고 말할 것입니다 문제를 완전히 이해할 때까지 게임 북을 사용하지 마십시오 아무것도 가정하지 마십시오

귀하의 데이터와 새로운 데이터를 지속적으로 재평가하십시오 그리고 침몰 비용의 오류에 유의하십시오 그리고 그것이 당신의 의사 결정에 어떻게 영향을 미치는지 변화하는 프로세스 또는 채용을 두려워하지 마십시오 그 과정에서 새로운 역할을 위해

가능성이 높습니다 전혀 다른 것입니다 그리고 마지막으로, 틀린 것을 두려워하지 마십시오 당신은 실수 할 것입니다 무언가의 진실을 찾으십시오

옳기보다는 오히려 성공으로 당신의 길을 되풀이하십시오 그래서 나는 마이크를 벤쪽으로 넘길거야 지금 누가 엔지니어링 문제에서 당신을 말할 것입니까? 원근법 [박수 갈채] BENJAMIN PODGURSKY : 안녕하세요

나는 Ben Podgursky입니다 나는 엔지니어 야 저는 데이터 인프라 팀에서 일하고 있습니다 우리 이주에 대해서 이야기 할 것입니다 소프트웨어 엔지니어의 관점에서 GCP로 나는 단지 강조하는 것으로 시작하고 싶다

나는이 과정에서 수석 건축가가되었다고 주장하지는 않는다 이것은 엔지니어 수십 년이 걸렸습니다 그러나 그들은 실제로 이주를 실제로 바쁘게하고 있습니다 오늘, 나는 그 중 하나입니다 마이그레이션을 설명하기가 어렵습니다

LiveRamp의 판매에 대해 간략히 설명하지 않고 우리가 어떻게하는지 마일 높은 볼 우리는 고객 데이터 세트를, 식별자 데이터를 받아 이것을 전달합니다 두 가지 방법으로 광고 기술 생태계에 먼저 배치 전달 시스템으로, 또한 실시간 키 값 전달 시스템을 사용합니다 나중에 우리 환경에 대해 더 이야기 할 것입니다 짧은 버전은이 처리의 대부분을 차지합니다 큰 Cloudera Hadoop에서 발생합니다

데이터 센터의 클러스터 다른 대부분의 응용 프로그램은 VMware 가상 시스템에서 실행되었습니다 요리사가 제공 한 것입니다 CoreOS 지각 구조 클러스터 실시간 키 값 제공 우리가 만든 자체 개발 한 오픈 소스 시스템이었다 하둡 파이프 라인에 대해 한 가지 강조하고 싶습니다

많은 회사에서 Hadoop은 부가가치입니다 그들에게는 제품이 있습니다 그들은 제품을 판매합니다 그들은 제품에서 로그 아웃되며, 그런 다음 기계 학습을하고 그로부터 가치를 얻으십시오 그건 LiveRamp가하는 것이 아닙니다

우리는 기본적으로 ETL 회사입니다 그리고 우리가 Hadoop 파이프 라인을 통해 데이터를 이동하지 않는다면, 우리는 실제로 많은 제품을 판매하지 않습니다 그리고 이로 인해 마이그레이션이 매우 어려워졌습니다 나는 나중에 그것에 대해 더 이야기 할 것이다 작년에이 모든 일이 우리의 온 프레미스 데이터에서 일어났습니다

우리 하드웨어의 대부분은 2,500 노드 Cloudera입니다 Hadoop 클러스터 밖에 큰 클러스터가 있습니다 하지만 꽤 큰 90,000 CPU입니다 사샤가 말했듯이, 약 100 페타 바이트의 원시 스토리지

VMware 클러스터에서 Hadoop 이외의 작업이 발생했습니다 500 개 이상의 VM에 대해 이 중 많은 부분이 논리 작업 전용이었습니다 Hadoop 환경에 대해 매일 약 8 테라 바이트의 데이터가 송수신됩니다 매우 약 압축 후 계산, 필터링, 정렬 등 모든 작업을 수행합니다 그래서 결국 하드웨어는 꽤 중요한 하드웨어였습니다

우리가 옮겨야 할 환경 나는 확신 할 수있는 것에 대해 이야기하지 않을 것이다 우리는 구름으로 움직입니다 사샤는 그 중 일부를 다뤘습니다 이유는, 당신이 듣게 될 것입니다, 1000 다른 회담 이번 주 브레이크 아웃 세션

우리는 빨리 움직이기를 원했습니다 Google의 엔지니어는 개발자가 아닌 개발자가되기를 원했습니다 역사적인 재 enactors 우리는 규모를 조정해야했습니다 클라우드 기반 도구가 필요했습니다

일반적인 이유 마찬가지로, 나는 많은 시간을 보내지 않을거야 그것이 당신이 여기있는 이유이기 때문에 GCP를 선택하도록 설득합니다 그러나 우리가 한 의사 결정 과정에 대해 이야기하고 싶었습니다 분명히, 우리는 기술에 관심이 있습니다

GKE는 큰 도움이되었습니다 당시 AWS는 좋은 Kubernetes 제공 물을 가지고 있지 않았지만, 우리는 실제로 제 3자를 찾지 못했습니다 설득력있는 제물 우리의 실시간 배송 팀은 다른 모든 제품보다 우월합니다 객체 저장이 필요했습니다

GCS는 다른 것들과 경쟁적이었습니다 가격은 좋았습니다 우리는 다른 사람들보다 더 좋은 가격을 가지고 있습니다 하지만 내가 강조하고 싶었던 점은 정말 우리를 위해이 선택을 한 사람들 이었습니까? Google과 대화 할 때 우리는 우리의 문제를 해결하고자하는 엔지니어에게 우리는 전체 목표가 우리를 팔 것이라고 생각하지 않았습니다 전문 지원 시간

전문적인 지원에 문제가 있다는 것은 아닙니다 훌륭합니다 하지만 우리는 근본적으로 우리의 문제에 답하고 우리를 도우려고했습니다 그리고 그것은 전체 이민을 통해 우리에게 자신감을주었습니다 그들은 우리를 돕고, 나란히있을 것입니다

문제를 통해 그리고 그것은이 과정에서 절대적으로 머물러 있습니다 그래서 우리가 우리가 이것을 현실로하기로 결정했을 때, 우리는 그것을 몇 가지 질문으로 쪼개었다 우리 시대의 건축은 무엇입니까? LiveRamp의 최소 실행 가능 클라우드 아키텍처는 무엇입니까? 우리는 어떻게 거기에 도착합니까? 클라우드에 구축 – 쉬운 일은 아닙니다 그러나 당신은 신선한 시작하게된다

클라우드 기반 기술로 시작할 수 있습니다 회사가 운영되지 않는 경우 큰 문제는 아닙니다 그러나 그것은 우리에게 사실이 아닙니다 우리는 많은 양의 인프라를 가지고있었습니다 마이그레이션하는 동안 계속 실행해야하는 프로세스가 있습니다

그리고 마지막으로 우리는 무엇을 향해 무엇을 만들고 싶습니까? 우리는 우리의 인프라가 첫날에 완벽해질 것입니다 첫날 구름이 완전히 덮일 수는 없습니다 그러나 우리는 성공을 향해 스스로를 위로하고 싶습니다 그렇다면 인프라가 처음에는 어떻게 될 것입니까? 마이그레이션 할 개발 팀 요청 힘들고 엔지니어에게 물어보십시오 그들이하는 동안 프로세스에 많은 불확실성이 추가됩니다

Next와 같은 회의에서 말하는 것은 너무 섹시하지 않습니다 하지만 드롭 인 대체물이 있었던 곳 우리 인프라의 GCP 로의 직접 번역, 우리는 일반적으로 리프트 측면에서 실수를 범했고 우리는 GCP를 가지고있었습니다 즉, 일부 제품은 매력적이었습니다 그리고 매우 직설적 인 번역을 제공했다 마이그레이션하는 동안 전환하는 것이 적절하다고 느꼈습니다 그래서 저는 변하지 않았고 변하지 않은 것을 통해 이야기 할 것입니다

그래서 무엇이 바뀌지 않았을까요? 우리의 온 프레미스 환경은 단일 논리 내부 회로망 사설 IP를 통해 전달되는 내부 서비스, 대부분 콘솔을 통해 조정되었습니다 앱 팀에서는이 점을 동일하게 유지하는 것이 중요하다고 느꼈습니다 그들은 단일 네트워크가 필요했습니다 해당 네트워크를 통해 서로 대화해야하는 앱

그리고 나중에, 특히 다리 건너편에서 더 이야기하겠습니다 우리의 네트워크 사이 모든 대용량 데이터 처리는 Cloudera Hadoop에서 발생합니다 그것은 변하지 않습니다 나는 보안 및 사생활 보호 결정에 대해 이야기하고 싶지 않다

대단히 중요하지만, 우리가 한 일의 거대한 부분 클라우드는 개발자에게 권한을 부여하지만, 고 가용성의 글로벌 배포를 쉽게 만듭니다 실수로 보안 침해 그래서 우리 작전 팀은 방화벽 통제권을 유지했습니다 허가의 관점에서 규칙들, 근본적으로, 고객 데이터를 안전하게 유지하지 못한다면, 우리는 실제로 많은 제품을 가지고 있지 않습니다

그래서 우리는 무엇을 바꾸 었는가? 전제, 우리는 우리의 모든 데이터를 HDFS에 거의 저장했습니다 그래서 우리의 HDFS는 실제로 꽤 기름칠 기계입니다 이 마이그레이션을 시도 할 때까지 그러나 그것은 매우 스트레스가 많았고 유지하기가 어려웠습니다 모든 업그레이드가 데이터 손실의 기회임을 알았습니다 또는 일종의 대참사

우리 회사가 성장함에 따라 더 많은 고객과 더 짧은 고객을 확보함에 따라 SLA가 짧아지면 어려워지고 어려워졌습니다 Google 제품 팀이 환경을 업그레이드했기 때문에 일이 잘못되었을 때 중단 시간을 원합니다 그래서 우리는 결국 기본적으로 막 붙어 있지 않았습니다 업그레이드가 가능합니다 따라서 GCP를 사용하고 나면 모든 영구 데이터에 GCS를 사용합니다

저장 우리는 지속적인 데이터를 위해 HDFS를 사용하지 않습니다 전제 조건으로 Chef를 사용하여 모든 VM을 프로비저닝합니다 우리는 Chef에 많은 응용 프로그램 로직을 내장했습니다 그리고 우리는 실제로 Chef 클라우드로 그것은 잘 작동하지 않았고 우리는 GKE가 훌륭한 제품이라고 느꼈습니다

일부 팀은 GKE를 사용하고 있습니다 우리는 모든 VM을 전환하는 것이 적절하다고 생각했습니다 우리가 이전 할 때 GKE로 넘어갔습니다 마지막으로 Google Bigtable이 우리의 자국 핵심 가치 데이터 저장소를 대체 할 수있는 훌륭한 도구입니다 우리는 모든 실시간 웹 트래픽에이를 사용할 것입니다

그래서 나는 개인적으로 대부분의 시간을 보냈다 Hadoop 클러스터를 GCP로 변환합니다 그래서 나는 그다지 많은 것을 설명하지 않고 싶다 전체적인 이야기 일 수도있는 아키텍처는, 그러나 가치에 대해 이야기하고 어떻게 해방하는지 그것은 구름 속에있다 2,500 대의 서버를 보유하고 있다면 너와 함께해야 할 일

그들은 모든 데이터를 가지고 있습니다 업그레이드를 테스트하려면, 주말에는 2,500 대의 서버를 구입할 수 없으며 규모 테스트를 수행 할 수 없습니다 그런 다음 다시 돌려주십시오 당신은 가지고있는 것을 테스트해야합니다 dev 클러스터를 설정할 수 있습니다

준비 클러스터를 설정할 수 있습니다 그러나 규모 테스트는 실제로 할 수 없습니다 따라서 GCP에서 GC VM을 사용하는 경우 사실이 아닙니다 인프라를 가동시킬 수 있습니다 기존 인프라 스트럭처를 다운시킬 필요가 없습니다

그것을 밖으로 시험하기 위하여 그리고 롤백은 쉽습니다 GCS를 사용하기 때문에 모든 것이 더 쉽습니다 그래서 이것은 우리의 능력을 정말로 4 배로했습니다 이 인프라에서 반복 할 수 있습니다

그리고이 환경을 무언가와 유지하는 것으로 바뀌 었습니다 스트레스가 많고 고통 스럽다 그것은 실제로 다시 재미 있습니다 그렇다면 GCP는 어떻게 될까요? 몇 가지 마이그레이션 전략이 있습니다 기업에 많은 고객이없는 경우 돈을 벌지 않으면 너 자신을 벗어날 수있다

전송 장치를 사용할 수 있습니다 전국으로 배송 할 수 있습니다 그런 다음 다시 켜십시오 모든 것이 작동하는 몇 주 후에 우리는 영업 팀과 점검했고, 고객, 우리는 돈을 벌어 그리고 그들은 꺼지는 생각에 행복하지 않았습니다

그래서 우리에게 천천히, 아주 조심스럽게 옵션을 남겼습니다 조율 된 마이그레이션 프로세스 그래서 우리는 우리가 필요한 것을 알고 시작했습니다 적어도 마이그레이션 프로세스 중에, 우리는 하나의 논리적 네트워크가 필요했습니다 GCP와 데이터 센터간에 팀은 속도를 낼 수 있어야했습니다 GCP의 서비스 온 프레미스 데이터 센터로 마찬가지로, 데이터베이스 호출을 공유 할 수 있어야했습니다

따라서 하나의 큰 네트워크에서 전체 회사를 덤핑하는 것을 피하려면, 우리는 헤어졌다 우리는 공유 VPC 네트워크로 분할했습니다 팀은 자체 서브 네트워크를 가지고 있으며 회전 할 수 있습니다 서비스를 제공합니다 팀은 GCP를 통해 다른 팀과 커뮤니케이션 할 수 있으며, 데이터 센터로 돌아갈 수 있습니다

우리는 클라우드 상호 연결로이 작업을 수행했습니다 그리고 이것은 정말로 중요했습니다 나는 강조하는 것이 중요하다고 생각한다 우리는 GCP에 생산 어플리케이션을 가지고 있었다 처음부터

스테이징 환경을 설정할 필요가 없었습니다 그런 다음 하루 만에 회사를 삭감했습니다 우리는 GCP를 운영하는 주말부터 서비스를 제공 받았습니다 그래서 이것은 법원의 도전 중 하나를 회사로 수출합니다 우리가 데이터 센터 GCP에서 가지고 있던 제한된 출구를 다루었습니다

데이터 센터 내부 – 그것은 거대한 데이터 센터입니다 우리는 엄청난 대역폭을 가지고 있습니다 그러나 우리는이 모든 데이터를 가져올 수 있도록 최적화하지 않았습니다 데이터 센터의 우리는 하루가 끝나면 약 50 기가 바이트로 제한되었습니다 GCP로 분명히 우리는 이것을 다시 설계 할 수있었습니다

우리는 더 큰 연결을 구축 할 수있었습니다 그러나 우리는 데이터 센터를 업그레이드하는 데 수백만 달러를 낭비하지 않았습니다 우리가 그것을 끄려고 할 때, 단지 6 개월 정도 유지해야합니다 전송 장치가 제대로 작동하지 않는 이유 우리는 LiveRamp의 데이터 중 아주 작은 부분만을 차지합니다 프로세스는 실제로 콜드 데이터입니다

우리는 끊임없이 고객으로부터 수입품을 받고 있습니다 데이터를 지속적으로 새로 고침 우리의 데이터 소스에서 데이터를 GCP로 전송하는 데 며칠이 걸릴 수는 없습니다 처리를 재개하십시오 우리가 명심해야만했던 또 다른 것 클라우드의 데이터 이탈은 매우 비싸다는 것입니다

클라우드 공급자 – Google뿐 아니라 – 모든 종류의 마약상 입구 Ingress는 완전히 무료입니다 맞습니까? 거기에 모든 데이터를 입력하십시오 훌륭합니다

그러나 테라 바이트 급의 데이터를 빼내고 싶다면, 그것은 매우 비싸게되고, 특히 그것이 일상적인 일 처리 파이프 라인의 일부라면 그래서 50 기가비트 그리고 당신은 50 기가비트처럼 좋다고 말할 수 있습니다 누구에게나 충분할 것 같은데 그리고 그것은 입력 데이터를위한 것입니다

우리는 경기에서 10 테라 바이트의 데이터를 얻습니다 고객 데이터 및 물건 그리고 우리는 하루에 10 테라 바이트 이상을 배달하지 않습니다 고객에게 전달합니다 그러나 우리가하는 일의 성격 때문에, 우리는 거대한 분산 조인을 가지고 있습니다

우리의 데이터 처리 파이프 라인의 중간에 우리는 하루에 500 테라 바이트를 읽고 쓰고 있습니다 연결을 끊으면 팀이 매우 쉽습니다 잘못된 위치에서 완전히 상호 연결을 포화시킬 수 있습니다 이것은 복잡한 문제입니다 우리는 그것으로 전체 이야기를 채울 수 있습니다

그러나 짧은 버전은 우리가 내부 서비스를 팀을위한 우선 순위 방식으로 데이터를 복사합니다 팀은 서비스를 위해 인터커넥트를 자유롭게 사용할 수 있었다 및 데이터베이스 호출을 포함하지만 데이터 인프라 팀 모든 제출 된 사본을 처리했다 우리는 그 (것)들을이 서비스에 복종시키기 위하여 그 (것)들을 요청했다 이를 통해 생산 데이터 전송의 우선 순위를 결정할 수 있습니다

짧은 SLA를 가진 제품, 우리가 약속 한 제품 매우 짧은 시간 내에 고객에게 전달됩니다 저온 데이터가 전송되면 우선 순위를 낮출 수 있습니다 그리고 결국 그것은 일어날 것입니다 정말 비판적으로 또한 주어진 대역폭에서 누가 우리 대역폭을 사용했는지에 대한 우리의 통찰력 시각 따라서 우리 팀이 파일을 직접 복사하는 경우, 당신은 TCP 덤프 주위에 몸을 피워야 할거야

2시에 누가 인터커넥트를 사용하고 있었는지 알아 내기 위해 AM 어제 밤, 그래서 모든 것이 실패했습니다 대신 Datadog 대시 보드를 살펴볼 수 있습니다 그리고 오, 앱 X는 오전 2시에 대역폭의 xyz를 사용하고 있었다고 말합니다 이러한 제약 조건은 전체 구조를 결정했습니다 데이터 이전에 대한 우리는 우리 파이프 라인의 끝에서 시작했습니다

애플리케이션을 마이그레이션 할 것입니다 HDFS에서 직접 데이터를 가져 오는 대신, 그들은 인프라 데이터 복제기를 호출 할 것입니다 서비스는 HDFS에서 입력을 복사하는 것을 처리합니다 다시 GCS로 그리고 평소와 같이 그들을 소비 할 것입니다

업스트림 응용 프로그램이 이전되면, 더 이상 복제를 수행 할 필요가 없습니다 데이터는 기본적으로 GCS에 존재하지만, 우리는 그 과정을 계속할 것입니다, 꼬리 처리 파이프 라인의 머리로 그리고 그 곳에서 우리는 현재 중도에 대한 회사로 있습니다 그것을 통해 우리가 여전히 우리가 연결을 포화시키지 않았다 그러나 이것이 우리가 이전 한 방법의 전반적인 구조입니다

그래서 그것은 매우 요약 된 버전입니다 우리가 GCP에 어떻게 접근하고 있는지 마지막으로 가장 흥미로운 질문은 다음에 오는 것입니다 우리는 어떻게 일을 다시 엔지니어링 할 것인가? 클라우드 기반으로 실제 업무에? 나는 경찰에 나가서 너에게 말할거야 우리는 아직 실제로 그 질문에 대한 강한 대답을 가지고 있지 않습니다

실시간 쿼리를 위해서는 최소한 Bigtable이 필요합니다 Bigtable에 실시간 쿼리가 포함됩니다 상당량의 BigQuery가 포함됩니다 임시 쿼리의 경우 경량 데이터의 데이터 흐름 변형 하지만 내가 모르는 주된 이유는 개발자 주도형이 될 것입니다

우리의 목표는 인프라 팀을위한 것입니다 더 이상 이러한 결정을 내릴 수 없습니다 인프라가 도움이 될 것입니다 인프라는 사람들을위한 도구를 구축 할 것입니다 그러나 하루가 끝날 무렵에는 구름 속에 있었고, 개발자가 인프라를 프로비저닝 할 수 있음을 의미합니다

적절한시기에 필요할 때 필요합니다 그래서 목표는 내년에, 잘하면, 일부 응용 프로그램입니다 팀이 6 시부 터 취한 방법에 대해 이야기 할 것입니다 60 분의 BigQuery로 바꿨습니다 응용 프로그램 또는 Bigtable 스크립트 또는 뭔가 하지만 우리가 말할 수는 없으니까

아직 거기에 없다 그래, 그게 내가 가진 전부 야 나는 물건을 패트릭에게 돌려 줄 것이다 고마워, 모두들 [박수 갈채] PATRICK RAYMOND : 안녕하세요, 고마워요

제 이름은 패트릭 레이먼드입니다 인프라 스트럭처의 제품 관리자입니다 LiveRamp에서 소대 이 마이그레이션에 대해 이야기하고 싶습니다 사샤가 말했던 것처럼, 우리는 생각하고 싶었습니다

이것에 대해서는 조금 다르게 어쩌면 PMO 또는 프로젝트 관리에 특정한 것보다, 제품 자체와 같이 생각하면됩니다 그래서 당신은 사샤와 벤의 주제를 들었다 이것은 거대하고 복잡한 문제입니다 그리고 일들이 많이 바뀔 것입니다 그래서 조금 혼란 스러울 수 있습니다

그리고 그것은 약간 압도적 일 수 있습니다 그리고 당신은 당신이 네가 네 인생을이 왼쪽에 보냈다는 느낌, 당신은 아마이 디자인의 삐걱 거리는 소리에 익숙 할 것입니다 그러나 이것은 우리 프로세스와 매우 유사합니다 처음 시작했을 때, 우리의 모든 질문 대답이 여기 왼쪽에 나온 것처럼 느껴졌습니다 그러나 우리가 팀과 반복하기 시작하면서, 우리는 우리가 가고 있지 않다는 것을 깨달았다

이 질문에 대한 완벽한 대답을 찾으십시오 그래서 우리는 시간이 지남에 따라, 우리는 더 많이 오른쪽 방향으로 움직였습니다 그리고 일이 훨씬 더 분명 해지기 시작했습니다 그래서 아마도 이것은 아마도 중요한 일이라고 생각합니다 이게 당신 회사가 뭔가라면 너 한테 일어난다

준비하기 때문에 어딘가에 뛰어 들기가 가장 좋습니다 의사 결정을 시작하십시오 Ben은 또한 팀이 의사 결정을 내리고 있다고 언급했습니다 자신의 인프라에 대해 그래서 우리는 또한이 구별에 대해서 생각하고 싶었습니다

데이터 센터에서 클라우드로 마이그레이션 할 때, 물론, 당신에게 유용한 도구가 많이 있습니다 그러나 모든 문제를 즉시 해결할 수는 없습니다 당신이 들었던 것처럼, 우리가하고있는 것들 중 일부는 순수한 상승과 교대 일뿐입니다 그래서 우리가하지 않는 것이 중요합니다 모든 이해 관계자에게 곧 약속한다

당신이 구름으로 이동할 때, 당신의 모든 문제가 해결됩니다 왜냐하면 그것은 사실이 아니기 때문입니다 그리고 우리는 브랜드로 끝나지 않을 것입니다 새로운 회사 그래서 우리는 문제의 범위를 정확하게 정하고 싶었습니다

이해 관계자들이 이해할 수있는 우리가 조사한 것 그래서 나는 지금 조금 이야기하고 싶다 이해 관계자의 의견 수렴에 대해 이 아이디어를 중심으로 우리가 한 일은 우리가 제공 할 가치를 명확히함으로써 우리는 또한 일을하지 않는 비용에 대해서 이야기하고 싶었습니다 그리고 주로 우리가이 기능을 수행 한 기능입니다 그래서 아마도 위의 성명서 여기 모두가 깊이 이해할 필요가있다

당신이하려는 일 이해 관계자가 누구인지 알아야합니다 아마 어리석은 짓을하는 것 같아요 하지만 너는 스스로에게 많은 질문을 할 수있다 누가 인프라를 소비하는지, 누가 당신에게 보안을 제공 할 예산을 보유하고 있습니다 규정 준수 승인 클라우드에서 작동해야합니까? 그리고 그것들은 당신의 이해 관계자들입니다

그리고 그들은 모두 다른 것들에 관심이 있습니다 따라서 서로 다른 방식으로 정렬하는 것이 중요합니다 그리고 우리의 임원 팀에게는 우리가 그들을 도울 수있는 방법에 관해 그들과 이야기하고 싶었다 미래의 목표, 우리가 도울 수있는 방법 그들은 이윤을 높이고 앞으로 나아 간다 회사 이니셔티브와 함께 우리의 개발자들은 새로운 인프라를보다 나은 방법으로 활용하는 방법, 자신의 배를 선장하여 자신의 제품을 만들 수 있습니다

그리고 우리 제품 팀은 제품에 대한 통찰력을 원합니다 비용에 대한 세분화 된 이해를 원합니다 그리고 제가 말씀 드렸듯이, 일을하지 않는 비용 우리에게는 계속 된 비용이있었습니다 온 프레미스 데이터 센터의 지속적인 비용 부족이 있습니다

더 복잡하고 제한적인 제품이 있습니다 기존 데이터 센터에서 작업 할 때 그리고 우리가 이것을 사교적으로 이해할 때, 우리는 Ben이 말한 것처럼, 사람들은 우리가 계속 돈을 벌기를 원했습니다 그래서 우리는 제품을 선적해야했습니다 그래서 우선 순위를 정하는 방법을 알아야했습니다 이해 관계자들이 주위에 정렬

그리고 당신에게 규모의 아이디어를주기 위해서입니다 우리가 우선 순위에 대해 이야기하고있는 것, 우리는 5 개국에 22 개의 팀을두고 있습니다 아마도이 방에있는 많은 사람들과 매우 비슷할 것입니다 전 세계에 걸쳐 이러한 유형의 우선 순위를 유지합니다 1 년 넘게 할 일은 매우 어렵습니다

하지만 가능합니다 따라서 이것은 매우 명백한 진술입니다 그러나 모든 것이 최우선 순위 일 때 각 팀마다, 우선 순위를 매길 수는 없습니다 따라서 운송을 계속해야한다는 것을 알고 있습니다 우리는 모든 사람이 그들에게 최우선 순위

그러면 우리는 그걸 어떻게해야합니까? 우리는 어떻게 그 일을합니까? Sasha가 언급 한 것처럼 모든 팀 스크럼을 어떤 형식이나 방식으로 사용하십시오 각 팀이하는 일 중 하나 그들은 비즈니스 가치 회의를 가지고 있습니다 그리고 제품 관리자로서 저는 참석하는 데 관심이 있습니다 모든 비즈니스 회의 및 비즈니스 가치 회의, 그들이 작품 가치를 이해하도록 돕는다 우리가 할거야

나는 회의에 올 것이고 말할 것이다 일의 비용, 이야기 일을하지 않는 데 드는 비용에 관해서도 도움이된다 엔지니어링 팀은 그들이 할 수있는 것을 이해합니다 클라우드에서 이익을 얻으십시오 여기에서 가장 큰 것은 실제로 존재해야합니다

참석할 많은 모임이 있습니다 하지만 모두가 이해할 수 있도록 거기에 있어야합니다 가치 그리고 거기에 계신다면 약속하지 않는 것과 같은 것에 대해 이야기 할 수있다 네가 지킬 수는 없지만 큰 이점에 대해 이야기해라

OC 시간 단축, 반복 증가 신제품의 속도, 투명하게 비용을 드러냄 엔지니어가 내게 말한 것이죠 나는이 모든 모임에 순찰을 가면서 너는 너의 모든 시간을 헌신적으로 보낼 수 없다는 것이었다 비즈니스에 도움이되므로 빌드하는 것이 중요합니다 노력을 밑에서부터

그래서 마음과 마음을 이길 수 있다면 엔지니어링 팀 중 그것들은 우선 순위를 정하는데 도움이됩니다 그것은 당신을 위해 훨씬 쉽게, 너의 구석에서 싸우는 사람들이 많기 때문에 우선 순위가 정해 지도록하려면 이 일을하는 유일한 사람이되기보다는 그리고 나는 과도한 의사 전달이 정말 귀중합니다 이것은 사샤가 제가 배운 것을 도운 것입니다 당신은 기본적으로 요점에 도달해야합니다

당신이 방에서 성가신 사람인 것처럼 느껴지는 곳 모두가보기 싫어하고, 나는 그 시점에서 생각한다 아마 요점에 다다를거야 귀하의 메시지가 분명 해지고 반복해서 반복했다 그리고 또한 기억하는 것이 중요합니다 이러한 모든 팀 및 이해 관계자와 함께, 그렇지 않은 경우 우선 순위에 대해 이야기하면 다른 사람이 될 것입니다

그리고 새로운 제품을 가진 사람들이 많이있을 것입니다 새로운 아이디어, 그리고 새로운 수익 창출 방법을 제시합니다 그러니 나가서 모든 사람이 이것을 정기적으로 이해합니다 그래서 우리는 주간지 모임에 참석함으로써 그렇게합니다 정기적 인 제품 회의 참석, 우리가 할 수있는 기회가 있다면 어디에서나 발표 할 수 있습니다

우리는 또한 많은 위험에 대해서 이야기합니다 분명히, 끊임없이 일어날 것입니다 그래서 너는 그 일들보다 앞서 나가고 싶어 그 (것)들을 완화하는 당신의 계획을 개발하십시오 그래서 우리가 시도한 한 사람의 쇼처럼 불가능합니다

잠시 동안,하지만 당신은 도움이 필요한 사람들을 고용해야합니다 당신은이 아이디어를 나타냅니다 그래서 우리는 훌륭한 팀을 고용했습니다 그것은 작은 팀이지만 열렬한 두 사람 이 메시지를 전달하는 데 도움을 준 사람 이러한 일정이 가능할 것입니다 그리고 제가 언급 한 것처럼, 우리가 생각하기 전에 정말 다른 관점에서 계획하는 것에 대해서도 마찬가지입니다 우리는 가능한 한 마른 상태로 유지하려고했습니다

우리는 무슨 일이 일어나고 있는지 이해하기에 충분한 계획을 세우고 싶었습니다 그러나 우리는 크게 방해받지 않으려 고했습니다 우리는 개발자들이 이 문제를 해결하는 것이 문제에 가장 가깝습니다 그들은 가장 많은 접촉을 가지고 있으며, 그들은 이런 일을하는 가장 좋은 방법을 우리에게 말해 줄 수 있습니다 그래서 우리는 모든 프로세스가 계획을 세우는 것이 기본적으로 배경이었습니다

정보 수집 장소였습니다 우리가 진행하고있는 진전을 이해하기 위해서, 그러나 그 과정 자체는 무거운 짐을 덜어줍니다 수 많은 스프레드 시트와 업데이트에 관한 회의가 아닙니다 그리고 우리는 우리 자신을 팀으로 생각합니다 그것은 다른 모든 팀 사이의 결합 조직입니다

그래서 우리는 정보의 올바른 균형을 찾고 싶었습니다 이해 관계자들은 실제로 무엇을 했습니까? 이 다른 옵션들과 비교하여, 알고 싶어합니다 우리가 계획을 위해 사용할 수있는 것 그래서 우리는 물었습니다 그리고 이것이 그들이 원하는 것입니다

믿기지 않게 간단합니다 그러나 누가 일하고 있는가? 얼마나 진전 되었습니까? 그리고 얼마나 많은 사람들의 거대한 카운터 마감일까지 남은 일 이것은 회사 전체에서 광범위하게 출판됩니다 누구나 그것에 접근 할 수 있습니다 그리고 우리는 이것이 업데이트되었는지 확인하려고 노력합니다

이것은 실제로 자체적으로 정기적으로 업데이트됩니다 그것은 완전히 자동화되어 있습니다 그러나 우리는 이것이 노출되어 있는지 확인하기를 원합니다 그래서 우리는 월 1 회 이그 제 큐 티브 스테이크 홀더 회의뿐만 아니라, 다시, dev에 회의 및 제품 회의 이 전체 프로세스의 핵심은 Sasha입니다

이전에 Cake 프로세스를 언급했다 거버넌스 승인 우리는 프로젝트 계획을 수행하는 방법과 동일한 방법으로 생각했습니다 그래서 우리는 정말 간단한 방법을 개발했습니다 Jira 제품 로드맵

마이그레이션하는 각 팀마다 티켓이 있습니다 매주 우리는 일을 정리 한 목록을 기록합니다 우리는 알고 싶어합니다 그들은 모든 응용 프로그램에 대해 일련의 하위 작업을 수행합니다 그들이 이주하고 있다는 것을

그리고 그들은 티켓을 업데이트합니다 이것이 모든 22 개 팀의 단일 진실입니다 우리는 무슨 일이 일어나고 있는지 정확히 알고 있습니다 그들은 우리에게 업데이트를 제공합니다 그리고 그 정보는 모두 다음과 같습니다

미끄러 져서 우리 대시 보드에 완전히 넣었다 자동으로 그래서 이것은 우리에게 정말로 도움이되었습니다 그런 결정은 한 곳에서 녹화되며 모두에게 제공됩니다 보다 그래서이 모든 것들이 훌륭합니다

그러나 변화는 정기적으로 일어난다 그래서 우리는 작업 우선 순위를 낮출 수있는 방법이 필요했습니다 우리는 물건이 완전히 옆으로 빨리 갈 수 있다는 것을 압니다 새로운 개인 정보 보호 규정이 생길 수 있습니다 아무거나는 일어날 수있다

우리 사업만큼이나 그렇습니다 에 따라 영향이있을 것이라는 점에 동의합니다 우리가하는 변화와 모든 사람에게 앞으로 나아가는 것에 동의한다 우리는 그것으로 완전히 멋져요 다시 Jira 프로젝트를 사용합니다

변경 사항이 발표되면 기록됩니다 Jira 티켓에 넣은 다음 모든 이해 관계자 팀과의 만남 결정을 내리고, 우선 순위가 결정되며, Jira 티켓에 기록됩니다 모두가 볼 수 있도록 다시 게시됩니다 일어날 일에 대해 의문의 여지가 없습니다 모두가 변화와 모든 것을 알고 있습니다

영향을 이해합니다 그래서 그것은 당신을 위해서도 변할 것입니다 그리고 나는 괜찮다고 생각한다 나는 그것이 일어날 것이라는 것을 당신이 안다는 한 오래 생각합니다 그리고 당신은 그걸 준비하고 있습니다

그렇다면 정말로 그렇게해서는 안됩니다 너무 어려워 그래서 실제로 들었습니다 미안, 나는 조금 앞으로 뛰어 올랐다 그래서이 부분도 생각하고 있습니다

우리 팀에 대한 우리의 생각 앞으로 올 모든 변화에 대비할 준비가되어 있습니다 그래서 그들은 자체 인프라를 소유하게 될 것입니다 우리가 시작했을 때부터 큰 변화입니다 그들은 이전에 없었던 일들에 책임이 있습니다 새로운 팀을 시작하기위한 프로세스에 대해 생각할 때 그들의 일, 우리는 그들에게 많은 시간을 보내 게한다

도구를 알게되고, 훈련을 받고, 이미 개발 팀과 협력 전에 이것을 통해, 그리고 실제로 새로운 기술로 무슨 일이 일어나는지 이해하십시오 그들이 사용할 거라고? 그래서 우리는 그 시간의 우선 순위를 정해야합니다 우리는 모든 팀에 투자해야합니다 그리고 가장 중요한 것은 이것이 아마도 프로젝트에서 자주 언급하지 않는 것 그러나 우리는 우리 팀을 정말로 염려합니다 우리는 우리가 많은 것을 요구하고 있다는 것을 이해합니다

키보드에 손을 댄 사람입니다 매일, 그리고 그들은 만드는 사람들입니다 이 변환이 가능합니다 그래서 우리는 그들의 일에 감사하는 시간을 많이 보냅니다 그리고 우리는 우리의 경영 팀, 제품 팀, 엔지니어링 팀은 모두이 작업을 인식합니다

그래서 충고의 큰 조각 – 당신의 프로젝트로 곰팡이를 깨뜨리는 것을 두려워하지 마십시오 우리는 개인적으로 파티하기를 좋아합니다 그런 거대한 프로젝트 – 지속적인 1 년 프로젝트와 같습니다 사람들은 매우 피곤하고 일종의 떠남에 대해 생각하며, 아니면 그들은 떠날 것입니다 그러나 우리는 모두가 완료되는 작업의 이점을 이해합니다

그래서 저는 Kelsey Hightower의 인용문을 닫고 싶습니다 우리가 서명 한 직후, 우리는 고객 회의를 가졌습니다 우리가 참석했다 그리고 우리는 그가 우리가 유일한 회사라고 말했다 그걸 들었다고 스스로 들려서 거대한 파티를 열었 어

구글과 계약을 맺은 후 그래서 이것은이 과정에 대한 우리의 생각을 구현합니다 일어나는 모든 것은 축하받습니다 우리 셋이 여기까지 올거 같아 오늘이 자리에 서게되어 매우 운이 좋았습니다 LiveRamp에서 위대한 팀

그리고 나는 그들 모두에게 고맙다고 말하고 싶다 매일 이것을 가능하게하기 위해서 [음악 재생]

The future of querying big data with Polybase and SQL Server – THR2170

>>> 앞으로 가자

시작되었습니다 감사합니다 모든 권리, 나는 TRAVIS WRIGHT입니다 나는 SQL에 관한 PM 중 한 명이다 서버 공학 팀 및 우리 PUTTING 작업 중임 함께이 SQL 서버 2019 마지막 큰 데이터 클러스터 1 년 또는 그 이상

우리는 단지 이것을 발표했다 주 수녀님 들께 공고 I 'm Guessing, 니가 왜 여기 있니, 그렇지? 너는 뭐라 생각하니? IT는 최고급입니까? 알지 못합니까? 알아 듣지 못하는지? 어떤 사람들에게는 새로운 것이 전부입니다 오늘 우리는 당신에게 KIND OF KIND OF 우리가하고있을 때의 개요 왜 우리가 그와 그 종류의 그냥 너에게주는 것 우리가 어디 있는지에 대한 의견이 있어요 머리와 우리가 생각하는 것 이것에 관해서, 우리는 매우 좋습니다

너를 얻는 데 관심이있다 우리가하고있는 것에 대한 피드백 또는 우리가 머리말을하고 있는지 여부 여기 오른쪽 방향 기본적으로 그것이 아래로 온다 데이터 사용자의 수 관리가 단지 폭발적입니다 내가 뽑아보고 싶은 통계 중 하나 밖으로 나 모르겠다

그곳에는 그걸로 밝혀졌습니다 80 데이터 오늘 세계에서 창녀 지난 2 년 동안 인터뷰와 같은 IT 소리 질문, 당신이 묻는다면 데이터의 양을 추정해라 세상과 사람처럼 흰색을 그려 내야한다

보드, 오른쪽? 거기에 많은 데이터가 있습니다 데이터 유형 우리는 저장 중입니다 더 많은 다양성을 낳을 것입니다 잘 IoT DATA STREAMS COMING 에서

데이터의 양은 제어 해제 정말 우리가해야 할 일 의 성공을위한 명령 우리 조직은 유용 할 수 있습니다 그 통찰력을 얻으려면 데이터 그것은 흥미롭고, 나는 보았습니다 몇 몇 금융 뉴스 채널 TV에서의이 아침, 그리고 모두 이 사람들은 이야기하고있다

한 분과 같은 다음에 표시 방법 회사는 집계 중이며 데이터를 사용 중입니다 그들이 말한 것처럼 AMAZON의 새로운 상점, 그들의 새로운 소매점에 보관하십시오 중 하나에 대해 이야기했다 주된 이유는 이것입니다 소매점은 가질 수 있습니다

사람들은 소매점으로 들어갑니다 그들은 데이터를 수집 할 수 있습니다 소매점 직원 소매업 매장 주변 및 이동 방법 상점 및 종류 사람들은 그곳에 와서 상점의 전체 지점이 아닙니다 물건을 팔기에는 너무 많지만 사람들에 관한 자료 수집에 행동을 산다 모든것이 엄청나게 내려갔습니다

오늘의 모든 방법으로 오늘의 TA 이 다른 뉴스 섹션 우리가하는 모든 일 중 하나 1 년 후 우리는 조사를하고 있습니다 소수의 수령 기업 그들이 어떻게 사용하는지 알아 낸다 기술, 그리고 우리는 가고 재무 성과 비교 이것들이 공개적으로 나온 결과 트레이드 된 회사 및 POST 성공하는 부분을 찾으십시오 방법에 관한 회사들 그들은 기술을 사용하고 있습니까? 이 회사들은 무엇입니까? 나머지와 다르게? 그리고 지난 몇 년 동안, 우리는 어디에서나 동향을 보았습니다

이 회사들 데이터 통합 ETL을 사용하지 않고, 그들은 있습니다 그들의 데이터를 합친다 만들기 위해 집중화 된 데이터 저장소 더 쉽게 데이터를 통합 가능하고 접근 가능한, 그리고 그들의 데이터에 대한 ANALYTICS 우리는 이러한 추세를보고 있습니다 그리고 우리가 할 수있는 말은 이 기업이 더 도움이되도록 도와주세요

SQL 서버와 성공 그 회사에 도움이되는 회사 커튼을 넘어서서는 안된다 성공할 수는 없다 그보다 더 쉽게하십시오 SQL Server 2019에 대한 정보 모든 것을 통합 할 수있게 해줍니다 귀하의 데이터와 모든 귀하의 데이터와 모든 것을 분석하십시오 귀하의 데이터, 그리고 우리는 그 정보를 오늘 세 가지

그래서 처음으로 시작하자 귀하의 모든 데이터를 통합하고 SQL 서버 2016 년, 우리는 A 기능은 폴리베이스를 호출합니다 사람들이 폴리 폴리를 어떻게 사용하고 있는가? 베이스? 괜찮아 그게 내가 예상하는 것 우리가 겪은 것은 무엇 이었습니까? 고객이 좋아하는 이유를 알았습니다

당신은 폴리베이스, 다른 무엇을 사용하여 문제가 있습니다 그 일종 사람들은 IDEA를 좋아하고 그것을 만듭니다 나를 위해 쉽게 통합 데이터,하지만 우리가 알아 낸 것 입양에 대한 압박, 그리고 우리 우리의 일부로서 언급 됨 해결책 우리는 그것과 동일한 개념을 취하고있다

폴리베이스가 어떻게 작동하는지, 사람들에게 더 편한 IT 생성하여 데이터 통합 테이블 그럼 너는 단지 그걸 질의 할 수있어 SQL Server의 내부 테이블 다른 표가 있겠지 당신은 다른 테이블에 그것을 조울 수 있습니다 하지만 QUERY DATA 시간에 그 테이블 밖으로 우리가 가서 얻는다

외부 데이터의 데이터 출처, 2016 년 우리가 그랬던 것처럼 클라우드 또는 호튼과 같은 것이 아닙니다 지금 HDFS가 2019 년에 작동합니다 오라클에 커넥터를 추가하면, 타라 데이타, 기타 SQL 서버 및 사용 가능한 일반 커넥터 모든 데이터 소스에 연결 그것이 OBDC 준수입니다 그리고 당신이 뛰는 시간에 QUERY 우리는 데이터를 가져올 것입니다 당신은 꼭 필요하지 않습니다

데이터를 SQL 서비스로 이동하십시오 QUERY IT 느낌을내는거야? 우리가 가고있는 것들 중 하나 성과 향상을 위해 노력하십시오 우리는 SQL 부분으로 소개하고 있습니다 이 기능이 호출 된 서버 데이터 풀 및 데이터 풀은 A SET SQL SERVER INSTANCES의 설정 배포하고, 우리가 할 일은 무엇입니까? 우리는 기본적으로 외부 테이블과 함께 이야기해라

데이터 풀 및 포인트 미국에서 A 데이터 풀, 우리는 데이터 소스와 같은 오라클과 같은 외부 데이터베이스 보기를 위해 그리고 그 자료를 얻기 데이터 풀, 파티션까지 이 모든 것을 IT 및 확산 여러 SQL Server 인스턴스 지금 자료는 고죄된다 여러 SQL Server를 실행합니다 그런 다음 QUERY를 수행 할 때 그 외의 테이블, 돌아 가기 대신에 자료 제공 및 자료 수집 지역 필터 및 집계 PARALLEL은이 모든 SQL을 포함합니다 서버 인스턴스

당신은 어디에서 유죄 판결을 받습니까? 그 각각의 설치 데모를 보러 가자 외부 테이블 만들기 신탁 그래서 나는 여기에있다 AZURE DATA STUDIO

기다려, 내가 너에게 보여 줬어 이 그리고 AZURE DATA STUDIO는 우리의 새로운 소식입니다 CROSS OS WINDOWS LINUX 및 MACK 모든 종류의 사람들을위한 도구, 데이타 사이언스를위한, DBA를위한 개발자 용 너는 다른 것을 볼 것이다

우리가 경험하는대로의 경험 이것,이 도구는 모든 정보는 귀하의 정보와 동일합니다 SQL Server 또는 사용자 안쪽에 앉아 있습니다 스파크와 함께 사용하고 싶습니다 우리는 이걸로 갈거야 SQL Server를 바로 여기에서 사용할 수 있습니다

우리가 닮은 것을 많이 찾아 본다 IN SQL 관리자 서버 지금 우리는 새로운 외부 테이블 마법사 창출 AZURE DATA STUDIO 내부 오라클 데이터베이스에 연결 외부 테이블 만들기 오라클 내부 테이블 내가 가야 할 일 이 외부 데이터 소스 A를 제공하십시오

이름, 그리고 내가 갈거야 이 서버에 연결 우리는 AT와 연결될 것입니다 XE 데이터베이스, 우리는 ORACLE CREDENTIAL 생성 및 우리는 연결하려고합니다 시스템과이 슈퍼 시큐리티 내가 너에게 말할 수없는 패스워드 IT가 너무 어렵 기 때문에

알았어, 지금 우리가하고있는 일 우리는 실제로 갈 수 있습니까? ORACLE 인스턴스 우리는 실제로 그걸 사용할 수있는 계획 데이터베이스, 우리가 선택할 수 있습니다 우리가 원하는 테이블 EXTERNAL을 넘어서 SYNCHRONIZE SQL Server 내부 테이블 우리는 여기 테이블에 열을 지어 라 우리가 원할 경우 매핑하기 알고 계셔, 다르게 열 이름 또는 우리가 원할 수도 있습니다 테이블의 이름을 변경하십시오

SQL Server 내부 및 그 다음 우리는 다음을 클릭하고 생성 할 수 있습니다 – 그리고 이것은 갈 것이고 창조 할 것입니다 미국을위한 새로운 외부 테이블 만약 우리가 지금 여기 저기로 가면 테이블의 목록을 새로 고침합니다 우리가이 새로운 오라클을 보았습니다 재고 목록 및 우리는 그냥 할 수 있습니다

이 항목을 1,000 개 이상 선택하십시오 테이블, 그리고 우리가 그 시간에 그냥이 쿼리를 수행하십시오, 우리는 가고 있습니다 데이터를 얻으려면 오라클 데이터베이스 뒤로 지금 당신의 모든 응용 프로그램 SQL Server에 연결 그 데이터에 대한 액세스가 존재 함 오라클 및 그 안에있는 테이블 REALTIME, 오라클은 무엇을 의미합니까? 권리? 이 종류의 문제를 해결하기 위해, ETL이있는 곳이면 누구보다도 일부 코드를 작성해야합니다 그 데이터 동기화

나에게 많은 것을 가져다 주었다 내가 할 수있는 것 이상으로 저 위저드, 맞아, 그럼 내가 옳을거야 ETL을 유지해야했다 SCHEME MA 때까지 운전하십시오 변경되었습니다

나는 중복 복사본을 만들어 내고있다 내 데이터와 내가 그것을 움직일 때마다 나는 그 안에서 움직이고있어 규정 준수의 경계선, 나는 그렇습니다 나의 공격 표면 증가 가난한 사람들을위한 지역 데이터의 모든 사본, 그리고 나도 알아야 해 끊임없이해야 할 종류 이거 지키고 있니? 모든 사람, 나는 너희 모두가 잘하고 있음을 확신한다

이거 가져라 나는 ETL SPAGHETTI라고 부른다 당신은 ETL SPAGHETTI를 가지고 있습니다 어디서나 직업을 가지고있는 곳 장소 너머 누가 알았어? 데이터의 AT? 사용자가 당신에게 와서 말합니다 내 데이터를 삭제하고, 너 오하이오

나는 네가 어디에서 왔는지 알지 못한다 데이터, 죄송합니다, 전부 끝났어 장소 우리는 장소에있는 데이터를 놓을 수 있습니다 그럼에도 불구하고 계속 질문 할 수 있습니다

SQL Server는 다른 테이블처럼 지금부터 살펴 보자 다음 중위 귀하의 모든 데이터를 관리하십시오 귀하의 모든 데이터를 관리하는 데있어서, 우리가하고 싶은 것이 우리가 원하는 것입니다 사람들을 위해 쉽게 만들 수 있습니다

그들의 큰 데이터를 통합하고 그들과의 관계 데이터 귀하의 관련 데이터입니다 이것은 당신의 큰 데이터입니다 그들은 사랑에 빠져 있습니다 그것은 아름답습니다 행복한 이야기, 그리고 그 것 우리가 가고있는 것의 종류 여기에

거의 모든 고객과 마찬가지로 얘기하자면, 빅 데이터가 있습니다 하나의 건물에서, 그리고 SQL 사용자는 다른 쪽에서 꺼져 있습니다 건물, 그리고 그들은 거의 이야기 그림을 제외하고 각각 다른 곳에 그들의 데이터를 어떻게 편집 할 것인가? 방법 또는 다른 절대 유일한 것입니다 해야 할 것

나는 당신의 자료를 원한다 나는 너를 원한다 데이터 그들은 그들의 데이터를 내보내고 있습니다 여기 저기

우리는 통일 된 창조를 원한다 배치가 가능한 시스템 당신의 관련 데이터와 빅 하나의 통일 된 솔루션으로서의 데이터 MICROSOFT가 제공 한 MICROSOFT가 지원하는 우리가 실제로 취하고 있니? 오픈 소스 프로젝트 주변 큰 데이터, APACHE SPARK 및 APACHE HDFS와 우리는 SQL Server를 사용하여 상자에 넣습니다 2019 SQL의 최상위에 SQL을 배치하십시오 쿠 베르 네트

너는 얼마나 친숙한가? 쿠 버넷 네? 그것에서 시작된 적용 분야 하지 마라 – 너는 잃을 수있다 귀하의 데이터 데이터가 실제로 없습니다 지금은 사람들이 시작하고 있습니다 이 컨테이너로 알기

에코 시스템은 성숙, 그들은 데이터베이스 작업을 실행하고 있습니다 KUBERNETES의 정상에 잘 어울립니다 거기에 대한 많은 장점이 있습니다 호스텔을위한 커 버넷 사용 이 아키텍처 그것은 아주 빨리 입양하게됩니다

콘테이너 : 나는 데모를했다 – 나는 할 것이다 곧 비디오 준비 완료 일부 HPE에서 YouTube로 이동하려면 그들이 제공 한 하드웨어 미국인들은 그들의 실험실에서 3 1/2 KERR RA는 RAM의 비트입니다 정교한 비니 시스템, 그리고 하나의 명령으로 할 수있다 전체 SQL Server 설치 2019 빅 데이터 클러스터 300 SQL Server의 인스턴스, 200 HDFS 데이터 노트, 200 스파크 런 시간 순서 원사, 노크, 레인저, A FULL 좋아하는 경영 평면 모든 것을 저장하는 열정적 인 검색 로그는 로그에 기록됩니다

전체적으로 INFLUX DB를 저장하십시오 모든 모니터링 데이터 관리자 PORTAL AND SO SO ON 이 물건을 내가 파견 할 수있다 싱글이있는 모든 것 명령 및 모든 이미지 있습니다 다운로드 한 모든 콘테이너가오고 모든 것 자동 유선 함께 SQL 끝낼 수 있습니다

포인트 또는 녹스 엔드 포인트 인 8 분 나는 당신이 다운로드 할 수 있다고 생각하지 않는다 SQL Server의 WINDOWS ISO 8 분, 그냥 다운로드 당신이 굉장히 인상적이야 이 때문에 할 수 있는가? 쿠 버넷 (KUBERNETES)의 건축

기타 주요 혜택 중 하나 KUBERNETES에 올라 타는 것은 그것의 것입니다 신청서 개요 플랫폼, 오른쪽? SQL 서버 2019를 실행할 수 있습니다 큰 데이터 클러스터 어디에서나 쿠 베넷 네 KUBERNETES 클러스터가 될 수있다 너는 예비에 너 자신을 가지고있다

데이터 센터 너는 너의 길을 열어 줄 수있다 미리 데이터 센터에 SQL Server 실행 2019 빅 데이터 AZURE 스택 맨 위에 클러스터 또는 당신은 그것을 관리 할 수 ​​있습니다

AZURE OR KUBERNETES 서비스 AWS, EC IT와 같은 측면에서 컨테이너 소스 정말 중요하지 않습니다 쿠 베넷 제공 미국을위한 계획, 그리고 우리는 할 수있다 우리가 원하는 곳으로 배포하십시오 지금,이 부분으로 우리가 배포 할 아키텍처 HDFS, 모든 HDFS 데이터 노드 SQL Server 엔진 실행 실행 바로 옆에 그것이있을 것입니다

잘 엔진에 스파크 그게 미국에 접근하도록 허용하는 것 둘 중 하나를 통한 데이터 링크 공유 SQL 서버 또는 스파크 작업 데이터 과학자가 선호하는 경우 스파크로 일하고, 대단하다 SPARK END POINT를 사용하여 그 (것)들에 연결하고하십시오 불꽃 구인 귀하의 응용 프로그램 개발자, 귀하의 DBA, MAYBE – 그게 아름다운

이 모든 것이 모든 사람에게 가능합니다 공유 데이터 호수 이걸 봐라 건축, 그것이 무엇인지 우리가 배포하는 곳으로 내려갑니다 우리는 저장고에 무엇을 부르는 지, 그리고 저장 풀이가 이거 야

HDFS, 스파크 및 SQL에서의 확장 성 그래서 건축은 시간이 지남에 따라, 당신은 근심을 가지고 있습니다 조인 된 하드웨어 용량 귀하의 커 버넷 클러스터로, 배포를 계속할 수 있습니다 추가 저장 수영장 포드 AT 그 레이어, 그리고 당신은 실행할 수 있습니다 SQL 서버의 쿼리 마스터 인스트럭션과 리치 다운 SQL 서버 사건에 – IF 한 줄을 읽고 싶다 여기 HDFS에있는 테이블에서 예를 들어, 상단의 외부 테이블 이걸 읽고 데이터 파일을 읽으십시오

우리가 그 시간에 무엇을할까요? SQL에 대한 질의를 보내라 그 위에있는 서비스 인스턴스 데이터 파일의 데이터 노드 IS AT AND SOY는 파일을 읽고 SQL Server에는 능력이 있습니다 데이터 파일 읽기 및 쓰기 NATIVELY 데모를 보러 가자 이 작업하기 사실은

이 쿼리를 작성하려고합니다 이리 미안, 나는 나가야 해 이 나는 항상 잊어 버린다

하기 위해서 괜찮아 그럼이 질문을 여기에서 가져 오자 우리의 사랑스런 천국으로 돌아 가라 데이터 스튜디오, 우리는 가고있다

이 새로운 검색어를 만드십시오 이 작업을 수행 괜찮아 자, 너 내가 갈거야 외부 테이블 만들기 이 디렉토리는 내부에 위치합니다

HDFS의 이것은 HDFS BROWSING입니다 당신은 AZURE를 경험하게됩니다 데이터 스튜디오 그것은 기본적으로 파일과 같습니다

경험이 풍부한 탐험가 경험 당신이 볼 수있는 AZURE STUDIO 그 모두가 계속되고있어 나는이 전화 번호부를 불러왔다 스트림 데이터를 클릭하면 의 수백만을 포함하는 파일 CLICK STREAM DATA의 기록 KY는 EXTERNAL TABLE ASK를 생성합니다 SQL 스토리지 풀 사용 QUARY를 사용하십시오

그런 다음 나는 정의를 읽었다 데이터 파일에 대한 스키마 나는이 외장을 만들 수있다 표 한 번 내가 외부를 만들어 낸다

테이블, 지금 당장 조회 할 수 있습니다 그저 내가 좋아할만한 테이블 다른 테이블과 흥미 진진한 점 특정 검색어는 유일하지 않습니다 나는 아래로 물러나서 CSV 파일의 데이터 SQL Server에서 HDFS로 이동 하지만 오늘 그걸로 기분 나빠 SQL Server 내부에서 실행 중입니다 마스터 일은 물론

이것은 나를 결합하게 해준다 그 마스터에 OLTP 데이터 실행 내 HDFS 데이터가 포함 된 인스턴스 하나의 질문 나는 그냥 테이블 조인이야 특별한 것은 없어요 약 그것

미안, 많이 들었어 당신이 상상할 수있는 한 이번 주 그래서 계속 가자 이리 그래서 지금 우리가 정말로하고 싶다면 BIG QUERY, 그럼 우리가 소개 할 수있어

우리가 무엇을 부를까? 손잡이 그것으로 여러 가지로 배포 버라이어티의 맨 위에있는 콘테이너 그리고 그들은 함께 일하기 시작했다 데이터 각 컴퓨터 손잡이 예 F THE 데이터와 각자의 말을 들어라 집계를하는 ​​기타 전체 설정에서 떨림

교차 분할 집계 및 날카롭게하고, 그것을 보낼 것입니다 머리로 돌아온 결과 마디 고맙습니다 내 팀이 앞으로 나아갈 것 같아 나를 둘러싼 다음과 같이 시작하자

이 지점에 물병 이 모든 일이 언제나처럼 이 지점에 있습니다 따라서 컴퓨터를 집어 넣을 수도 있습니다 외부 데이터 소스로의 이동 오라클, 테라 데이터, 동부 표준시 CETERA, 그리고 당신은 사용하실 수 있습니다 우리가 말한 데이터 팩 EARLIER, 그러면 컴퓨터를 뽑아 라 그 위에 꼭대기를 당겨 라

로컬 필터를 사용하고 있습니다 총괄은 여기 있고, 당신은 교차 분할하기 통일 및 해체 너는 비참 해 지금 건축 당신이 그것에 대해 생각한다면, 이것은 기본적으로 SQL 서버가 좋아함 항상 시스템을 비 춥니 다

너를 처리하고 싶으면 빠른 질문 또는 원하는 질문 더 많은 데이터를 저장하고 관리하십시오 당신의 좋아하는 OEM 및 구매로 가십시오 더 큰 상자, 그렇지? 이 건축물에 너는있어 당신이 할 수있는 가늠할 수있는 시스템 사용중인 저장소 확장 HDFS 저장 용량을 확장 할 수 있습니다

데이터 풀 인스턴스 사용 컴퓨터를 확장 할 수 있습니다 SQL Server 인스턴스를 사용 중입니다 이 레이어는 당신을 화나게했습니다 수평 확장, 수직 확장 네가 돌아갈 수 있다고 단정 짓는다

그리고 DOWN ON DEMAND 그것의 탄성과 스케일 이 작업을 통해 마스터 인스턴스 모든 이용 가능 그룹 읽기와 함께 읽기 확장하십시오 단 두 번째 SQL Server가 실제로 증가했습니다 이것은 A가 정의한 것이 아닙니다 단일 상자, 오른쪽? 이것은 당신이 지금 할 수있는 것입니다

거대한 건축물에 배치 그 규모가 크고 탄력적입니다 그래서 우리는 A를 제공 할 것입니다 통일 행정 경험 이것은 물론 그래서 당신은 AZURE 데이터를 보았습니다

SQL을 할 수있는 도구 그리고 HDFS 그리고 우리는 A에서 볼 수 있습니다 하나의 도구로 분 거리 우리는 관리를 제공하고 있습니다 해당 상자의 서비스 모든 로그 콜렉션 전체 건축 문의 다시 열정적 인 검색 기능을 제공합니다 그리고 나서 우리는 CABANA를 위에 올려 놓았습니다

그래서 당신은 로그 분석을 할 수 있습니다 이전에 데이터 모니터링하기 INFLUX DB 그리고 우리는 가지고있다 대시 보드는 여기에서 볼 수 있습니다 너를 감시 할 수있게 해줘 모든 성과 클러스터를 통해

지금 당장 보자 귀하의 모든 데이터를 분석하십시오 IT가 모두를 분석 할 때 귀하의 데이터, 우리가 제공하는 것 완벽한 인공 지능 플랫폼입니다 당신을 사로 잡는 모든것 스파크 스트리밍을 통한 데이터, 예를 들어, HDFS 내부에 데이터 저장 또는 SQL 마스터 서비스 또는 데이터 풀, 그런 다음 갈 수 있습니다 데이터 준비 작업 수행 스파크를 사용하여 작업하고, 기계를 사용하십시오

SPARK ML을 사용하여 학습하거나 SQL – SQL 서버 내부 프리젠 테이션 기능 사용 또는 그들을 조작 할 수 있습니다 콘테이너는 당신을 도울 것입니다 우리가 만든 모델에서 만들어라 도구 키트를 가져다주세요 너의 모델 우리는 그것의 주위에 REST API를 감쌀 것이다

SWAGGER 기반 및 자동 제공 규정 너는 콘테이너 위에 위치한다 쿠 베르 네트 그것이 스 워거를 기반으로하기 때문에 REST API로 A를 자동 실행 가능 고객을위한 라이브러리 당신이 원하는 프로그래밍, 자바, C 샤프, 상관 없어 귀사의 어플리케이션 개발 업체는 모델을 쉽게 조작 할 수 있습니다 이 라이브러리를 사용하고 그 컨테이너들이 위에 솟아있다

거기에 그 (것)들을보기 위하여 노트 북 체험 AZURE DATA STUDIO에 설치 당신이 스파크를 만들 수있는 것 구원과 실행 SQL Server Big Spark 측 데이터 클러스터 내가 가지고있는 책을 갖게하려면 여기,이 노트북 경험은 완전히 새로운 것입니다 그것의 AZURE DATA STUDIO입니다 우리는 단지 알려지지 않았다

이번 주 그대로 미리보기 확장 노트북 체험은 유익하다 그 사람들에게 새로운 2 개의 SQL을 실행하는 가족 QUERIES 그 방법은 당신에게 있습니다 이 다른 세포들 그들 안에있는 코드

우리는 SQL을 만들려고한다 너무 귀여운 노트 이 코드 셀 안에,이 안에 그게 우리 편이야 이 문제를 해결하기 위해 큰 소리로 눈을 뜨다 데이터 클러스터, 그리고 실행할 수 있습니다

암호 이 사건에서 나는 무엇을하고 있는가? 이 CSV 데이터를로드 중입니다 여기에 넘쳐나는 파일 이 디렉토리 및 데이터 FRAMESHOW 당신은 존재하는 데이터를 볼 수 있습니다

여기에서 이것은 단지 일부 샘플 데이터입니다 당뇨병 검사와 같은 설정 PREDICT를 할 수있는 곳 또는 누군가가 될지 여부 그들의 생체를 기반으로하는 당뇨병 데이터 그럼 우리는보기를 만들 수 있습니다 예를 들어, 그리고 우리는 몇 가지 SQL 쿼리를 수행 할 수 있습니까? 데이터를 QUERY 이상으로 IT 사이트 HDFS의 내부

그래서 이것은 스파크 배열을 사용하고 있습니다 그래서 우리는 어떻게해야할까요? HDFS에 앉아있는 쿼리 데이터, T SEQUEL 사용 우리는 여기에서 볼 수 있습니다 결과

우리는 실제로는 볼 수 없다 나이 간의 강한 상관 관계 그리고 인슐린 수준 지금 기계 학습을 신청하자 이 문제를 해결하기 위해 여기 우리는 기능을 수행하고 있습니다

데이터를 가져 오기 위해 피스톤 사용 설정 및 기능을 사용하십시오 이러한 다양한 기능 우리는 사용 REAK 이쪽은 데이터 세트에 있습니다 여기 아래로 우리는 할 수있다 예측, 그리고 BMI면 보자

또는 신체 질량 지수는 우수합니다 그 여부와 관계없는 프리젠터 누군가는 당뇨병을 갖습니다 너는 그것을 볼 수 없다 설레임, 우리가 알고 있기 때문에 이것은 과학과 무역에 기초를두고 있습니다 이 의사에게 미국인에게 말하기 너의 체중은 확실히 높다

35 번 근처에 더 가깝습니다 그 사람보다 당뇨병이있다 31 세의 BMI 그리고 우리는 다른 사람들과 달리 할 수 ​​있습니다 예측

우리는 할 수있다 당분 수의 임신 수 사람은 좋은 사람이었습니다 당뇨병의 지시자 또는 아닙니다 너는 그것을 볼 수 없다 순전히 숫자 때문에 너무 가까이에있어, 그건 아니야

좋은 소식통입니다 순전히, 그렇지? 이것이 우리가 기계를 사용할 수있는 방법입니다 스파크 바이의 학습 노트북 경험 사용하기 AZURE DATA 내부에 여기에 사진관 결론적으로 요약하자면, 무엇을 우리는 여기에 건설했습니다 IS, FIRST OF 전체, 데이터 가상화 평행 한 컴퓨터를 가진 플래트 홈 그 중 QUERIES

우리는 공유 된 데이터 호수를 만들었습니다 SEQUEL을 사용하여 액세스 할 수 있습니다 또는 스파크, 그리고 우리가 만들었어요 허용되는 인공 지능 플랫폼을 모두 허용하십시오 데이터에서 모든 것을 할 수 있습니다

섭취 저장, TO 트레이닝, 모든 것을 하나로 스코어링하기 시스템, 귀하의 데이터가 절대로 필요하지 않습니다 SQL Server 2019를 크게 벗어나기 당신의 완전을 이루기위한 데이터 클러스터 인공 지능의 파이프 라인 이 주 우리는 그 SQL을 발표했다 SERVER 2019가 공공에 갔다 시사

2019 빅 데이터 클러스터 공공 미리보기에도 사용됩니다 우리는 점진적으로 굴러 가고 있습니다 그것의 부분 고객 당신이 탐구에 관심이 있다면 SQL Server 2019 큰 데이터 출력 클러스터 여기이 양식으로 이동 그리고 서명하고 우리는 ITALY ROLL IT OUT 고객 아주 많이 애용 해줘서 고마워

중지 나는 여기서 여기 온 사람들이다 모서리가 답을 얻습니다 네가 가질 수있는 모든 질문들

Introduction to the Hadoop Technology Stack

Hadoop 기술 스택의 과정에 오신 것을 환영합니다 빠른 입문서가 있습니다

이 과정의 개발자 및 관리자를위한 반경 도움말 기술 우리는 Hadoop 분산 컴퓨팅 프레임 워크의 개념을 살펴볼 것입니다 우리는 Hadoop이 어떻게 작동하는지, 어떻게 그리고 왜 그것이 다른지를 살펴볼 것입니다 전통적인 컴퓨팅 시스템에서 우리는 또한 기업이 처리 할 수있는 대중적이고 유용한 대형 데이터 도구 데이터를 하둡에서 효율적이고 효과적으로 처리 할 수 ​​있습니다 잠재 고객 및 비즈니스 전문가 개발자에게 기술적 혜택 제공 관리자 Hadoop 개발자 및 관심있는 사람 Hadoop이 무엇인지 파악하고 물론 하둡 상용 배포판을 살펴보고 다양한 도구와 Hadoop 시스템을 시작하는 방법을 알려드립니다 빅 데이터 여행을 시작하기에 유용한 비디오 시리즈를 찾아보십시오

수업 내용 전체를 빠르게 살펴보십시오 그래서 여기 제트기는 다음 시리즈에서 기대할 수있는 것의 빠른 스냅 샷입니다 동영상을 보려면 Hadoop을 빠르게 살펴보고 배급의 다양한 머리 어떻게 그들이 가지고있는 나이로 빠르게 깊은 잠수 우리는 전통 건축물에서 모피를 ​​가져 와서 우리가 Hat HDFS 아키텍처 즉, 이름 노드 데이터 노드 보조 노드와 다양한 다른 구성 요소 분산 된 시스템에서의 병렬 교차 (crossing) 다양한 플러그인과 어떻게 원사가 플러그인을 설치하면 MapReduce에 대한 간략한 개요를 볼 수 있으며 MapReduce 애플리케이션을 다른 언어로 작성하는 방법을 살펴보고 우리는 Hadoop으로 데이터를 가져 오는 방법을 살펴볼 것입니다 물을 이해하는 방법을 이해해야합니다 이 다음에 신속하게 들어갈 것입니다 또는 다양한 도구를 특종 flume uz HBase 및 기타 다양한 데이터 가져 오기 도구 우리는 또한 유형에 들어갈 것입니다 아키텍처 하이브 인터페이스 카탈로그 등 우리는 아파치 스톰 스파크 Guzzi보세요 그리고 신속하게 보안 mahout과 좋은 clunk 결론 머리를보고 여기서 어디로 가야 해? 시작하자

Big Data Infrastructure in the Cloud with Liftigniter – Stack Chat

MARK MIRCHANDANI : 찾고있는 회사 예측을하려면 방대한 양의 데이터가 필요하며, 복잡한 계산 및 신속한 대응 우리가 LiftIgniter와 이야기 할 때 우리와 함께하십시오

그들이 기계 학습 플랫폼을 어떻게 구축했는지에 관해 Stack Chat의이 에피소드 우리와 함께 해줘서 고마워 LiftIgniter에 대해 조금 더 알려주세요 플랫폼 구축 방법에 대해 설명합니다 VENKAT VENKATARAMAN : 나를 보내 주셔서 감사합니다

LiftIgniter는 실시간 개인화 플랫폼입니다 클라우드에서 실행되는 기계 학습 모델에 의해 구동됩니다 실시간으로 엔드 투 엔드 대기 시간을 의미합니다 약 100 내지 150 밀리 세컨드의 오더로 구성된다 여기에는 네트워크 대기 시간도 포함됩니다

자, 이건 모두 측면에서 진정한 도전입니다 규모와 계산이 사용자가 여러 신호를 추적 가장 관련성 높은 정보를 제공하기 위해 맞춤 추천 우리의 세계관은 각 사람이 독특하다는 것입니다 그리고 매 순간 우리 플랫폼 가장 관련성이 높은 결과에 최적화되어 있습니다 그 때까지 수집 한 모든 신호를 기반으로합니다 MARK MIRCHANDANI : 아키텍처를 보여줄 수 있습니까? 이걸 계속 지키려고 만든거야? VENKAT VENKATARAMAN : 물론입니다

위기에 처한 ML 회사로서 엄청난 양의 데이터, 인프라 비용 우리 사업에 큰 영향을 미칩니다 우리는 세 가지 주요 요소에 집중했습니다 가격, 대기 시간 및 안정성, 다른 사람들과 마찬가지로 이를 강조하기 위해 세 가지 주요 기술을 사용했습니다 워크로드를 기반으로하는 자동 크기 조정 기능을 사용하면 우리는 수평 확장 할 수있는 유연성을 가지고 있습니다

수요가 많은 워크로드 그리고 우리는 자동 스케일 그룹의 조합을 사용합니다 선매 용 인스턴스와 주문형 인스턴스에 대해 우리를 두 번째 요점으로 인도합니다 이는 유연성입니다 우리가 선제 사례를 다음과 같이 사용할 수 있도록 필요하며, 셋째, 이동 옵션 부실하지만 유용한 데이터를 저온 저장 장치에 다시 넣으십시오

비용 절감 속도면에서 보통 네트워크 대기 시간 는 거대한 부분을 가지고있다 그러나 구글의 네트워크는 꽤 활발했다 우리의 경험에서 우리는 많은 구성 요소를 유지할 수있었습니다

충분한 중복성으로 동일한 지역 내에서 가까이에 있습니다 Google의 Footprint를 통해 우리는 서비스를 생성하고 실행할 수 있습니다 모든 고객 대면 서비스 정말 잘 수행하십시오 그리고 우리는 또한 피할 수있었습니다 Google Cloud 덕분에 SLA에 영향을 줄 수있는 모든 중단

MARK MIRCHANDANI : 조금 더 말씀해 주시겠습니까? 추천 시스템이 실제로 구축 된 방법에 대해? VENKAT VENKATARAMAN : 물론입니다 다이어그램은 실제로 단순화 된 아키텍처입니다 도표 우리는로드 밸런서와 프록시를 보여주지 않습니다 그런 것들

그러나 주요 구성 요소와 서비스에만 초점을 맞추고 있습니다 우리가 우리 건축물에 가지고있는 클라우드에 대한 요청은 프런트 엔드 API를 사용하거나 우리는 모델 서버라고 부릅니다 모델 서버는 사용자와 관련이있는 모든 것 활동 및 돌아 오는 추천 결과, 그것이 모델 서버에 의해 처리됩니다 모든 마술이 일어난다 다른 모든 것, 예를 들어, 새 인벤토리 항목 업데이트 또는 생성, 또는 다른 API 호출을 실제로 만들 것입니다

프론트 엔드 서비스를 공격했습니다 이제 프런트 엔드 서비스를 살펴보면 API 전화가오고, 처리가 계속된다 프런트 엔드 컴퓨터에서 발생합니다 그리고 프론트 엔드 서비스는 데이터를 푸시합니다 데이터 저장소에 저장합니다

우리는 파일이나 다른 데이터를 생성합니다 Google Cloud Storage와 같은 일부 데이터 저장소에 저장합니다 또한 다른 데이터 저장소도 있습니다 그리고 GCS는 실제로 이벤트를 트리거합니다 우리가 듣고있는 많은 구독자가있는 Cloud Pub / Sub 그 주제에 관한 메시지

구독자는이를 픽업하고 추가 처리를 수행하며, 도면에 도시 된 예 우리가 재고 시스템을 가지고있는 곳입니다 추가 분석 및 처리를 기반으로합니다 방아쇠가 무엇인지 모델 서버는 전에 말했던 것처럼, 모든 권장 사항과 사용자를 처리하는 활동 추적 그들은 사내에서 많은 처리를합니다

많은 마술이 여기에서 발생합니다 많은 무거운 짐들이 발생합니다 이리– 데이터를 다시 한번 데이터 저장 장치에 저장한다 유사한 메커니즘이 발생하여 이벤트를 트리거합니다 Cloud Pub / Sub로 이동합니다

우리는 청취자가 있습니다 GCS에서 데이터를 선택하는 주제에 대해 추가 처리를 수행하십시오 그리고 다이어그램에 표시된 것처럼이 데이터 이제 BigQuery에 실시간으로 푸시됩니다 여기서 대시 보드는 분석을 위해 BigQuery에서 제공됩니다 여기서 핵심은 우리가 물건을 움직일 수있는 동안이다

빅 쿼리는 실시간으로 BigQuery에 조금 비싸기 때문에 BigQuery에 대한 액세스를 유지하고 싶습니다 우리가 정말로 필요할 때만 그래서 우리는 데이터를 끄는 오프라인 처리가 있습니다 BigQuery의 추가 집계, 이를 캐싱 레이어처럼 작동하는 Cloud SQL로 푸시합니다 따라서 대시 보드는 Cloud SQL의 BigQuery 그들이 얼마나 시간을 거슬러 올라가 느냐에 달려있다

가서 데이터를 수집하고 싶습니다 하단의 상자에는 Spark 클러스터가 표시됩니다 Cloud Dataproc에서 벗어납니다 스파크 클러스터는 기본적으로 모델 튜닝 및 재교육에 사용 더 나은 정확성을 위해 우리는 야간에 실행합니다

우리는 GCS에서 모든 데이터를 수집합니다 우리는 모델을 다시 돌아 다니고 있습니다 그리고 튜닝 파라미터가있는 모델의 결과 전에 있었던 것보다 낫다 우리는 필요한 변경을하고 그 구성을 밀어 낸다 클라우드로 MARK MIRCHANDANI : 자, 이제 한참 지났어

이것을 원래 설계했다 돌아가서 다시 할 수 있다면, 너는 무엇을 다르게 할 것인가? VENKAT VENKATARAMAN : 플랫폼을 설계하기 시작했습니다 기계 학습이 여전히 뜨겁지 않았던 2013 년, 2014 년 빅 데이터는 여전히 그 당시의 일이었습니다 오늘날과 마찬가지로 어렵거나 널리 이용 가능하지 않았습니다

사용 가능한 모든 라이브러리 및 프레임 워크가 있다면 오늘 그때, 그 다음에 빌드 대 구매 결정은 달라졌을 것입니다 우리는 또한 보강 된 지능을 가능하게했습니다 사용자에게 권장 사항에 영향을 줄 수 있습니다 때로는 규칙을 구현할 수도 있습니다 너무 제한적 일 수있는 결국 결과가 줄어 듭니다

이러한 사용자에 대한 사용자 정의를 가능하게하려면, 우리는 색인 생성 솔루션을 연구했습니다 더 나은 결과를 제공합니다 이 중 일부가 뭔가 조사 중이 었어 Elasticsearch와 같이 좋았습니다 하지만 우리만큼 빨리 수행하지 못했습니다

정말 까다로운 대기 시간 요구 사항 때문에 필요합니다 현재 다른 방법을 찾고 있습니다 이를 구축하고 지속적으로 권고 사항을 개선하는 것이 중요합니다 MARK MIRCHANDANI : 세부 사항을 공유해 주셔서 감사합니다 VENKAT VENKATARAMAN : 나의 기쁨

MIRCHANDANI (MARK MIRCHANDANI) : 설정을 시도하려면 Google Cloud Storage에 대한 Pub / Sub 알림, 아래 설명에서 둘러보기를 확인하십시오 시청 해 주셔서 감사 드리며 구독을 꼭하십시오 더 우수한 Google Cloud Platform 콘텐츠를 제공합니다 다음에 스택 채팅에서 보자

BTS FAKE LOVE EXPLANATION | What do the items and rooms mean? [SOLVED]

제가 이번에 페이크러브 뮤비해석을 준비해왔습니다! 방탄소년단과 빅히트가 데뷔초부터 준비해 온 이야기입니다 모든 자료들은 화양연화 노트와 하이라이트 릴에서 찾았습니다

영상자료들은 뮤비, 티저, 하이라이트등에서 가져온거구요 다 정확하다고 말할 순 없지만, 지금까지 제가 찾아내고 이해해보려 했던 것들 입니다 페이크 러브 뮤비해석 마술 가게는 두려움을 긍정적인 태도로 바꾸는 심리극의 기법입니다 마술 가게는 상상 속에 존재하는 정신적 재활입니다 심리극은 누군가의 삶을 조사하고 통찰력을 얻기 위해 심리 치료로 자주 사용되는 수법입니다

방탄소년단은 자신들을 행복하게 만드는 무언가를 위해 과거의 두려움을 교환합니다 그 물건들은 방탄소년단 멤버들의 충격적인 기억을 상징합니다 진 – 이어피스 진은 항상 아버지나 교장 선생님의 꼭두각시였죠 고등학생 시절, 진은 교장선생님께 그들의 비밀 은신처가 어디에 있는지 말했죠 그로인해 슈가는 퇴학을 당했구요

BTS memories of 2015 한 장면에서 진은 과연 무엇을 위해 이어피스를 교환한걸까요? 뮤비에서 보여주진 않았지만, 빨간 다이어리, 스메랄도 꽃, 아님 카메라를 받았다 짐작해봅니다 호비 – 스니커즈 초코바 스니커즈 초코바는 그의 엄마가 호비를 버리기 전 두고가신 초코바를 상징합니다

호비는 과연 무엇을 위해 초코바를 교환한걸까요? 케이크 – 십년지기 친구 지민 – 숲의 사진 저도 아직은 이 사진에 담겨있는 뜻이 무엇인지 잘 모르겠습니다 하지만 지민이가 8살때 일어난 사고와 관련있는것 같습니다 그때 수목원에서 일어난 일은 지민이에게 많을 상처를 주었고 그의 발작을 일으키며 그가 거짓말을 하게 만들었다 추리해봅니다 지민이는 과연 무엇을 위해 사진을 교환한걸까요? 바로 우산입니다 그러나 아직까진 우산의 좋은영향은 보지못했네요

알엠 – "살아 남아야 한다"가 써있는 거울조각 알엠이 "살아 남아야 한다"라고 쓴적은 과거에도 많이 있죠 알엠은 가난하게 자랐습니다 알엠이 제일 힘들때 자신을 위해 쓴 메모입니다 알엠은 과연 무엇을 위해 거울조각을 교환한걸까요? 바로 여자한테 줄 머리끈이었습니다 "우리는 한달 가량 같은 도서관에서 공부하고 같은 버스 정류장에서 같은 버스를 탔다

하지만 우리는 서로 한마디도 하지 않았다 머리 끈은 아직도 내 주머니에 있었다 저는 그녀가 전단지를 나눠 줄 것인지, 그녀가 어떤 것들을 견디고 있는지 궁금했다" 슈가 – ????? 슈가가 무엇을 교환했는지는 아무도 모릅니다 근데 그물건이 피아노 건반일 가능성이 크다고 생각합니다

화양현화 노트에서 슈가가 책상에서 피아노 키가 들어 있는 봉투를 꺼냈었습니다 그 피아노 건반은 슈가의 어머니를 죽인 화재 때문에 불에 탄 어머니의 피아노에서 나온 것이었습니다 슈가는 과연 무엇을 위해 그 물건을 교환한걸까요? 막대사탕입니다 바로 하이라이트 릴의 여자와 관련있는 막대사탕이죠 태형 – ????? 태형이가 무엇을 교환했는지는 아무도 모릅니다 근데 그물건이 핸드폰일 가능성이 크다고 생각합니다

그 핸드폰은 태형이가 아버지랑 있었던 사건 후에 알엠형한테 전화하려던 핸드폰일 것 같네요 태형이는 과연 무엇을 위해 그 물건을 교환한걸까요? 가방이네요 하이라이트 릴에서 태형이랑 관련된 여자의 가방이죠 같이 지내면서 친해진 것 같은데요 정국 – ????? 정국이가 무엇을 교환했는지는 아무도 모릅니다

설마 자기자신일 수 있을까요? 형제들이 슬플 때, 아플 땐 내가 아플 때보다 더 아프다 (Begin 정국 솔로곡) 정국인 과연 무엇을 위해 그 물건을 교환한걸까요? 바로 열쇠입니다 무엇을 여는 열쇠일까요? 형들의 행복? 자신을 위한 행복? 결국 정국이는 자기 자신을 마주하게 됩니다 진은 스메랄도 꽃을 지키려고 했죠 하지만 끝내 지키지 못했습니다 진이 하이라이트 릴의 여자를 지켜주지 못했다는 걸 보여주네요

그녀는 길 한복판에 누워 있었다 그녀의 머리카락 사이로 피가 흐르고 있었다 붉은 피가 거리를 따라 흘렀다 나는 생각했다 내가 시간을 돌려놓을 수만 있다면

(석진 notes – 830 Year 22) 컨테이너는 알엠의 은신처를 상징합니다 가난해서 컨테이너에서 살았죠 왼쪽에 메달린 손잡이는 하이라이트 릴의 여자를 항상 만나는 버스를 상징합니다 이 방은 호비가 엄마와의 마지막 추억인 놀이공원을 상징합니다

호비는 두려움을 이겨 내기 위해 노력했죠 끝까지 두려움에 맞서야 했습니다 지민이는 화장실/연습실 안에 있네요 친구와 연습하며 심하게 부딪친 사건을 기억하는거 같네요 거울을 보니 비를 맞으며 도망 간 8살때 자신이 보였다

(지민 notes – 704 Year 22) 지민이가 무슨 일이 일어났는지 깨달았을 때, 호비는 이미 그 소녀를 병원으로 옮겼갔죠 "할 수 있는 일이 없었다 내가 할 수 있었던 것은 넘어져서 누군가를 다치게 하고, 홀로 남겨 두고 가서 내 고통에 벌벌 떠는 것이였다" 태형이의 방은 핸드폰으로 가득하네요 ㅎㅎ 그 핸드폰은 태형이가 아버지랑 있었던 사건 후에 알엠형한테 전화하려던 기억을 상징하는거 같네요

"save me" 그래피티는 하이라이트 릴의 여자를 상징하는데요 슈가의 방은 옛날의 불에 탄 집을 상징하는데요 피아노는 엄마를 상징하는 것 같네요 정국이의 방은 깜깜하죠 하지만 형들을 항상 찾구 돌보고 있죠? 그리고 다른 멤버들은 정국이가 지켜보고 있는 사실을 알구요

과연 정국이가 '오멜라스를 떠나는 사람들'의 아이일까요? 정국이가 도시 아래에 갇혀 끔찍한 환경 속에서 오멜라스의 도시사람들의 행복을 위하여 고통받으면 살아야 하는 아이를 상징하는것일까요? 결국, 정국이는 무엇을 열쇠로 열었을까요? 자신의 행복이 아닐까요? 그래서 다른 멤버들이 다시 두려움을 맞이하게 된 것이 아닐까요? 그 때서야 방탄소년단 멤버들은 교환한 물건들이 단지 일시적인 행복을 위한 것이라는 것을 깨달았습니다 페이크 러브 (거짓된 사랑) 진이 있던 방으로 들어간 정국 멤버들은 이제 더 이상 상처를 감추기 위해 마스크를 쓸 수 없었습니다 이러한 가면들 때문에, 그들은 더 이상 자기도 자기자신이 누구인지도 알지 못하게됐죠 결국 멤버들은 자기 자신을 마주 해야 했습니다 진심으로 자기 자신을 사랑하기 위해서 그래야만 했습니다

BTS 타임라인에 대해 자세히 알아보구 싶으시면 모든 노트와 정보를 연대순으로 정리한 비디오도 만들어 보았습니다 끝까지 봐주셔서 감사합니다

남자 지옥 (Girl in the BL) 트레일러

내 눈을 열 때, 내 소설이야?! BL 소설의 여성 캐릭터 1 위 (불행, 불행, 조기 사망, 희롱 당한다) BL 소설에서 여성 성 1 호 그게 나야 이것은 내 소설에있다 천국의 남자 남자 있음 ———– 지옥에있는 남자 거의 7 일 울기 / 나에게 무슨 일이 일어날 것인가? / 반전 된 하렘 그를 더 잘해야한다 / 그를 죽이지 않아야한다 / 그를 사랑하게해야한다! 너무 후회하다

여기 소년이있다 소년도있다 도처에, 잘 생기있는 소년 주위에! <Mihazen : 천황, 폭군 Panian 군주국> # 그 미친놈?! # 아리에 타의 호감 <카야 : 슬리피 헤드,하지만 천재의 천재> # 도넛 # 젠틀 <Zerdin : 스 엇트, 충분히 말해왔다> # Modod student # Haggard <지드를 가르쳐 라 : Arieta를 보호하겠다고 약속 한 좋은 사람> # 어린 친구, #Sly <Ashhill : Soliden Academy의 학생 회장

오만하고 날카로운> # 늙은이 # 소설 표준 <위안 : 내가 설정 한이 소설의 어두운 비밀! 그는 미소로 권위 디자인 트랩입니다 # 다크 비밀 # 당신도 믿을 수 없어 "나는 얼마나 아름답습니까?"<아리에 타 : 아델 하우스의 마드모아 젤 충분한 부와 개성, 아름다움 > BL 소설에서 #Female Character No1 "내 아들은 아니지만" "하지만 내 아들은 아니야, 모두 다른 애들이라고?!" 나는 모른다 제발, 제발 도와주세요! 제발, 하나님 —————– 왜 내가 여기 왔지? Panian 제국의 낭만주의 판타지 <Arieta> 준비 됐니? <Arieta> 준비 됐니? 예 / 조금 겁 먹은 / 너를 사랑해! <Arieta> 준비 됐니? ♥> 예 <♥ 내가 행복 할 수 있을까? 수많은 위험을 헤쳐 나갈 수 있을까요? 로맨틱 판타지 천국보다 낫지 만, <소녀의 BL>

[MV] YOUNHA(윤하) _ Fly To High (The God Of Highschool Game(갓 오브 하이스쿨 게임) OST)

마음속에 피어난 소원이 바람가득 밀려와 잠들어 있던 나를 깨운다 어두운 시간에 갇혀 잃어버렸던 기억이 조금씩 떨리는 손 끝 사이로 스치듯 흘러간다 돌아가기 위해 잊을수록 더 선명해지는 향기가 텅 빈 가슴 속 조금씩 차올라 빛을 향해 걸어간다 끝 없는 시련의 구름 아래 사라질 희망의 끝 붙잡고 fly to high fly to high 날아보는거야 결코 이루지 못 할 꿈을 향해 멈추지마 달려가 외치는 내 목소리가 하늘에 닿을 때 까지 가끔은 넘어지고 되돌릴 수 없다 해도 포기 할 수 없는 소중한 널 지켜낼거야 여전히 힘겹기만한 미로 속에서 이제는 널 바라 보며 미소를 지어 거울 속 비춰지는 내 모습 더는 중요치 않아 다시 오지 않을 이 순간을 절대 놓지 않을거야 끝 없는 시련의 구름 아래 사라질 희망의 끝 붙잡고 fly to high fly to high 날아보는거야 결코 이루지 못 할 꿈을 향해 멈추지마 달려가 외치는 내 목소리가 하늘에 닿을 때 까지 가끔은 넘어지고 되돌릴 수 없다 해도 포기 할 수 없는 소중한 널 지켜낼거야 한번도 가보지 못 한 길이 헤어나올 수 없게 느껴져도 이제는 모든걸 걸었어 결코 이루지 못 할 꿈을 향해 멈추지마 달려가 외치는 내 목소리가 하늘에 닿을 때 까지 가끔은 넘어지고 되돌릴 수 없다 해도 포기 할 수 없는 소중한 널 지켜낼거야