전체 글 (4) 썸네일형 리스트형 [AWS] Amazon Sagemaker : 모델 학습, 테스트, 배포를 통한 AI/ML Jumpstart 수년 전 제가 Sagemaker를 처음 활용했을 때 다양한 예제를 통해서 기초지식을 습득했습니다. 하지만 늘 하던 고민 중 하나는 늘 예제에서 제공하는 데이터가 아닌 공공데이터 등을 활용해 자발적으로 학습을 할 수 있게 하면 좀 더 좋은 학습방법이 되겠다고 생각했습니다. 좀 더 집중과 흥미를 유발할 수 있을것 같기도 하고요. 그래서 이번에는 직접 UCI데이터 중 하나를 선택해 Sagemaker를 활용해서 모델을 학습하고, 테스트하고, 배포하는 내용을 통해 Sagemaker부터 AI/ML 기본 지식까지 얻어가고자 준비해봤습니다.※ 이 글은 2023년 3월 20일 Medium에 게시한 글을 이전한 글입니다. [원문 보기]1. AWS AI/MLAWS에서는 다음과 같은 철학을 가지고 있습니다.“The Visio.. [AWS] EC2 Instance FTP 서버 구축 및 테스트 Feat. Session Manager & 계정 생성 & 파일전송공공기관에서 실시간으로 데이터를 받아 데이터 전송, 전 후처리, ML 예측까지 자동화 Pipeline을 구축하는 프로젝트를 진행하는 중입니다. 일부 공공기관이 데이터를 API방식이 아닌 FTP 서버에 실시간으로 떨궈준다고 하여 별도의 FTP서버를 AWS EC2에 구축하게 되었으며, 간단한 내용이었으나 오랜만에 진행해 좀 헤맸던 내용인 FTP 서버 구축부터 테스트, FileZilla 활용 및 연동까지 공유하고자 합니다. ※ 이 글은 2023년 1월 6일 Medium에 게시한 글을 이전한 글입니다. [원문 보기] Launch instance우선 FTP 서버를 운영할 EC2 Instance를 Launch해줍니다.Amazon Linux를 활용하였고.. 온톨로지 설계 실전 가이드: 저장소 선택부터 객체,이력,권한,추론까지 시작 전에, 1부 "AI 시대, 온톨로지가 다시 주목받는 이유 - 왜 팔란티어는 데이터가 아닌 '의미'를 파는가"를 먼저 참고해주세요 ㅎ(1부 : https://usr-bin-ksh.tistory.com/1) 이번 편에서는 온톨로지를 실제 시스템으로 옮길 때 가장 먼저 마주치는 결정들을 살펴봅니다.온톨로지를 어디에 저장할 것인가무엇을 객체로 만들고 무엇을 속성으로 둘 것인가관계와 파생값을 언제 별도 객체로 승격할 것인가시작하기 전에 한 가지 원칙부터 짚고 가겠습니다.온톨로지 설계에서 가장 위험한 것은 틀린 결정이 아닙니다. 결정할 것이 있다는 사실조차 모른 채 지나가는 것입니다."이력은 남기지 않기로 했다"는 검토를 거친 선택입니다. 반면 "이력을 아무도 생각하지 않았다"는 선택이 아니라 누락이고, 이런.. AI 시대, 온톨로지가 다시 주목받는 이유 - 왜 팔란티어 왜 데이터가아닌 '의미'를 파는가 회의에서 누군가 묻습니다. "우리 활성 회원이 몇 명이죠?" 마케팅팀은 3만 명, 운영팀은 2만 4천 명, 데이터팀은 또 다른 숫자를 냅니다.누가 틀린 걸까요?사실 아무도 틀리지 않았을 수 있습니다.팀마다 ‘회원’과 ‘활성’의 정의가 달랐을 뿐입니다. 데이터는 어느 회사에나 넘쳐납니다.ERPCRM엑셀사내 문서그리고 누군가의 머릿속문제는 데이터가 부족한 것이 아닙니다. 문제는 그 데이터가 무엇을 의미하는지 모두가 같은 방식으로 이해하지 못한다는 것입니다.이 시스템의 CUST_ID와 저 시스템의 member_no가 같은 사람을 가리키는지, ‘장비 점검’과 ‘정비 작업’이 같은 업무인지, ‘활성 회원’은 최근 30일 내 로그인한 회원인지, 결제 이력이 있는 회원인지. 이런 의미를 정확히 아는 사람은 대개 조직.. 이전 1 다음
