본문 바로가기

분류 전체보기

(29)
파이썬에서 데이터 가져오기 및 내보내기 파이썬에서 데이터 불러오기 및 내보내기 1, 데이터 불러오기 의미 - 다양한 Resource에서 파이썬으로 데이터를 로딩 하고 읽는 과정을 의미함 형식(Format) - .csv, .json, .xlsx, .hdf... 데이터셋의 파일 경로 https://archive.ics.uci.edu/ml/machinelearning-databases/autos/imports-85.data https://s3-api.us-geo.objectstorage.softlayer.net/cf-courses-data/CognitiveClass/DA0101EN/auto.csv 2. 파이썬으로 CSV 가져오기 - 판다스(Pandas) 라이브러리는 다양한 데이터 세트를 데이터 프레임으로 읽을 수 있는 유용한 도구임 - 주피터 노트..
꼭 알아야 할 AWS 사이트 꼭 알아야 할 AWS 사이트 AWS 데이터베이스 https://aws.amazon.com/ko/products/databases/ AWS에서의 데이터베이스 관계형, 키-값, 문서, 인 메모리, 그래프, 시계열, 와이드 컬럼 및 원장 데이터베이스를 비롯하여 15개 이상의 목적별 데이터베이스 엔진 중에서 선택할 수 있습니다. AWS의 목적별 데이터베이스 aws.amazon.com Amazon RDS https://aws.amazon.com/ko/rds/ 데이터베이스 관리 시스템 | 관계형 RDS | Amazon Web Services Amazon Relational Database Service(RDS)를 사용하면 클라우드에서 관계형 데이터베이스를 간편하게 설정, 운영 및 확장할 수 있습니다. 하드웨어 프로..
Amazon DynamoDB Amazon DynamoDB 1. 아마존 DynamoDB의는 완벽하게 관리 독점 되는 NoSQL 데이터베이스 지원 서비스 키 - 값 및 문서 데이터 구조 에 의해 제공되는 Amazon.com 의 일환으로 아마존 웹 서비스의 포트폴리오입니다. DynamoDB는 유사한 데이터 모델을 Dynamo에 노출하고 그 이름을 Dynamo에서 파생 하지만 기본 구현이 다릅니다. 2. Dynamo는 클라이언트가 버전 충돌을 해결해야하는 다중 리더 디자인을 가지고 있으며 DynamoDB는 높은 내구성과 가용성을 위해 여러 데이터 센터에서 동기식 복제를 사용합니다. 3. Amazon CTO Werner Vogels 가 DynamoDB를 발표했습니다. 2012 년 1 월 18 일에 [5] Amazon SimpleDB 솔루션 ..
Amazon Relational Database Service (Amazon RDS) Amazon Relational Database Service ( Amazon RDS) 개요 1. Amazon Relational Database Service (Amazon RDS)는 Aurora, PostgreSQL, MySQL, MariaDB, Oracle 및 Microsoft SQL Server를 포함하여 선택할 수있는 여러 데이터베이스 제품을 제공하는 호스팅 된 데이터베이스 서비스입니다. MySQL과 Aurora에 초점을 맞출 것입니다. 2. 시스템 관리와 ​​관련하여 두 솔루션 모두 시간을 절약합니다. 애플리케이션을 배포 할 준비가 된 환경을 확보하고 전용 DBA가없는 경우 RDS는 업그레이드 또는 백업과 같은 작업에 뛰어난 유연성을 제공합니다. 두 제품 모두 Amazon은 다운 타임없이 필수..
RDBMS(Relational Database Management System) RDBMS(Relational Database Management System) 1. "관계형 데이터베이스 관리 시스템"의 약자입니다. 2. RDBMS는 관계형 데이터베이스를 위해 특별히 설계된 DBMS 입니다 . 따라서 RDBMS는 DBMS의 하위 집합입니다. 3. 관계형 데이터베이스는 행 과 열을 사용하여 구조화 된 형식으로 데이터를 저장 하는 데이터베이스 를 말합니다 . 이를 통해 데이터베이스 내에서 특정 값을 쉽게 찾고 액세스 할 수 있습니다. 각 테이블 내의 값이 서로 관련되어 있기 때문에 "관계형" 입니다. 4. 테이블은 다른 테이블과 관련 될 수도 있습니다. 관계형 구조를 사용하면 한 번에 여러 테이블에서 쿼리 를 실행할 수 있습니다. 5. 관계형 데이터베이스는 RDMBS가 관리하는 데이터베..
가상 사설 클라우드 ( VPC, Virtual Private Cloud ) VPC 1. 가상 사설 클라우드 ( VPC )는 사설 클라우드 컴퓨팅을 지원하기 위해 서비스 제공 업체의 공용 클라우드 다중 테넌트 아키텍처를 논리적으로 구분 한 것입니다. 2. 또한 데이터베이스 또는 애플리케이션 서버와 같은 백엔드 시스템을 인터넷 액세스가없는 개인용 서브넷에 배치 할 수 있습니다. Amazon VPC를 사용하면 보안 그룹 및 네트워크 액세스 제어 목록을 포함한 여러 보안 계층 을 사용 하여 각 서브넷의 Amazon EC2 인스턴스에 대한 액세스를 제어 할 수 있습니다. 3. Amazon Virtual Private Cloud (Amazon VPC )를 사용하면 정의한 가상 네트워크에서 Amazon Web Services ( AWS ) 리소스 를 시작할 수 있습니다 . 이 가상 네트워크..
웹사이트 속도를 더 빠르게 하는 CDN서비스 (CloudFront) CloudFront CDN 개요 1. 짧은 지연 시간, 빠른 전송 속도로 데이터, 동영상, 애플리케이션 및 API를 전 세계 고객에게 안전하게 전송하는 고속 콘텐츠 전송 네트워크 2. CloudFront 네트워크는 전세계 216개의 PoP(글로벌 컨텐츠 배송 지점)보유 • Contents Delivery Network 또는 Content Distribution Network 3. CDN 서버에 컨텐츠를 분산시키고 사용자와 가장 가까운 곳의 서버로부터 컨텐츠를 전송 받음 4. 사용한 만큼만 비용을 지불, 초기 약정 불필요 5. 다양한 원본 컨텐츠 Origin • S3, ELB, EC2, 커스텀오리진 즉 사용자 지정 오리진(On-Premise) Amazon CloudFront는 개발자 친화적 환경에서 짧은 ..
Amazon S3 Glacier와 Amazon S3 Glacier Deep Archive Amazon S3 Glacier와 Amazon S3 Glacier Deep Archive S3 Glacier 1. 데이터 아카이빙(Data Archiving) 및 백업용 스토리지 2. 3가지 회수(Retrieval) 옵션 제공 • Expedited Retrieval : 1~5분 내 완료 • Standard Retrieval : 3~5시간 내 완료 • Bulk Retrieval : 5~12시간 내 완료 S3 Glacier Deep Archive 1. 내구성 있고 안전한 장기 보관용 데이터를 위한 매우 저렴한 아카이브 스토리지 2. 기존 테이프 드라이브를 대체하는 경쟁적인 가격 제공 3. S3 호환용 어플리케이션, 도구, 코드 및 라이프사이클 규칙 활용 가능 4. 2가지 회수(Retrieval) 옵션 제공 ..