호출하다 error나고 호출도 안한 함수 잘못 쓰고 있다, 에러라는 attribute가 없다 등의 이상한 에러를 내뱉어서구글링 해보니 이게 다 버전문제라고해서chatopenai 최신버전으로 업뎃하고, import도 warnning메세지를 보고 고쳤더니 된다. open AI 에러메세지는 아직 직관적이지 않아서, 난해한 편인듯. from langchain.chat_models import ChatOpenAIfrom langchain.llms import OpenAIfrom langchain_openai import ChatOpenAImodel_name = "gpt-3.5-turbo"temperature = 0.0llm = ChatOpenAI(model_name=model_name, ..
https://developer.nvidia.com/blog/rapids-cudf-accelerates-pandas-nearly-150x-with-zero-code-changes/ RAPIDS cuDF Accelerates pandas Nearly 150x with Zero Code Changes | NVIDIA Technical Blog At NVIDIA GTC 2024, it was announced that RAPIDS cuDF can now bring GPU acceleration to 9.5M million pandas users without requiring them to change their code. pandas, a flexible and powerful data… developer...
안녕하세요. Microsoft Azure의 관계형 데이터에 대한 과정을 요약하는 이 강의에 오신 것을 환영합니다. 이 강의에서는 주요 개념을 요약하고 과정 2에서 다루는 주제에 대한 연습 시험을 치르게 됩니다. 과정 2에서는 관계형 데이터 서비스를 다루고 Microsoft에서의 관계형 데이터 프로비전, 배포 및 쿼리에 대해 살펴보았습니다. Azure에서 Microsoft Azure 가상 머신을 SQL 데이터베이스로 사용하는 SQL 서버를 포함하는 관계형 데이터 서비스에 대해 배웠습니다. PostgreSQL MariaDB와 MySQL을 통해 온 프레미스 시스템을 Azure 가상 머신 컬렉션으로 마이그레이션할 수 있다는 것을 알게 되었습니다. 이 방법을 사용하려면 여전히 DBMS를 신중하게 관리해야 합니다...
Microsoft Power BI는 함께 작동하여 관련 없는 데이터 소스를 일관되고 시각적으로 몰입도 높은 대화형 인사이트로 전환하는 소프트웨어 서비스, 앱 및 커넥터 모음입니다. 데이터가 단순한 Microsoft Excel 통합 문서이든 클라우드 기반 및 온-프레미스 하이브리드 데이터 웨어하우스의 모음이든 관계없이 Power BI를 사용하면 데이터 원본에 쉽게 연결하여 중요한 내용을 시각화 및 발견하고 해당 정보를 공유할 수 있습니다. Power BI는 간단하고 빠르며 Excel 통합 문서 또는 로컬 데이터베이스에서 빠르게 통찰력을 얻을 수 있습니다. 또한 Power BI는 강력하고 엔터프라이즈급이므로 광범위한 모델링 및 실시간 분석뿐만 아니라 사용자 지정 개발도 가능합니다. 따라서 개인 보고서 및 시..
다음은 대규모 데이터 웨어하우스 분석을 더 깊이 있게 탐색하는 데 도움이 되는 추가 리소스입니다: 데이터 팩토리 Synapse SQL 풀에서 분산 테이블 설계를 위한 지침 Synapse SQL 풀을 위한 데이터 로드 전략 PolyBase란? Azure 데이터 레이크 스토리지 Azure 데이터브릭이란? Azure Synapse 분석 Azure Analysis Services란? 빠른 시작 빠른 시작: Azure Data Factory UI를 사용하여 데이터 팩토리 만들기 다음은 Microsoft Azure에서 최신 데이터 웨어하우스의 구성 요소를 탐색하는 데 도움이 되는 몇 가지 추가 리소스입니다. Azure Data Factory UI를 사용하여 데이터 팩토리 만들기 Azure SQL 데이터 웨어하우스는..
안녕하세요. 이 강의에서는 Microsoft Azure에서의 데이터 저장 및 처리에 대해 알아봅니다. 데이터는 조직 내 여러 위치에 있습니다. 클라우드 데이터 솔루션을 설계할 때는 분석을 위해 원시 데이터를 데이터 저장소에 수집해야 합니다. Azure Synapse Analytics에서 사용할 수 있는 일반적인 접근 방식은 현재 저장된 위치에서 데이터를 추출하는 것입니다. 이 데이터를 분석 데이터 저장소에 로드한 다음, 데이터를 변환하여 분석에 사용할 수 있도록 구성하세요. 이 접근 방식을 추출 로드 및 변환을 위한 ELT라고 합니다. Azure Synapse Analytics는 아파치 스파크와 자동화된 파이프라인을 사용하는 이 접근 방식에 특히 적합합니다. Synapse Analytics는 대규모 데이..
이 부분에서는 데이터 로딩에 대한 일반적인 방법을 계속 설명합니다. Sequel 서버 통합 서비스. SSIS는 엔터프라이즈 수준의 데이터 통합 및 데이터 변환 솔루션을 구축하기 위한 플랫폼입니다. SSIS를 사용하여 파일을 복사 또는 다운로드하고, 데이터 웨어하우스를 로드하고, 데이터를 정리 및 마이닝하고, 후속 데이터베이스 개체 및 데이터를 관리함으로써 복잡한 비즈니스 문제를 해결할 수 있습니다. SSIS는 Microsoft의 일부입니다. 시퀄 서버. SSIS는 XML 데이터 파일, 플랫 파일 및 관계형 데이터 소스와 같은 다양한 소스에서 데이터를 추출 및 변환한 다음 데이터를 하나 이상의 대상으로 로드할 수 있습니다. SSIS에는 다양한 기본 작업 및 변환 세트가 포함되어 있습니다. 패키지를 빌드하는..
대규모 제조 운영 조직에서 일하는 데이터 엔지니어라면 최신 데이터 웨어하우스를 구성하는 구성 요소에 대해 더 많이 알고 싶을 것입니다. 이 정보는 조직의 요구 사항에 가장 근접하게 부합하는 요소를 결정하는 데 도움이 됩니다. 이 부분에서는 Azure가 제공하는 데이터 서비스에 대해 자세히 알아봅니다. 이러한 서비스를 사용하면 여러 소스의 데이터를 결합하여 분석 모델로 다시 포맷하고 이러한 모델을 저장하여 후속 쿼리, 보고 및 시각화할 수 있습니다. Azure 데이터 팩토리부터 시작해 보겠습니다. Azure 데이터 팩토리는 데이터 통합 서비스로 설명됩니다. Azure Data Factory의 목적은 하나 이상의 데이터 원본에서 데이터를 검색하여 처리하는 형식으로 변환하는 것입니다. 데이터 원본은 다양한 방..
Azure Blob Storage는 이미지 , 비디오 및 오디오 파일과 같은 대용량 바이너리 개체를 보관하는 데 적합한 저장소입니다. Contoso 시나리오에서는 회사에서 제조한 제품의 이미지를 보관하기 위한 블럽 컨테이너를 만들었습니다. Microsoft Azure는 현재 세 가지 유형의 블롭을 지원합니다. 페이지 블롭은 Azure 가상 머신의 가상 디스크 스토리지를 구현하는 데 사용됩니다. 임의 읽기 및 쓰기 작업을 지원하도록 최적화되었습니다. Append blob은 로그나 기타 보관된 데이터와 같이 청크 단위로 증가하는 데이터를 저장하는 데 적합합니다. 블록 블롭은 정적 데이터에 가장 적합하며, Contoso에서 보관하는 이미지 데이터를 보관하는 데 가장 적합한 스토리지 유형입니다. 이제 블롭과 블..
- Total
- Today
- Yesterday
- ML
- quiz
- mongodb
- Neo4j
- 알고리즘
- geometry
- MachineLearning
- tag hello
- extract archive multiple files
- Paper
- LeetCode
- 파이썬
- linkedin-skill-assessments-quizzes
- amazon
- pytorch
- LECTURE
- 통계
- Shell
- 기본
- nvidia #gan
- 자바
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |