데싸(Data Science) 노트

※ 출처 나노 소재에 올라탄 현대차그룹의 차세대 태양전지 기술 모빌리티의 신재생 에너지 활용에 적극적인 현대자동차그룹이 나노 입자를 활용하여 태양전지 업계에서도 주목받고 있는 ‘페로브스카이트’ 물질과 관련된 연구 개발을 이어가고 있다. 자유 www.hyundai.co.kr 페로브스카이트 (Perovskite) - ABX3 구조를 지닌 유무기 복합체 - 우수한 전기적, 광학적 특성으로 광전효율 ※ 광전효율 : 빛을 전기로 바꾸는 효율

※ 출처 “나노와 열이 만나면” 효과적으로 열을 다스리는 첨단 나노 기술 현대자동차그룹은 눈에 보이지 않을 정도로 작은 나노 입자에 대한 연구를 통해 새로운 기술을 개발하고 있다. 복사 냉각 필름과 압력 감응형 소재도 그런 연구의 결실 중 하나다. 열을 다스려 www.hyundai.co.kr ITO필름이란 무엇인가. 최근 이런저런 작품을 올리다가 인터넷 여기저기서 Touch Screen에 관해 궁금해 하시는 분들이 많은걸 알... blog.naver.com PDLC (Polymer Dispersed Liquid Crystal) - 고분자 분산형 액정으로 두 장의 ITO 필름 사이 고분자 액정이 분산되어 있는 형태로 전압에 따라 투명도를 조절할 수 있는 스마트 필름 ※ ITO 필름 : Indum Tin O..

※ 출처 [HMG 전기차 배터리 개발 시리즈 2편] 세계를 선도하는 현대자동차그룹 전기차의 비결, BMS 현대자동차그룹의 BMS 기술은 세계 최고 수준으로 평가받고 있는데요. BMS는 구체적으로 무엇이며, 전기차에서 어떤 역할을 할까요? 지난 1편, “현대자동차그룹이 배터리를 개발하는 이유”에 www.hyundai.co.kr [HMG 전기차 배터리 개발 시리즈 3편] 더 멀리 달리는 전기차를 만들 수 있는 비결 같은 에너지를 사용하고도 더 멀리 달릴 수 있는 전기차를 만드는 비결은 매우 복잡합니다. 그러나 기본적인 원칙은 크게 다르지 않습니다. 바로 높은 에너지 효율을 위해 에너지 소비의 모든 www.hyundai.co.kr BMS (배터리 관리 시스템; Battery Management System) ..

※ 출처 [HMG 전기차 배터리 개발 시리즈 3편] 더 멀리 달리는 전기차를 만들 수 있는 비결 같은 에너지를 사용하고도 더 멀리 달릴 수 있는 전기차를 만드는 비결은 매우 복잡합니다. 그러나 기본적인 원칙은 크게 다르지 않습니다. 바로 높은 에너지 효율을 위해 에너지 소비의 모든 www.hyundai.co.kr PTC 히터 ※ PTC : Positive Temperature Coefficient - 온도가 증가함에 따라 전류의 흐름을 제한하는 방식의 히터 - 기온이 낮을 때는 전류가 흐르도록 해 온도를 높이고, 기온이 높을 때는 전류를 제한함으로써 온도를 낮추는 방식 히트펌프 - 전기차의 내부에 장착된 전장 부품이 발산하는 열을 회수해 실내 난방에 사용 가스 인젝션 (Gas Injection) - 극저..

※ 출처 [바디 신기술 시리즈] 자율주행 시대를 위한 새로운 안전 기술, 센서 클리닝 자율주행 시대의 자동차에는 지금보다 더 많은 센서가 장착됩니다. 자동차의 눈이나 다름없는 센서의 청결을 어떻게 유지하느냐도 중요해지죠. 현대자동차그룹이 센서 클리닝 기술을 연구하는 www.hyundai.co.kr 센서 클리닝 - 유체 분사 방식 : 워셔액 또는 압축 공기를 분사해 이물질을 떼어냄 - 물리적 제거 방식 : 렌즈 커버를 고속 회전해 오염 물질을 털어내거나, 와이퍼 블레이드를 이용해 이물질을 밀어냄 워셔액 분사 방식 - 유체 분사 방식의 일부 - 텔레스코픽 노즐 또는 링 노즐을 사용 텔레스코픽 노즐 - [유체 분사 방식] > [워셔액 분사 방식]에 사용 - 일반적인 카메라 센서를 닦는 데 사용 - 팝업(Pop..

이번 포스팅에서는 파이썬 Dask DataFrame을 활용한 간단한 예제를 다뤄보도록 하겠습니다. 목차¶ Dask DataFrame Dask 클라이언트 난수 데이터프레임 생성 Dask에서 Pandas 기능 사용하기 메모리에 데이터 유지 시계열 작업 인덱스 설정 그룹별 함수 적용하기 Dask DataFrame¶ Dask DataFrame은 위의 그림처럼 인덱스를 따라 분할된 여러 Pandas 데이터프레임으로 구성되어 있습니다. 따라서, Dask DataFrame은 Pandas API가 갖고있는 기능들을 지원합니다. Dask 클라이언트¶ Dask 클라이언트(client)는 필요에 따라 실행해도 되고, 실행하지 않아도 됩니다. Dask 클라이언트는 연산 작업 현황에 대한 정보를 얻는데 유용한 대시보드(dash..

이번 포스팅에서는 파이썬 Dask Bag를 활용한 간단한 예제를 다뤄보도록 하겠습니다. 목차¶ Dask Bag Dask 클라이언트 JSON 데이터 읽기 Map, Filter, Aggregate 변환 및 저장 Dask Bag¶ Dask Bag은 map, filter, groupby, 그 외 집계 작업처럼 파이썬 컬렉션 객체에 대해 수행할 수 있는 여러 작업들을 구현해놓았습니다. 이 작업들을 수행하기 위해 Python 반복자(iterators)를 사용하여, 적은 메모리에서도 병렬 작업을 수행합니다. 이러한 점은 병렬 버전의 Itertools 또는 PySpark RDD와 유사합니다. 특히 로그 파일, JSON records, 사용자 정의 Python 객체에 대해 간단한 전처리를 수행하는 데에 이 Dask Ba..

이번 포스팅에서는 파이썬 Dask Array를 활용한 간단한 예제를 다뤄보도록 하겠습니다. 목차¶ Dask Array Dask 클라이언트 난수 배열 생성 메모리에 데이터 유지 Dask Array¶ Dask array는 위 그림과 같이 NumPy array 덩어리(chunk)가 격자 형태로 배열된 것으로 볼 수 있습니다. Dask array는 Numpy API의 대부분을 지원합니다. Dask 클라이언트¶ Dask 클라이언트(client)는 필요에 따라 실행해도 되고, 실행하지 않아도 됩니다. Dask 클라이언트는 연산 작업 현황에 대한 정보를 얻는데 유용한 대시보드(dashboard)를 제공합니다. 아래 코드와 같이 클라이언트를 생성하면 대시보드에 대한 링크가 표시됩니다. 이 링크를 클릭해, 작업을 실행하..

목차¶ Dask DataFrame Dask Array Dask Bag Low-Level 인터페이스 : Dask Delayed 스케줄링 Client 진단 Dashboard 일반적으로 다음과 같이 Dask를 import 합니다. 작업 중인 데이터 유형(DataFrame, array, list)에 따라 이들 중 일부가 필요하지 않을 수도 있습니다. In [2]: import numpy as np import pandas as pd import dask.dataframe as dd import dask.array as da import dask.bag as db Dask DataFrame¶ Dask 객체 생성¶ 먼저, Dask DataFrame을 활용해 Pandas DataFrame 유형의 데이터를 작업해보도록..

이전 포스팅에서 다루었듯이, Dask는 파이썬 기반의 대규모 데이터 처리를 위한 병렬 컴퓨팅 라이브러리 입니다. 파이썬으로 분석 또는 개발을 하시면서, Pandas나 NumPy에 익숙한 데이터 분석가 및 엔지니어 분들이 쉽게 사용할 수 있도록 구현되어 있습니다. 이번 포스팅에서는 Dask를 사용하기 위해 Dask를 설치하는 방법에 대해 알아보겠습니다. Dask 설치 Dask는 현재 Linux, macOS 및 Windows에서 사용 가능합니다. Dask를 설치하기 위해 여러 방법이 있지만, 여기서는 pip를 사용하여 설치해보도록 하겠습니다. Dask Installation — Dask documentation .rst .pdf to have style consistency --> docs.dask.org ..