전체 글84 [빅데이터분석기사 필기] 1-3 데이터 수집 및 저장 계획 1. 데이터 수집가. 데이터 수집 기법빅데이터 수집 기법구분특징대상Log Aggregator웹 서버 로그, 웹로그, 트랜잭션 로그, DB로그 등 각종 서비스 로그 수집 오픈 소스 기술로그 데이터 수집크롤링SNS, 웹 뉴스 정보 등 인터넷상에서 제공되는 웹 문서에 대한 정보 수집웹 문서 수집스크래핑인터넷 웹 사이트에 노출되는 내용 중 특정 정보만을 추출하고, 추출과 관련된 모든 동작을 자동 수행하는 기술웹 데이터 수집FTPTCP/IP 프로토콜을 이용하여 인터넷 서버로부터 각종 파일 송수신파일 수집Open API서비스, 정보, 데이터 등 오픈된 정보로부터 API를 통해 데이터를 수집하는 기술실시간 데이터 수집RSS웹상의 최신 정보를 공유하기 위한 XML 기반의 콘텐츠 배급 프로토콜Contents 수집Stre.. 2024. 8. 7. [빅데이터분석기사 필기] 1-2 데이터 분석 계획 1. 데이터 분석 기획의 방향 가. 분석기획 이란분석 기획: 실제 분석을 수행하기에 앞서 분석을 수행할 과제를 정의하고, 의도했던 결과를 도출할 수 있도록 이를 적절하게 관리할 수 있는 방안을 사전에 계획하는 일련의 작업데이터 사이언티스트의 필요 역량Math & StatisticsInformationTechnologyDomain Knowledge나. 분석의 유형Optimization(최적화): 분석 대상과 분석 방법을 이해하여 현 문제를 최적화 형태로 수행 (분석대상 o, 분석 방법 o)Solution(솔루션): 분석 대상을 잘 알고 있지만 분석 방법을 모를 경우 솔루션을 찾아서 분석 (분석대상 o, 분석 방법 x)Insight(통찰): 분석 대상에 대해서는 명확히 알 수 없지만 분석 방법을 잘 알고 .. 2024. 8. 4. [Flutter] Unable to load asset 오류 해결 Unable to load assset에러는 이미지를 load할 때 심심치않게 발생하는 에러이다. 말 그대로 리소스를 load할 때 발생하는 에러라는 것을 바로 알 수 있는데, 원인을 쉽게 알 수 있는 것과 달리 에러를 해결하는데 꽤나 시간이 소요될 수 있다. 그 이유는 리소스를 load하지 못하는 이유가 너무 다양하고, 개발자의 실수가 아닌경우도 있기 때문이다. 나 또한 이 에러때문에 꽤나 시간을 낭비한 경험이 있어 에러 해결 과정을 기록하기로 하였다. 아래 순서대로 실행한다면 아마 99%는 에러를 해결할 수 있을 것이다. 우선 리소스에 변경이 있을 때, hot reload 혹은 hot start만으로는 리소스 변경을 제대로 캐치하지 못하는 경우가 있다. 이럴때는 아래 명령어를 통해 캐시를 삭제하고, .. 2024. 8. 3. [빅데이터분석기사 필기] 1-1 빅데이터의 이해 1. 데이터의 이해 가. 데이터의 정의데이터라는 용어는 1644년 영국 문헌에 처음 등장추론과 추정의 근거를 이루는 사실단순한 객체로서의 가치뿐만 아니라 다른 객체와의 상호관계 속에서 가치를 갖는 것나. 데이터의 특성존재적 특성: 객관적 사실당위적 특성: 추론, 예측, 전망 추정을 위한 근거다. 데이터의 유형구분형태예특징정성적 데이터- 언어, 문자 등의 비정형 데이터- 주관적 내용회사 매출의 증가- 저장, 검색, 분석에 많은 비용이 소모- 통계분석이 어려움정량적 데이터- 수치, 도형, 기호 등 정형 데이터- 객관적 내용나이, 몸무게, 주가 등- 정형화된 데이터로 비용 소모 적음- 통계 분석 용이 라. 지식경영의 핵심 이슈지식경영: 기업의 생존과 경쟁력 확보가 인적자원의 지식에 달려있다고 가정, 기업이 구.. 2024. 8. 3. 이전 1 ··· 3 4 5 6 7 8 9 ··· 21 다음