기본 콘텐츠로 건너뛰기

데이터 분석 입문 7




 앞서 데이터 분포와 데이터 간의 차이를 비교하는 그래프를 그려봤습니다. 하지만 무엇이 다이아몬드의 가격에 영향을 미치는지 알기 위해서는 두 변수. 예를 들어 가격과 캐럿 사이의 관계를 볼 수 있는 그래프가 필요합니다. R의 기본 그래프 툴은 바로 plot 입니다. 물론 R에는 ggplot2 를 비롯해서 다양한 그래픽을 위한 패키지가 다수 존재하지만, plot이 가장 기본적으로 사용되는 함수라는 점은 변함이 없습니다. 일단 가격과 캐럿의 관계를 표시해 보겠습니다. 


library("ggplot2")
plot(price~carat, data=diamonds)




 일단 가격과 다이아몬드의 크기 (캐럿) 사이에는 비례 관계가 있는 것 같습니다. 크기가 증가하면 가격이 오릅니다. 이는 우리가 다 알고 있는 사실이기도 하죠. 하지만 그래프를 보면 매끄러운 선형 그래프가 아니라는 점을 알 수 있습니다. 이런 식의 그래프는 실제론 양 - 반응 관계 (예를 들어 열을 가할수록 온도가 올라가거나 혹은 소금을 더 넣을수록 국이 짜게 되는 것 같은 관계)가 있기는 하지만 완전한 연속 변수가 아니거나 혹은 다른 교란 변수가 있을 때 생깁니다. 


 예를 들어 키가 172cm라면 실제로는 171.92345...cm일 수 있습니다. 하지만 소수점 아래까지 열심히 적어주는 것은 아무런 도움이 안될 뿐 아니라 사실상 사람의 키가 하루 중에도 약간씩 변하는 점을 생각하면 별 의미없는 노력일 뿐입니다. 따라서 우리는 실제로 연속 변수인데도 불구하고 실제로는 약간 불연속하게 변수를 기록하게 됩니다. 


 캐럿 역시 마찬가지로 1.2 캐럿 하는 식으로 기록하지 1.23224234... 캐럿으로 기록하지 않기 때문에 몇 개의 선에 점들이 모두 집중된 양상으로 나타납니다. 아무튼 여기에 증가 추세를 설명하는 선을 그려보겠습니다. 


 가장 기본이 되는 함수는 abline 입니다. Y=a+bX의 함수를 그리는 함수로 여기서는 1캐럿 증가할 때마다 5000달러씩 비싸지는 것으로 보이므로 Y=10+5000X의 함수를 그리겠습니다. 


plot(price~carat, data=diamonds)
abline(a=10,b=5000,col="red")



 일단 비슷하긴 한데, 사실은 완전한 1차 방정식 선형 관계가 아니라는 점이 보입니다. 즉 가격이 단순히 캐럿이 비례하는 것이 아니라 사실 캐럿 대비 가격이 기하급수적으로 증가하는 것이죠. 이는 적어도 2차 방정식 이상의 비례 관계가 있음을 시사합니다. 


 지금 단계에서는 입문 단계라 자세한 설명을 하지 않았지만, 이는 사실 선형 회귀 (linear regression)에 해당하는 내용입니다. 이 이야기는 나중에 자세히 다루겠습니다. 


 여기서 한 가지 더 생각할 부분은 가격을 결정하는 요소가 캐럿만이 아니라는 점입니다. 컷이나 투명도 등 다른 요소가 존재합니다. 이를 어떻게 시각적으로 표시할 수 있을까요? 이것은 더 고급 R 프로그래밍 지식이 필요합니다. ggplot2 패키지는 바로 이런 목적을 위해서 있는 것인데, 여기서 잠시 예제를 하나 제시해 보겠습니다. 


p<-ggplot aes="" carat="" colour="clarity))</span" data="diamonds," price="">
p<-p geom_point="" span="">
p+scale_colour_brewer(palette="Dark2")



 뭔가 컬러풀한데 아무튼 clarity 점수가 높을 수록 가격이 더 비싸다는 점을 알 수 있습니다. 즉 가격에영향을 주는 요소가 여러 가지라는 점을 다시 확인할 수 있는 것이죠. 


 앞서 설명한 방법으로 데이터를 여러 관점에서 뜯어 보면 대략 어떤 데이터고 데이터의 분포나 특성이 어떤 것인지를 알 수 있습니다. 사실 데이터는 실제 분석을 통해서 그 특성을 파악하기까지 꽤 시간이 필요합니다. 


 일단 간단한 데이터 입문은 여기까지 설명하고 다음에는 데이터를 불러들이고 저장하는 부분을 설명하겠습니다. 








댓글

이 블로그의 인기 게시물

벨 V-280 Valor 시험 비행 성공

( The V-280 Valor flew for the first time at Bell Helicopter's Amarillo Assembly Center in Texas(Credit: Bell Helicopter/YouTube) )  앞서 소개드린 V-280 발러가 첫 번째 비행 테스트에 성공했다는 소식입니다. V-22 오스프리의 소형화 버전이라고 할 수 있는 V-280 발러는  미 육군의 차세대 헬기 사업인 Future Vertical Lift (FVL)에 입찰을 시도하는 틸트로터기로 현재 미 육군이 주력으로 사용하는 블랙호크 헬기와 비슷한 체급입니다. 다만 틸트로터기인 만큼 최고 속도나 항속 거리면에서 더 유리합니다. 스펙은 이전 포스트를 참조해 주시기   이전 포스트:  https://blog.naver.com/jjy0501/221115245986  (동영상)   V-280 발러는 틸트로터기의 더 대중화 될 수 있을지를 검증하는 중요한 무대가 될 것입니다. V-22 오스프리의 경우 복잡한 구조로 인해 가격이 너무 비싸져서 사실 미국은 몰라도 그 동맹국에 널리 도입되기는 어려운 부분이 있습니다. V-280 역시 가격이 아주 저렴할 것 같지는 않지만, 좀 더 합리적인 대안은 될 수 있을 것 같습니다. 만약 성공적인 결과가 나오면 한국을 포함한 미국의 동맹국에서 도입을 검토할 수 있을지 모르겠다는 생각입니다.   참고  https://newatlas.com/bell-v-280-valor-maiden-flight/52663/

100 테슬라급 자기장 도달

 미국의 로스 알라모스 국립 연구소 (Los Alamos National Laboratory) 에서 과학자들이 지금까지 인간이 개발한 가장 강력한 자기장을 발생시키는 장치 개발에 도전하고 있습니다. 자기장의 세기를 나타내는 방법으로 자기력선의 밀도를 나타내기 위해 단위 면적당 자기력선의 수를 표시하는 단위인 테슬라 (T) 가 있습니다. (1T = 1Wb/㎡  웨버 (Wb) 는 자속의 단위)   의료용으로 사용되는 초전도체를 이용한 MRI 의 경우 1.5 - 3 테슬라급의 강력한 자기장으로 인체 내부를 볼 수 있게 만들지만 과학 연구용으로 이보다 더 강력한 자기장이 필요할 수 있습니다. 최근에 등장한 90 테슬라급 자기장에 이어 이번에 로스 알라모스 국립 연구소에서는 100 테슬라급인 100.75 T 를 실현 했다고 합니다.   이를 구현한 것은 18000 파운드 (8.16 톤 정도) 의 코일과 여기에 에너지를 공급할 1200 메가줄 (Megajoule) 급 모터 제네레이터등의 설비입니다.  (   The 1,200-megajoule motor generator that powers the magnetic pulse.  )  이와 같은 연구를 통해 알아내고자 하는 것은  Quantum Phase transitions and new ultra high field magnetic states Electronic Structure determination Topologically protected states of matter  로 요약할 수 있다고 합니다.   아무튼 수 T 급 MRI 만 해도 자기장의 힘이 엄청난데 100 T 라니 엄청난 자기장이네요. 이는 지구 자기장 세기보다 200만배 강력한 (물론 좁은 범위에서 작용하는 자기장이라 지구 전체...

고대 양서류 이야기 (2) - 악어를 닮은 거대 양서류들

  페름기에는 다양한 양막류가 진화해서 앞서 소개한 육상형 템노스폰딜리는 점차 설 자리를 잃게 됩니다. 하지만 양서류는 본래 자신의 서식지인 물과 습지에서 여전히 번성을 누렸습니다. 당시에는 악어류 같은 대형 양서형 파충류도 없던 시절이었기 때문에 이와 비슷한 생태학적 지위는 여전히 양서류의 몫이었습니다. 이들에 대한 이야기는 제 책인 포식자에서 비교적 간단히 다뤘는데, 오늘은 여기에 대한 보충 설명입니다.  책 정보:  http://book.naver.com/bookdb/book_detail.nhn?bid=13347200 Yes 24:  http://www.yes24.com/24/goods/58772859 11번가:  http://books.11st.co.kr/product/SellerProductDetail.tmall?method=getSellerProductDetail&prdNo=1977867160 알라딘:  http://www.aladin.co.kr/shop/wproduct.aspx?ItemId=134877825 교보문고:  http://www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9788970447988&orderClick=LAG&Kc= 인터파크 :  http://book.interpark.com/product/BookDisplay.do?_method=detail&sc.prdNo=279593764&sc.saNo=003002003&bid1=search_auto&bid2=detail&bid3=prd_img&bid4=001 영풍문고:  http://www.ypbooks.co.kr/book.yp?bookcd=100843205&gubun=NV ...