4 Full Dataset.ipynb

{
 "cells": [
  {
   "cell_type": "code",
   "execution_count": 1,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "import pandas as pd\n",
    "variables = pd.DataFrame.from_csv(\"Variables.csv\", encoding=\"UTF-8\")\n",
    "variables.columns = [\"Index\",\"Oil\",\"Gold\",\"NaturalGas\"]"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 2,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "import csv\n",
    "with open(\"stocksArray.csv\", 'rt') as f:\n",
    "    reader = csv.reader(f)\n",
    "    for row in reader:\n",
    "        stocksArray = row"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 3,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "temp = []\n",
    "for x in stocksArray:\n",
    "    if x == \"LMT\":\n",
    "        x = \"NYSE:LMT\"\n",
    "    if x ==\"NWL\":\n",
    "        x = \"NYSE:NWL\"\n",
    "    if x==\"NBL\":\n",
    "        x = \"NYSE:NBL\"\n",
    "    temp.append(x)\n",
    "stocksArray = temp"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 4,
   "metadata": {},
   "outputs": [
    {
     "name": "stdout",
     "output_type": "stream",
     "text": [
      "MMM\n",
      "ABT\n",
      "ABBV\n",
      "ACN\n",
      "ATVI\n",
      "AYI\n",
      "ADBE\n",
      "AMD\n",
      "AAP\n",
      "AES\n",
      "AET\n",
      "AMG\n",
      "AFL\n",
      "A\n",
      "APD\n",
      "AKAM\n",
      "ALK\n",
      "ALB\n",
      "ARE\n",
      "ALXN\n",
      "ALGN\n",
      "ALLE\n",
      "AGN\n",
      "ADS\n",
      "LNT\n",
      "ALL\n",
      "GOOGL\n",
      "GOOG\n",
      "MO\n",
      "AMZN\n",
      "AEE\n",
      "AAL\n",
      "AEP\n",
      "AXP\n",
      "AIG\n",
      "AMT\n",
      "AWK\n",
      "AMP\n",
      "ABC\n",
      "AME\n",
      "AMGN\n",
      "APH\n",
      "APC\n",
      "ADI\n",
      "ANSS\n",
      "ANTM\n",
      "AON\n",
      "APA\n",
      "AIV\n",
      "AAPL\n",
      "AMAT\n",
      "ADM\n",
      "ARNC\n",
      "AJG\n",
      "AIZ\n",
      "T\n",
      "ADSK\n",
      "ADP\n",
      "AN\n",
      "AZO\n",
      "AVB\n",
      "AVY\n",
      "BHGE\n",
      "BLL\n",
      "BAC\n",
      "BK\n",
      "BCR\n",
      "BAX\n",
      "BBT\n",
      "BDX\n",
      "BBBY\n",
      "BRK.B\n",
      "BBY\n",
      "BIIB\n",
      "BLK\n",
      "HRB\n",
      "BA\n",
      "BWA\n",
      "BXP\n",
      "BSX\n",
      "BMY\n",
      "AVGO\n",
      "BF.B\n",
      "CHRW\n",
      "CA\n",
      "COG\n",
      "CPB\n",
      "COF\n",
      "CAH\n",
      "CBOE\n",
      "KMX\n",
      "CCL\n",
      "CAT\n",
      "CBG\n",
      "CBS\n",
      "CELG\n",
      "CNC\n",
      "CNP\n",
      "CTL\n",
      "CERN\n",
      "CF\n",
      "SCHW\n",
      "CHTR\n",
      "CHK\n",
      "CVX\n",
      "CMG\n",
      "CB\n",
      "CHD\n",
      "CI\n",
      "XEC\n",
      "CINF\n",
      "CTAS\n",
      "CSCO\n",
      "C\n",
      "CFG\n",
      "CTXS\n",
      "CLX\n",
      "CME\n",
      "CMS\n",
      "COH\n",
      "KO\n",
      "CTSH\n",
      "CL\n",
      "CMCSA\n",
      "CMA\n",
      "CAG\n",
      "CXO\n",
      "COP\n",
      "ED\n",
      "STZ\n",
      "COO\n",
      "GLW\n",
      "COST\n",
      "COTY\n",
      "CCI\n",
      "CSRA\n",
      "CSX\n",
      "CMI\n",
      "CVS\n",
      "DHI\n",
      "DHR\n",
      "DRI\n",
      "DVA\n",
      "DE\n",
      "DLPH\n",
      "DAL\n",
      "XRAY\n",
      "DVN\n",
      "DLR\n",
      "DFS\n",
      "DISCA\n",
      "DISCK\n",
      "DISH\n",
      "DG\n",
      "DLTR\n",
      "D\n",
      "DOV\n",
      "DOW\n",
      "DPS\n",
      "DTE\n",
      "DD\n",
      "DUK\n",
      "DXC\n",
      "ETFC\n",
      "EMN\n",
      "ETN\n",
      "EBAY\n",
      "ECL\n",
      "EIX\n",
      "EW\n",
      "EA\n",
      "EMR\n",
      "ETR\n",
      "EVHC\n",
      "EOG\n",
      "EQT\n",
      "EFX\n",
      "EQIX\n",
      "EQR\n",
      "ESS\n",
      "EL\n",
      "ES\n",
      "RE\n",
      "EXC\n",
      "EXPE\n",
      "EXPD\n",
      "ESRX\n",
      "EXR\n",
      "XOM\n",
      "FFIV\n",
      "FB\n",
      "FAST\n",
      "FRT\n",
      "FDX\n",
      "FIS\n",
      "FITB\n",
      "FE\n",
      "FISV\n",
      "FLIR\n",
      "FLS\n",
      "FLR\n",
      "FMC\n",
      "FL\n",
      "F\n",
      "FTV\n",
      "FBHS\n",
      "BEN\n",
      "FCX\n",
      "GPS\n",
      "GRMN\n",
      "IT\n",
      "GD\n",
      "GE\n",
      "GGP\n",
      "GIS\n",
      "GM\n",
      "GPC\n",
      "GILD\n",
      "GPN\n",
      "GS\n",
      "GT\n",
      "GWW\n",
      "HAL\n",
      "HBI\n",
      "HOG\n",
      "HRS\n",
      "HIG\n",
      "HAS\n",
      "HCA\n",
      "HCP\n",
      "HP\n",
      "HSIC\n",
      "HSY\n",
      "HES\n",
      "HPE\n",
      "HLT\n",
      "HOLX\n",
      "HD\n",
      "HON\n",
      "HRL\n",
      "HST\n",
      "HPQ\n",
      "HUM\n",
      "HBAN\n",
      "IDXX\n",
      "INFO\n",
      "ITW\n",
      "ILMN\n",
      "IR\n",
      "INTC\n",
      "ICE\n",
      "IBM\n",
      "INCY\n",
      "IP\n",
      "IPG\n",
      "IFF\n",
      "INTU\n",
      "ISRG\n",
      "IVZ\n",
      "IRM\n",
      "JEC\n",
      "JBHT\n",
      "SJM\n",
      "JNJ\n",
      "JCI\n",
      "JPM\n",
      "JNPR\n",
      "KSU\n",
      "K\n",
      "KEY\n",
      "KMB\n",
      "KIM\n",
      "KMI\n",
      "KLAC\n",
      "KSS\n",
      "KHC\n",
      "KR\n",
      "LB\n",
      "LLL\n",
      "LH\n",
      "LRCX\n",
      "LEG\n",
      "LEN\n",
      "LVLT\n",
      "LUK\n",
      "LLY\n",
      "LNC\n",
      "LKQ\n",
      "NYSE:LMT\n",
      "L\n",
      "LOW\n",
      "LYB\n",
      "MTB\n",
      "MAC\n",
      "M\n",
      "MNK\n",
      "MRO\n",
      "MPC\n",
      "MAR\n",
      "MMC\n",
      "MLM\n",
      "MAS\n",
      "MA\n",
      "MAT\n",
      "MKC\n",
      "MCD\n",
      "MCK\n",
      "MDT\n",
      "MRK\n",
      "MET\n",
      "MTD\n",
      "KORS\n",
      "MCHP\n",
      "MU\n",
      "MSFT\n",
      "MAA\n",
      "MHK\n",
      "TAP\n",
      "MDLZ\n",
      "MON\n",
      "MNST\n",
      "MCO\n",
      "MS\n",
      "MOS\n",
      "MSI\n",
      "MUR\n",
      "MYL\n",
      "NDAQ\n",
      "NOV\n",
      "NAVI\n",
      "NTAP\n",
      "NFLX\n",
      "NYSE:NWL\n",
      "NFX\n",
      "NEM\n",
      "NWSA\n",
      "NWS\n",
      "NEE\n",
      "NLSN\n",
      "NKE\n",
      "NI\n",
      "NYSE:NBL\n",
      "JWN\n",
      "NSC\n",
      "NTRS\n",
      "NOC\n",
      "NRG\n",
      "NUE\n",
      "NVDA\n",
      "ORLY\n",
      "OXY\n",
      "OMC\n",
      "OKE\n",
      "ORCL\n",
      "PCAR\n",
      "PH\n",
      "PDCO\n",
      "PAYX\n",
      "PYPL\n",
      "PNR\n",
      "PBCT\n",
      "PEP\n",
      "PKI\n",
      "PRGO\n",
      "PFE\n",
      "PCG\n",
      "PM\n",
      "PSX\n",
      "PNW\n",
      "PXD\n",
      "PNC\n",
      "RL\n",
      "PPG\n",
      "PPL\n",
      "PX\n",
      "PCLN\n",
      "PFG\n",
      "PG\n",
      "PGR\n",
      "PLD\n",
      "PRU\n",
      "PEG\n",
      "PSA\n",
      "PHM\n",
      "PVH\n",
      "QRVO\n",
      "PWR\n",
      "QCOM\n",
      "DGX\n",
      "RRC\n",
      "RJF\n",
      "RTN\n",
      "O\n",
      "RHT\n",
      "REG\n",
      "REGN\n",
      "RF\n",
      "RSG\n",
      "RAI\n",
      "RHI\n",
      "ROK\n",
      "COL\n",
      "ROP\n",
      "ROST\n",
      "RCL\n",
      "CRM\n",
      "SCG\n",
      "SLB\n",
      "SNI\n",
      "STX\n",
      "SEE\n",
      "SRE\n",
      "SHW\n",
      "SIG\n",
      "SPG\n",
      "SWKS\n",
      "SLG\n",
      "SNA\n",
      "SO\n",
      "LUV\n",
      "SPGI\n",
      "SWK\n",
      "SPLS\n",
      "SBUX\n",
      "STT\n",
      "SRCL\n",
      "SYK\n",
      "STI\n",
      "SYMC\n",
      "SYF\n",
      "SNPS\n",
      "SYY\n",
      "TROW\n",
      "TGT\n",
      "TEL\n",
      "FTI\n",
      "TSO\n",
      "TXN\n",
      "TXT\n",
      "TMO\n",
      "TIF\n",
      "TWX\n",
      "TJX\n",
      "TMK\n",
      "TSS\n",
      "TSCO\n",
      "TDG\n",
      "RIG\n",
      "TRV\n",
      "TRIP\n",
      "FOXA\n",
      "FOX\n",
      "TSN\n",
      "UDR\n",
      "ULTA\n",
      "USB\n",
      "UA\n",
      "UAA\n",
      "UNP\n",
      "UAL\n",
      "UNH\n",
      "UPS\n",
      "URI\n",
      "UTX\n",
      "UHS\n",
      "UNM\n",
      "VFC\n",
      "VLO\n",
      "VAR\n",
      "VTR\n",
      "VRSN\n",
      "VRSK\n",
      "VZ\n",
      "VRTX\n",
      "VIAB\n",
      "V\n",
      "VNO\n",
      "VMC\n",
      "WMT\n",
      "WBA\n",
      "DIS\n",
      "WM\n",
      "WAT\n",
      "WEC\n",
      "WFC\n",
      "HCN\n",
      "WDC\n",
      "WU\n",
      "WRK\n",
      "WY\n",
      "WHR\n",
      "WFM\n",
      "WMB\n",
      "WLTW\n",
      "WYN\n",
      "WYNN\n",
      "XEL\n",
      "XRX\n",
      "XLNX\n",
      "XL\n",
      "XYL\n",
      "YUM\n",
      "ZBH\n",
      "ZION\n",
      "ZTS\n",
      "               Index       Oil      Gold  NaturalGas       MMM       ABT  \\\n",
      "Date                                                                       \n",
      "2010-01-04       NaN       NaN       NaN         NaN       NaN       NaN   \n",
      "2010-01-05  0.002647  0.002699  0.011006    0.016420 -0.006264 -0.008079   \n",
      "2010-01-06  0.000704  0.016883 -0.000222    0.045234  0.014182  0.005553   \n",
      "2010-01-07  0.004221 -0.006256  0.005111    0.160742  0.000717  0.008100   \n",
      "2010-01-08  0.003328  0.001695 -0.007959   -0.126498  0.007046  0.005113   \n",
      "2010-01-11  0.001397 -0.002417  0.032316   -0.120427 -0.004032  0.005087   \n",
      "2010-01-12 -0.009326 -0.021202 -0.004534   -0.034662  0.000834 -0.002892   \n",
      "2010-01-13  0.008446 -0.013987 -0.017350    0.007181 -0.003212  0.002175   \n",
      "2010-01-14  0.002705 -0.003892  0.004193    0.028520 -0.003342  0.001447   \n",
      "2010-01-15 -0.011224 -0.017517 -0.004835   -0.019064 -0.001557  0.002168   \n",
      "2010-01-19  0.012496  0.013084 -0.001541   -0.026502  0.020991  0.012978   \n",
      "2010-01-20 -0.010169 -0.019752 -0.004409    0.005445 -0.004699  0.000712   \n",
      "2010-01-21 -0.019229 -0.020408 -0.022143   -0.003610 -0.023843 -0.012091   \n",
      "2010-01-22 -0.022292 -0.020965 -0.006793    0.027174 -0.014752 -0.018719   \n",
      "2010-01-25  0.005128  0.008754  0.006384    0.015873  0.004296  0.003302   \n",
      "2010-01-26 -0.004191 -0.003071 -0.011554   -0.026042 -0.002444 -0.004022   \n",
      "2010-01-27  0.004757 -0.013794  0.003667   -0.033868  0.008208 -0.010646   \n",
      "2010-01-28 -0.011472 -0.000272 -0.002740   -0.018450 -0.018834  0.001113   \n",
      "2010-01-29 -0.010869 -0.010459 -0.008244   -0.011278 -0.003220 -0.018903   \n",
      "2010-02-01  0.015551  0.021414 -0.000693    0.007605 -0.000621  0.007556   \n",
      "2010-02-02  0.012103  0.037629  0.029575    0.032075 -0.000124  0.020622   \n",
      "2010-02-03 -0.004983 -0.003238  0.004039    0.007313  0.013303  0.003674   \n",
      "2010-02-04 -0.030866 -0.049766 -0.014305   -0.007260 -0.028098 -0.015007   \n",
      "2010-02-05  0.002067 -0.027075 -0.045578    0.025594 -0.008459  0.002601   \n",
      "2010-02-08 -0.007219  0.010119  0.016869    0.021390 -0.012860 -0.011119   \n",
      "2010-02-09  0.012560  0.025602 -0.001869   -0.033159  0.015349  0.000000   \n",
      "2010-02-10 -0.001959  0.010446  0.007022   -0.010830 -0.001270 -0.001874   \n",
      "2010-02-11  0.010466  0.010070  0.003719    0.009124  0.020987  0.005257   \n",
      "2010-02-12 -0.000832 -0.014888 -0.001158   -0.009042 -0.013579  0.007097   \n",
      "2010-02-16  0.015735  0.038726  0.014325    0.031022  0.016292  0.012611   \n",
      "...              ...       ...       ...         ...       ...       ...   \n",
      "2017-03-16 -0.001967 -0.000827  0.019422   -0.059603       NaN       NaN   \n",
      "2017-03-17 -0.006080  0.000828  0.002570    0.003521       NaN       NaN   \n",
      "2017-03-20 -0.001097 -0.011378  0.003459    0.028070       NaN       NaN   \n",
      "2017-03-21 -0.012839 -0.016112 -0.000770    0.054608       NaN       NaN   \n",
      "2017-03-22  0.002353  0.005742  0.011404   -0.022654       NaN       NaN   \n",
      "2017-03-23 -0.001067 -0.006132  0.001445   -0.029801       NaN       NaN   \n",
      "2017-03-24 -0.000726  0.006383 -0.003125    0.013652       NaN       NaN   \n",
      "2017-03-27 -0.001026 -0.005920  0.010370   -0.010101       NaN       NaN   \n",
      "2017-03-28  0.007277  0.028499 -0.002586    0.003401       NaN       NaN   \n",
      "2017-03-29  0.000935  0.022953 -0.000598    0.027119       NaN       NaN   \n",
      "2017-03-30  0.003184  0.016778 -0.001596    0.016502       NaN       NaN   \n",
      "2017-03-31 -0.002328  0.004771 -0.007355    0.016234       NaN       NaN   \n",
      "2017-04-03 -0.001739 -0.005738  0.003664    0.000000       NaN       NaN   \n",
      "2017-04-04  0.000637  0.014726  0.009950   -0.022364       NaN       NaN   \n",
      "2017-04-05 -0.002973  0.002942 -0.004886    0.052288       NaN       NaN   \n",
      "2017-04-06  0.002811  0.010755  0.000998    0.003106       NaN       NaN   \n",
      "2017-04-07 -0.001019  0.010834  0.008415    0.000000       NaN       NaN   \n",
      "2017-04-10  0.000595  0.015502 -0.008463   -0.024768       NaN       NaN   \n",
      "2017-04-11 -0.001190  0.006031  0.001675   -0.012698       NaN       NaN   \n",
      "2017-04-12 -0.004382 -0.004871  0.013220   -0.045016       NaN       NaN   \n",
      "2017-04-13 -0.006495  0.001318  0.010846    0.010101       NaN       NaN   \n",
      "2017-04-18 -0.002984 -0.003041 -0.000855    0.006472       NaN       NaN   \n",
      "2017-04-19 -0.001839 -0.037552 -0.002296    0.000000       NaN       NaN   \n",
      "2017-04-20  0.008139 -0.004555 -0.001677    0.006431       NaN       NaN   \n",
      "2017-04-21 -0.003187 -0.012336  0.001250   -0.022364       NaN       NaN   \n",
      "2017-04-24  0.010998 -0.014907 -0.007569    0.000000       NaN       NaN   \n",
      "2017-04-25  0.005819  0.006544 -0.001022   -0.022876       NaN       NaN   \n",
      "2017-04-26 -0.000629  0.000000 -0.004368    0.023411       NaN       NaN   \n",
      "2017-04-27  0.000839 -0.005282 -0.000514    0.022876       NaN       NaN   \n",
      "2017-04-28 -0.002179  0.007149  0.000989    0.022364       NaN       NaN   \n",
      "\n",
      "            ABBV       ACN      ATVI       AYI ...       WYNN       XEL  \\\n",
      "Date                                           ...                        \n",
      "2010-01-04   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2010-01-05   NaN  0.006180  0.001770  0.008326 ...   0.060819 -0.011860   \n",
      "2010-01-06   NaN  0.010631 -0.005300  0.014313 ...  -0.013117  0.001920   \n",
      "2010-01-07   NaN -0.000935 -0.023979  0.031208 ...   0.021356 -0.004312   \n",
      "2010-01-08   NaN -0.003978 -0.008189  0.003684 ...  -0.007165  0.000481   \n",
      "2010-01-11   NaN -0.000940 -0.000917  0.003146 ...  -0.003240  0.009620   \n",
      "2010-01-12   NaN -0.006348 -0.011019  0.006273 ...   0.004433  0.011910   \n",
      "2010-01-13   NaN  0.011358  0.012999  0.010909 ...   0.020888  0.015537   \n",
      "2010-01-14   NaN  0.008891 -0.004583 -0.005910 ...   0.039049  0.001854   \n",
      "2010-01-15   NaN -0.007189  0.002762 -0.018093 ...  -0.022327 -0.009255   \n",
      "2010-01-19   NaN  0.021957 -0.004591  0.010003 ...   0.011631  0.008874   \n",
      "2010-01-20   NaN -0.005486 -0.001845 -0.010425 ...  -0.044307 -0.002778   \n",
      "2010-01-21   NaN -0.009653 -0.021257 -0.012642 ...  -0.040933 -0.007892   \n",
      "2010-01-22   NaN -0.021119 -0.021719 -0.017338 ...  -0.021723 -0.024801   \n",
      "2010-01-25   NaN -0.007112 -0.023166 -0.000271 ...  -0.005629 -0.002399   \n",
      "2010-01-26   NaN -0.001194 -0.010870 -0.009775 ...  -0.011637  0.000481   \n",
      "2010-01-27   NaN  0.002391  0.034965  0.001097 ...  -0.001432  0.006731   \n",
      "2010-01-28   NaN -0.015264 -0.010618 -0.012325 ...  -0.015774 -0.003820   \n",
      "2010-01-29   NaN -0.007266 -0.008780 -0.007765 ...   0.001781 -0.003835   \n",
      "2010-02-01   NaN  0.004879 -0.007874  0.020123 ...   0.059147  0.003369   \n",
      "2010-02-02   NaN  0.010439  0.016865  0.010685 ...  -0.010681  0.015348   \n",
      "2010-02-03   NaN -0.000481  0.020488  0.001626 ...  -0.009254 -0.011809   \n",
      "2010-02-04   NaN -0.023798 -0.028681 -0.041678 ...  -0.052927 -0.032983   \n",
      "2010-02-05   NaN -0.001724  0.004921  0.007343 ...   0.008711 -0.004943   \n",
      "2010-02-08   NaN -0.009127 -0.004897 -0.011775 ...  -0.009940 -0.004471   \n",
      "2010-02-09   NaN  0.001743 -0.010827  0.015603 ...   0.014319  0.007984   \n",
      "2010-02-10   NaN -0.005467  0.004975  0.001955 ...  -0.003732 -0.006931   \n",
      "2010-02-11   NaN  0.006247  0.096040  0.013939 ...   0.057980  0.011466   \n",
      "2010-02-12   NaN  0.005463  0.003613  0.009623 ...  -0.029557 -0.002957   \n",
      "2010-02-16   NaN  0.008644 -0.009001  0.005719 ...   0.029664  0.018290   \n",
      "...          ...       ...       ...       ... ...        ...       ...   \n",
      "2017-03-16   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-17   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-20   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-21   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-22   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-23   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-24   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-27   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-28   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-29   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-30   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-03-31   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-03   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-04   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-05   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-06   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-07   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-10   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-11   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-12   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-13   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-18   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-19   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-20   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-21   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-24   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-25   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-26   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-27   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "2017-04-28   NaN       NaN       NaN       NaN ...        NaN       NaN   \n",
      "\n",
      "                 XRX      XLNX  XL  XYL       YUM       ZBH      ZION  ZTS  \n",
      "Date                                                                        \n",
      "2010-01-04       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2010-01-05  0.001159 -0.012608 NaN  NaN -0.003420  0.031656  0.035259  NaN  \n",
      "2010-01-06 -0.009259 -0.006784 NaN  NaN -0.007149 -0.000323  0.086957  NaN  \n",
      "2010-01-07  0.004673 -0.010044 NaN  NaN -0.000288  0.022940  0.112000  NaN  \n",
      "2010-01-08 -0.003488  0.014610 NaN  NaN  0.000288 -0.021004 -0.016187  NaN  \n",
      "2010-01-11  0.024504 -0.010400 NaN  NaN  0.017281  0.022100  0.006094  NaN  \n",
      "2010-01-12  0.007973 -0.027890 NaN  NaN  0.018969 -0.019255 -0.027862  NaN  \n",
      "2010-01-13  0.011299  0.008732 NaN  NaN -0.002779  0.006598  0.018692  NaN  \n",
      "2010-01-14 -0.006704 -0.006183 NaN  NaN  0.010867  0.002878  0.022018  NaN  \n",
      "2010-01-15 -0.005624 -0.024471 NaN  NaN -0.016814 -0.015623 -0.026930  NaN  \n",
      "2010-01-19  0.020362  0.015306 NaN  NaN -0.000561  0.031741  0.052276  NaN  \n",
      "2010-01-20 -0.014412  0.002513 NaN  NaN -0.014025 -0.018521  0.047341  NaN  \n",
      "2010-01-21  0.043870  0.054720 NaN  NaN -0.005121 -0.018871  0.024554  NaN  \n",
      "2010-01-22 -0.033405 -0.055842 NaN  NaN -0.019445 -0.012388 -0.038126  NaN  \n",
      "2010-01-25 -0.008919  0.022651 NaN  NaN -0.000292  0.004126  0.014723  NaN  \n",
      "2010-01-26 -0.003375 -0.006563 NaN  NaN  0.001459 -0.002959  0.064732  NaN  \n",
      "2010-01-27  0.003386  0.010735 NaN  NaN  0.013982 -0.012859 -0.007338  NaN  \n",
      "2010-01-28 -0.007874 -0.019199 NaN  NaN -0.013502 -0.050601  0.021119  NaN  \n",
      "2010-01-29 -0.011338 -0.017909 NaN  NaN -0.003786 -0.009323 -0.019131  NaN  \n",
      "2010-02-01  0.028670  0.016964 NaN  NaN  0.035370  0.012607  0.050079  NaN  \n",
      "2010-02-02  0.017837  0.012093 NaN  NaN  0.011293  0.022269 -0.000502  NaN  \n",
      "2010-02-03 -0.015334  0.009889 NaN  NaN -0.013400 -0.020069 -0.064792  NaN  \n",
      "2010-02-04 -0.037820 -0.050184 NaN  NaN -0.054895 -0.026431 -0.060687  NaN  \n",
      "2010-02-05 -0.020809  0.014605 NaN  NaN -0.012575 -0.003416  0.029160  NaN  \n",
      "2010-02-08 -0.002361 -0.006774 NaN  NaN -0.007884 -0.000180 -0.000556  NaN  \n",
      "2010-02-09 -0.008284  0.014919 NaN  NaN  0.010697  0.011909  0.012229  NaN  \n",
      "2010-02-10  0.008353  0.005880 NaN  NaN  0.002721  0.010699  0.017024  NaN  \n",
      "2010-02-11  0.036686  0.021294 NaN  NaN  0.006936  0.016231 -0.018898  NaN  \n",
      "2010-02-12  0.001142  0.004088 NaN  NaN -0.000898 -0.006250 -0.017611  NaN  \n",
      "2010-02-16  0.010262  0.019544 NaN  NaN  0.007194  0.019567  0.022969  NaN  \n",
      "...              ...       ...  ..  ...       ...       ...       ...  ...  \n",
      "2017-03-16       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-17       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-20       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-21       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-22       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-23       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-24       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-27       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-28       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-29       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-30       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-03-31       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-03       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-04       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-05       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-06       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-07       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-10       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-11       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-12       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-13       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-18       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-19       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-20       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-21       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-24       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-25       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-26       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-27       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "2017-04-28       NaN       NaN NaN  NaN       NaN       NaN       NaN  NaN  \n",
      "\n",
      "[1842 rows x 509 columns]\n"
     ]
    }
   ],
   "source": [
    "import pandas_datareader.data as web\n",
    "import datetime\n",
    "df = variables\n",
    "start = datetime.datetime(2010, 1, 1)\n",
    "end = datetime.datetime(2017, 1, 1)\n",
    "for x in stocksArray:\n",
    "    stock = web.DataReader(x, 'google', start, end)\n",
    "    stock = stock[\"Close\"].pct_change()\n",
    "    stock.name = x\n",
    "    df = pd.concat([df,stock],axis=1)\n",
    "    print(x)\n",
    "print(df)"
   ]
  },
  {
   "cell_type": "code",
   "execution_count": 5,
   "metadata": {
    "collapsed": true
   },
   "outputs": [],
   "source": [
    "df.to_csv(\"StockData.csv\", encoding=\"UTF-8\")"
   ]
  }
 ],
 "metadata": {
  "kernelspec": {
   "display_name": "Python 3",
   "language": "python",
   "name": "python3"
  },
  "language_info": {
   "codemirror_mode": {
    "name": "ipython",
    "version": 3
   },
   "file_extension": ".py",
   "mimetype": "text/x-python",
   "name": "python",
   "nbconvert_exporter": "python",
   "pygments_lexer": "ipython3",
   "version": "3.6.1"
  }
 },
 "nbformat": 4,
 "nbformat_minor": 2
}