Fuentes de datos para las finanzas de la renta variable mundial

Question

He buscado en la lista principal de fuentes de datos pero no he podido encontrar ninguna fuente de datos para los datos financieros de la renta variable mundial. Un ejemplo sería el balance de, por ejemplo, STO:HM-B . La empresa se puede encontrar tanto en Yahoo Finance como en Google Finance, pero no dan ningún dato financiero.

Morningstar.com es el único sitio online que he encontrado hasta ahora que tiene los datos, pero sospecho que no son datos gratuitos para usar en aplicaciones. Además, incluso si yo fuera a querer raspar esos datos sería casi imposible ya que parece ser JavaScript generado después de la carga de la página.

Lo que espero encontrar es algo en formato XML o en un formato que yo mismo pueda traducir a XML. Incluso HTML está bien, siempre y cuando sea un sitio para todas las finanzas para la mayoría de las acciones globales.

Answer 1

Marketwatch tiene los datos financieros de muchas empresas, incluida H&M: Finanzas anuales de H&M Hennes & Mauritz AB Serie B

Answer 2

Los precios que busca se encuentran en https://www.google.com/finance/getprices?q=HM-B&x=STO&i=60&p=5d&f=d,c,o,h,l&df=cpct&auto=1&ts=1266701290218

Desglose de la URL, soy perezoso así que he copiado

q= símbolo de la acción en Google finance x= símbolo de la bolsa i= intervalo (aquí 60 significa 60 segundos (intervalo de 1 minuto))

p= número de períodos (aquí 5d significa 5 días de datos)

f= parámetros (día, cierre, apertura, máximo y mínimo) df= diferencia (cpct es puede estar en % de cambio )

auto =1, ts = hora de inicio

Fuente

http://www.marketcalls.in/database/google-realtime-intraday-backfill-data.html

El raspado de páginas en Javascript...

Este es un consejo para lidiar con las páginas manejadas por javascript cuando se hace scraping. Si escribes un scraper en .Net, utiliza un control WebBrowser visible o invisible, suprime los errores y deja que la página se cargue. Después de la carga, puedes forzar el estado de clic (control.InvokeMember("onclick")) en cualquier control que necesites y estarás bien.

A continuación se muestra un fragmento en VB:

    WebB.ScriptErrorsSuppressed = True
    WebB.Navigate("http://......")
    WaitForPageLoad() 'this is custom, search stackoverflow for this
    Dim doc As HtmlDocument = WebB.Document

    For Each c As HtmlElement In doc.All
        If c.Name = "someelementname" Then
            Dim ctrlAll As HtmlElement = doc.All(c.Id)
            c.InvokeMember("onclick")
        End If
    Next
    WaitForPageLoad()

Answer 3

Morningstar es el mejor que he encontrado hasta ahora. Tiene todos los datos necesarios y como he descubierto recientemente, puede exportarlo fácilmente a CSV. La clave es enviar los parámetros correctos a /ajax/ReportProcess4CSV.html . No sé en qué escenarios se permite el raspado. Me esforzaré por averiguarlo una vez que empiece a construir esta aplicación.

Para quien quiera hacer lo mismo, los siguientes parámetros son los que yo utilizo:

$defaults = array(
            't'             => '',      // The ticker
            'reportType'    => '',      // 'is', 'bs' or 'cf' depending on what you want
            'period'        => 12,
            'dataType'      => 'A',
            'columnYear'    => 5,
        );

Los tres últimos parámetros no están ahí para que los cambies, sino que simplemente tienen que formar parte de la URL.

Answer 4

Para obtener datos financieros básicos gratuitos de cualquier empresa o industria estadounidense, puede utilizar data.finmint.us.

Los siguientes conjuntos de datos incluyen más de 12.000 empresas estadounidenses, cubren los últimos 25 años y se actualizan diariamente:

• Datos básicos consolidados: http://data.finmint.us/sec/cik.csv
• Procesado trimestralmente: http://data.finmint.us/q/ticker.csv
• Procesado anualmente: http://data.finmint.us/q/ticker.csv
• Estados financieros: http://data.finmint.us/stmt/ticker.csv
• Ratios e indicadores financieros: http://data.finmint.us/indicators/ticker.csv
• Indicadores industriales y sectoriales: http://data.finmint.us/indicators/industryid.csv

La salida de datos está en formato csv, fácil de ver o procesar o hacer una llamada http.

en lugar del ticker utilice el símbolo de la empresa como AAPL

para el cik utilice el número CIK (asignado por la SEC) como 1000228

para la industriaid utilizar su código SIC de esa industria.

data.finmint.us ofrece más información sobre cómo utilizar los datos.