Veri Bilimi Projeleri için Veri Kaynakları

Serdar Tafralı
8 min readJan 2, 2023

Veri bilimi projelerinde kullanılmak amacıyla yapılan veri arayışlarında, genellikle yapılandırılmış (Structured Data), yarı-yapılandırılmış (Semi-Structured Data) ve yapılandırılmamış veri (Unstructured Data) olarak kategorize edebilecek 3 türde veri şekli ile karşılaşılır.

Bu kapsamda, projelerde kullanılmak üzere her tür veri halini bulabileceğiniz yüzden fazla veri kaynağını konularına göre kategorize edilmiş şekilde sizler için listeledim:

Genel/Akademik:

Kaggle: Veri seti denildiğinde akla ilk gelen platformlardan biri olan Kaggle’da çok çeşitli konularda, halka açık bir şekilde sunulmuş binlerce veri seti mevcuttur.

0. Earthdata: NASA tarafından oluşturulan, Yer Bilimi Veri Sistemleri Programı’nın bir parçası olan proje, Dünya’nın ve Güneş’in atmosferi, coğrafi özellikleri ve olayları hakkında veri setleri sağlıyor.

1. Global Health Observatory: Sağlık üzerine binlerce veri setini ücretisz bir şekilde kullanıma sunan bir platform.

2. Google Cloud Public Datasets: Google Cloud üzerinden erişilebilen, çeşitli analizler gerçekleştirmek ve içgörüler elde etmek üzerine kullanılabilecek çok sayıda veri setini ücretsiz olarak kullanıcıya sunar.

3. National Center for Environmental Information: Amerika Birleşik Devletleri’nin iklim ve hava koşullarıyla hakkında birçok veri setini içeren platform, aynı zamanda dünyanın en geniş çevresel veri deposudur.

4. UCI Machine Learning Repository: İnternette bulunan ilk ve en eski veri kaynaklarından biri olan bu platform, ilginç konular hakkında veriler içeren veri setleri arayışı için mükemmel bir yer.

5. Amazon Public Data Sets: AWS açık veri kayıtlarında, verileri Amazon EC2 (Amazon Elastic Compute Cloud) üzerinde analiz edebileceğiniz -ücretsiz bir AWS hesabına sahip olmanız gerekir- ya da indirip kendi sisteminizde kullanabileceğiniz birçok veri seti bulunur.

6. UNData: Birleşmiş Milletlerin tüm verilerinin tutulduğu istatistiksel bir veritabanı.

7. Google Scholar: Makaleler, tezler, kitaplar, özetler, beyaz kağıtlar ve mahkeme görüşleri dahil olmak üzere çok çeşitli bilgiler.

8. Datasets Subreddit: 14. Yüzyılın İngiliz tahıl fiyatlarından ABD evsizlik oranlarına kadar bir çok veriye erişebileceğiniz bir platform.

9. Qlik DataMarket: Ekonomi, sağlık, gıda, tarım ve otomotiv endüstrisi ile ilgili verilere ulaşabileceğiniz bir web sitesi.

İçerik pazarlama

10. Buffer: Dijital pazarlamaya ilişkin veri içgörüleri.

11. Moz: SEO hakkında içgörüler.

12. HubSpot: Pazarlama verileri içeren büyük bir depo.

13. Content Marketing Institute: İçerik pazarlamayla ilgili en güncel haberler ve araştırmalar.

Suç verileri

14. Uniform Crime Reporting Statistics: Çeşitli suçlara ilişkin istatistikler; şehir, ilçe, eyalet ve ulusal düzeylerde onlarca yıllık veriye sahiptir.

15. FBI Crime Statistics: Hem yerel hem de ulusal düzeyde suç tehditlerini anlamak için belirli suçları detaylandıran ve eğilimleri özetleyen istatistiksel suç raporları ve yayınlar.

16. National Archive of Criminal Justice Data: Ceza adaleti ve kriminoloji ile ilgili arşivlenmiş verilere dayanan bir araştırma.

17. Bureau of Justice Statistics: Hapishane mahkumlarının sayımı, DNA suç laboratuvarlarının ulusal anketi, polis teşkilatının çete birimlerinin anketleri vb. dahil olmak üzere ABD adalet sistemi ile ilgili çeşitli bilgiler içeren platform.

İlaçlar

18. U.S. Food and Drug Administration: Çok kaynaklı reçeteli ilaç ürünleri için ilaç onayları ve veritabanları.

19. National Institute on Drug Abuse: Uyuşturucu kullanımı, acil servis verileri ve uyuşturucuyla mücadele programları gibi çeşitli konuları kapsayan kaynaklar.

20. United Nations Office on Drugs and Crime: Küresel ve bölgesel veri koleksiyonlarıyla araştırma ve trend analizleri.

21. Drug War Facts: Halk sağlığı, ceza adaleti uygulamaları ve uyuşturucu politikasına kapsamlı bir bakış.

22. Drug Data and Database by First Databank: İlaçlarla tedavi süreçlerinde kararlar verme kapsamında, bilgi ve ilham vermesi umulan ilaç verileri ve veritabanları.

Eğitim

23. Government Data About Education: Eğitim veri setleri, uygulamalar, sınıflar için gerekli kaynaklar ve üniversite ücretleriyle ilgili ayrıntılar.

24. Education Data by the World Bank: Okuryazarlık oranları ve devletlerin eğitim harcamaları gibi eğitimdeki temel konularla ilgili kapsamlı veri ve analiz kaynağı.

25. Education Data by Unicef: Sürdürülebilir kalkınma, okul bitirme oranları, devamsızlık oranları, okuryazarlık oranları ve daha fazlasıyla ilgili veriler.

26. National Center for Education Statistics: Eğitimle ilgili verileri toplamak ve analiz etmek için kurulmuş federal bir yapılanma.

Eğlence

27. Million Song Dataset: Bir milyon çağdaş popüler müzik parçası için ses özellikleri ve meta verileri içeren 28 veri setinden oluşan bir koleksiyon.

28. The Numbers: Gişe, DVD ve Blu-ray satış raporları ve yayın programları dahil olmak üzere ayrıntılı finansal film analizi.

29. BFI Film Forever: Birleşik Krallık film endüstrisi ve film kültürü odaklı veriler ve pazar araştırması.

30. IFPI: Kayıt endüstrisi hakkında küresel istatistikler.

31. Statista: Video Game Industry: Küresel oyun yazılımı harcamalarından Nintendo Wii’nin ABD marka değerine kadar video oyunu endüstrisi hakkında istatistikler ve bilgiler.

32. Statista: Film Industry: ABD ve Kanada’da satılan sinema biletlerinin sayısından dünya çapındaki 3D sinema ekranlarının sayısına kadar film endüstrisi hakkında istatistikler.

33. Statista: Music Industry: Konser gelirlerinden plak şirketlerinin pazar payına kadar müzik endüstrisi hakkında istatistikler ve veriler.

34. Academic Rights Press: Müzik sektöründe geçmiş ve güncel satış verilerinin bulunduğu bir havuz.

35. BLS: Arts, Entertainment, and Recreation: Sanat, eğlence ve rekreasyonla ilgili istatistikler ve veri setleri.

Çevre/Hava Verileri

36. National Center for Environmental Health: Çevresel halk sağlığı ile ilgili , ulusal olarak finanse edilen veri sistemleri.

37. National Climatic Data Center: Ulusal Okyanus ve Atmosfer İdaresi’nden fırtına verilerinden iklim endekslerine kadar her şeyi kapsayan hızlı bağlantılar.

38. National Weather Service: Amerika Birleşik Devletleri’ndeki belirli gözlem istasyonlarından alınan geçmiş hava koşulları ve uzun vadeli ortalamalar dahil iklim verileri.

39. Weather Underground: Bölgesel radar, bölgesel şiddetli hava durumu ve küresel sıcaklıklara göre izlenen hava durumu.

41. WeatherBase: Dünya çapında 41.997 şehir için seyahat hava durumu, iklim ortalamaları, tahminler, mevcut koşullar ve mevsim normallerine dair veriler.

42. International Energy Agency Atlas: Her ülkenin nasıl enerji ürettiğine ve tükettiğine odaklanan iklim değişikliğine bir bakış.

43. Environmental Protection Agency: Çevredeki çeşitli maddelere maruz kalmanın neden olabileceği insan sağlığı etkileri hakkında bilgi içeren 540'tan fazla kimyasal madde için bilgi.

Finansal/Ekonomik Veriler

44. OpenCorporates: Dünyanın en büyük açık kaynak şirket veri tabanı.

45. Google Finance: Gerçek zamanlı hisse senedi fiyatları ve çizelgeleri, finans haberleri, para birimi değerleri ve izlenen portföyler.

46. Google Public Data Explorer: Dünya çapında ekonomik kalkınma hakkında büyük veri setleri.

47. U.S. Bureau of Economic Analysis: Ulusal gelir ve gayri safi yurtiçi hasıla dahil ABD ekonomik istatistikleri.

48. National Bureau of Economic Research: Makro veriler, sektör verileri, üretkenlik verileri, ticaret verileri, uluslararası finans verileri ve daha fazlası.

49. U.S. Securities and Exchange Commission: Üç aylık dönemlere göre çıkarılmış kurumsal finans raporlamalarını içeren veri setleri

50. World Bank Open Data: Finanstan hizmet sunum göstergelerine kadar her konu hakkında eğitim istatistikleri.

51. Financial Data Finder at OSU: Finansla ilgili her konuda içerikler bulabileceğiniz bol miktarda bağlantı içeren platform.

52. IMF Economic Data: Küresel finansal istikrar raporları, bölgesel ekonomik raporlar, uluslararası finansal istatistikler, döviz kurları ve daha fazlası.

53. The Atlas of Economic Complexity: Veri görselleştirmeleri ile ticaret akışlarının ve bir ekonominin sektörel kompozisyonunun analizi.

54. World Bank Doing Business Database: Ticaret kapasitesi ve maliyetleri de dahil olmak üzere dünya çapındaki iş ortamı göstergelerini değerlendiren inanılmaz derecede faydalı bir bilgi kaynağı.

55. UN Comtrade Database: Görselleştirmelerle üst düzey ticaretle ilgili ham veriler.

56. Global Financial Data: 300 yıllık zaman aralığında 60.000 şirketi içeren araştırmaların yapıldığı, küresel ekonominin kıvrımlarını ve dönüşlerini analiz eden bir platform.

57. Visualizing Economics: Ekonomi ile ilgili veri görselleştirmeleri.

58. Federal Reserve Economic Database: Para politikası, bankacılık, makroekonomi, uluslararası ve bölgesel ekonomi vb. ile ilgili veriler.

Devlet/Dünya

59. U.S. Census Bureau: Nüfus, ekonomi, eğitim, coğrafya ve daha fazlası hakkında ABD hükumeti tabanlı istatistikler.

60. Data.gov: ABD Hükumetinin halka açık olarak sunduğu veri setlerini içeren platformda, araştırmalar, veri görselleri oluşturma, mobil ve web uygulamaları gelişmek amacıyla kullanılabilecek birçok kaynak mevcuttur.

61. Unicef: Ulusal ve küresel karar alma mekanizmalarını bilgilendirmek için dünyadaki çocukların ve kadınların durumuna ilişkin bulgular.

62. Data Catalogs: Önde gelen açık veri uzmanlarından oluşan bir grubun küratörlüğünü yaptığı, dünyadaki açık veri kataloglarının kapsamlı listesi.

63. European Union Open Data Portal: Avrupa Birliği kurumlarından alınan veriler.

64. Open Data Network: Yerleşik bazı görselleştirme araçları kullanılarak oluşturulmuş amerika birleşik devleti ilgili veriler.

65. Gapminder: Tarım, istihdamdan, yardım kuruluşları ve birçok alanda detaylı bir kapsama alına sahip devasa veri kaynakları koleksiyonu.

66. Land Matrix (Transnational Land Database): Çok sayıda görselleştirme aracıyla titizlikle geliştirilmiş uluslararası arazi işlemleri veritabanı.

67. The World Bank’s World Development Indicators: Her ülkeye ilişkin verileri içeren yüzlerce göstergeye sahip büyük bir ulusal veri koleksiyonu.

68. UNDP’s Human Development Index: İnsani gelişme merceği altında ülkelerin gelişmişlik sıralaması.

69. OECD Aid Database: Hükümetlerden toplanan yardımlarla ilgili görselleştirilmiş veriler.

70. The CIA World Factbook: Dünyadaki her ülke, bağımlılık ve coğrafi varlık hakkında gerçekler; tarih, insanlar, hükümet, ekonomi, enerji, coğrafya, iletişim, ulaşım, askeri ve uluslararası konulara odaklanır.

Sağlık

71. Centers for Disease Control and Prevention: Alkol kullanımından, viral hepatite kadar birçok konuda halk sağlığı verileri ve istatistikleri.

72. World Health Organization: Uluslararası halk sağlığı ile ilgili bilgi, veri, istatistik ve raporlar.

73. President’s Council on Fitness, Sports & Nutrition: Her yaştan Amerikalıyı fiziksel olarak aktif olmaya ve spora katılmaya teşvik etmeyi, teşvik etmeyi ve motive etmeyi amaçlayan bilgiler.

74. Partners in Information Access for the Public Health Workforce: ABD devlet kurumları, halk sağlığı kuruluşları ve sağlık bilimleri kütüphanelerinin işbirliği.

75. Health Services Research Information Central: Sağlık hizmetleri kaynaklarıyla ilgili bilgi ve veri sağlamayı amaçlayan seçici bağlantılar.

76. MedicinePlus: Obez vatandaşların yüzdesinden, insanların gribe yakalanma oranlarına kadar değişen sağlık istatistikleri.

77. National Center for Health Statistics: Sağlık sektörü alanında veri setleri, belgeler, veri erişim araçları, büyüme çizelgeleri ve kaynaklar.

78. America’s Health Rankings: Derinlemesine veri ve analizlerle amerika birleşik devletlerini bütünsel gözlemleyen sağlık raporları.

79. Health & Social Care Information Centre: Sağlık ve sosyal bakım için ulusal bilgi, veri ve BT sistemleri sağlayıcısı.

80. Medicare Hospital Quality: İlginç karşılaştırmalarla birlikte hastanelere göre komplikasyon oranlarına ilişkin bir veri tabanı.

81. SEER Cancer Incidence: Kanserle ilgili istatistiksel özetler, etkileşimli araçlar ve yayınlar.

82. The BROAD Institute: Kanser hastalığı üzerine eski yayınlar, kaynaklar ve kanserle ilgili veri setleri.

83. HealthData.gov: Girişimciler ve araştırmacılar için yüksek değerli sağlık verileri; Medicaid, Medicare, klinik çalışmalar ve tedavilere ilişkin verileri içerir.

İnsan Hakları

84. Human Rights Data Analysis Group: Kar amacı gütmeyen tarafsız grupça titizlikle yapılan, dünya çapındaki insan hakları ihlallerinin analizlerini içeren bir platform.

85. Harvard Law School: Siyasi kurum veritabanlarından uluslararası ilişkiler ve insan hakları verilerinden her şey dahil olmak üzere çeşitli konuları kapsayan bir bağlantı koleksiyonu.

86. The Armed Conflict Database by Uppsala University: Dünya çapında küçük ve büyük ölçekli şiddet içeren çatışmalar özelinde çatışmalardan etkilenen bölgelere bir bakış.

87. Amnesty International: Herhangi bir siyasi ideolojiden, ekonomik çıkardan veya dinden bağımsız şekilde gerçekleştirilmiş çalışmalara dayalı insan hakları verileri.

İşgücü/İstihdam Verileri

88. Department of Labor: Closely watched measures of employment and unemployment.

89. U.S. Small Business Administration: Ekonomik göstergeler ve projeksiyonlar dahil olmak üzere işletme sahiplerinin bakış açısından istihdam verileri.

90. Employment by U.S. Census: İstihdam ve işsizlik düzeylerinin yanı sıra çalışılan haftalar ve saatler dahil olmak üzere ABD’nin işgücünün durumunu ölçen veriler.

91. Bureau of Labor Statistics: ABD hükümetinin bölgeler, eyaletler ve yerel alanlarda istihdamla ilgili istatistiklerden oluşan veri koleksiyonu.

Siyaset

92. Gallup: ABD ve dünya anketlerine kapsamında, veriye dayalı haberler.

93. Real Clear Politics: Politika desteğinden seçim anket verilerine kadar genel bir bakış.

94. Intro to Political Science Research by UC Berkeley: Siyaset bilimi ile ilgilenenler için istatistikler ve veriler

95. California Field Poll: Kaliforniya kamuoyunu inceleyen bağımsız, tarafsız, medya destekli kamuoyu haber servisi.

96. Rand State Statistics: ABD için ulusal ve yerel düzeylerde sosyal bilim verileri.

97. Roper Center for Public Opinion Research: ABD ve uluslararası anket ve kamuoyu araştırması verileri.

98. Open Secrets: Tarafsız, bağımsız ve kâr amacı gütmeyen; ABD siyasetindeki para akışını ve bu akışın seçimlere ve kamu politikası üzerindeki etkisini izleyen ülkenin önde gelen araştırma grubu.

99. Crowdpac: Siyasi adayların genel siyasi konumlarını ve belirli konulardaki konumlarını gösteren objektif puanları hesaplar.

Perakende

100. Love the Sales: Küresel perakende sektörüyle ilgili içgörüler ve veriler.

Sosyal Medya

101. Facebook Graph: Facebook etkileşimi hakkında veri çekmek amacıyla oluşturulmuş bir API.

102. SocialMention: Gerçek zamanlı sosyal medya araştırmaları ve analizleri.

103. Google Trends: Arama motoru etkileşimine göre veriler ve eğilimler.

Seyahat/Ulaşım

104. Monthly Tourism Statistics — U.S. Travelers Overseas: ABD’nin uluslararası hava yolcu istatistiklerini içeren bir platform.

105. SkiftStats: Seyahat endüstrisi hakkında en güncel istatistikler, araştırmalar ve veriler.

106. Search the World: Dünya çapında milyonlarca lokasyonu baz alan istatistikler, nüfus, hava durumu, web kameraları ve seyahat bilgileri.

107. U.S. Travel Association: Seyahatin ABD ekonomisi üzerindeki etkilerinin analizleri ve seyahat endüstrisi kapsamında çok çeşitli konuları inceleyen platform

108. Bureau of Transportation Statistics: Ulaştırma istatistik verileri, araştırma faaliyetleri ve bütçe kaynakları hakkında bilgiler içeren bir web sitesi.

Veri bilimi ve Makine Öğrenmesi uygulamalarınızda, projelerinizde kullanabileceğiniz verilere erişebileceğiniz 100’ü aşkın veri kaynağını derledim. Kaynakların işinize yaraması dileğiyle…

--

--

Serdar Tafralı

Dedicated and eager lifelong learner with a very solid mathematical background. Deeply passionate about Data Science and Artificial Intelligence