機器學習數據集哪裏找:最佳數據集來源盤點

摘要:很難找到一個特定的數據集來解決對應的機器學習問題,這是非常痛苦的。下面的網址列表不僅包含用於實驗的大型數據集,還包含描述、使用示例等,在某些情況下還包含用於解決與該數據集相關的機器學習問題的算法代碼。

1 -Kaggle數據集

網址:http://www.kaggle.com/datasets 

這是我最喜歡的數據集網站之一。每個數據集都有對應的一個小型社區,你可以在其中討論數據、查找公共代碼或在內核中創建自己的項目。該網站包含大量形狀、大小、格式各異的真實數據集。你還可以看到與每個數據集相關的“內核”,其中許多不同的數據科學家提供了筆記來分析數據集。有時在某些特定的數據集中,你可以從筆記中找到相應的算法,解決預測問題。

2 -亞馬遜數據集

網址:https://registry.opendata.aws 

該數據源包含多個不同領域的數據集,如:公共交通、生態資源、衛星圖像等。它也有一個搜索框來幫助你找到你正在尋找的數據集,另外它還有數據集描述和使用示例,這是非常簡單、實用的!

3- UCI機器學習庫:

網址:https://archive.ics.uci.edu/ml/datasets.html 

這是加州大學信息與計算機科學學院的一個數據庫,包含了100多個數據集。它根據機器學習問題的類型對數據集進行分類。你可以找到單變量、多變量、分類、迴歸或者是推薦系統的數據集。UCI的某些數據集已經更新完畢並準備使用。

4-谷歌的數據集搜索引擎:

網址:https://toolbox.google.com/datasetsearch 

在2018年末,谷歌做了他們最擅長的事情,推出了另一項偉大的服務。它是一個可以按名稱搜索數據集的工具箱。谷歌的目標是統一成千上萬個不同的數據集存儲庫,使這些數據能夠被發現。

5 -微軟數據集:

網址:https://msropendata.com 

2018年7月,微軟與外部研究社區共同宣佈推出“微軟研究開放數據”。

它在公共雲中包含一個數據存儲庫,用於促進全球研究社區之間的協作。另外它還提供了一組在已發表的研究中使用的、經過整理的數據集。

6-Awesome公共數據集:

網址:https://github.com/awesomedata/awesome-public-datasets 

這是一個按照主題分類的,由社區公開維護的一系列數據集清單,比如生物學、經濟學、教育學等。這裏列出的大多數數據集都是免費的,但是在使用任何數據集之前,你應該檢查相應的許可要求。

7 -政府數據集:

政府的相關數據集也很容易找到。許多國家爲了提高知名度,向公衆分享了各種數據集。例如:

歐盟開放數據門戶:歐洲政府數據集

新西蘭政府數據集

印度政府數據集

8-計算機視覺數據集:

網址:https://www.visualdata.io 

如果你從事圖像處理、計算機視覺或者是深度學習,那麼這應該是你的實驗獲取數據的重要來源之一。

該數據集包含一些可以用來構建計算機視覺(CV)模型的大型數據集。你可以通過特定的CV主題查找特定的數據集,如語義分割、圖像標題、圖像生成,甚至可以通過解決方案(自動駕駛汽車數據集)查找特定的數據集。

綜上所述,從我所觀察到的情況來看,越來越多的用於研究機器學習的各種數據集變得更容易獲取,維護這些新數據集的社區,也將不斷地發展,使計算機科學社區能夠繼續快速創新,爲生活帶來更多創造性的解決方案。



本文作者:【方向】

閱讀原文

本文爲雲棲社區原創內容,未經允許不得轉載。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章