data-set
データセット
名詞
複数形: data-sets
data-setは、単なるデータの集まりではなく、特定の目的(分析や機械学習など)のために意図的に収集され、構造化されたデータの集合体を指します。一般的に、行と列からなる表形式の構造を持っており、各行が個別の事例(サンプル)を、各列がその事例の属性(特徴量)を表します。
データセットの構成と目的
機械学習の文脈では、data-setはさらに役割に応じて分割して使用されます。モデルを学習させるためのtraining set(学習用データセット)と、学習したモデルの精度を検証するためのtest set(テスト用データセット)に分けることが一般的です。このように、単に情報を蓄積するのではなく、特定の計算処理や統計的検証を行うための素材としての性質が強い言葉です。
データとデータセットの違いdataという言葉が個々の数値や事実などの断片的な情報を指すのに対し、data-setはそれらが体系的に整理され、一つのまとまりとして扱える状態にあることを強調します。例えば、個々の測定値はdataですが、それらを整理して分析にかけられるようにまとめたファイルやデータベース全体はdata-setと呼ばれます。
意味
関連語
datasetdatabasecorpusinformationvariableobservationsampleparameterstatisticanalysisalgorithmmodeltrainingtestingvalidationmetadatarecordentryfieldcolumnrowtablearraymatrixvectortensorspreadsheetjsonxmlsqlbig dataminingclusteringregressionclassificationcorrelationoutlierdistributionmeanmedianmodevariancestandard deviationbiasoverfittingunderfittingnormalizationstandardizationcleaningpreprocessingimputationsamplingpopulationcensussurveyexperimentmeasurementmetricfeaturelabelannotationcurationrepositorywarehousestorageindexqueryinferencepredictionaccuracyprecisionrecall