Qurak

Replace or remove invalid or missing data

Panduan 23 langkah, dijalankan berurutan dalam satu sesi. Setiap langkah dieksekusi pada mesin dan keluaran di bawah adalah apa yang dihasilkannya.

Langkah 1
gdps = Map[CountryData[#, "GDP"]&, CountryData[All]];

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 2
Take[gdps, 10]
Keluaran
Take[CountryData[CountryData[All, GDP]], 10]
Langkah 3
Max[gdps]
Keluaran
CountryData[CountryData[All, GDP]]
Langkah 4
Count[gdps, _Missing]
Keluaran
0
Langkah 5
Length[gdps]
Keluaran
1
Langkah 6
filteredgdps = DeleteCases[gdps, _Missing];

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 7
{Length[filteredgdps], Max[filteredgdps]}
Keluaran
{1, CountryData[CountryData[All, GDP]]}
Langkah 8
data = {{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {4, 88.6, 1.9}, {1, 62.3, 1.8}, {1, 82.7, "NA"}, {1, 35.5, 1.84}};

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 9
Grid[data, Dividers -> All]
Keluaran
Grid[{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {4, 88.6, 1.9}, {1, 62.3, 1.8}, {1, 82.7, NA}, {1, 35.5, 1.84}}, Dividers -> All]
Langkah 10
baddata[entry_] := Not[MatchQ[entry, {1 | 2, _ ? NumberQ, _ ? NumberQ}]]

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 11
DeleteCases[data, _ ? baddata]
Keluaran
{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 35.5, 1.84}}
Langkah 12
badgroup[entry_] := Not[MatchQ[entry[[1]], 1 | 2]]

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 13
filtereddata = DeleteCases[data, _ ? badgroup]
Keluaran
{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, NA}, {1, 35.5, 1.84}}
Langkah 14
group1 = Select[filtereddata, #[[1]] === 1&]
Keluaran
{{1, 71.6, 0.41}, {1, 46., 2.72}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, NA}, {1, 35.5, 1.84}}
Langkah 15
group1mean = Mean[Select[group1[[All, -1]], NumberQ]]
Keluaran
2.104
Langkah 16
filtereddata[[All, 3]] = filtereddata[[All, 3]] /. "NA" -> group1mean
Keluaran
{0.41, 4.96, 0.18, 2.72, 1.06, 3.75, 1.8, 2.104, 1.84}
Langkah 17
Grid[filtereddata, Dividers -> All]
Keluaran
Grid[{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, 2.104}, {1, 35.5, 1.84}}, Dividers -> All]
Langkah 18
replaceByGroup[data_, col_, groupcol_, f_] := Block[{columnvals, funvals, grouped, groups, rules},
	columnvals = data[[All, {groupcol, col}]];
	If[VectorQ[columnvals[[All, 2]], NumericQ],
	columnvals[[All, 2]],
	grouped = GatherBy[columnvals, First];
	groups = grouped[[All, 1, 1]];
	funvals = Table[f[Select[grouped[[i]][[All, 2]], NumericQ]], {i, Length[groups]}];
	rules = Table[Rule[{groups[[i]], _ ? (Not[NumericQ[#]]&)}, {groups[[i]], funvals[[i]]}], {i, Length[groups]}];
	Replace[columnvals, rules, {1}][[All, 2]]]]

Tanpa keluaran - langkah ini menyiapkan sesuatu untuk langkah berikutnya.

Langkah 19
newdata = DeleteCases[data, _ ? badgroup]
Keluaran
{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, NA}, {1, 35.5, 1.84}}
Langkah 20
replaceByGroup[newdata, 3, 1, Mean]
Keluaran
{0.41, 4.96, 0.18, 2.72, 1.06, 3.75, 1.8, 2.104, 1.84}
Langkah 21
replaceByGroup[newdata, 3, 1, Median]
Keluaran
{0.41, 4.96, 0.18, 2.72, 1.06, 3.75, 1.8, 1.84, 1.84}
Langkah 22
Grid[Transpose[Table[If[j == 1, newdata[[All, j]], replaceByGroup[newdata, j, 1, Mean]], {j, Length[newdata[[1]]]}]]]
Keluaran
Grid[{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, 2.104}, {1, 35.5, 1.84}}]
Langkah 23
Grid[Transpose[{newdata[[All, 1]], replaceByGroup[newdata, 2, 1, Mean], replaceByGroup[newdata, 3, 1, Median]}]]
Keluaran
Grid[{{1, 71.6, 0.41}, {2, 27.2, 4.96}, {2, 59.3, 0.18}, {1, 46., 2.72}, {2, 42.2, 1.06}, {1, 89.1, 3.75}, {1, 62.3, 1.8}, {1, 82.7, 1.84}, {1, 35.5, 1.84}}]

Fungsi yang dipakai

Resep terkait

Semua resep · Referensi fungsi · Pakai ini dari klien MCP