商品リスト取得作業
昨日はほぼアマゾンの商品リストの取得作業だけ。
めんどいから放置してロボ任せにしようかとも考えたが、
DB内に表示できる商品がある場合はAPI見にいかない仕様。
商品ページへのアクセスだと、その商品データしか取ってこないから、
リストページへのアクセスで複数商品のデータを取ってきたい。
ってわけで。
APIアクセス数気にした休憩時間で、
CSVブログのデータ追加と、
新型ショッピングサイトのサイトマップインデックス機能つけた。
DBは、
商品数18万
レビュー数8万
ブラウズノード8千
くらいはデータたまった。
新商品の追加機能ないから、
新商品探索と、
ブラウズノード情報の更新が必要なこともありえるから、
そこらを自動でやるようなスクリプト用意したい。
でも、まずはリスト表示での商品追加だな。
と思ったけど、やっぱめんどいし、
ブラウズノード更新とそのノードの新商品取得する感じで作ればいけるかな・・・