※ この募集は締め切られました。
Python webスクレイピング
2020年12月21日
月額
予算
20,000円/月
提案数
4人が提案中
応募期限
終了
本業での業務効率化(自動化)をしようと思い、3ヵ月程前から独学でpythonを触り始めました。
プログラムはほぼ未経験です。
基礎からコツコツ積み上げるタイプの学習が苦手で、web上にあるSeleniumを用いたスクレイピングコード
をいじってやりたい事の半分程はできましたが、その後集中力が切れたのもあり、足踏み状態になりました。
プログラマー志望ではなく、現状は自分の為にpythonが書けてラク出来れば良いと思ってます。
◆出来た事
proxyローテーションさせながらシングルスレッドスクレイピング
希望したcsvデータ整形(pandas)
◆出来なかった事、未達
上記のマルチスレッド動作、連携
エラーログ取得
それなりのデータ量を扱いたいので高速化
スクレイピングしたデータの除外条件の精度UP
他アプリにスクレイピングしたデータの自動挿入
現状の希望は上記の達成とそれを自由に改変できるようになる事です。
空き時間がかなりイレギュラーですので決まったスケジュールで学習するのが難しい
ので、チャットではなくDiscordなどでやり取りさせて頂ければありがたいです。
コード添削して頂き、解らなかった箇所をこちらで質問する・・の往復での学習
を希望します。
何卒宜しくお願いします。