Twitter | Search | |
This is the legacy version of twitter.com. We will be shutting it down on 15 December 2020. Please switch to a supported browser or device. You can see a list of supported browsers in our Help Center.
Tweets
oyaken0717 13h
スクレイピング セキュリティ初歩的な所でエラー やっちまった。 なんとか第二候補のスクレイピング先が見つかった。 688
Reply Retweet Like
oyaken0717 Dec 2
スクレイピング ユーザー登録とセキュリティ セキュリティを通してバリデーションした時にエラーをキャッチする方法が見つからない 今までできていたはずなのに… 687
Reply Retweet Like
oyaken0717 retweeted
松田信介@SNSマーケをハックする会社のCTO Dec 1
私の感覚ですが2-3年の開発経験も、10年以上の開発経験もスキル的には似たり寄ったりの場合が多いです つまり 「経験年数が長いからという理由だけで給与に差をつける意味がない=一定以上の経験なら同じ給与レンジ」 ということです ではどういう場合に給与を多く払ってもいいかというと
Reply Retweet Like
oyaken0717 Dec 1
スクレイピング HtmlUnitは一度あきらめか… こう2歩進んで3歩下がる感 プルリクエストは一通りできた感 686
Reply Retweet Like
oyaken0717 Nov 30
スクレイピング lombokを入れる。入れてもらう。 バージョンを落として環境を統一する。 統一したら実装したコードかま上手く動かなくなった。 685
Reply Retweet Like
oyaken0717 Nov 29
スクレイピング プルリクエストいつどのタイミングでpullするのかだいたい分かった 684
Reply Retweet Like
oyaken0717 Nov 27
スクレイピング 時間の問題は決められた時間待つことにした。もうちょっと動的に対応したいなぁ ページングとHtmlUnitについてまとめる 682と3
Reply Retweet Like
oyaken0717 Nov 25
スクレイピング JavaScript部分もスクレイピングできた。 ただし処理に停止時間を設けないと上手くいかないので今日はそこの解消を目指す 681
Reply Retweet Like
oyaken0717 Nov 24
スクレイピング ajaxだとjsoupで取れない。 検証で見えていても取れないものがあるというのが難しい所 680
Reply Retweet Like
oyaken0717 Nov 23
スクレイピング countで取ってきた件数をページングで使う。 たぶん一件一件インスタンスしてるのとはメモリの消費量が違うので処理速度が違うかも 679
Reply Retweet Like
oyaken0717 Nov 22
スクレイピング 取り出し完了 ページングの総件数をどう取り出すか… 多分今後何万件にもなるだろうし 678
Reply Retweet Like
oyaken0717 Nov 20
スクレイピング 1回目と2回目で出力されるURLが違う 抽出の仕方に四苦八苦 677
Reply Retweet Like
oyaken0717 Nov 19
スクレイピング コマンドライン化は保留 ESは全然進まない 今までやった事のまとめを共有 676
Reply Retweet Like
oyaken0717 Nov 18
スクレイピング メモリ問題は解消したはず バッチ化は以前よりも速く楽に実装できる方法を見つけた 675
Reply Retweet Like
oyaken0717 Nov 17
スクレイピング メモリの問題で進捗が止まってしまった。 674
Reply Retweet Like
oyaken0717 Nov 16
スクレイピング 取得した複数件の情報を一度のSQLを使って登録する streamを使って一発でできた。 673
Reply Retweet Like
oyaken0717 Nov 16
スクレイピング データの表示のスピードから 取得と出力を同時にやるのではなくて あらかじめ取得する方法に変更 なぜ毎週●曜日更新していたのかがわかった 672
Reply Retweet Like
oyaken0717 Nov 14
スクレイピング sitesearch中々要領を得ない 671
Reply Retweet Like
oyaken0717 Nov 13
スクレイピング Appsearchからsitesearchに変更 APIに繋ぐ前に通常の動きを把握中 Elastic社は色々同じような機能UIがあるっぽいので今までの学習した事から類推していく 670
Reply Retweet Like
oyaken0717 Nov 12
スクレイピング モックは一段落 Elasticsearchほぼインフラだという事がわかった。 ライブラリか何かで検索機能の処理が上がるものだと思ってた。 669
Reply Retweet Like