« # 2日ほど掛かったブログへの連番付き埋め込みツイート、うまくいかなかったがその前に再開させていたココログフリーのブログ # | トップページ | # 「REGEXP:”新潟.*女児.*事件”/データベース登録済みツイート:2018年05月18日11時34分の記録:ユーザ・投稿:26/47件」というまとめ記事の作成状況 # »

2018年5月18日 (金)

# 「法務検察当局宛て注目参考資料弁護士のリスト化ツイート」のデータ更新について #



user_timelineのリミット
{u'reset': 1526604513, u'limit': 900, u'remaining': 717}
Reset Time 2018/05/18 09:48:33


/users/show/:idのリミット
{u'reset': 1526605120, u'limit': 900, u'remaining': 900}
Reset Time 2018/05/18 09:58:40


/statuses/show/:idのリミット
{u'reset': 1526605120, u'limit': 900, u'remaining': 900}
Reset Time 2018/05/18 09:58:40
user_timelineのリミット
{u'reset': 1526604513, u'limit': 900, u'remaining': 717}
Reset Time 2018/05/18 09:48:33


/users/show/:idのリミット
{u'reset': 1526605121, u'limit': 900, u'remaining': 900}
Reset Time 2018/05/18 09:58:41


/statuses/show/:idのリミット
{u'reset': 1526605121, u'limit': 900, u'remaining': 900}
Reset Time 2018/05/18 09:58:41
/home/a66/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート_5
/home/a66/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block

real 25m8.882s
user 2m19.524s
sys 0m28.850s
2018年 5月 18日 金曜日 09:43:41 JST



 上記は「time ktf; date」という自作コマンドの実行結果です。2つのディレクトリでエラーがあったことが報告されています。5の方はかれこれ10日近く前から確認されているものと思われます。


[3826] % cat error.log
yokowatanabe__201102092041-201707241347.txt



 やはり間違いなさそうです。岩手の女性弁護士のアカウントです。実名と顔写真も法律事務所の紹介とともに公開されていました。ちょっと考えにくいことですが、凍結されたことでデータの取得にエラーが出ているアカウントです。


Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3828] % cat error.log
nan5o_201710291448-201805171602.txt



 見覚えのあるアカウント名ですが、定期的にすべてのツイートを削除しているようなアカウントです。数日前に大阪の大学の法学部の関係者のような情報を見かけました。ブロックされているアカウントの集まりのディレクトリです。


Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3829] % tail nan5o_201710291448-201805171602.txt
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 16:00 URL: https://twitter.com/nan5o/status/924531313578614784 TWEET: 国選弁護の費用を裁判所が決めていたときは、 \n まともな報酬とはいいがたいかもしれないが… \n という雰囲気があるが、 \n 法テラスは \n 払ってやってるんだ! \n という印象しかない。 \n 法テラスは自分で払っているわけじゃないじゃん。 \n 被告人が払うお金じゃん。
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:54 URL: https://twitter.com/nan5o/status/924529873925808128 TWEET: キタサンブラックで法クラは喜ぶのか?
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:53 URL: https://twitter.com/nan5o/status/924529646753873920 TWEET: 私。法テラスからお貰いをしているわけではない。そんな惨めな思いをしてまでしたくはない。
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:52 URL: https://twitter.com/nan5o/status/924529407129088000 TWEET: 私を詐欺師と呼びたいのか報告書を細かく書かせ、違う記載には糾弾し、それならご自由にと申し上げれば、法テラスに協力しない人物に出す報酬はない、と法テラスの書面に書いてよこすことはないだろうに。その事件、法テラスさんが「どうしても」と個別に私に行ってきた事件なんだよ?
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:49 URL: https://twitter.com/nan5o/status/924528476455034880 TWEET: 法テラスさん。報酬決定のルールが穴がありすぎて適切な算定ができません。十分な報酬とは言えないがそれでもできるだけ考慮して算定したので受け取ってもらえませんか?などという姿勢だったらもう少し考えてもいい。でもね!
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:47 URL: https://twitter.com/nan5o/status/924528070094069760 TWEET: 今は亡き教官に、「被告人が確実に保護観察のための施設に行ってほしいが、そういう適切な資金提供の制度がないので交通費を寄付してあげてほしい」と言われて被告人に寄付したことはあります。当時は裁判所が報酬を決めてました。裁判所ですら配慮するのに、法テラスさんは…
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:44 URL: https://twitter.com/nan5o/status/924527357322342400 TWEET: @cumberland42 ダイヤは季節で交換なのですか?
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:43 URL: https://twitter.com/nan5o/status/924527147078709248 TWEET: @Dynamite_Tommy ペットのワンちゃんや猫ちゃんをみながらの発言だと思う
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 15:42 URL: https://twitter.com/nan5o/status/924526840106049536 TWEET: @Dynamite_Tommy で、それが間違っているというか、俺のしたいことを実現させろ系でまともな中身がない。論争ですらない。
▶TW nan5o(でゅーくまんごうさん) 日時:2017-10-29 14:48 URL: https://twitter.com/nan5o/status/924513369649905665 TWEET: @Dynamite_Tommy ブロックされているかはどうでもいいけど、俺の言うことを聴けてきなめんしょんはくるけどね。アホだなあ、と深くうなづいてしまいますが
Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3830] % TU=`xsel -b|sed 's/.*twitter\.com\/\([^ /]\+\).*/\1/'`; echo $TU; h-show-twitter-profile.rb $TU; for x in {1..16};do tw_user_timeline_1line.rb $TU 200 $x >> $TU; done && st=$(grep "^\(▶TW \|▶RT \).*" $TU |tail -1|sed "s/.*日時:\(....\)-\(..\)-\(..\) \(..\):\(..\)[ /].*/\1\2\3\4\5/"); et=$(grep "^\(▶TW \|▶RT \).*" $TU |head -1|sed "s/.*日時:\(....\)-\(..\)-\(..\) \(..\):\(..\)[ /].*/\1\2\3\4\5/"); mv $TU ${TU}_${st}-${et}.txt; echo -e "\n取得件数: "; grep "^\(▶TW \|▶RT \).*" ${TU}_${st}-${et}.txt| wc -l; echo "取得した最新ツイート:"; sed -n '1p' ${TU}_${st}-${et}.txt; echo "取得した最古ツイート:"; sed -n '$p' ${TU}_${st}-${et}.txt
nan5o
<2018年05月18日(金) 11時08分10秒にTwitterAPIで取得したnan5o(Dukeまんごう)のプロフィール情報>
若手匿名果物ですの(╹◡╹)♡ 。わたしのせなかにたたないでー。日本ねむねむ協会会員6号

取得件数:
14
取得した最新ツイート:
▶TW nan5o(Dukeまんごう) 日時:2018-05-18 10:17 URL: https://twitter.com/nan5o/status/997284980840583168 TWEET: Ariana Grande, Jimmy & The Roots Sing "No Tears Left to Cry" w/ Nintendo... https://t.co/1N8G7DazMQ ニンテンドーラボ
取得した最古ツイート:
▶TW nan5o(Dukeまんごう) 日時:2018-05-17 21:18 URL: https://twitter.com/nan5o/status/997089038409416704 TWEET: @tsundereblog すっきりわすれました
Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3831] %



 データの差分をとってファイル名を変更します。現在は、先程取得したものと更新が出来なくなったものとして、nan5o_201710291448-201805171602.txt nan5o_201805172118-201805181017.txtの2つがあります。


Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3833] % mv nan5o_201710291448-201805171602.txt nan5o_201710291448-201805181017.txt
Diginnos-PC:~/git/tweet-log_2015/2017_法務検察当局宛て注目参考資料弁護士のリスト化ツイート-block
[3834] % rm nan5o_201805172118-201805181017.txt



 差分を追加して、後で取得したファイルを削除しました。これが手動での更新処理になります。前回最後に取得したツイートが、更新で取得したデータに存在しないとエラーが出るようにしています。一度に取得できるのは200件か199件のツイートです。

 取りこぼしを防ぐためです。オフセットを16回呼び出す方法だと最大で3200件のツイートが取得できるので、そちらから差分をとることになるわけです。

 他に更新処理でエラーが返る原因は、よくあることですが、アカウントが非公開設定にした場合です。なかには市川寛弁護士のように、公開と非公開を繰り返してきたアカウントもおります。

 非公開設定の弁護士アカウントは、社会に与える影響も低下するので、それ以上追求することはないですし、フォローバックでも受けないとタイムラインのツイートを見ることもできないと思います。


[3836] % list-tweet-egrep.sh '新潟.*女児.*事件'
https://twitter.com/kumaemon9/status/996041005076893696
https://twitter.com/lawer_hamachan/status/996590675293454338
https://twitter.com/un_co_the2nd/status/996048865122893825
https://twitter.com/yjochi/status/995954066156011520
https://twitter.com/yjochi/status/995845555182956544
https://twitter.com/1961kumachin/status/996386967410491393
https://twitter.com/bengoshi_black/status/996924288690077696
https://twitter.com/bengoshi_black/status/996040771106062336
https://twitter.com/hirono_hideki/status/997254342427070465
https://twitter.com/hirono_hideki/status/997253854918946817
https://twitter.com/hirono_hideki/status/997247451458297858
https://twitter.com/hirono_hideki/status/997126258709311489
https://twitter.com/hirono_hideki/status/996334526602231808
https://twitter.com/hirono_hideki/status/996038537932750850
https://twitter.com/hirono_hideki/status/996032215535403008
https://twitter.com/hirono_hideki/status/996031935431393280
https://twitter.com/hirono_hideki/status/996031879118708736
https://twitter.com/hirono_hideki/status/996019449416241152
https://twitter.com/hirono_hideki/status/995988442017251328
https://twitter.com/hirono_hideki/status/995987454376067072
https://twitter.com/hirono_hideki/status/995984420711493632
https://twitter.com/hirono_hideki/status/995988442017251328
https://twitter.com/hirono_hideki/status/995653732757979139
https://twitter.com/hirono_hideki/status/995653634074427392
https://twitter.com/hirono_hideki/status/995653161938403329
https://twitter.com/hirono_hideki/status/995652964143382530
https://twitter.com/hirono_hideki/status/995652889061212160
https://twitter.com/hirono_hideki/status/994925950260232192
https://twitter.com/hirono_hideki/status/994191225182867463
https://twitter.com/hirono_hideki/status/994190571110461440
https://twitter.com/hirono_hideki/status/994190488365289473
https://twitter.com/kmuramatsu/status/996873046194405377
https://twitter.com/lawyer_kitagawa/status/996276183103750145
https://twitter.com/okumuraosaka/status/996848072993878016
https://twitter.com/hoshimasahide/status/994464547174928384
https://twitter.com/katepanda2/status/994774945333997568
https://twitter.com/wata_nabekyo_ko/status/996144307080908800
https://twitter.com/wata_nabekyo_ko/status/996143495688552448
https://twitter.com/K_Nakajo/status/994893145027633152
https://twitter.com/Pokomoko5/status/996302148580261889
https://twitter.com/Pokomoko5/status/996391382347530242
https://twitter.com/ailuv2u/status/996034564307828736
https://twitter.com/luckymangan/status/996033154690396160
https://twitter.com/teramachi_toko/status/996689413525487616
https://twitter.com/teramachi_toko/status/996407355335000064
https://twitter.com/teramachi_toko/status/994863757963726848
https://twitter.com/yosidatetuya/status/996161067058253829
https://twitter.com/Yu_TERASAWA/status/994906561121157120
https://twitter.com/sho_ya/status/996402066573574144
https://twitter.com/yukihirosasamo/status/996585169988403200
https://twitter.com/LiarLawyer800/status/996033341928292362
https://twitter.com/icchan41543407/status/996144928613847040
https://twitter.com/icchan41543407/status/994533734790586368
https://twitter.com/kanonjilawfirm/status/996374482808795136
https://twitter.com/kanonjilawfirm/status/996138522246504448
https://twitter.com/okinawabengoshi/status/996744332647383040
https://twitter.com/sakanauranai/status/996234551390224384
https://twitter.com/sakanauranai/status/996043718858690560
https://twitter.com/sakanauranai/status/994529801472917504
https://twitter.com/bengo4topics/status/994459530632216577
https://twitter.com/bengo4topics/status/994450628037365760
https://twitter.com/bengo4topics/status/994360955843719169
https://twitter.com/eeyy888777/status/994406993975640064
https://twitter.com/eeyy888777/status/994046821046468608
https://twitter.com/one_bridge423/status/995628061889462273
https://twitter.com/pandabengoshi/status/996039660336906240
https://twitter.com/pandabengoshi/status/994560474426494976
https://twitter.com/tajima38186887/status/996397423822950400
https://twitter.com/ogawashinichi/status/995948864556359680
69 /home/a66/l



for i in `cat ~/l`; do k4-tweet-add-mysql-uniq-argv.rb $i; done
ajx-all-user-mysql-REGEXP_blogger_hirono2014sk.rb "新潟.*女児.*事件"



 上記のデータを取得するための更新でもありました。更新前にもまとめ記事を作成しております。個別に自分のアカウントの1だけ手動で更新していました。手動での更新は対象のアカウントの一つのツイートのURLをxという変数に入れ、次のコマンドを実行します。


tw_user_timeline_1line.rb ${x%_*} 272 > f; echo 'konce'; sleep 1; bin/update-tweet-file.sh f ${x}; sleep 1;



2018年05月18日07時47分の登録: REGEXP:”新潟.*女児.*事件”/データベース登録済みツイート:2018年05月18日07時46分の記録:ユーザ・投稿:26/47件 http://hirono2014sk.blogspot.com/2018/05/regexp2018051807462647.html>



|

« # 2日ほど掛かったブログへの連番付き埋め込みツイート、うまくいかなかったがその前に再開させていたココログフリーのブログ # | トップページ | # 「REGEXP:”新潟.*女児.*事件”/データベース登録済みツイート:2018年05月18日11時34分の記録:ユーザ・投稿:26/47件」というまとめ記事の作成状況 # »

コメント

コメントを書く



(ウェブ上には掲載しません)




トラックバック


この記事へのトラックバック一覧です: # 「法務検察当局宛て注目参考資料弁護士のリスト化ツイート」のデータ更新について #:

« # 2日ほど掛かったブログへの連番付き埋め込みツイート、うまくいかなかったがその前に再開させていたココログフリーのブログ # | トップページ | # 「REGEXP:”新潟.*女児.*事件”/データベース登録済みツイート:2018年05月18日11時34分の記録:ユーザ・投稿:26/47件」というまとめ記事の作成状況 # »