Pythonでクリップボードの内容(改行有り)が思うように取得できない場合の対処方法と意外な事実 @トラブル対処 @情報学 @python @R言語

import pandas as pd
sss = pd.read_clipboard(header=None, sep='\n')

で列名（フィールド名） が「0」の列に格納されたデータフレームsssを得られます。


行頭と行末の単独or連続した空白を消して取得したい場合は「sep=」の部分を書き換えて
sss = pd.read_clipboard(header=None, sep=r'\n')
とします。
windowsでは「sep='\r\n'」としなければ行けなそうですが、上記で行けました。
windows、linux、macでの改行コードの違いが気になる場合は「sep='\r\n|\n|\r'」とする必要が有りそうですが、上記で行けるかもしれません。この場合も行の最初と最後の単独or連続の空白は問答無用で消されます。

Webサイトによっては、pd.read_clipboard()使用時に、エクセルからコピーする際は文字化けするので、sep="\n" の他に encoding="shift_jis" を加えるべき、としている説明も有りますが、私のwindwos8.1、Excel2007環境では不要でした。pandasのバージョンアップによるものでしょうか？

クリップボードの内容取得ぐらい、Pandasに頼らなくともpythonのデフォルトで備えていてほしいものです。ちなみにデータ分析用のR言語では、下の記事の様にデフォルトでしかも一行でクリップボードの中身を取得できます。
統計用のR言語でクリップボードの中身を読み込む時に「 scan() 関数は 'a real' を期待したのに」とエラーが出る時の対処法 @情報学 @トラブル対処


下に続く・・・
スポンサードリンク

■■■クリップボードの中身を文字列として得る方法■■■

私の様に、改行ごと一気に正規表現で処理したい場合、次のコードで改行付き文字列 ssstr を得ます。2行目までは上記と同じです。

import pandas as pd
sss = pd.read_clipboard(header=None, sep='\n')
ssstr=""
for jjj in range(0, sss.shape[0]): #https://techacademy.jp/magazine/17697
  ssstr += sss[0][jjj] + "\n"

■■■ 余談(意外な事実) ■■■
クリップボードの操作では「Pyperclip」も有名なのですが、なるべくインストールする回数は減らして悪意あるコードが紛れ込むリスクを減らそうと、今回はpandasを利用しました。

しかし・・・・・pandasがwindowsのクリップボードを操作する原理を知りたくてpandasのコードを解析したところ、意外な事実が発覚。

ファイルパスが「anaconda3\lib\site-packages\pandas\io\clipboard\__init__.py」のコードによると、pandasはどうやら内部でPyperclipを使用しているらしいです。結局 Pyperclip を使っているんかい。

そのPyperclipはコードを斜め読みする限り、 ctypes 関数などでwindows APIにアクセスしてクリップボードを操作しているらしいです。

なお、コードのコメントを見ると、以下のWebページを参考にしているらしいです。
http://msdn.com/ms649016
と言ってもアクセス後に強制的に下のURLに飛ばされます。
https://docs.microsoft.com/ja-jp/windows/win32/dataxchg/using-the-clipboard?redirectedfrom=MSDN


(コメントされる場合はコメントの最初にjjjjと入れて下さい。無い場合はスパムとみなされてしまいます。 English comments will be welcomed. If you have any comments, please write 'jjjj' at first of your comments OR spam filters will delete your comments.)

スポンサードリンク

外来種の意外なメリット・活用法 @生物学 @環境問題

カウアイ島に風などで来る外来種の植物は、敵に食べられないように苦みを持っているらしいです。
しかし、同じく外来種のアフリカ産ケヅメリクガメはこの苦みが好きらしく、好んで外来種を食べるため、カウアイ島では1匹を外来植物の除去に利用されているとの事。

このケヅメリクガメはペットとして飼われていたが（カウアイ島で？）捨てられ、レンジャーに拾われたようです。

出典：2020年5月23日　ふしぎ発見　ハワイ カウアイ島

外来種は進化の過程で外来種の天敵を持っているという事でしょうか？
ケヅメリクガメの様に単為生殖をせず、大きく動きが遅いため、自然界に逃げ出しにくく管理しやすいので、特例的にカウアイ島に導入されていると思われます。



(コメントされる場合はコメントの最初にjjjjと入れて下さい。無い場合はスパムとみなされてしまいます。 English comments will be welcomed. If you have any comments, please write 'jjjj' at first of your comments OR spam filters will delete your comments.)

スポンサードリンク

テントウムシは人を食べようとするらしい（実体験有り） @家庭農園 @注意 @生物学

この前、テントウムシの一種であるナミテントウらしき幼虫を手の甲の親指の付け根付近に乗せたところ、私の指の皮膚を「カミカミカミカミカミカミカミカミ・・・」と飽きることなく噛んでいました。
痛くはなく、甘噛みの様な感じでしたが、モチモチとした親指の付け根の皮膚はおいしそうだったのでしょうか？
なお、この現象は成虫にも見られました。しかも皮膚の表面には下記のページで紹介している黒い消化液の様な物が付着していました。

テントウムシの幼虫は獲物に毒液を注入するらしい。 @生物学 @家庭農園

冬場に服の中で越冬していたテントウムシが指に止まった事が有りましたが、その時は手洗い時にかすかに指の股に残った水道水をおいしそうに飲み干していました。今回もノドが渇いていたのでしょうか？


下に続く・・・
スポンサードリンク

と思ったら、
手を齧られました。交尾中のハラグロオオテントウのメスに。血も出ました。これが動かぬ証拠です。

という記事が有りました。やはり私もかじられていたようです。
でも必死な所がカワイイし、益虫だし、くすぐったい程度なので許します。

(コメントされる場合はコメントの最初にjjjjと入れて下さい。無い場合はスパムとみなされてしまいます。 English comments will be welcomed. If you have any comments, please write 'jjjj' at first of your comments OR spam filters will delete your comments.)

スポンサードリンク

（終焉の始まりだった）Amazonアソシエイト検索ウィジェットの文字化け再び @Amazon @注意 @ネット

■2022年3月8日追記：
今年4月からAmazonアソシエイトは全てのウィジェットを終了するようです。
今思えば下の記事はその前触れだったのでしょうね。

終わらせ方が強引に思えます。AWSを含めてアマゾンのサービスをご利用中の方は依存し過ぎない方が良いでしょう。アマゾンは今や送料込みでの安い物順で表示ができず（しにくいだけ？）楽天市場はできるようになったので、顧客軽視に走るアマゾンの終焉の始まりかもしれません。驕る平家は久しからず。

■2020年7月23日追記：
7月にAmazonに下記不具合を問い合わせたところ「担当部署にも確認をしたが、修復については難航しており、今の時点では修復の予定は開示できない」という回答が来ました。2ヶ月以上も経った今も復旧できないようです。他のパートナーを探すか・・・・。

 ■■■何が問題か？ ■■■

Amazonアソシエイト検索ウィジェット(コレ↓)

の文字化けが5月からまた始まりました。上の検索ウィジェットの検索ボックスには本来「Amazon 不具合」と表示されるはずなのですが、文字化けして全く関係ない商品が表示されます。
4月の初めにシステム変更するアナウンスがAmazonから来ていましたが、それが原因か下の様にAmazonの広告の内容を設定し、プレビューするページでも上記の文字化けが生じていました。

 
色々なブラウザーと端末とOSで試しましたが、同じでした。
その後数週間で収まりましたが、5月に入って再発し6月現在に入っても治っていません。

「amazonアソシエイト検索ウィジェットの文字化け」で検索すると多くの事例がヒットするので、同様の不具合は私だけではないようです。

下に続く・・・
スポンサードリンク

■■■ 昔に比べてAmazonのシステムの劣化が目立ってきた■■■

 以前はJavascriptが無効になっていても、指定したキーワードでAmazonの商品が陳列できたので重宝していたのですが、Amazonのサーバーに負担をかけるのか、それが無くなり、代替のサービスに切り換えるために余計な時間を使った事を思い出しました。

また、以前はAmazonでの商品検索は値段の範囲が細かく簡単に指定できましたが、それもできなくなってしまいました。

Amazonで検索する際に安い物順で表示設定しているのに、それを無視して高い商品がスポンサー商品として混じって表示される様になり、使いにくくなりました。

http://menotsu.blogspot.com/2017/05/amazon-amazon.html
に有る様に、購入の直前になって「手数料・送料」が加算されて当初の表示金額の300倍以上の金額が請求される事も有りました。

サーバー関連でAWSの使用を検討していましたが、こうも顧客に迷惑をかけるようであれば、再検討せざるを得ません。

上記の様な客の使い勝手を下げる方針転換と実力の無さが滲み出てきたところを見ると、経営陣が変わったのか、実力あるエンジニアが出て行ったのでしょうか？



(コメントされる場合はコメントの最初にjjjjと入れて下さい。無い場合はスパムとみなされてしまいます。 English comments will be welcomed. If you have any comments, please write 'jjjj' at first of your comments OR spam filters will delete your comments.)

スポンサードリンク

人体のATP(アデノシン三リン酸)の総量と合成回数が意外だった @生物学

■■■人体のATPについて ■■■

• 人体のATPは数百グラム
• 1日に体重と同じ程度のATPが再合成されている
• 1日に何百回もATPが再合成されている

ざっくりしていますが個人差や年齢差が大きく影響してくるのでしょう。

出典：高校講座 生物基礎 第6回 呼吸
https://www.nhk.or.jp/kokokoza/tv/seibutsukiso/archive/chapter006.html


下に続く・・・
スポンサードリンク

■■■ 余談 ■■■

高校講座 生物基礎 はテレビで何年にもわたってみていますが、数年で新作に変わります。今回はスタッフの熱の入れようが異常で、情熱大陸の様なドキュメンタリー番組風に仕上がっていて、随所に遊び心がちりばめられています。

本放送の前後で放送された制作秘話では「学者の映像を通して生物学を楽しんでいる姿を 学生に伝えたかった」と製作スタッフが言っていました。

昔、とある大学の教授が言っていましたが「学問を教えるという事は、その学問の楽しさを教える事です」という言葉を思い出しました。
楽しさを教えれば、勝手に学習していきますからね。
本当は楽しさのみならず注意点も教えたいところですが、それを言い出したらキリがないです。

(コメントされる場合はコメントの最初にjjjjと入れて下さい。無い場合はスパムとみなされてしまいます。 English comments will be welcomed. If you have any comments, please write 'jjjj' at first of your comments OR spam filters will delete your comments.)

スポンサードリンク