カテゴリ:YahooPipes( 5 )

阿久津良和氏の記事を全文取得するRSS

Windows関連の記事をマイナビニュースで執筆されている、阿久津良和氏の記事を、RSSで全文取得できるように作った。


auther IDさえ指定すれば、他の記者の記事でも追跡可能です。

[PR]
by golorih | 2014-06-25 20:15 | YahooPipes | Trackback | Comments(0)

ウイルスバスターなどの更新状況をチェックするRSSを作った

※ 注意 ※
 なんか対策されたくさくて、現在動作しません。公式RSSが使えるようになっていましたので、そちらをご利用ください。
  リンク: 公式RSS一覧 ※ただし若干動作が怪しげ

ようやくトレンドマイクロサポート情報のRSSを作成した。
2月末頃 Windows8.1 完全対応版のウイルスバスターコーポレートエディションが出るハズなのでその情報収集用。

なお RSS の生成元は http://app.trendmicro.co.jp/support/news-bn.asp のページです。




関連:


追記
そしてまた書いてから気付いたが、以前は死んでた公式RSSが生き返ってましたorz
でも feedly にコーポレートエディション用のRSS を読み込ませたら、最初の1件しか表示されなかったのでそこはかとない不安を感じます。しばし同時利用しつつ様子を見る。

[PR]
by golorih | 2014-02-05 16:18 | YahooPipes | Trackback | Comments(0)

Yahoo! Pipes の Web Service モジュールが動かない件

Pipes の Web Service Module 、まともに動かんのですけれど。

JSON形式で複数件出力しても、Pipes では最初の1件しか受け取れないのですけれど。

他の Web Service Module を使ったものを見てもやっぱり同様のようなので、Web Service モジュール自体の問題っぽいなぁ。


ちなみに RSS出力でも受け取れます、ってことでしたが、RSS2.0 だと1件も受け取れませんでした。
1.0 とか 2.0 とか atom とか限定されてるのかなぁ?
[PR]
by golorih | 2013-06-17 19:19 | YahooPipes | Trackback | Comments(0)

Yahoo Pipes で取得失敗する件について

<META NAME="ROBOTS" CONTENT="NOINDEX">
のように NOINDEX に設定されているとYahoo Pipesは
Response: OK (200). Error: Must not fetch pages that do not allow it
のようなエラーメッセージを出して動作を止めてしまう模様。

YQL経由でやれば大丈夫でした。


select * from html where url="http://www.trendmicro.co.jp/support/news-bn.asp?cm_re=Sup-_-EntPortal-_-newsBK" and charset="shift_jis"
[PR]
by golorih | 2013-04-18 17:09 | YahooPipes | Trackback | Comments(0)

Yahoo! Pipes の文字化け回避

Yahoo! Pipes で作ってたが急に文字化けするようになる。

共通なのは両方とも Shift_JIS で作られたコンテンツだということで、その辺が原因っぽい。
 「たぶん UTF-8 だったらこんなこたぁなかろう!」
ということで、無料サーバ(@pages)で文字コードを変換してから取得させるようにしてみた。

 http://www16.atpages.jp/golorih/php/load-as-x-charset/ (※現在使えません)

文字コードをUTF-8に変換して、ついでに href や src の相対パスを絶対パスに変換します。


例えばきょうの名言では、xpath_fetch_page で http://www16.atpages.jp/golorih/php/load-as-x-charset/?s=Shift_JIS&d=UTF-8&url=http://www.iwanami.co.jp/meigen/heute.html を取得するようにしたところ文字化けが回避出来ましたよ。


このツール今のところ利用制限はかけてないですが、あんまり使われて負荷が高くなるとボクも困るので、いっぱい使う方は自分でサーバを用意して使ってください。
ソースをこっちに上げときます。
  load-as-x-charset.php

たいていのサーバで動くと思います。
ただし無料サーバでは広告によっては xpath の記述が変わってくるかもしれないので注意。



2013/02/21追記

YQL モジュールを使った文字化け回避

そういえば YQL モジュールを使っても文字化け回避できますね。例えばこんな感じ。
select * from html where url='http://www.iwanami.co.jp/meigen/heute.html' and charset='Shift_JIS' and xpath='//*'
ポイントは charset= で文字コードを指定してることです。

欠点は、HTMLを素で読み込んでしまうため、リンク先などのアドレスが相対パスのままということです。String Builder モジュールなどを使い自分で調整しましょう。


2014/02/05追記
<meta name="robots" content="noindex, nofollow" />
などの記述があると Yahoo! Pipes 側でアクセスしなくなっちゃうため、上記を勝手に削るよう修正した。


[PR]
by golorih | 2013-02-20 17:35 | YahooPipes | Trackback | Comments(0)


システム関連の個人的な備忘録。基本的にWindows関連です。

プロフィール

関連


Memoる

一生懸命だと知恵が出る
中途半端だと愚痴が出る
いい加減だと言い訳が出る

「やりたい」なんて言葉は使う必要が無い。「今やってる」「もうやった」「やらないことにした」なら使って良い。
まずは相手を好きになる、その次に相手のいい部分を探す、そして評価できる部分を見つける。それからです、誉めるのは。

カテゴリ

全体
ソフトウェア関連
ソフトウェア開発
Linuxサーバ
その他
Webサービス
MySQL
システム管理
test
バッチファイル
つぶやき
パソコンメーカー
jQuery
レビュー
実験と検証
セキュリティ対策
YahooPipes
vbs
ハードウェア関連
WordPress
JavaScript
HTML&CSS
Welcart
未分類

以前の記事

2017年 10月
2017年 09月
2017年 07月
2016年 12月
2016年 10月
2016年 08月
2016年 07月
2016年 04月
2016年 03月
2016年 01月
2015年 12月
2015年 11月
2015年 10月
2015年 09月
2015年 08月
2015年 07月
2015年 06月
2015年 05月
2015年 03月
2015年 01月
2014年 11月
2014年 10月
2014年 09月
2014年 08月
2014年 06月
2014年 05月
2014年 04月
2014年 03月
2014年 02月
2014年 01月
2013年 12月
2013年 11月
2013年 10月
2013年 09月
2013年 08月
2013年 07月
2013年 06月
2013年 05月
2013年 04月
2013年 03月
2013年 02月
2013年 01月
2012年 12月
2012年 11月
2012年 10月
2012年 09月
2012年 08月
2012年 07月
2012年 05月
2012年 04月
2012年 03月
2012年 02月
2011年 11月
2011年 10月
2011年 09月
2011年 06月
2011年 05月
2011年 04月
2011年 03月
2011年 02月
2010年 12月
2010年 11月
2010年 10月
2010年 09月
2010年 08月
2010年 07月
2010年 06月
2010年 02月
2009年 12月
2009年 10月
2008年 12月
2008年 06月
2008年 05月
2008年 04月
2008年 03月
2008年 01月
2007年 12月
2007年 11月
2007年 08月
2007年 07月
2005年 09月
2005年 08月

フォロー中のブログ

最新のコメント

リコーの件でたどり着きま..
by T at 14:14
検索してたどり着きました..
by KA at 06:53
VNCでええやん、まんど..
by 7C at 14:59
最近AEROADMINを..
by 森隆弘 at 09:48
亀ですがリンク先修正しま..
by golorih at 14:47
あれから何度かONUとP..
by 朝から at 19:56
バッチが見れないので中身..
by あいりっく at 17:28
>朝から >自宅の環境..
by Troro at 23:29
試した結果、記事の方法で..
by Tororo at 23:18
ONUに直接PCを接続す..
by 朝から at 07:18

その他のジャンル

ファン

記事ランキング

ブログジャンル

ネット・IT技術

画像一覧