Pythonでフォームに入力したURLからページタイトルを取得したいんやが

[0001 それでも動く名無し 2023/02/18(土) 15:04:18.01 ID:nIcVMiDr0]

調べたらBeautifulSoup 使えばできるんやがスクレイピングは怖い

なんかいい方法ないか

[0002 それでも動く名無し 2023/02/18(土) 15:05:25.66 ID:nIcVMiDr0]

スクレイピングは制約多いしなんか大げさな気がしている

[0003 それでも動く名無し 2023/02/18(土) 15:05:52.51 ID:8ycmeGKU0]

chatGPTに頼めよ

[0004 それでも動く名無し 2023/02/18(土) 15:06:20.17 ID:nIcVMiDr0]

>>3
BeautifulSoup 進められた

[0005 それでも動く名無し 2023/02/18(土) 15:06:36.09 ID:ztSIHPry0]

aiに聞けよ

[0006 それでも動く名無し 2023/02/18(土) 15:07:02.49 ID:yezkyeSe0]

全部aiに聞けばコードも出す

[0007 それでも動く名無し 2023/02/18(土) 15:07:06.37 ID:AlB3Hnkaa]

タイトル教えてくれるサイトあるぞ

[0008 それでも動く名無し 2023/02/18(土) 15:07:18.44 ID:ehVCKEl20]

urllibでできんか?

[0009 それでも動く名無し 2023/02/18(土) 15:07:26.41 ID:nIcVMiDr0]

>>7
そういう感じの機能を自分で実装したい

[0010 それでも動く名無し 2023/02/18(土) 15:08:28.03 ID:8ycmeGKU0]

>>4
それなしでってついか質問してみろよ

[0011 それでも動く名無し 2023/02/18(土) 15:09:16.53 ID:KjoWWvTpd]

AIに逆らうなよアホ

[0012 それでも動く名無し 2023/02/18(土) 15:10:52.83 ID:yhX6cCi5H]

ページにアクセスしてタイトル取ったらええやん

[0013 それでも動く名無し 2023/02/18(土) 15:10:56.57 ID:AqhsI1AI0]

任意のWebページのタイトルを取得するってスクレイピングそのものなんだからどんなやり方としてもそれはつまりスクレイピングだぞ

[0014 それでも動く名無し 2023/02/18(土) 15:11:39.34 ID:CjdlJg3Ma]

BeautifulSoup使ってスクレイピングしかないやろ…

[0015 それでも動く名無し 2023/02/18(土) 15:12:29.37 ID:2KsCIi6h0]

スクレイピングの何が怖いんや
短時間に大量のアクセスしたりしなければ普通の閲覧となんら変わらんやろ

[0016 それでも動く名無し 2023/02/18(土) 15:12:37.20 ID:AnKv7LfPa]

いやそのリンクにアクセスしないとtitle要素を取得できないんだからスクレイピングするしかないだろ

[0017 それでも動く名無し 2023/02/18(土) 15:12:59.64 ID:nIcVMiDr0]

>>13
そうなん？
URLを入力したらページタイトルを取得してリストにしてくれる機能作りたいんやがこういう使い方で迷惑かかるやろか

[0018 それでも動く名無し 2023/02/18(土) 15:13:04.17 ID:TjUbL2Lj0]

ページタイトルとかrequestsでhtmlダウンロードして読ませるだけやろ
スクレイピングの手前や

[0019 それでも動く名無し 2023/02/18(土) 15:13:26.34 ID:nIcVMiDr0]

>>15
気にせなあかんこと多いやん

[0020 それでも動く名無し 2023/02/18(土) 15:13:34.65 ID:WMVwGSv8a]

賢い奴はchatGPTに質問するプログラム組むよ

[0021 それでも動く名無し 2023/02/18(土) 15:13:47.79 ID:qfnN96Po0]

Pythonあんまり触ったことないがSeleniumのスクレイピングは簡単だったぞ

[0022 それでも動く名無し 2023/02/18(土) 15:14:57.08 ID:CjdlJg3Ma]

利用規約見てスクレイピングのこと書いてないかよーく読んだらええ
一秒待てばええやろの精神や

あーあとrobots.txt見てみるの面白いよな

[0023 それでも動く名無し 2023/02/18(土) 15:15:14.83 ID:nIcVMiDr0]

request とurllibどっちがええんやろ

[0024 それでも動く名無し 2023/02/18(土) 15:15:18.61 ID:TjUbL2Lj0]

何回も高速に繰り返し取得するならアカンけど1個だけなら人がやってるのと変わら

[0025 それでも動く名無し 2023/02/18(土) 15:15:29.53 ID:nIcVMiDr0]

>>22
その辺がよくわからんから怖いんよ

[0026 それでも動く名無し 2023/02/18(土) 15:15:30.84 ID:O55YO6RH0]

requestsかurllibでええやんけtitleタグとるだけやろ

[0027 それでも動く名無し 2023/02/18(土) 15:15:54.95 ID:nIcVMiDr0]

chatGPT 様はurllibを勧めてきた

[0028 それでも動く名無し 2023/02/18(土) 15:18:48.23 ID:nIcVMiDr0]

BeautifulSoup 使わない場合は正規表現必須なんかな

[0029 それでも動く名無し 2023/02/18(土) 15:19:31.85 ID:H9hiF5gja]

BingAIに聞け

[0030 それでも動く名無し 2023/02/18(土) 15:20:22.91 ID:R2fyjYeO0]

html読み込まないといけないんだから結局スクレイピングなんやないん？

[0031 それでも動く名無し 2023/02/18(土) 15:21:44.32 ID:oU2limzlM]

seiki = re.compile('title.(.*)..title')
print(seiki.match(html)[1])

ほい、コレ使ってええぞ
ライセンスはGPL3な

[0032 それでも動く名無し 2023/02/18(土) 15:23:15.45 ID:BQvLheZ60]

学校の課題とかなんか？
車輪の再発明になりそうやけども

[0033 それでも動く名無し 2023/02/18(土) 15:24:01.61 ID:nIcVMiDr0]

>>32
いや個人で作ってるだけ

[0034 それでも動く名無し 2023/02/18(土) 15:28:25.46 ID:nIcVMiDr0]

BeautifulSoup 使うのがいちばん簡単な気がしてきた
逮捕されないスクレイピングの仕方教えてくれ！