파이썬 크롤링 주소 인식관련 문의

Question

threading.Timer(10, self.realTimeSearchFunction).start() rTSname &#61; ['알테오젠', '카카오', '아남전자'] for result in rTSname: url &#61; &#34;https://search.naver.com/search.naver?&where&#61;news&query&#61;&#34; &#43; result &#43; &#34;&sm&#61;tab_srt&sort&#61;1&pd&#61;9&ds&#34; print(url) html &#61; urllib.request.urlopen(url).read() soup &#61; BeautifulSoup(html, 'html.parser') rTSTitle &#61; soup.find_all(&#34;a&#34;, {&#34;class&#34;: &#34;news_tit&#34;}) for result in rTSTitle: anchor &#61; result.attrs['href'] title &#61; result.attrs['title'] realTimeSearchlist[title] &#61; anchor print(realTimeSearchlist) url에 원하는 검색어로 실시간으로 검색하려고 하는데https://search.naver.com/search.naver?&where&#61;news&query&#61;알테오젠&sm&#61;tab_srt&sort&#61;1&pd&#61;9&ds이런 형식으로 읽을려고 하면 Process finished with exit code -1073740791 (0xC0000409) 오류가 발생하네요.한글검색으로 인한 주소 인식이 안되는 현상인가요? 혹은 해결 방법 아시는분 알려주시면 감사하겠습니다.

allinux · Accepted Answer

http 의 url 스펙에는 ascii 문자만 가능합니다.즉 한글을 ascii 문자형태로 변경해야 하고 보통 url encode 라는 작업을 해서 전달해야 합니다.

위카룬 · Answer

threading.Timer(10, self.realTimeSearchFunction).start() rTSname &#61; ['알테오젠', '카카오', '아남전자'] for result in rTSname: text &#61; parse.urlparse(&#34;https://search.naver.com/search.naver?&where&#61;news&query&#61;&#34; &#43; result &#43; &#34;&sm&#61;tab_srt&sort&#61;1&pd&#61;9&ds&#34;) query &#61; parse.parse_qs(text.query) coding &#61; parse.urlencode(query, doseq&#61;True) url &#61; &#34;https://search.naver.com/search.naver?&&#34;&#43;coding html &#61; urllib.request.urlopen(url).read() soup &#61; BeautifulSoup(html, 'html.parser') rTSTitle &#61; soup.find_all(&#34;a&#34;, {&#34;class&#34;: &#34;news_tit&#34;}) for result in rTSTitle: anchor &#61; result.attrs['href'] title &#61; result.attrs['title'] realTimeSearchlist[title] &#61; anchor print(realTimeSearchlist) 감사합니다. 꿈잠 자겠네요

파이썬 크롤링 주소 인식관련 문의

2개의 답변

Q&A 목록