2023 주니어 SRE 엔지니어 후레임

[Python] 파이썬(Python)과 셀레니움(Selenium)을 이용한 크롤링

셀레니움으로 브라우저를 자동조작하여 웹사이트를 크롤링하는 방법에 대해 다룹니다. css 기반의 BeautifulSoup는 자바스크립트로 동작하는 웹사이트 크롤링에는 어울리지 않으므로 셀레니움을 사용했습니다. 브라우저는 크롬(Chrome)을 사용합니다. ※ 본 과정을 위해서는 먼저 파이썬이 설치되어 있어야 합니다. 필요한 것 1. 셀레니움 설치 (cmd 창을 띄우고 pip install selenium 입력) 2. ChromeDriver 다운로드 (자신의 크롬 버전에 맞게 다운로드) 또한, 코드를 짤 때 경로를 직접 입력해줘야 하므로 쉬운 경로에 저장한다. 모듈 임포트(Module Import) 우선, 파이썬으로 셀레니움을 사용하기 위해 필요한 모듈을 import한다. from selenium import..

[Sequelize] AssertionError [ERR_ASSERTION]: Missing where attribute in the options parameter

시퀄라이즈 update문 실행중 위와 같은 에러가 나왔습니다. 처음에는 주변에 있는 코드가 잘못되어있는줄 알았는데, 범인은 아래 코드였죠. 알고보니 update문 안에 where절을 선언하지 않았던 것! 위와 같이 고쳐주니 잘 작동하였습니다.

[Photoshop][해결] 스크래치 디스크가 꽉 찼으므로 Photoshop을 초기화할 수 없습니다.

포토샵을 실행하니, 위와 같은 메시지가 뜨면서 실행이 되지 않는 경우가 있습니다. ※ 원인 : 포토샵이 설치된 드라이브의 용량이 부족한 경우 이 경우, 아래와 같은 방법으로 해결이 가능합니다. 1. 포토샵 실행시 Ctrl+Alt를 동시에 누르고 있는다. 2. 스크래치 디스크를 다른 드라이브로 설정한다. (저 같은 경우에는 1순위를 C:\, 2순위를 D:\로 선택했습니다.) 3. 해결! 4. 원하는 경우 스크래치 디스크 관련 설정을 '편집 > 환경 설정 > 성능 > 스크래치 디스크'에서 변경할 수 있습니다.

[MySQL] collation, character_set utf8mb4 변경법

Toad에서 새로 생성한 테이블에 SELECT를 요청하자 COLLATION 'utf8_general_ci' is not valid for CHARACTER SET 'latin1' 라는 메시지와 함께 쿼리가 실행되지 않습니다. 원인 원인은 MySQL 자체의 캐릭터셋(character_set)과 collation이 latin1로 설정되어있기 때문입니다. MySQL 상에서 아래와 같이 입력하면 현재 설정을 알 수 있습니다. mysql> SHOW VARIABLES LIKE '%char%'; +--------------------------+----------------------------+ | Variable_name | Value | +--------------------------+-------------..

[Python][Selenium] 디씨 클리너 만들기

※ 파이썬과 파이썬 에디터가 설치되어 있다는 가정하에 설명합니다. from bs4 import BeautifulSoup from selenium import webdriver from selenium.webdriver.common.keys import Keys from selenium.webdriver.common.by import By import re import time import pyperclip driver = webdriver.Chrome('C:/chromedriver.exe') driver.implicitly_wait(3) login=1 id='' # 자신의 디씨 ID 입력 pw='' # 자신의 디씨 PW 입력 if login==1 : # 로그인 driver.get('https://gall..

LG U+ 알뜰모바일 인터넷 속도

LG U+ 알뜰모바일 인터넷 속도가 궁금하신 분들을 위해 측정해보았습니다. 80km로 달리는 버스 안에서 측정한 속도입니다. 각각 MB/s로 환산시 다운로드는 1.74MB/s, 업로드는 0.69MB/s가 나옵니다. 관련 글 보기 2020/03/07 - [Finance] - LG U+ 알뜰폰 최저가 요금제

LCD 모니터 용어 총정리

패널 TN(Twisted Nematic) 최대 2ms의 빠른 반응속도를 자랑하지만 시야각이 좁은 것이 단점입니다. 또한, 24bit(1670만) 색상을 지원하지 못해 저렴한 가격의 보급형 모니터에 주로 쓰입니다. IPS(In-Plane Switching) LG전자에서 개발한 패널입니다. 시야각이 넓어 어느 각도에서 봐도 원래 색을 보여줍니다. UH-IPS, S-IPS, S-IPS II, H-IPS 등의 버전이 있으며 이 중 H-IPS에서 진화한 AH-IPS(Avanced Horizontal IPS)는 수직, 수평 구동방식을 혼합하여 빛의 투과성을 개선하였습니다. VA(Vertical Alignment) PVA, S-PVA, MVA, A-MVA, A-MVA+ 등의 버전이 있으며 IPS나 PLS처럼 시야각이..

2015 국가별 검색엔진 순위

GeForce VGA 스펙 정렬표

성능은 LE < Normal < GS < GT < GTX 순이라능..