서울시 지하철 실시간 도착 정보 API 사용서울 열린데이터 광장의 서울시 지하철 실시간 도착정보 API를 통해 교통 정보 관련 데이터 활용요청인자변수명 타입 변수설명 값설명KEYString(필수)인증키OpenAPI 에서 발급된 인증키TYPEString(필수)요청파일타입xml : xml, xml파일 : xmlf, 엑셀파일 : xls, json파일 : jsonSERVICEString(필수)서비스명realtimeStationArrivalSTART_INDEXINTEGER(필수)요청시작위치정수 입력 (페이징 시작번호 입니다 : 데이터 행 시작번호)END_INDEXINTEGER(필수)요청종료위치정수 입력 (페이징 끝번호 입니다 : 데이터 행 끝번호)statnNmSTRING(필수)지하철역명지하철역명출력값No 출력명 ..

몽고 DB에 데이터 저장하기여행/데이터 카테고리에 해당하는 인허가 데이터 수집 데이터 분석데이터 확인import pandas as pdimport osbase_path = 'C:/Users/Jason/Downloads/output/essential_csv'csv_files = os.listdir(base_path)common_columns = ['개방자치단체코드', '관리번호', '인허가일자', '인허가취소일자', '영업상태코드', '영업상태명', '상세영업상태코드', '상세영업상태명', '폐업일자', '휴업시작일자', '휴업종료일자', '재개업일자', '전화번호', '소재지면적', '소재지우편번호', '지번주소', '도로명주소', '도로명우편번호', '사업장명', '최종..

데이터 수집 이슈 관련 해결기존 소스 코드에서는 csvFile_reader() 함수를 이용하여 엑셀 파일을 수집하였다.if open_search_terms1.replace(" ", "_") in title and open_search_terms2 in title: # bm.csvFile_download(filename , data_id) # basic_method의 csvFile_download 메소드 사용하여 엑셀파일 다운로드 csvFile_reader(filename, data_id) break logger.info(f"Data Successfully Download - FileName : {title}") ## csvFile_reader 함수def csv..

목표:위치 기반 서비스 개발을 위한 기술 개발 가능성을 확인실제 서비스 개발에 필요한 범위와 자원을 산정하기 위함목표가 아닌 항목:티스토리에 아이디어 및 개발 히스토리 게시하기깃허브에 개발 소스 푸시다음 단계:Spatial DB 구축하기Hadoop을 이용한 ETL 파이프라인 구축하기메모여행/데이터 코스를 추천하기 위한 서비스이므로 데모를 어떻게 구현할 것인 지에 대한 아이디어중요한 것은 입력을 받았을 때 어느 정도의 추천이 이루어져야 한다는 것추천 시스템 구축은 시간이 오래 걸리고, 하드 코딩 하더라도 모든 지역에 대해 커버를 하지 못함제한된 지역에 대한 DB를 구축하여, 해당 지역의 상가 정보, 대중교통 정보 등 데이터 수집코스를 추천하는 알고리즘과 식사 시간, 이동 시간, 휴식 시간 등 모든 것을 고..

토이 프로젝트에서도 피봇팅이라는 말을 사용하는지는 모르겠다. 새로운 직장에 입사 후 적응하느라 프로젝트 진행도 없었고,그러다 약속 잡아서 만난 이전 직장 동료에게 진행하고 있는 프로젝트 아이디어를 알려주었다.  현재 진행하고 있는 프로젝트의 대략적인 아웃라인에 대해 말해주었더니, 쓸모 없는 서비스라고 당장 다른 아이디어로 갈아타라고 하더라. 오히려 내가 처음 기획했던 위치기반 여행/데이팅 루트 추천 서비스가 훨씬 유망하다고 느낀다고 한다. 그렇다. 나도 그렇게 느끼지만 처음 기획한 아이디어는 너무 규모가 커져버린다...가져와야 할 데이터도 많고, 그만큼  처리하고 연산할 데이터가 어마무시해져서 토이수준 단계로 구현이 가능할지 의문이다.  가져와야 할 데이터는 단순하다.1. 좌표 기반한 모든 데이터(상가,..

계속 Mapbox Doc 페이지를 돌아보며 방법을 찾던 중, 번뜩이는 아이디어가 생각이 났다. 페이지 우측 하단에 Ask AI 버튼이 있는 것을 발견했다. 다른 범용적인 LLM에 물어보는 것보다, Mapbox 자체에서 맞춤으로 나온 Chatbot이 더 정확하지 않겠는가 하고 검색을 해보았다. 아니나 다를까, 여태까지 헤멘 시간들이 무색하게 바로 방법을 알려주었다!!! 답변 상단에는 아래와 같은 문구가 있었다. (영어로) 더보기 이것은 모든 개발자 문서(docs.mapbox.com)와 모든 Stackoverflow 질문(stackoverflow.com/questions/tagged/mapbox)에 액세스할 수 있는 Mapbox용 사용자 지정 LLM입니다. 답변은 인공지능에 의해 생성되므로 완전히 정확하지 ..